項目名稱(chēng)
| 高沉浸式虛擬現實(shí)交互感知關(guān)鍵技術(shù)與應用 |
主要完成單位 | 廣東工業(yè)大學(xué) |
廣州幻境科技有限公司 |
廣州卓遠虛擬現實(shí)科技有限公司 |
廣州創(chuàng )顯科教股份有限公司 |
廣州炫智電子科技有限公司 |
杭州電子科技大學(xué) |
主要完成人 (職稱(chēng)、完成單位、工作單位) | 1. 魯仁全 職稱(chēng):教授 工作單位:廣東工業(yè)大學(xué) 完成單位:廣東工業(yè)大學(xué) 主要貢獻:項目的設計與組織者。對技術(shù)創(chuàng )新點(diǎn)1、2、3皆有重要貢獻。提出了針對非線(xiàn)性系統的濾波方法、基于多傳感器的分布式傳感與融合方法、有限時(shí)間與協(xié)同控制方法,降低了動(dòng)作捕捉與手勢識別的檢測誤差,提高了虛擬現實(shí)平臺多機構協(xié)同控制能力,解決了虛擬現實(shí)動(dòng)感平臺動(dòng)作生硬的難題。是知識產(chǎn)權1的第一發(fā)明人;代表性論文1第一作者,代表性論文3、4、5、6的通訊作者,代表性論文2、7的合作作者。 |
2. 陳曦 職稱(chēng):教授級高級工程師 工作單位:廣州幻境科技有限公司 完成單位:廣州幻境科技有限公司 主要貢獻:是項目的主要參與人。對項目技術(shù)創(chuàng )新點(diǎn)1有主要貢獻。研發(fā)了用于虛擬現實(shí)環(huán)境的動(dòng)作捕捉系統,提高了動(dòng)作捕捉的精度。同時(shí),在項目研發(fā)統籌管理、項目進(jìn)度推進(jìn)、產(chǎn)學(xué)研資源協(xié)調方面做出重要貢獻。是知識產(chǎn)權7、8的發(fā)明人。 |
3. 陽(yáng)序運 職稱(chēng):無(wú) 工作單位:廣州卓遠虛擬現實(shí)科技有限公司 完成單位:廣州卓遠虛擬現實(shí)科技有限公司 主要貢獻:是項目的主要參與人。對項目技術(shù)創(chuàng )新點(diǎn)3有主要貢獻。研發(fā)了一種高自由度的擺臂機構,大幅提升了虛擬現實(shí)動(dòng)感平臺的運動(dòng)幅度和響應速度。同時(shí)對多自由度高動(dòng)態(tài)快速響應動(dòng)感平臺的產(chǎn)業(yè)化示范應用具有重要貢獻。是知識產(chǎn)權9的發(fā)明人。 |
4. 張瑜 職稱(chēng):助理實(shí)驗師 工作單位:廣州創(chuàng )顯科教股份有限公司 完成單位:廣州創(chuàng )顯科教股份有限公司 主要貢獻:是項目的主要參與人。對項目技術(shù)創(chuàng )新點(diǎn)2有主要貢獻。提出了一種基于多通道的大屏顯示方法,提升了多模態(tài)感官數據的可視化展示效果。同時(shí)對多模態(tài)沉浸式交互感知技術(shù)的產(chǎn)業(yè)化示范應用具有重要貢獻。是知識產(chǎn)權3的發(fā)明人。 |
5. 徐雍 職稱(chēng):副教授 工作單位:廣東工業(yè)大學(xué) 完成單位:廣東工業(yè)大學(xué) 主要貢獻:是項目的主要參與人。對項目技術(shù)創(chuàng )新點(diǎn)1、3有重要貢獻。共同提出了針對非線(xiàn)性系統的濾波方法、基于多傳感器的分布式傳感與融合方法,降低了動(dòng)作捕捉與手勢識別的檢測誤差,解決了虛擬現實(shí)動(dòng)感平臺動(dòng)作生硬的難題。是代表性論文2、3第一作者,代表性論文1、2的通訊作者,代表性論文4、5的合作作者。 |
6. 劉義 職稱(chēng):教授 工作單位:廣東工業(yè)大學(xué) 完成單位:廣東工業(yè)大學(xué) 主要貢獻:是項目的主要參與人。對項目技術(shù)創(chuàng )新點(diǎn)3有重要貢獻。提出了基于能量采集的高效介質(zhì)訪(fǎng)問(wèn)控制協(xié)議解決了內容與動(dòng)作響應時(shí)間長(cháng)的問(wèn)題,使體驗內容與動(dòng)感平臺動(dòng)作精準匹配。是代表性論文10的第一作者。 |
7. 張皓 職稱(chēng):無(wú) 工作單位:廣州創(chuàng )顯科教股份有限公司 完成單位:廣州創(chuàng )顯科教股份有限公司 主要貢獻:是項目的重要參與人。對項目技術(shù)創(chuàng )新點(diǎn)2有重要貢獻。提出紅外觸摸屏多點(diǎn)觸控識別方法實(shí)現多源數據在一體機上的可視化動(dòng)態(tài)展示。是知識產(chǎn)權4的發(fā)明人。 |
8. 周豎成 職稱(chēng):無(wú) 工作單位:廣州創(chuàng )顯科教股份有限公司 完成單位:廣州炫智電子科技有限公司 主要貢獻:是項目的重要參與人。對項目技術(shù)創(chuàng )新點(diǎn)2多模態(tài)沉浸式交互感知技術(shù)的研發(fā)及產(chǎn)業(yè)化示范應用具有重要貢獻。 |
9. 秦華軍 職稱(chēng):工程師 工作單位:廣州卓遠虛擬現實(shí)科技有限公司 完成單位:廣州卓遠虛擬現實(shí)科技有限公司 主要貢獻:是項目的重要參與人。對項目技術(shù)創(chuàng )新點(diǎn)3有重要貢獻。研發(fā)VR設備仿真體感系統,解決虛擬現實(shí)平臺設備動(dòng)作生硬問(wèn)題。是知識產(chǎn)權10的發(fā)明人。 |
10. 黃昌正 職稱(chēng):助理工程師 工作單位:廣州幻境科技有限公司 完成單位:廣州幻境科技有限公司 主要貢獻:是項目的重要參與人。對項目技術(shù)創(chuàng )新點(diǎn)1有重要貢獻。共同研發(fā)了用于虛擬現實(shí)環(huán)境的動(dòng)作捕捉系統,提高了動(dòng)作捕捉的精度。是知識產(chǎn)權7、8的發(fā)明人。 |
11. 楊超 職稱(chēng):副教授 工作單位:廣東工業(yè)大學(xué) 完成單位:廣東工業(yè)大學(xué) 主要貢獻:是項目的重要參與人。對項目技術(shù)創(chuàng )新點(diǎn)2有重要貢獻。提出了多信道認知無(wú)線(xiàn)網(wǎng)絡(luò )的廣義訪(fǎng)問(wèn)策略,提高虛擬現實(shí)平臺各個(gè)機構的協(xié)同能力。是代表性論文8的第一作者。 |
12. 周言明 職稱(chēng):助理工程師 工作單位:廣州幻境科技有限公司 完成單位:廣州幻境科技有限公司 主要貢獻:是項目的重要參與人。對項目技術(shù)創(chuàng )新點(diǎn)1有重要貢獻。共同研發(fā)了用于虛擬現實(shí)環(huán)境的動(dòng)作捕捉系統,提高了動(dòng)作捕捉的精度。是知識產(chǎn)權7、8的發(fā)明人。 |
13. 陳云 職稱(chēng):教授 工作單位:杭州電子科技大學(xué) 完成單位:杭州電子科技大學(xué) 主要貢獻:是項目的重要參與人。對項目技術(shù)創(chuàng )新點(diǎn)3有重要貢獻。提出了針對切換隨機系統的有限時(shí)間控制方法,提高虛擬現實(shí)動(dòng)感平臺不同模式間切換的流暢度。是代表性論文7的第一作者。 |
14. 麥勇 職稱(chēng):無(wú) 工作單位:廣州創(chuàng )顯科教股份有限公司 完成單位:廣州炫智電子科技有限公司 主要貢獻:是項目的重要參與人。對項目技術(shù)創(chuàng )新點(diǎn)2多模態(tài)沉浸式交互感知技術(shù)的研發(fā)及產(chǎn)業(yè)化示范應用具有重要貢獻。 |
15. 肖明 職稱(chēng):教授 工作單位:廣東工業(yè)大學(xué) 完成單位:廣東工業(yè)大學(xué) 主要貢獻:是項目的重要參與人。對項目技術(shù)創(chuàng )新點(diǎn)2有重要貢獻。提出了基于欠定BSS的雙通道延時(shí)語(yǔ)音降噪,提高了虛擬現實(shí)平臺對語(yǔ)音模態(tài)識別的能力。是代表性論文9的通訊作者。 |
項目簡(jiǎn)介 | 項目面向虛擬現實(shí)應用中對高沉浸式交互感知的需求,以克服感知交互不自然、實(shí)時(shí)性差,體驗不真實(shí)等共性問(wèn)題為目標,綜合控制、信息、計算機、機械等學(xué)科的理論與技術(shù),研發(fā)了高沉浸式虛擬現實(shí)交互感知關(guān)鍵技術(shù),并形成了多個(gè)面向不同行業(yè)具體應用場(chǎng)景的虛擬現實(shí)系統與設備。針對虛擬現實(shí)設備對人體和手部的復雜精細運動(dòng)難以捕捉與識別的難題,研發(fā)虛擬現實(shí)高精度自然人機交互與識別技術(shù),形成具有觸力覺(jué)反饋的穿戴式自然人機交互和全身動(dòng)作捕捉產(chǎn)品,實(shí)現用戶(hù)在虛擬實(shí)驗環(huán)境中人機交互的自然化;針對多感官體驗信息難以融合的難題,研發(fā)多模態(tài)沉浸式交互感知技術(shù),形成多模態(tài)沉浸式感知交互終端產(chǎn)品,實(shí)現多種感官模態(tài)全方位的沉浸式虛擬環(huán)境體驗;針對虛擬內容與現實(shí)動(dòng)作響應速度響應慢的難題,提出多自由度高動(dòng)態(tài)快速響應動(dòng)感平臺技術(shù),研發(fā)形成了動(dòng)作幅度大的多自由度高動(dòng)態(tài)快速響應動(dòng)感平臺,實(shí)現了虛擬現實(shí)動(dòng)感仿真的真實(shí)體驗。 基于以上成果,項目相關(guān)技術(shù)共授權發(fā)明專(zhuān)利9件,實(shí)用新型專(zhuān)利7件,軟件著(zhù)作權14項,發(fā)表SCI論文13篇。 基于項目成果研發(fā)的虛擬現實(shí)設備已在廣州幻境科技有限公司、廣州卓遠虛擬現實(shí)科技有限公司、廣州創(chuàng )顯科教股份有限公司等企業(yè)推廣生產(chǎn)。相關(guān)產(chǎn)品大量銷(xiāo)往科學(xué)中心、圖書(shū)館、消防局、學(xué)校、風(fēng)景區、體驗店等海內外3500多家單位。憑借技術(shù)產(chǎn)品先進(jìn)的沉浸式虛擬現實(shí)感知交互技術(shù)和良好的產(chǎn)品品質(zhì)等優(yōu)點(diǎn),得到廣大客戶(hù)的信任和支持,產(chǎn)品不僅在國內廣泛銷(xiāo)售,也在海外市場(chǎng)獲得可觀(guān)的收益。自項目技術(shù)實(shí)施以來(lái),依據對廣州幻境科技有限公司、廣州卓遠虛擬現實(shí)科技有限公司、廣州創(chuàng )顯科教股份有限公司、廣州炫智電子科技有限公司等4家企業(yè)的統計,相關(guān)技術(shù)成果的應用已為企業(yè)創(chuàng )造了顯著(zhù)的經(jīng)濟效益,近三年完成單位新增銷(xiāo)售額13.4770億人民幣, 應用情況和經(jīng)濟效益的具體情況見(jiàn)應用證明。 |
代表性論文 專(zhuān)著(zhù)目錄 | 論文1:Lu R, Liu S, Peng H, Xu Y*, Xie K, “Non-fragile filtering for fuzzy stochastic systems over fading channel”, Neurocomputing, vol. 174, pp. 553-559, 2016. |
論文2:Xu Y*, Lu R, Peng H, Chen Jian, “Passive filter design for periodic stochastic systems with quantized measurements and randomly occurring nonlinearities”, Journal of the Franklin Institute, vol. 353, no. 1, pp. 144-159, 2016. |
論文3:Xu Y, Lu R*, Tao J, Peng H, Xie K, “Nonfragile l2-l∞ state estimation for discrete-time neural networks with jumping saturations”, Neurocomputing, vol. 207, pp. 15-21, 2016. |
論文4:Yao D, Lu R*, Xu Y, Wang L, “Robust H∞ filtering for markov jump systems with mode-dependent quantized output and partly unknown transition probabilities”, Signal Processing, vol. 137, pp. 328-338, 2017. |
論文5:Li J, Lu R*, Xu Y, Peng H, Rao H, ‘‘Distributed state estimation for periodic systems with sensor nonlinearities and successive packet dropouts’’, Neurocomputing, vol. 237, pp. 50-58, 2017. |
論文6:Wu Y, Lu R*, “Event-Based control for network systems via Integral quadratic constraints.” IEEE Transactions on Circuits and Systems I: Regular Papers, vol. 65, no. 4, pp. 1386-1394, 2017. |
論文7:Chen Y, Liu Q, Lu R, Xue A*, “Finite-time control of switched stochastic delayed systems”, Neurocomputing, vol. 191, pp. 374-379, 2016. |
論文8:Yang C, Lou W, Fu Y, Xie S*,Yu R, “On throughput maximization in multi-channel cognitive radio networks via generalized access strategy”. IEEE Transactions on Communications, pp. 1384-1398, 2016:1-1. |
論文9:Li K, Sun G, Xiao M *, “Dual channel delay speech denoising based on underdetermined BSS”. International Conference on Mechatronics & Control, pp. 689-692, 2015. |
論文10:Liu Y, Yang Z*, Yu R, Xiang Y, Xie S, “An efficient MAC protocol with adaptive energy harvesting for machine-to-machine networks”. IEEE Access, pp. 358-367, 2015. |
知識產(chǎn)權名稱(chēng) | 專(zhuān)利1:<一種高精度帶隔離的I/V變換電路>(CN102064819B) |
專(zhuān)利2:<一種數據手套動(dòng)態(tài)手語(yǔ)識別方法>(CN102193633B) |
專(zhuān)利3:<一種基于多通道輸入大屏顯示的方法及系統>(CN104284099B) |
專(zhuān)利4:<基于紅外觸摸屏多點(diǎn)觸控識別的方法及系統>(CN103345339B) |
專(zhuān)利5:<視頻信號識別電路>(CN104796628B) |
專(zhuān)利6:<一體機的多媒體文件自動(dòng)歸類(lèi)方法及系統>(CN104731983B) |
專(zhuān)利7:<一種用于虛擬現實(shí)環(huán)境的具有定位功能的動(dòng)作捕捉系統>(CN206224385U) |
專(zhuān)利8:<一種用于虛擬現實(shí)環(huán)境的動(dòng)作捕捉系統>(CN206162395U) |
專(zhuān)利9:<一種高自由度擺臂機構>(CN205375159U) |
專(zhuān)利10:<一種用于VR游戲設備的仿真體感游戲系統>(CN206631182U) |
推廣應用情況 | 技術(shù)成果“高沉浸式虛擬現實(shí)交互感知關(guān)鍵技術(shù)與應用”已在廣州幻境科技有限公司、廣州卓遠虛擬現實(shí)科技有限公司、廣州創(chuàng )顯科教股份有限公司、廣州炫智電子科技有限公司應用推廣。相關(guān)產(chǎn)品大量銷(xiāo)往科學(xué)中心、圖書(shū)館、消防局、學(xué)校、風(fēng)景區、體驗店等海內外 3500 多家單位。 憑借技術(shù)產(chǎn)品先進(jìn)的沉浸式虛擬現實(shí)感知交互技術(shù)和良好的產(chǎn)品品質(zhì)等優(yōu)點(diǎn),得到廣大客戶(hù)的信任和支持,產(chǎn)品不僅在國內廣泛銷(xiāo)售,也在海外市場(chǎng)獲得可觀(guān)的收益。自項目技術(shù)實(shí)施以來(lái),依據對廣州幻境科技有限公司、廣州卓遠虛擬現實(shí)科技有限公司、廣州創(chuàng )顯科教股份有限公司、廣州炫智電子科技有限公司等 4 家企業(yè)的統計,相關(guān)技術(shù)成果的應用已為企業(yè)創(chuàng )造了顯著(zhù)的經(jīng)濟效益,近三年完成單位新增銷(xiāo)售額 13.4770 億人民幣, 應用情況和經(jīng)濟效益的具體情況見(jiàn)應用證明。 |