基于HoloLens和觸覺反饋的多模態(tài)混合現(xiàn)實(shí)系統(tǒng)研究
發(fā)布時(shí)間:2021-03-27 02:22
隨著計(jì)算機(jī)技術(shù)的發(fā)展,人機(jī)交互技術(shù)逐漸成為日常生活中不可或缺的部分。力觸覺再現(xiàn)技術(shù)作為人機(jī)交互技術(shù)中的重要內(nèi)容,提供給了操作者一種主動(dòng)探索、認(rèn)知虛擬世界的方式。在傳統(tǒng)的力觸覺再現(xiàn)設(shè)備和方法中,人機(jī)交互與現(xiàn)實(shí)世界中的交互方式存在著一定的差別,如接口設(shè)備中不可避免的機(jī)械結(jié)構(gòu)之間的摩擦力和慣性量等。為了克服傳統(tǒng)力觸覺再現(xiàn)技術(shù)的弊端以及實(shí)現(xiàn)力觸覺再現(xiàn)和視覺再現(xiàn)在空間上的一致,本文基于微軟HoloLens智能全息眼鏡和力觸覺再現(xiàn)技術(shù),開展了非接觸式的、視觸覺融合的混合現(xiàn)實(shí)系統(tǒng)研究。本文從電磁場理論出發(fā),深入分析了電磁場產(chǎn)生以及控制原理,從技術(shù)上分析了電磁式力觸覺再現(xiàn)的可行性;并結(jié)合微軟公司的HoloLens智能全息眼鏡,闡述了混合現(xiàn)實(shí)技術(shù)的形成機(jī)理;設(shè)計(jì)了基于HoloLens和觸覺反饋的多模態(tài)混合現(xiàn)實(shí)系統(tǒng)的整體硬件方案,該系統(tǒng)的硬件主要包括基于HoloLens的混合現(xiàn)實(shí)視覺再現(xiàn)模塊、基于層疊式電磁鐵模組和永磁鐵的力觸覺再現(xiàn)模塊和人手位置檢測模塊三個(gè)部分;從硬件的選型以及結(jié)構(gòu)參數(shù)的確定等方面講述了系統(tǒng)整體硬件設(shè)計(jì)的過程。在硬件系統(tǒng)的基礎(chǔ)上,結(jié)合軟件編程實(shí)現(xiàn)各個(gè)模塊的軟件功能,包括基于HoloLen...
【文章來源】:南京航空航天大學(xué)江蘇省 211工程院校
【文章頁數(shù)】:93 頁
【學(xué)位級(jí)別】:碩士
【部分圖文】:
基于外骨架的穿戴式設(shè)備
圖 1.4 軟體機(jī)器人觸覺反饋手套套的穿戴式設(shè)備因其小巧的結(jié)構(gòu),使得其適用于人體穿戴,對(duì),且其本身的重量不會(huì)對(duì)人體產(chǎn)生較大的負(fù)擔(dān) 但其控制精度造價(jià)也較昂貴 本文中提到的適用于手臂和人手的穿戴式設(shè)備,還有其他力觸如適用于人體軀干的觸覺背心[26-28],適用于腰部穿戴的數(shù)據(jù)腰縱桿式力觸覺再現(xiàn)設(shè)備的發(fā)展,力反饋操縱桿式力觸覺再現(xiàn)設(shè)備已經(jīng)成為一項(xiàng)成熟的商品化,并走進(jìn)人們的科研與生活之中 目前市場上典型的產(chǎn) Phantom Touch 系列設(shè)備[31]τ圖 1.4aυ Novint 公司的 Falcon 設(shè) 公司的 Omega 系列和 Delta 系列設(shè)備τ圖 1.4cυ
圖 1.4 軟體機(jī)器人觸覺反饋手套基于數(shù)據(jù)手套的穿戴式設(shè)備因其小巧的結(jié)構(gòu),使得其適用于人體穿戴,對(duì)使用者身體的活動(dòng)限制作用較小,且其本身的重量不會(huì)對(duì)人體產(chǎn)生較大的負(fù)擔(dān) 但其控制精度沒有外骨架式穿戴設(shè)備高,同時(shí)造價(jià)也較昂貴 當(dāng)然,除了本文中提到的適用于手臂和人手的穿戴式設(shè)備,還有其他力觸覺再現(xiàn)設(shè)備適用于人體的穿戴,如適用于人體軀干的觸覺背心[26-28],適用于腰部穿戴的數(shù)據(jù)腰帶[29, 30]等 2.力反饋操縱桿式力觸覺再現(xiàn)設(shè)備經(jīng)過近幾年的發(fā)展,力反饋操縱桿式力觸覺再現(xiàn)設(shè)備已經(jīng)成為一項(xiàng)成熟的技術(shù),越來越多的研究成果開始商品化,并走進(jìn)人們的科研與生活之中 目前市場上典型的產(chǎn)品有美國Geomagic 公司的 Phantom Touch 系列設(shè)備[31]τ圖 1.4aυ Novint 公司的 Falcon 設(shè)備[32]τ圖 1.4bυ Force Dimension 公司的 Omega 系列和 Delta 系列設(shè)備τ圖 1.4cυ
【參考文獻(xiàn)】:
期刊論文
[1]核電站設(shè)備維修中混合現(xiàn)實(shí)技術(shù)的應(yīng)用研究[J]. 李喆,陳佳寧,張林鍹. 計(jì)算機(jī)仿真. 2018(05)
[2]增強(qiáng)現(xiàn)實(shí)(AR)、虛擬現(xiàn)實(shí)(VR)和混合現(xiàn)實(shí)(MR)技術(shù)[J]. 魯馨. 辦公自動(dòng)化. 2018(10)
[3]VR、AR和MR-挑戰(zhàn)與機(jī)遇[J]. 顧君忠. 計(jì)算機(jī)應(yīng)用與軟件. 2018(03)
[4]面向自然人機(jī)交互的力觸覺再現(xiàn)方法綜述[J]. 陸熊,陳曉麗,孫浩浩,趙麗萍. 儀器儀表學(xué)報(bào). 2017(10)
[5]多模態(tài)力觸覺交互技術(shù)及應(yīng)用[J]. 宋愛國,田磊,倪得晶,秦歡歡. 中國科學(xué):信息科學(xué). 2017(09)
[6]虛擬現(xiàn)實(shí)的人機(jī)交互綜述[J]. 張鳳軍,戴國忠,彭曉蘭. 中國科學(xué):信息科學(xué). 2016(12)
[7]增強(qiáng)現(xiàn)實(shí)在混合教學(xué)課堂的應(yīng)用探索[J]. 凌財(cái)進(jìn),曾婷. 計(jì)算機(jī)時(shí)代. 2016(07)
[8]面向遠(yuǎn)程觸覺協(xié)作的虛擬針灸系統(tǒng)研究[J]. 蔣崢崢,高瞻,顧翔,陳翔,王丹丹. 系統(tǒng)仿真學(xué)報(bào). 2013(09)
[9]基于穿戴型振動(dòng)觸覺數(shù)據(jù)腰帶的方位提示實(shí)驗(yàn)研究[J]. 李蒞圓,吳涓,宋愛國. 東南大學(xué)學(xué)報(bào)(自然科學(xué)版). 2009(S2)
[10]力/觸覺再現(xiàn)設(shè)備的研究現(xiàn)狀與應(yīng)用[J]. 陸熊,宋愛國. 測控技術(shù). 2008(08)
碩士論文
[1]基于虛擬現(xiàn)實(shí)的沉浸式觸覺交互教學(xué)應(yīng)用研究[D]. 王晨.吉林大學(xué) 2017
[2]基于多種人機(jī)交互設(shè)備的空間遙操作機(jī)器人控制技術(shù)研究[D]. 朱碧玉.東南大學(xué) 2016
[3]面向兒童讀物增強(qiáng)現(xiàn)實(shí)軟件系統(tǒng)設(shè)計(jì)與研究[D]. 張超.電子科技大學(xué) 2013
[4]具有力反饋的虛擬手術(shù)設(shè)備的研究與實(shí)現(xiàn)[D]. 宋亞沖.上海交通大學(xué) 2009
本文編號(hào):3102693
【文章來源】:南京航空航天大學(xué)江蘇省 211工程院校
【文章頁數(shù)】:93 頁
【學(xué)位級(jí)別】:碩士
【部分圖文】:
基于外骨架的穿戴式設(shè)備
圖 1.4 軟體機(jī)器人觸覺反饋手套套的穿戴式設(shè)備因其小巧的結(jié)構(gòu),使得其適用于人體穿戴,對(duì),且其本身的重量不會(huì)對(duì)人體產(chǎn)生較大的負(fù)擔(dān) 但其控制精度造價(jià)也較昂貴 本文中提到的適用于手臂和人手的穿戴式設(shè)備,還有其他力觸如適用于人體軀干的觸覺背心[26-28],適用于腰部穿戴的數(shù)據(jù)腰縱桿式力觸覺再現(xiàn)設(shè)備的發(fā)展,力反饋操縱桿式力觸覺再現(xiàn)設(shè)備已經(jīng)成為一項(xiàng)成熟的商品化,并走進(jìn)人們的科研與生活之中 目前市場上典型的產(chǎn) Phantom Touch 系列設(shè)備[31]τ圖 1.4aυ Novint 公司的 Falcon 設(shè) 公司的 Omega 系列和 Delta 系列設(shè)備τ圖 1.4cυ
圖 1.4 軟體機(jī)器人觸覺反饋手套基于數(shù)據(jù)手套的穿戴式設(shè)備因其小巧的結(jié)構(gòu),使得其適用于人體穿戴,對(duì)使用者身體的活動(dòng)限制作用較小,且其本身的重量不會(huì)對(duì)人體產(chǎn)生較大的負(fù)擔(dān) 但其控制精度沒有外骨架式穿戴設(shè)備高,同時(shí)造價(jià)也較昂貴 當(dāng)然,除了本文中提到的適用于手臂和人手的穿戴式設(shè)備,還有其他力觸覺再現(xiàn)設(shè)備適用于人體的穿戴,如適用于人體軀干的觸覺背心[26-28],適用于腰部穿戴的數(shù)據(jù)腰帶[29, 30]等 2.力反饋操縱桿式力觸覺再現(xiàn)設(shè)備經(jīng)過近幾年的發(fā)展,力反饋操縱桿式力觸覺再現(xiàn)設(shè)備已經(jīng)成為一項(xiàng)成熟的技術(shù),越來越多的研究成果開始商品化,并走進(jìn)人們的科研與生活之中 目前市場上典型的產(chǎn)品有美國Geomagic 公司的 Phantom Touch 系列設(shè)備[31]τ圖 1.4aυ Novint 公司的 Falcon 設(shè)備[32]τ圖 1.4bυ Force Dimension 公司的 Omega 系列和 Delta 系列設(shè)備τ圖 1.4cυ
【參考文獻(xiàn)】:
期刊論文
[1]核電站設(shè)備維修中混合現(xiàn)實(shí)技術(shù)的應(yīng)用研究[J]. 李喆,陳佳寧,張林鍹. 計(jì)算機(jī)仿真. 2018(05)
[2]增強(qiáng)現(xiàn)實(shí)(AR)、虛擬現(xiàn)實(shí)(VR)和混合現(xiàn)實(shí)(MR)技術(shù)[J]. 魯馨. 辦公自動(dòng)化. 2018(10)
[3]VR、AR和MR-挑戰(zhàn)與機(jī)遇[J]. 顧君忠. 計(jì)算機(jī)應(yīng)用與軟件. 2018(03)
[4]面向自然人機(jī)交互的力觸覺再現(xiàn)方法綜述[J]. 陸熊,陳曉麗,孫浩浩,趙麗萍. 儀器儀表學(xué)報(bào). 2017(10)
[5]多模態(tài)力觸覺交互技術(shù)及應(yīng)用[J]. 宋愛國,田磊,倪得晶,秦歡歡. 中國科學(xué):信息科學(xué). 2017(09)
[6]虛擬現(xiàn)實(shí)的人機(jī)交互綜述[J]. 張鳳軍,戴國忠,彭曉蘭. 中國科學(xué):信息科學(xué). 2016(12)
[7]增強(qiáng)現(xiàn)實(shí)在混合教學(xué)課堂的應(yīng)用探索[J]. 凌財(cái)進(jìn),曾婷. 計(jì)算機(jī)時(shí)代. 2016(07)
[8]面向遠(yuǎn)程觸覺協(xié)作的虛擬針灸系統(tǒng)研究[J]. 蔣崢崢,高瞻,顧翔,陳翔,王丹丹. 系統(tǒng)仿真學(xué)報(bào). 2013(09)
[9]基于穿戴型振動(dòng)觸覺數(shù)據(jù)腰帶的方位提示實(shí)驗(yàn)研究[J]. 李蒞圓,吳涓,宋愛國. 東南大學(xué)學(xué)報(bào)(自然科學(xué)版). 2009(S2)
[10]力/觸覺再現(xiàn)設(shè)備的研究現(xiàn)狀與應(yīng)用[J]. 陸熊,宋愛國. 測控技術(shù). 2008(08)
碩士論文
[1]基于虛擬現(xiàn)實(shí)的沉浸式觸覺交互教學(xué)應(yīng)用研究[D]. 王晨.吉林大學(xué) 2017
[2]基于多種人機(jī)交互設(shè)備的空間遙操作機(jī)器人控制技術(shù)研究[D]. 朱碧玉.東南大學(xué) 2016
[3]面向兒童讀物增強(qiáng)現(xiàn)實(shí)軟件系統(tǒng)設(shè)計(jì)與研究[D]. 張超.電子科技大學(xué) 2013
[4]具有力反饋的虛擬手術(shù)設(shè)備的研究與實(shí)現(xiàn)[D]. 宋亞沖.上海交通大學(xué) 2009
本文編號(hào):3102693
本文鏈接:http://sikaile.net/kejilunwen/shengwushengchang/3102693.html
最近更新
教材專著