HoloLens應(yīng)用模仿回聲定位幫助視障人士導(dǎo)航
大家對HoloLens這種MR頭顯的一般印象是黑科技、科幻片成真,但實際上HoloLens APP也是可以充滿溫情的,例如下面的這個應(yīng)用就可以幫助視覺障礙人群進(jìn)行室內(nèi)導(dǎo)航,原理據(jù)說類似蝙蝠的回聲定位。
盡管實際體驗過的人其實不多,但經(jīng)過一年多的普及,很多人至少已經(jīng)聽說過VR頭顯,而MR和HoloLens則仍然只有科技愛好者知道。這些設(shè)備誕生的根本原因還是在于為人們帶來更加方便的生活。人們探索VR和AR在醫(yī)療等方面的應(yīng)用,并考慮讓它們進(jìn)入日常生活中。
現(xiàn)在,一位波特蘭的HoloLens開發(fā)者Javier Davalos就展示了MR硬件在幫助視障人士方面的作用。
在開發(fā)者上傳到Y(jié)ouTube的視頻介紹中,Davalos使用HoloLens的音頻輔助正常地在室內(nèi)環(huán)境中走動。我們知道HoloLens擁有掃描周圍3D環(huán)境構(gòu)建實時地圖的能力,Davalos就借助HoloLens的音頻提示確定方向和物品的距離等。這個應(yīng)用模仿了蝙蝠的回聲定位系統(tǒng),將檢測到的視覺信息轉(zhuǎn)化為容易理解的音頻波動,用戶聽到的聲音會因為距離物品的遠(yuǎn)近而發(fā)生變化。
首先,Davalos展示了一個單視場版本的應(yīng)用,它可以根據(jù)用戶前方的物品的不同而改變音頻。例如樓梯的這一層和另一層就聽起來不同。屋子里的其他物品也擁有自己獨有的聲音。這個系統(tǒng)可以讓人憑聲音分辨不同的物品。
然后就是立體模式,或者說你將擁有“兩只眼”,而我們知道雙目視覺可以識別出物體的遠(yuǎn)近了。這時,來自兩個不同點的聲音會分別進(jìn)入用戶的左右耳,這樣我們甚至能聽出是不是到墻邊了或者前面是否是桌角等信息??傊褪蔷_度提升。
除了立體模式,Davalos還設(shè)計了簡單的語音命令系統(tǒng),用戶可以聽到HoloLens SLAM系統(tǒng)測量物品長度的結(jié)果,或者電子羅盤提供的方向信息,又或者讓HoloLens幫你數(shù)樓梯階數(shù)。
目前,Davalos還在完善這個HoloLens應(yīng)用,他還需要一些視障人士幫助他正確評估軟件功能。
未經(jīng)授權(quán),禁止轉(zhuǎn)載,違者必將追究法律責(zé)任。
文章點評
相關(guān)閱讀
-
微軟解鎖觀眾視角:HoloLens輕松拍攝MR視頻
微軟表示:混合現(xiàn)實(MR)視頻拍起來也不是那么困難嘛,不過,首先你得有HoloLens。...
- CEO辟謠:Magic Leap諜照并非原型機(jī)
- 現(xiàn)實與理想的落差 Magic Leap原型機(jī)諜照曝光
- 納米材料顯神威!Metalenses助力iGlass概念成真
- 畫個圈圈讓你消失:《傳送門MR》真神奇!
- 重現(xiàn)阿凡達(dá):腦機(jī)接口如何應(yīng)用于MR?