【洗衣機|微軟:這個AI應用能幫助視障兒童找到社交自信】PeopleLens采用了5種計算機視覺算法 , 可持續定位、識別、追蹤和捕捉附近人的注視方向 。 也就是說 , 它可以幫你識別附近看你的人 , 并根據空間音頻提示找到這個人 。 當你得到其他人注意力時再開啟對話 , 體驗感會更自然、效率也更高 。
PeopleLens可以幫助盲人/視障人士建立一個3D社交地圖 , 這個地圖旨在幫助他們了解環境中不同人的定位、距離 。 創建地圖的好處是 , 即使用戶背對著其他人 , 或其他人不在HoloLens追蹤范圍內 , 其位置也會記錄在實時更新的地圖中 。
細節方面 , PeopleLens利用空間音頻來念人名 , 也就是說將空間信息與人名結合 , 幫助用戶根據聲音傳播方向來定位其他人的距離和所在地 , 并進行系統的記憶 。
AR眼鏡還可以通過燈光等形式 , 提醒周圍的人他們的追蹤狀態 , 如果你不想進入AR的定位范圍 , 在看到LED燈光后可以躲開 。 這種方式可以一定程度上替代人與人互動時的眼神交流 。 (白光表示檢測到人的位置 , 閃爍綠光代表人臉識別成功)
值得注意的是 , PeopleLens的面部識別是基于自愿收集的 , 人們可以上傳幾張自己的照片來注冊系統 , 這些照片不會被儲存 , 而是被系統轉換成可識別的面部數據 。
PeopleLens在10米范圍內識別到的人用撞擊聲表示 , 當這個人距離用戶4米以內時 , PeopleLens會念出其名字 。 如果這個人的臉沒有正面對著PeopleLens的追蹤范圍 , 系統會通過聲音來引導用戶看向這個人 , 如果識別到注冊的用戶則會念出名字 , 如果識別到未注冊的人則通過咔噠聲來確認 。
應用場景
對于盲人、視障人士 , PeopleLens是一種尋找朋友的方式 , 也是一種提升反應能力和社交自信的工具 。 通過一系列培養注意力的交互游戲 , 還可以進一步提升盲人/視障人士的空間感知能力 , 讓他們更容易和周圍的環境互動 。
此外 , 也可以通過交互游戲來訓練盲人/視障人士的社交能力 , 比如PeopleLens在檢測到周圍有人時 , 會發出咔噠聲 , 識別到人臉后 , 會播放碰撞聲 , 然后念出這個人的名字 。 在聽到咔噠聲 , 想要尋找這個人時 , 會聽到一種類似于橡皮筋拉伸的聲音 , 其音量會根據你跟這個人之間的距離而變化 , 直到你面對著這個人時 , 會發出響亮的咔噠聲 , 向你確認定位成功 。
這種聲音提示 , 可以幫助盲人/視障人士快速發現周圍的人 , 通過改變/引導注意力 , 來發起或結束對話 。
科研人員解釋 , 這參考了兒童學習的方式 , 比如當嬰兒指著天空時 , 父母說“鳥” , 他/她便會將語音和視覺匹配 。 而對于視力不佳的孩子來講 , 他們的注意力通過聽覺來表現 , 因此PeopleLens試圖將聽覺和空間方位結合 , 幫助他們在空間中導航 。
除此之外 , 用戶還可以通過連續敲擊聲的次數來識別不同方向有多少個人 , 比如在教室里 , 如果一個方向有三個人 , 他們可能是在討論題目 , 如果聽到一連串敲擊聲 , 可能是一群孩子在課桌前看書 。 你還可以在周圍尋找好友奧斯卡 , 當他看到AR頭顯上的LED燈光時 , 可以移動到頭顯攝像頭可識別的位置 , 當你識別到奧斯卡后 , 可以根據奧斯卡的位置來分析他的姿態 , 如果奧斯卡在坐著 , 那么你也可以抓一把椅子坐在他旁邊 。 參考:微軟
相關經驗推薦
- 安卓|這個月開始,你手機里這些APP都要涼涼!
- 波輪洗衣機|輕薄本|Acer非凡S3 最便宜的i5-1240P,真實體驗,實測分享
- 支付寶|支付寶新版本終于對自己下手了,這個新功能真實用!
- 微軟|空調電輔熱有什么用?買空調選帶電輔熱得好,還是不帶得好?
- 微軟|全球首例!中國家電能否過關?
- 洗衣機|天璣8100手機賣1999真香!但6G+128G現在還能用嗎?
- 安卓|這個世界上80%以上的人,都不是手機編程,或者自己搞小技巧的大神
- 折疊屏|Intel、AMD及微軟已放棄 又一操作系統也淘汰傳統BIOS
- 微軟|蘋果12換到華為mate40 pro,重度使用7天后,我有話想說
- 顯示器|難怪手機充電速度這么慢,原來是這個開關沒關閉,漲知識了
