文章圖片
文章圖片
文章圖片
在日常社交場合中 ， 人們通常會采用各種形式的交流方式 ， 除了文字交流、談話等直接的方式 ， 眼神、姿態、動作也是人與人溝通的關鍵方式 。 然而 ， 正常的社交為盲人、視障人士帶來諸多困難 ， 就像電視里常演的那樣 ， 盲人在說話的時候通常不會對著其他人 ， 因為他們難以定位周圍人的位置 ， 而且也無法確定對方是否在看著他說話 。
PeopleLens
對于天生失明的孩子來講 ， 與周圍人社交、互動更加困難 ， 在一群人交流的場景中 ， 他們可能需要將頭放在桌子上 ， 用一只耳朵來定位周圍講話的人 。 而這就造成他們在正常社交技能上的缺失 。 也就是說 ， 盲人/視障人難以像普通人一樣專心交流 ， 很難自然流暢的保持話題 ， 進而產生社交障礙 。
于是 ， 為了訓練失明/視障兒童的社交技能 ， 幫助他們與同齡人正常互動和交流 ， 微軟研發了一種基于AR眼鏡的人臉識別和定位系統：PeopleLens 。 該系統的特點是通過攝像頭來定位周圍的人 ， 并將他們的坐標組成一個3D地圖網絡 ， 幫助失明/視障兒童定位這些人 。 此外 ， 它還可以幫助識別這些人的名字、眼神 ， 并通過空間語音來提示用戶 。
具體來講 ， 其具有五大功能：識別眼前人的身份；提示你有人在看你；通過聲音幫你定位周圍的人；用聲音引導你轉頭面向特定的人；用LED燈提示周圍的人你在看他/她 。
靈感來自殘奧會
據青亭網了解 ， 微軟這一系列研究的靈感 ， 實際上來自2016年的巴西里約熱內盧殘奧會 ， 其目的是在很多人的社交場合中 ， 幫助盲人/視障人士處理和不同人的對話 ， 彌補眼神和肢體交流的缺失 。
Project Tokyo
在過去幾年里 ， 微軟的AI團隊持續利用計算機視覺技術來幫助盲人/視障人士感受世界 ， 以及識別周圍的人 ， 曾推出可識別照片內容的Seeing AI應用 ， 或是基于HoloLens的人臉識別系統Project Tokyo等等 。
在Project Tokyo基礎上 ， 微軟又研發了一款HoloLens人臉識別應用：PeopleLens 。 與Project Tokyo相似 ， PeopleLens也是通過計算機視覺來識別人臉 ， 然后通過語音提示來幫助盲人/視障人士識別周圍的人 。 區別在于 ， PeopleLens將周圍的人定位 ， 并生成一種地圖網絡（People Map） ， 當HoloLens用戶靠近周圍人所在的位置時 ， 系統便可以快速識別并說出這個人的名字 。 此外 ， 還通過語音提示來引導HoloLens看向特定的人 。
也就是說 ， PeopleLens不再只是單純的識別人臉 ， 而是進一步定位并保存周圍人的位置 ， 好處是響應速度更快 。
微軟表示：PeopleLens通過定位和識別空間中的人 ， 幫助盲人、視力障礙人士了解周圍的社交環境 。 它還結合了基于心理學、語言治療的研究和實驗成果 ， 通過一系列游戲來訓練盲人/視障人士的社交技能 ， 允許他們更好的與同齡人交流 。
技術細節
據了解 ， PeopleLens是一個開放的AI系統 ， 它可以增強盲人/視障人士的日常社交體驗 ， 幫助他們更好的感知世界 。 它需要結合AR頭顯來運行 ， 比如Nreal Light 。 與基于HoloLens的Project Tokyo相比 ， PeopleLens更輕量化 ， Nreal Light更接近普通眼鏡形態 。
相關經驗推薦
- 安卓|這個月開始，你手機里這些APP都要涼涼！
- 波輪洗衣機|輕薄本｜Acer非凡S3 最便宜的i5-1240P，真實體驗，實測分享
- 支付寶|支付寶新版本終于對自己下手了，這個新功能真實用！
- 微軟|空調電輔熱有什么用？買空調選帶電輔熱得好，還是不帶得好？
- 微軟|全球首例！中國家電能否過關？
- 洗衣機|天璣8100手機賣1999真香！但6G+128G現在還能用嗎？
- 安卓|這個世界上80%以上的人，都不是手機編程，或者自己搞小技巧的大神
- 折疊屏|Intel、AMD及微軟已放棄 又一操作系統也淘汰傳統BIOS
- 微軟|蘋果12換到華為mate40 pro，重度使用7天后，我有話想說
- 顯示器|難怪手機充電速度這么慢，原來是這個開關沒關閉，漲知識了