Portal-ble AR可以將任何安卓手機變成一個AR門戶 ， 讓用戶可以超越現(xiàn)實世界 ， 用手移動虛擬物體 。 利用該資源庫 ， 開發(fā)者可以執(zhí)行多種操作 ， 例如繪制、操縱和投擲對象 。Portal-ble 提供的功能與AR領域目前流行的功能之間的區(qū)別在于 ， Portal-ble支持與對象的直接交互 ， 而不是通常的空中手勢 。
科研人員表示：Portal-ble市面上純手機AR交互方案中最好的 ， 其主要優(yōu)勢在于它使開發(fā)人員能夠利用Portal-ble的框架并將其包含在他們的游戲和應用程序中 。Huang的目標是讓AR無處不在 ， 因為他知道其他人正在為其他設備構建 ， 這就是為什么用于手機的AI一直是該公司相當關注的焦點 。
在一段demo中 ， 科研人員演示了一種通過手勢來抓AR小精靈的游戲：《Pokemon CatchAR》 。 這是一個Snapchat AR濾鏡 ， 不僅可以在Spectacles上運行 ， 也兼容iOS和安卓手機 。 在游戲中你可以用手來旋轉精靈球 ， 也可以用手扔球 。
科研人員表示 ， 在手機上運行Portal-ble可實現(xiàn)完整的手與物體交互 ， 而如果加上深度傳感器 ， 手勢交互的準確性可提升至3毫米 。
據(jù)了解 ， Portal-ble開源庫包含手勢交互示例應用 ， 以及構建手勢交互Unity應用的文檔 。 細節(jié)方面 ， 該方案的手勢識別基于MediaPipe機器學習框架 ， 在開源后允許開發(fā)人員使用其代碼 ， 開發(fā)AR手勢應用 。
【AR|低成本AR手勢交互方案Portal-ble正式開源】
科研人員還設計了一個3D打印的支架 ， 可將Leap Motion固定在手機攝像頭模塊下方 。 不過 ， 運行Leap Motion還需要使用Intel計算模塊（電腦棒） ， 來提供額外的算力 。
理論上 ， 還可以搭配智能手表使用 ， 結合這種穿戴式顯示屏 ， 可進一步提升3D AR涂鴉的效果 ， 在手機屏幕之外也可以繼續(xù)交互 ， 目的是解決手機FOV有限的問題 。
值得注意的是 ， Portal-ble項目由美國國家科學基金會、皮克斯資助 。 參考：VentureBeat
相關經驗推薦
- 中興|低成本解決電視卡頓，泰捷WE60C升級版電視盒子評測
- 瀏覽器|華為瀏覽器功能和交互更完善
- ff91|賽輪思將為FF 91提供自然語音交互功能
- ColorOS|智能交互，大屏絕配，ColorOS for Pad得心應手
- 安卓|OPPO官宣6月8日公布安卓13適配計劃：隱私安全、交互再上一臺階？
- 華碩靈耀|最適合創(chuàng)作者入手的專業(yè)本華碩靈耀X Pro，超高性能+獨特交互體驗
- 蘋果|蘋果WWDC 2022爆料匯總 平板迎來新交互，鎖屏顯示來了
- 雞蛋|跪舔！50寸的平板你玩過嗎？Touchjet Wave紅外手勢識別器
- 蘋果|蘋果新專利曝光：保護殼也有交互界面；屏下 Touch ID 秀黑科技！
- 操作系統(tǒng)|iOS 16 操作系統(tǒng)交互新形勢