工業技術研究院

技術簡介

目前XR穿戴式裝置流暢虛實互動提升元宇宙沉浸感是產業所亟需的，本技術使用虛實影像融合檢測平台配合AI訓練提升手勢辨識率，可提供廠商開發應用於XR眼鏡的手勢辨識解決方案。 建立動態虛實影像融合檢測驗證平台，完成同步攝影機虛實影像融合動態檢測有效性(Validity)驗證及MTP Latency檢測作業流程。 使用Meta Quest 2眼鏡進行pitch/yaw/roll三軸旋轉MTP Latency Measurement檢測， pitch/yaw/roll三軸mean latency分別為0.35ms/0.41ms/2.53ms，動態定位精度0.144 pixel/ms。

Abstract

Currently, the seamless integration of virtual and augmented reality interactions to enhance immersion in the metaverse is in high demand in the industry. This technology utilizes a platform that combines virtual and augmented reality image fusion with AI training to improve gesture recognition accuracy. It offers the solution for developers to create gesture recognition applications for XR glasses.

技術規格

•動態影像補償效能檢測範圍：pitch/yaw/roll三軸最大檢測範圍±45°/±45°/±90° •動態定位精度0.144 pixel/ms

Technical Specification

•Motion-to-Photon Latency Measurement: pitch/yaw/roll 3-axis rotation measurement •Dynamic Positioning Accuracy

技術特色

•創新多角度手勢辨識AI訓練系統，建立XR手勢互動自有技術 •建立動態虛實影像融合檢測驗證平台，及虛實影像融合動態檢測有效驗證，建立MTP Latency檢測標準作業流程。建立國內唯一開放實驗室提供AR/VR/MR裝置廠商顯示效能檢測技術與服務，有助於國內業者與國際技術的競爭機會。

應用範圍

可應用於自主機器人、自駕車、無人機、擴增/虛擬實境、智慧保安、醫療復健等創新載具

接受技術者具備基礎建議（設備）

光學取像、電腦視覺、影像處理、C＋＋軟體

接受技術者具備基礎建議（專業）

具3D深度感測系統設計與製作基礎能力

聯絡資訊