W5 課堂活動|讀取與視覺化感測資料

目標:在 Quest 上實際取得感測資料,體會「感測 → 追蹤」的關係。

任務一:讀取 6DoF 位姿與 IMU

  • 用 Meta XR SDK 讀取頭盔與控制器的位置/旋轉(6DoF)。
  • 讀取加速度/角速度,於畫面上即時顯示數值或圖表。
  • 以 Copilot 協作寫出讀取與顯示的腳本,於頭盔實測。
警告

Passthrough 相機權限需使用者授權;使用相機資料要注意隱私(勿外流影像/個資)。

任務二:觀察與思考

  • 快速轉頭時,畫面追蹤是否即時?(IMU 的貢獻)
  • 遮住部分追蹤相機,定位是否變差?(視覺追蹤的角色)
  • 在特徵少的空白牆面前,定位是否漂移?(為何需要融合,接 W8 SLAM)

任務三:三類感測對照表

填寫:Quest 3S 有/沒有哪些感測器,各自用途。

感測器 Quest 3S 有無 用途
追蹤相機(inside-out)
深度感測
RGB Passthrough
IMU(加速度/陀螺儀)
眼動追蹤

繳交(Tronclass)

  • 感測資料視覺化截圖/錄影(含 6DoF 或 IMU 數值)。
  • 觀察記錄(3 點)+ 對照表。
  • AI 開發日誌 /AI-Log/。
回到顶部