W5 課堂活動|讀取與視覺化感測資料
目標:在 Quest 上實際取得感測資料,體會「感測 → 追蹤」的關係。
任務一:讀取 6DoF 位姿與 IMU
- 用 Meta XR SDK 讀取頭盔與控制器的位置/旋轉(6DoF)。
- 讀取加速度/角速度,於畫面上即時顯示數值或圖表。
- 以 Copilot 協作寫出讀取與顯示的腳本,於頭盔實測。
警告
Passthrough 相機權限需使用者授權;使用相機資料要注意隱私(勿外流影像/個資)。
任務二:觀察與思考
- 快速轉頭時,畫面追蹤是否即時?(IMU 的貢獻)
- 遮住部分追蹤相機,定位是否變差?(視覺追蹤的角色)
- 在特徵少的空白牆面前,定位是否漂移?(為何需要融合,接 W8 SLAM)
任務三:三類感測對照表
填寫:Quest 3S 有/沒有哪些感測器,各自用途。
| 感測器 | Quest 3S 有無 | 用途 |
|---|---|---|
| 追蹤相機(inside-out) | ||
| 深度感測 | ||
| RGB Passthrough | ||
| IMU(加速度/陀螺儀) | ||
| 眼動追蹤 |
繳交(Tronclass)
- 感測資料視覺化截圖/錄影(含 6DoF 或 IMU 數值)。
- 觀察記錄(3 點)+ 對照表。
- AI 開發日誌
/AI-Log/。