W5|MR 感測器技術
Quest 用哪些感測器、如何取得?
本週定位:MR 裝置如何「感知環境」與「追蹤你」。認識向外/向內/慣性三類感測器,以及它們如何融合成 6DoF 低延遲追蹤。
本週只新增的一個核心觀念
單一感測器都不完美——IMU 快但會漂移、相機準但較慢;靠多感測融合才能又快又準又穩。
本週可驗證成果
- 能說出 XR 三類感測(向外/向內/IMU)與各自用途。
- 能解釋 6DoF 追蹤為何需要 IMU+視覺融合。
- 能在 Quest 上讀取並視覺化基本感測資料。
三小時流程
| 時間 | 活動 |
|---|---|
| 0–15 分 | 前週回顧、本週地圖 |
| 15–55 分 | 感測總覽、IMU 與 6DoF |
| 55–65 分 | 休息 |
| 65–110 分 | 視覺/深度追蹤、向內感測、多感測融合 |
| 110–160 分 | 課堂活動:讀取並視覺化 Quest 感測資料 |
| 160–180 分 | 小結、下週預告(SLAM) |
教材入口
- W05 讓 Cube 進入真實房間 互動實作講義:選擇 Quest APK 實機或 Simulation,依圖完成房間網格與深度遮擋。
- 🖥 課堂投影片(PowerPoint,含圖解,可下載編輯)
- 課堂活動:讀取與視覺化感測資料
- 延伸:謝老師《XR 感測技術講義》(課堂提供)
核心概念與術語
- 向外感測:追蹤相機(inside-out)、深度(結構光/ToF/LiDAR)、RGB Passthrough。
- 向內感測:手部追蹤相機、眼動(Quest Pro/Vision Pro)、生理感測。
- IMU:加速度計+陀螺儀(+磁力計=9 軸);高速輸出、會漂移。
- 6DoF:旋轉+位移;MR 必備。
- 多感測融合:互補長短 → 低延遲、抗漂移。
學生檢核
- 我能分辨向外、向內、IMU 三類感測器。
- 我能說明 IMU 與相機為何要互補。
- 我知道 Quest 3/3S 有哪些感測器、沒有哪些(無眼動)。
- 我能在 Quest 上讀取並視覺化感測資料。