W3 課堂活動|AI 協作做出抓取/投擲互動
任務背景
用 GitHub Copilot 從零做出「射線抓取並投擲方塊」的 Quest MR 互動,全程實踐「AI 產出 → Editor 驗證 → 真人修訂」。
初始材料與可用工具
- Unity 專案(Meta XR SDK + XR Interaction Toolkit 已匯入)。
- GitHub Copilot(Chat / CLI / Agent)。
- Quest 3 一台(可兩人一機輪流)。
警告
AI 權限範圍:Copilot 可產生/修改本專案程式並提出建置步驟;實際掛載元件、設定 Inspector、進頭盔驗證由你完成。未驗證的程式不得作為 demo 版本。
任務分段
步驟 0(5 分)環境確認
開專案、連 Quest 3、確認能進 Passthrough。
步驟 1(15 分)用 Copilot 建立/設定
範例 prompt:
在 Unity(Meta XR SDK + XR Interaction Toolkit)中,幫我建立一個可用控制器射線抓取並投擲的方塊。請給我需要的元件設定步驟與一個 C# 腳本,並標註哪些要在 Inspector 手動綁定。
預期中間成果:一份步驟清單 + 一個腳本草稿。
步驟 2(20 分)Editor 驗證與真人修訂
- 建立 XR Origin、Ray Interactor;方塊加
Rigidbody與XR Grab Interactable。 - 進頭盔測試;把 AI 沒設好的(Layer、Interaction Layer Mask、投擲力道)手動修好。
步驟 3(20 分)用 Copilot 除錯
見 除錯挑戰。
步驟 4(15 分)小挑戰
用 Copilot 加功能:抓取時方塊變色、放開 2 秒後消失。觀察 AI 產出品質與需人工介入之處。
步驟 5(15 分)補齊 AI 開發日誌
依下方樣板記錄至少 3 段協作,存到 /AI-Log/W03.md。
需保存的證據
- APK 或 Editor 錄影(30–60 秒)。
- GitHub 連結。
/AI-Log/W03.md。
AI 開發日誌樣板
### 協作 #n — <一句話目標>
- 情境/目標:
- 我的 prompt:
- AI 產出(摘要或連結):
- 我的驗證(Editor/頭盔結果、編譯錯誤):
- 我的修訂:
- 結果:成功 / 部分 / 失敗,學到什麼:評分重點(10 分)
| 面向 | 分數 | 說明 |
|---|---|---|
| 功能完成度 | 4 | 互動可在 Quest 3 正常運作 |
| AI 協作品質 | 3 | 日誌完整、prompt 清楚、能說明驗證 |
| 人工修訂與理解 | 2 | 能指出 AI 的錯並正確修正 |
| 反思深度 | 1 | 對 AI 協作的觀察具體 |