W3 課堂活動|AI 協作做出抓取/投擲互動

任務背景

用 GitHub Copilot 從零做出「射線抓取並投擲方塊」的 Quest MR 互動,全程實踐「AI 產出 → Editor 驗證 → 真人修訂」。

初始材料與可用工具

  • Unity 專案(Meta XR SDK + XR Interaction Toolkit 已匯入)。
  • GitHub Copilot(Chat / CLI / Agent)。
  • Quest 3 一台(可兩人一機輪流)。
警告

AI 權限範圍:Copilot 可產生/修改本專案程式並提出建置步驟;實際掛載元件、設定 Inspector、進頭盔驗證由你完成。未驗證的程式不得作為 demo 版本。

任務分段

步驟 0(5 分)環境確認

開專案、連 Quest 3、確認能進 Passthrough。

步驟 1(15 分)用 Copilot 建立/設定

範例 prompt:

在 Unity(Meta XR SDK + XR Interaction Toolkit)中,幫我建立一個可用控制器射線抓取並投擲的方塊。請給我需要的元件設定步驟與一個 C# 腳本,並標註哪些要在 Inspector 手動綁定。

預期中間成果:一份步驟清單 + 一個腳本草稿。

步驟 2(20 分)Editor 驗證與真人修訂

  • 建立 XR Origin、Ray Interactor;方塊加 Rigidbody 與 XR Grab Interactable。
  • 進頭盔測試;把 AI 沒設好的(Layer、Interaction Layer Mask、投擲力道)手動修好。

步驟 3(20 分)用 Copilot 除錯

見 除錯挑戰。

步驟 4(15 分)小挑戰

用 Copilot 加功能:抓取時方塊變色、放開 2 秒後消失。觀察 AI 產出品質與需人工介入之處。

步驟 5(15 分)補齊 AI 開發日誌

依下方樣板記錄至少 3 段協作,存到 /AI-Log/W03.md。

需保存的證據

  • APK 或 Editor 錄影(30–60 秒)。
  • GitHub 連結。
  • /AI-Log/W03.md。

AI 開發日誌樣板

### 協作 #n — <一句話目標>
- 情境/目標:
- 我的 prompt:
- AI 產出(摘要或連結):
- 我的驗證(Editor/頭盔結果、編譯錯誤):
- 我的修訂:
- 結果:成功 / 部分 / 失敗,學到什麼:

評分重點(10 分)

面向 分數 說明
功能完成度 4 互動可在 Quest 3 正常運作
AI 協作品質 3 日誌完整、prompt 清楚、能說明驗證
人工修訂與理解 2 能指出 AI 的錯並正確修正
反思深度 1 對 AI 協作的觀察具體
回到顶部