課程首頁 / Part I 影像處理基礎 / W4 影像幾何 (空間處理)

Week 4 · Part I 影像處理基礎

W4 影像幾何與座標系統

從 W3 的「pixel 應該是什麼值」轉向「pixel 應該在哪裡」。座標系統、齊次座標、2D 變換(旋轉/縮放/仿射/投影)、插值、針孔相機模型、相機校準。

本週要做的事

順序內容預估時間
1從 W3 像素值處理轉到 W4 像素位置處理(概念轉折)10 min
201 座標系統:影像座標 vs 世界座標 + 齊次座標30 min
302 2D 幾何變換:Euclidean → Similarity → Affine → Projective 層級40 min
403 影像插值:Nearest / Bilinear / Bicubic30 min
504 針孔相機模型:內參矩陣 K + 畸變係數 D30 min
605 相機校準:棋盤格法找參數 + 校正畸變20 min
7動手做(Lab1-3)20 min

教材檔案

5 大章節

01 | 座標系統

  • 影像座標 vs 世界座標
  • 齊次座標:為什麼平移需要齊次? 把 2D 變換變成 3×3 矩陣的乘法

02 | 2D 幾何變換

變換層級由低到高:

  • Euclidean (旋轉 + 平移):保長度與角度
  • Similarity (+ 縮放):保角度,長度比例變
  • Affine (+ 剪切):保平行線
  • Projective / Homography:只保直線(不保平行)

03 | 影像插值 (Interpolation)

變換後 pixel 落在「半整數位置」怎麼辦? 三種插值法:

  • Nearest Neighbor:取最近的 pixel,快但鋸齒
  • Bilinear:4 個鄰居加權平均,中等
  • Bicubic:16 個鄰居 + 3 次多項式,慢但平滑

04 | 針孔相機模型

  • 內參矩陣 K (3×3):焦距 f, 主點 cx/cy
  • 畸變係數 D:徑向 (k1, k2, k3) + 切向 (p1, p2)
  • 從 3D 世界座標投影到 2D 影像座標的數學

05 | 相機校準概念

  • 用棋盤格從多角度拍 10-15 張
  • cv2.findChessboardCorners 抓角點
  • cv2.calibrateCamera 求 K 與 D
  • cv2.undistort 校正畸變
  • 校準時關掉自動對焦,否則焦距變化會破壞校準

W4 作業 | 三個 Lab

Lab 1 | 插值法演算法比較

目標:觀察不同數學插值演算法對影像放大後的品質影響。

  1. 選取一張小像素圖(例如圖標或文字截圖,越小越明顯)
  2. 分別用 Nearest Neighbor / Bilinear / Bicubic 三種方法放大 4 倍
  3. 三張結果並列,觀察邊緣鋸齒與模糊感

繳交:結果圖 + 用 50 字內描述觀察到的差異。

Lab 2 | 文件透視校正

目標:利用單應性矩陣 (Homography) 將傾斜拍攝的文件轉為正面俯視圖。

  1. 拍攝:用手機拍一張放在桌面的學生證(需有明顯傾斜角度)
  2. 標記:手動找出文件四個角落的座標 src_pts
  3. 計算:定義輸出圖長寬,設定四個正面座標 dst_pts
  4. 轉換:用 findHomography 計算矩陣,透過 warpPerspective 產出矯正影像

繳交:1. 原始傾斜圖(含標記點) 2. 矯正後的正視圖。

Lab 3 | 相機校準與影像校正

目標:掌握相機內參矩陣 K 與畸變係數 D 的物理意義。透過棋盤格校準法,將受鏡頭畸變影響的原始影像校正為符合針孔相機模型的影像。

  1. 資料採集:自行列印或開啟棋盤格圖檔,從不同角度拍至少 10-15 張
  2. 參數計算:識別棋盤格角點,求出 K 與 D
  3. 即時校正:將參數套用於即時影像串流,輸出 undistorted 畫面
  4. 參數擾動實驗:手動修改焦距 fx、主點、畸變係數,觀察畫面變化

繳交:

  • 參數文件:K (3×3) 與 D 向量的數值
  • 錄製影片:展示原始 vs 校正影像對比,含「手動調整參數」的過程
  • 實驗心得:描述影像串流產生的具體物理變異現象
提示:校準時請確保棋盤格涵蓋畫面邊緣,以獲得更準確的畸變參數。若相機較高級會自動對焦,請手動關閉(自動對焦會影響相機的校準參數)。

學生檢核表

  • 我理解齊次座標為什麼能把平移寫成矩陣乘法
  • 我能列出 Euclidean / Similarity / Affine / Projective 各保留什麼性質
  • 我能說明三種插值的速度/品質取捨
  • 我知道內參矩陣 K 含哪些參數
  • Lab 1-3 都完成

下週預告 (W5)

影像物理三部曲最後一週 — 色彩處理:

  • 光、人眼、相機(色彩恆常性、The Dress 爭議)
  • 色彩表示(RGB / HSV / Lab / YCrCb)
  • 像素色彩運算
  • 挑戰與工具(白平衡、Tone Mapping)

W6 開始就進入 Part II,工具棧切換到 Android Studio + Chaquopy。