2023-12-06 17:24

車底掃描系統中的車底圖像拼接是一種利用局部車底圖像組成全景車底空間的技術，它將多幅圖像拼接成一幅完整的車底圖像，該技術涉及到計算機視覺、計算機圖形學、數字圖像處理以及一些數學工具等技術。其基本步驟主要包括以下幾個方面：攝相機標定、圖像變形校正、圖像投影變換、圖像匹配、全景圖像拼接（融合），***后進行亮度、色度均衡處理。

1、攝相機標定

     受限于車底安檢設備安裝設計，以及車底圖像采集攝相機之間的差異，會造成視頻圖像之間有縮放（鏡頭焦距不一致造成）、傾斜（垂直旋轉）、方位角差異（水平旋轉），因此物理的差異需要預先校準，得到一致性好的圖像，便于后續圖像拼接。

2、圖像坐標變換

在車底圖像拼接實際應用中，車底圖像采集后，為了更加有效的獲取其中的信息，常常對圖像進行一定的預加工。一方面圖像在采集中可能發生幾何失真，為恢復場景和圖像的空間位置關系，需要進行坐標變換；另一方面，對車底圖像幅度也需要一定的調整，以改善視覺質量；另外車底圖像采集過程中還可能收到噪聲的干擾，需要消除他們的影響。對圖像的坐標變換實際上就是對像素的坐標變換，變換的結果改變了像素在圖像中的位置，對車底圖像幾何失真校正就是坐標變換的一種具體應用。

理論上只要滿足靜止三維圖像或者平面場景的兩個條件中的任何一個，兩幅圖像的對應關系就可以用投影變換矩陣表示，換句話說只要滿足這其中任何一個條件，一個相機拍攝的圖像可以通過坐標變換表示為另一個虛擬相機拍攝的圖像。

3、圖像畸變校正

     由于制造、安裝、工藝等原因，車底掃描專用相機鏡頭存在著各種畸變。為了提高車底采集攝像機拼接的精度，在進行車底圖像拼接的時候必須考慮成像鏡頭的畸變。一般畸變分為內部畸變和外部畸變，內部畸變是由于攝影本身的構造為起因的畸變，外部畸變為投影方式的幾何因素起因的畸變。鏡頭畸變屬于內部畸變，由鏡頭產生的畸變一般可分為徑向畸變和切向畸變兩類。徑向畸變就是集合光學中的畸變像差，主要是由于鏡頭的徑向曲率不同而造成的，有桶形畸變和枕型畸變兩種。切向畸變通常被人為是由于鏡頭透鏡組的光學中心不共線引起的，包括有各種生成誤差和裝配誤差等。一般人為，光學系統成像過程當中，徑向畸變是導致圖像畸變的主要因素。徑向畸變導致圖像內直線成彎曲的像，且越靠近邊緣這種效果越明顯。根據徑向畸變產生的機理，對視頻圖像進行校正。

4、圖像投影變換

     由于每幅圖像是相機拍攝的車輛底盤的不同角度，所以他們并不在同一投影平面上，如果對重疊的圖像直接進行無縫拼接，會破壞實際圖像的視覺一致性。所以需要先對圖像進行投影變換，再進行拼接。一般有平面投影、柱面投影、立方體投影和球面投影等。

     平面投影就是以序列圖像中的一幅圖像的坐標系為基準，將其圖像都投影變換到這個基準坐標系中，使相鄰圖像的重疊區對齊，稱由此形成的拼接為平面投影拼接；柱面投影是指采集到的圖像數據重投影到一個以相機焦距為半徑的柱面，在柱面上進行全景圖的投影拼接；球面投影是模擬人眼觀察的特性，將圖像信息通過透視變換投影到眼球部分，構造成一個觀察的球面；立方體投影是為了解決球面影射中存在的數據不宜存儲的缺點，而發展出來的一種投影拼接方式，它適合于計算機生成圖像，但對實景拍攝的圖像則比較困難。

5、匹配點選取與標定

由于特征點的方法較容易處理圖像之間旋轉、仿射、透視等變換關系，因而經常被使用，特征點包括圖像的角點以及相對于其領域表現出某種奇異性的興趣點。Harris等提出了一種角點檢測算法，該算法是公認的比較好的角點檢測算法，具有剛性變換不變性，并在一定程度上具有仿射變換不變性，但該算法不具有縮放變換不變性。針對這樣的缺點，Lowe提出了具有縮放不變性的SIFT特征點。

6、圖像拼接融合

     圖像拼接的關鍵兩步是：配準(registration)和融合(blending)。配準的目的是根據幾何運動模型，將圖像注冊到同一個坐標系中；融合則是將配準后的圖像合成為一張大的拼接圖像。

     在多幅圖像配準的過程中，采用的幾何運動模型主要有：平移模型、相似性模型、仿射模型和透視模型。

     圖像的平移模型是指圖像僅在兩維空間發生了 方向和 方向的位移，如果攝像機僅僅發生了平移運動，則可以采用平移模型。圖像的相似性模型是指攝像機本身除了平移運動外還可能發生旋轉運動，同時，在存在場景的縮放時，還可以利用縮放因子 多縮放運動進行描述，因此，當圖像可能發生平移、旋轉、縮放運動時，可以采用相似性模型。圖像的仿射模型是一個6參數的變換模型，即具有平行線變換成平行線，有限點映射到有限點的一般特性，具體表現可以是各個方向尺度變換系數一致的均勻尺度變換或變換系數不一致的非均與尺度變換及剪切變換等，可以描述平移運動、旋轉運動以及小范圍的縮放和變形。圖像的透視模型是具有8個參數的變換模型，可以表述各種表換，是一種***變換模型。

     圖像融合技術一般可分為非多分辨率技術和多分辨率技術兩類。在非多分辨率技術中主要有平均值法、帽子函數法、加權平均法和中值濾波法等。多分辨率技術主要有高斯金字塔、拉普拉斯金字塔、對比度金字塔，梯度金字塔和小波等。

7、亮度與顏色的均衡處理

      因為相機和光照強度的差異，會造成一幅圖像內部，以及圖像之間亮度的不均勻，拼接后的圖像會出現明暗交替，這樣給觀察造成極大的不便。

     亮度與顏色均衡處理，通常的處理方式是通過相機的光照模型，校正一幅圖像內部的光照不均勻性，然后通過相鄰兩幅圖像重疊區域之間的關系，建立相鄰兩幅圖像之間直方圖映射表，通過映射表對兩幅圖像做整體的映射變換，***終達到整體的亮度和顏色的一致性。

山東華時數字技術有限公司自主研發并生產全系列各種型號車底安全檢查系統，技術實力雄厚，車底成像效果好、設備質量穩定可靠。歡迎各位合作伙伴聯系合作事宜，共同為中國安檢事業做出貢獻！

原創文章，轉載或摘錄請注明：

摘自山東華時數字技術有限公司官網（http://www.tsqfhmi.cn）。

謝謝合作！