0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

三維點云配準過程及點集到點集ICP配準的算法研究

3D視覺工坊 ? 來源:知乎問答 ? 作者:劉緣 ? 2022-11-28 16:12 ? 次閱讀

1、點云配準過程

就是求一個兩個點云之間的旋轉平移矩陣(rigid transform or euclidean transform 剛性變換或歐式變換),將源點云(source cloud)變換到目標點云(target cloud)相同的坐標系下。

可以表示為以下的方程:

743e50ba-6da4-11ed-8abf-dac502259ad0.svg

其中744ef492-6da4-11ed-8abf-dac502259ad0.svg745cd6d4-6da4-11ed-8abf-dac502259ad0.svg就是target cloud與source cloud中的一對對應點。

而我們要求的就是其中的R與T旋轉平移矩陣。

這里,我們并不知道兩個點集中點的對應關系。這也就是配準的核心問題。

2、配準分為粗配準與精配準兩步

粗配準就是再兩個點云還差得十萬八千里、完全不清楚兩個點云的相對位置關系的情況下,找到一個這兩個點云近似的旋轉平移矩陣(不一定很精確,但是已經大概是對的了)。

精配準就是在已知一個旋轉平移的初值的情況下(這個初值大概已經是正確的了),進一步計算得到更加精確的旋轉平移矩陣。

這里從精配準開始講起。

精配準的模式基本上已經固定為使用ICP算法及其各種變種。ICP算法由Besl and McKay 1992, Method for registration of 3-D shapes文章提出。

文中提到的算法不僅僅考慮了點集與點集之間的配準,還有點集到模型、模型到模型的配準等。

簡要介紹一下點集到點集ICP配準的算法:

1) ICP算法核心是最小化一個目標函數(shù):

746b5b50-6da4-11ed-8abf-dac502259ad0.svg

(這里的表述與原文略微有些不同,原文是用四元數(shù)加上一個偏移向量來表達旋轉平移變換。)747bd3c2-6da4-11ed-8abf-dac502259ad0.svg就是一對對應點,總共有74979224-6da4-11ed-8abf-dac502259ad0.svg對對應點。這個目標函數(shù)實際上就是所有對應點之間的歐式距離的平方和。

2) 尋找對應點

可是,我們現(xiàn)在并不知道有哪些對應點。因此,我們在有初值的情況下,假設用初始的旋轉平移矩陣對source cloud進行變換,得到的一個變換后的點云。

然后將這個變換后的點云與target cloud進行比較,只要兩個點云中存在距離小于一定閾值(這就是題主所說的ICP中的一個參數(shù)),我們就認為這兩個點就是對應點。這也是“最鄰近點”這個說法的來源。

3) R、T優(yōu)化

有了對應點之后,我們就可以用對應點對旋轉R與平移T進行估計。這里R和T中只有6個自由度,而我們的對應點數(shù)量是龐大的(存在多余觀測值)。因此,我們可以采用最小二乘等方法求解最優(yōu)的旋轉平移矩陣。一個數(shù)值優(yōu)化問題,這里就不詳細講了。

4) 迭代

我們優(yōu)化得到了一個新的R與T,導致了一些點轉換后的位置發(fā)生變化,一些最鄰近點對也相應的發(fā)生了變化。

因此,我們又回到了步驟2)中的尋找最鄰近點方法。2)3)步驟不停迭代進行,直到滿足一些迭代終止條件,如R、T的變化量小于一定值,或者上述目標函數(shù)的變化小于一定值,或者鄰近點對不再變化等。(這里也是題主所說的ICP算法中的一個參數(shù))

算法大致流程就是上面這樣。這里的優(yōu)化過程是一個貪心的策略。首先固定R跟T利用最鄰近算法找到最優(yōu)的點對,然后固定最優(yōu)的點對來優(yōu)化R和T,依次反復迭代進行。

這兩個步驟都使得目標函數(shù)值下降,所以ICP算法總是收斂的,這也就是原文中收斂性的證明過程。這種優(yōu)化思想與K均值聚類的優(yōu)化思想非常相似,固定類中心優(yōu)化每個點的類別,固定每個點的類別優(yōu)化類中心。

關于參數(shù)的選擇:

ICP算法的參數(shù)主要有兩個。一個是ICP的鄰近距離,另外一個是迭代的終止條件。這些參數(shù)的選擇,與實際的工程應用相關。比如說你的儀器精度是5mm,那么小于5mm是可以認為是對應點,而最終的迭代終止條件也就是匹配點之間平均距離小于5mm。

而且這些參數(shù)可以由算法逐步迭代減小,最初使用較大的對應點距離參數(shù),然后逐步減小到一個較小的值。(問過師兄才知道實際過程這樣操作會比較合適。)需要手動調整一些參數(shù)。(這跟機器學習調參比起來,簡直不是事~)

3、粗配準

前面介紹到了,ICP算法的基本原理。它需要一個旋轉平移矩陣的初值。這個初值如果不太正確,那么由于它的greedy優(yōu)化的策略,會使其目標函數(shù)下降到某一個局部最優(yōu)點(當然也是一個錯誤的旋轉平移矩陣)。因此,我們需要找到一個比較準確的初值,這也就是粗配準需要做的。

粗配準目前來說還是一個難點。針對于不同的數(shù)據(jù),有許多不同的方法被提出。

我們先介紹配準的評價標準,再在這個標準下提出一些搜索策略。

評價標準:比較通用的一個是LCP(Largetst Common Pointset)。給定兩個點集P,Q,找到一個變換T(P),使得變換后的P與Q的重疊度最大。在變換后的P內任意一點,如果在容差范圍內有另外一個Q的點,則認為該點是重合點。重合點占所有點數(shù)量的比例就是重疊度。

解決上述LCP問題,最簡單粗暴的方法就是遍歷。假設點集P,Q的大小分別為m,n。而找到一個剛體變換需要3對對應點。

那么brute force 搜索的需要74abf53e-6da4-11ed-8abf-dac502259ad0.svg的復雜度。對于動輒幾百萬個點的點云,這種時間復雜度是不可接受的。

因此,許多搜索策略被提出。比較容易想到的是RANSAC之類的搜索方法。而對于不同的場景特點,可以利用需配準點云的特定信息加快搜索。(例如知道點云是由特定形狀的面構成的)這里先介紹一個適用于各種點云,不需要先驗信息的搜索策略,稱為4PC(4 Point Congruent)。

搜索策略:4PC搜索策略是在P,Q中找到四個共面的對應點。

74bb7d7e-6da4-11ed-8abf-dac502259ad0.jpg

如上圖所示(來自4PC原文),這四個共面的點相交于e。這里有兩個比例在剛體變化下是不變的。(實際上在仿射變換下也是不變的) 74da7a08-6da4-11ed-8abf-dac502259ad0.svg74f02678-6da4-11ed-8abf-dac502259ad0.svg

而4PC將對于三個點的搜索轉換為對e,e‘的搜索,從而將復雜度降低到了750123a6-6da4-11ed-8abf-dac502259ad0.svg。

這四個點的距離越遠,計算得到的轉換越穩(wěn)健。但是這里的四個點的搜索依賴于兩個點云的重疊度。

具體的算法可以參考4-Points Congruent Sets for Robust Pairwise Surface Registration的原文。

4PC算法通用性較好,但是對于重疊度較小、或是噪聲較大的數(shù)據(jù)也會出現(xiàn)配準錯誤或是運行時間過長的問題。針對于不同的場景很多其他的搜索策略也被提出。

這里安利一下我?guī)熜值恼撐陌蓗Automatic registration of large-scale urban scene point clouds based on semantic feature points

我們課題組主要是研究室外地面站LiDAR獲取的點云配準問題。這種情形下,由于掃描儀內有自動安平裝置,Z軸都是豎直方向(重力方向),剛體變換只存在三維平移與平面(XoY面上的)旋轉。我們就在場景中搜索豎直的特征線并且得到它們與地面的交點。

7526a9dc-6da4-11ed-8abf-dac502259ad0.jpg

再將這些交點構建出三角形,以三角形的全等關系來得到匹配。

754344ca-6da4-11ed-8abf-dac502259ad0.jpg

找出其中一致性最好的三角形集合,作為匹配的集合,進行粗配準。

這種方法適用于豎直線較多的場景,比如城區(qū)的建筑物的邊線、林區(qū)樹木的樹干等。設計的方法還是很巧妙的。當然如果場景內這種特征較少,就比較難以配準。

審核編輯:郭婷

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 函數(shù)
    +關注

    關注

    3

    文章

    4344

    瀏覽量

    62812
  • ICP
    ICP
    +關注

    關注

    0

    文章

    70

    瀏覽量

    12802

原文標題:一文詳解三維點云配準過程

文章出處:【微信號:3D視覺工坊,微信公眾號:3D視覺工坊】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    三維測量軟件的使用技巧

    需要哪些功能,如處理、三維建模、數(shù)據(jù)分析等。 軟件兼容性 :確保軟件能夠與現(xiàn)有的硬件設備兼容,如三維掃描儀、CAD軟件等。 用戶界面 :選擇界面直觀、操作簡便的軟件,以減少學習成本
    的頭像 發(fā)表于 12-30 15:05 ?186次閱讀

    基于深度學習的三維分類方法

    近年來,云表示已成為計算機視覺領域的研究熱點之一,并廣泛應用于自動駕駛、虛擬現(xiàn)實、機器人等許多領域。雖然深度學習技術在處理常規(guī)結構化的二網格圖像數(shù)據(jù)方面取得了巨大成功,但在處理不規(guī)則、非結構化的
    的頭像 發(fā)表于 10-29 09:43 ?710次閱讀
    基于深度學習的<b class='flag-5'>三維</b><b class='flag-5'>點</b><b class='flag-5'>云</b>分類方法

    什么是三維分割

    是世界的一種非結構化三維數(shù)據(jù)表示,通常由激光雷達傳感器、立體相機或深度傳感器采集。它由一系列單個組成,每個由 x、y 和 z 坐標定
    的頭像 發(fā)表于 10-29 09:21 ?245次閱讀

    網行波故障定位裝置的研究過程

    網行波故障定位裝置的研究過程? 在電力行業(yè),網故障的快速準確定位是保障電網穩(wěn)定運行和高效維護的關鍵。隨著技術的不斷進步,行波故障定位技術因其高精度和快速性而備受關注。本文深圳鼎信智
    的頭像 發(fā)表于 09-03 15:39 ?296次閱讀

    友思特方案 基于三維實現(xiàn)PCB裝配螺絲視覺檢測

    三維是完成精密化 PCB 檢測的最新視覺技術。友思特 Saccde Vision 視覺掃描系統(tǒng),采用先進的三維成像技術和算法輸出直觀點云
    的頭像 發(fā)表于 08-28 16:35 ?321次閱讀
    友思特方案  基于<b class='flag-5'>三維</b><b class='flag-5'>點</b><b class='flag-5'>云</b>實現(xiàn)PCB裝配螺絲視覺檢測

    起點,經過,終點,三點xyz,畫三維圓弧。

    大家好!已知,起點,經過,終點,三點xyz,畫三維圓弧。在三維圖片框里面畫。該如何實現(xiàn)?甚至三維
    發(fā)表于 07-17 21:33

    泰來三維 三維掃描古建筑-蘇巴什佛寺遺址數(shù)字化保護

    首先對蘇巴什佛寺古遺跡外部三維數(shù)據(jù)采集,獲取精準三維數(shù)據(jù)。數(shù)據(jù)采集之后進行內業(yè)處理,數(shù)據(jù)成果包括高精模型和全彩。
    的頭像 發(fā)表于 07-03 13:43 ?351次閱讀
    泰來<b class='flag-5'>三維</b> <b class='flag-5'>三維</b>掃描古建筑-蘇巴什佛寺遺址數(shù)字化保護

    友思特案例 | 自研創(chuàng)新!三維工件尺寸測量及處理解決方案

    3D相機等新型傳感器的發(fā)展克服了傳統(tǒng)工件尺寸測量的各種局限,可獲取豐富的三維數(shù)據(jù)。友思特提供了一種工件3D尺寸測量和處理方案,結合自
    的頭像 發(fā)表于 06-13 14:13 ?527次閱讀
    友思特案例 | 自研創(chuàng)新!<b class='flag-5'>三維</b>工件尺寸測量及<b class='flag-5'>點</b><b class='flag-5'>云</b>處理解決方案

    泰來三維|數(shù)字化工廠_煤礦三維掃描數(shù)字化解決方案

    采用大空間三維激光掃描儀對廠區(qū)內部進行架站式精準三維掃描。廠區(qū)外部采用無人機傾斜攝影的方式獲取彩色模型數(shù)據(jù),采集控制坐標與三維
    的頭像 發(fā)表于 05-29 11:55 ?481次閱讀
    泰來<b class='flag-5'>三維</b>|數(shù)字化工廠_煤礦<b class='flag-5'>三維</b>掃描數(shù)字化解決方案

    泰來三維|三維掃描服務_三維激光掃描儀測量山體滑坡建模

    建模是將測量得到的數(shù)據(jù)進行擬合、優(yōu)化與處理,生成真實的三維模型的過程。它能夠全面、準確地
    的頭像 發(fā)表于 05-15 16:32 ?305次閱讀
    泰來<b class='flag-5'>三維</b>|<b class='flag-5'>三維</b>掃描服務_<b class='flag-5'>三維</b>激光掃描儀測量山體滑坡<b class='flag-5'>點</b><b class='flag-5'>云</b>建模

    泰來三維|三維掃描服務_三維掃描助力園區(qū)改造公園

    三維激光掃描儀利用激光反射測距原理,通過接受和返回的信號,獲取三維空間坐標。這種測量方式可以無接觸快速獲取大型建筑三維空間數(shù)據(jù),實現(xiàn)實體
    的頭像 發(fā)表于 05-07 11:44 ?293次閱讀
    泰來<b class='flag-5'>三維</b>|<b class='flag-5'>三維</b>掃描服務_<b class='flag-5'>三維</b>掃描助力園區(qū)改造公園

    泰來三維|三維掃描數(shù)據(jù)怎么處理如何建模

    faro premium 350三維激光掃描儀最終采集的數(shù)據(jù)以云和圖像的形式儲存在掃描儀設備里,運用專門進行一定處理后,能獲取建筑物的相對位置信息、尺寸、紋理和形狀,進而建立真實的物體數(shù)據(jù)模型。
    的頭像 發(fā)表于 04-23 13:53 ?383次閱讀

    基于深度學習的方法在處理3D進行缺陷分類應用

    背景部分介紹了3D應用領域中公開可訪問的數(shù)據(jù)的重要性,這些數(shù)據(jù)對于分析和比較各種模型至關重要。研究人員專門設計了各種數(shù)據(jù)
    的頭像 發(fā)表于 02-22 16:16 ?1249次閱讀
    基于深度學習的方法在處理3D<b class='flag-5'>點</b><b class='flag-5'>云</b>進行缺陷分類應用

    移動協(xié)作機器人的RGB-D感知的端到端處理方案

    本文提出了一種用于具有雙目視覺的自主機器人的三維語義場景感知的端到端流程。該流程包括實例分割、特征匹配和。首先,利用RGB圖像進行單
    發(fā)表于 02-21 15:55 ?727次閱讀
    移動協(xié)作機器人的RGB-D感知的端到端處理方案

    泰來三維|見過三維掃描烏賊嗎?三維掃描助力仿生設計學研究

    利用雙光源手持3D掃描儀EinScan H2三維掃描儀對烏賊整體 重點軀干進行掃描,獲取烏賊三維掃描模型。掃描過程中通過軟件可以實時看到
    的頭像 發(fā)表于 01-26 11:25 ?418次閱讀