0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

詳解3D結(jié)構(gòu)光如何標(biāo)定

QQ475400555 ? 來源:馬少爺 ? 作者:馬少爺 ? 2022-11-04 10:45 ? 次閱讀

結(jié)構(gòu)光視覺的優(yōu)點(diǎn):

非接觸、信息量大、測精度高、抗干擾能力強(qiáng)。

結(jié)構(gòu)光視覺傳感器參數(shù)的標(biāo)定包括:攝像機(jī)參數(shù)標(biāo)定、結(jié)構(gòu)光平面參數(shù)標(biāo)定。

結(jié)構(gòu)光視覺測量原理圖

ce288ef6-5bd4-11ed-a3b6-dac502259ad0.png

我們不考慮鏡頭的畸變,將相機(jī)的成像模型簡化為小孔成像模型,則特征點(diǎn)的圖像坐標(biāo)Pf 與其在攝像機(jī)坐標(biāo)系下的三維坐標(biāo)P 之間的關(guān)系可表示為:

ce537f6c-5bd4-11ed-a3b6-dac502259ad0.png

其中:(u,v)是特征點(diǎn)的圖像坐標(biāo),(u0,v0) 光軸中心的圖像坐標(biāo),(kx ky )是X 軸,Y 軸方向的放大系數(shù),(xc yc zc) 是特征點(diǎn)在攝像機(jī)坐標(biāo)系下坐標(biāo), Mc 是攝像機(jī)內(nèi)參數(shù)矩陣。

結(jié)構(gòu)光視覺投影成像模型:

ce828758-5bd4-11ed-a3b6-dac502259ad0.png

設(shè)結(jié)構(gòu)光在攝像頭坐標(biāo)系的平面方程為:

cea60ee4-5bd4-11ed-a3b6-dac502259ad0.png

依據(jù)激光條紋特征點(diǎn)圖像坐標(biāo)就可以得到其在攝像機(jī)坐標(biāo)系下的三維坐標(biāo)

cec6ca94-5bd4-11ed-a3b6-dac502259ad0.png

相機(jī)參數(shù)標(biāo)定:

采用張正友提出的基于2D平面棋盤格的攝像機(jī)標(biāo)定方法,利用Matlab攝像頭標(biāo)定工具完成相機(jī)參數(shù)的標(biāo)定。

攝像機(jī)標(biāo)定工具箱主窗口:

cee8c7b6-5bd4-11ed-a3b6-dac502259ad0.png

用于攝像機(jī)標(biāo)定的棋盤格圖像:

cf169d08-5bd4-11ed-a3b6-dac502259ad0.png

得到攝像機(jī)內(nèi)參數(shù)矩陣:

cf4cf876-5bd4-11ed-a3b6-dac502259ad0.png

結(jié)構(gòu)光平面參數(shù)標(biāo)定:

首先,激光器投射結(jié)構(gòu)光平面到平面棋盤格上形成激光條紋,并通過CCD 攝像機(jī)采集激光條紋圖像。然后,對圖像進(jìn)行處理,提取激光條紋上的兩個特征點(diǎn)。控制機(jī)器人按照一定的約束進(jìn)行運(yùn)動,從一個標(biāo)定位置移動到另一個位置,從而產(chǎn)生兩條不共線的激光條紋,利用上述相同的圖像處理方法再次提取激光條紋上的兩個特征點(diǎn)。最后,利用結(jié)構(gòu)光平面上的四個點(diǎn)來確定結(jié)構(gòu)光平面方程參數(shù)。該方法可以在攝像機(jī)參數(shù)標(biāo)定過程中,同時完成結(jié)構(gòu)光平面方程參數(shù)的標(biāo)定。同時,該方法不需要加工高精度的三維標(biāo)定靶標(biāo),也不需要手工測量,標(biāo)定過程簡單實(shí)用。

試驗(yàn)裝備:

一個六自由度機(jī)器人,一個CCD 工業(yè)攝像機(jī),一個激光器和一個平面棋盤格靶標(biāo)。

結(jié)構(gòu)光平面參數(shù)標(biāo)定系統(tǒng)示意圖:

cf64fd4a-5bd4-11ed-a3b6-dac502259ad0.png

攝像機(jī)坐標(biāo)系位于攝像機(jī)中心,而世界坐標(biāo)系位于平面棋盤格靶標(biāo)上。一個特征點(diǎn)在攝像機(jī)坐標(biāo)系下坐標(biāo)與其在世界坐標(biāo)系下坐標(biāo)之間的對應(yīng)關(guān)系可以用下式來表達(dá):

cfb088e6-5bd4-11ed-a3b6-dac502259ad0.jpg

標(biāo)定過程如下:

(1)圖像獲取:

圖像的獲取是在攝機(jī)參數(shù)標(biāo)定過程中同時完成。 首先將棋盤格放在工作臺上, 在這個初始位置,利用攝像機(jī)采集一幅圖,如圖 (a) 所示 。保持?jǐn)z像機(jī)和棋盤格的位置姿態(tài)不變,打開激光器讓條紋投射到棋盤格上, 再采集一幅圖像如圖 (b) 所示:

cfd3acea-5bd4-11ed-a3b6-dac502259ad0.png

然后改變棋盤格和攝像機(jī)的相對位姿,使前后形成的兩條激光條紋在空間上不共線,即可確定一個唯一的結(jié)構(gòu)光平面。

cff989ba-5bd4-11ed-a3b6-dac502259ad0.png

(2)圖像處理:

圖像處理的目的是提取激光條紋上特征點(diǎn)的圖像坐標(biāo)。

分為圖像感興趣區(qū)域(ROI)確定、自適應(yīng)閾值分割、骨架細(xì)化和特征點(diǎn)計(jì)算。

1)圖像ROI確定

通過觀察圖像看出,激光條紋大致平行于圖像的u 軸,而且激光條紋處像素的灰度值高于圖像中其它像素的灰度值,所以圖像的ROI 可以通過對每行像素灰度值進(jìn)行求和得到:

d01d910c-5bd4-11ed-a3b6-dac502259ad0.png

2)閾值分割

閾值分割分為全局閾值分割、局部閾值分割和自適應(yīng)閾值分割。最常用的自適應(yīng)閾值分割是Otsu方法,該方法使用統(tǒng)計(jì)學(xué)的方法確定最優(yōu)的閾值,適用于一般的圖像,但是不太適合于棋盤格上激光條紋的分割。

根據(jù)圖像中激光條紋的灰度值高于圖像中其它像素的灰度值以及激光條紋所在區(qū)域比較集中的特點(diǎn),利用圖像ROI 內(nèi)行像素灰度值之和計(jì)算激光條紋的自適應(yīng)閾值:

d0484f50-5bd4-11ed-a3b6-dac502259ad0.jpg

3) 骨架細(xì)化:

自適應(yīng)閾值分割以后的激光條紋具有一定的寬度,直接處理計(jì)算量巨大而且精度較低,需要對圖像進(jìn)行骨架細(xì)化得到單像素的線。

采用下面文獻(xiàn)中所提出的快速骨架細(xì)化方法:

d06edddc-5bd4-11ed-a3b6-dac502259ad0.png

該方法通過迭代提取圖像骨架,每個迭代過程分為兩步,第一步去除東南邊緣和西北角的點(diǎn),第二步去除西北邊緣和東南角的點(diǎn)。

d08729f0-5bd4-11ed-a3b6-dac502259ad0.png

Pi分布情況如下:

d0a79848-5bd4-11ed-a3b6-dac502259ad0.png

第二個迭代過程將上述條件的c、d條件更改為:

d0c8cdce-5bd4-11ed-a3b6-dac502259ad0.png

4)特征提?。?/p>

選取激光條紋中心線上的兩個點(diǎn)作為激光條紋的特征點(diǎn),為了提高激光條紋中心線的提取精度,利用最小二乘法擬合方法對細(xì)化后的激光條紋直線進(jìn)行處理。

d0e17860-5bd4-11ed-a3b6-dac502259ad0.jpg

激光條紋特征點(diǎn)提取過程如下:

d13e23d0-5bd4-11ed-a3b6-dac502259ad0.jpg

標(biāo)定棋盤格平面內(nèi)任意一點(diǎn)與法向量關(guān)系

d16cfda4-5bd4-11ed-a3b6-dac502259ad0.png

由上圖可知:

d18dda42-5bd4-11ed-a3b6-dac502259ad0.png

由特征點(diǎn)的圖像坐標(biāo)Pf 與其在攝像機(jī)坐標(biāo)系下的三維坐標(biāo)P 之間的關(guān)系知:

d1a76f8e-5bd4-11ed-a3b6-dac502259ad0.png

得到棋盤格上任意一點(diǎn)在攝像機(jī)坐標(biāo)系下的zc 坐標(biāo)

d1ba9ab4-5bd4-11ed-a3b6-dac502259ad0.png

得到激光條紋特征點(diǎn)在攝像機(jī)坐標(biāo)系下的坐標(biāo)值

d1d82070-5bd4-11ed-a3b6-dac502259ad0.png

至此,得到四個激光條紋特征點(diǎn)的圖像坐標(biāo),由上式得四個激光條紋特征點(diǎn)在攝像機(jī)坐標(biāo)系下的坐標(biāo),由于三點(diǎn)確定一個平面方程,使用最小二乘法計(jì)算結(jié)構(gòu)光平面方程如下:

d1f9be1a-5bd4-11ed-a3b6-dac502259ad0.png

至此,完成結(jié)構(gòu)光平面方程的參數(shù)的標(biāo)定。

審核編輯:湯梓紅

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 3D
    3D
    +關(guān)注

    關(guān)注

    9

    文章

    2899

    瀏覽量

    107692
  • 攝像機(jī)
    +關(guān)注

    關(guān)注

    3

    文章

    1610

    瀏覽量

    60161
  • 結(jié)構(gòu)光
    +關(guān)注

    關(guān)注

    0

    文章

    74

    瀏覽量

    13255

原文標(biāo)題:詳解3D結(jié)構(gòu)光如何標(biāo)定

文章出處:【微信號:機(jī)器視覺沙龍,微信公眾號:機(jī)器視覺沙龍】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    3D掃描的結(jié)構(gòu)

    ,它對于計(jì)算的要求通常比較嚴(yán)格,并且對于環(huán)境光照條件很敏感。另外一個方法采用結(jié)構(gòu)照明圖形,它只需一個投影儀(用于生成圖形)以及一個單攝像頭和計(jì)算能力中等的算法。 結(jié)構(gòu)
    發(fā)表于 08-30 14:51

    裸眼3D顯示技術(shù)詳解

    裸眼3D顯示技術(shù)詳解介紹了3D顯示原理、3D顯示分類、柱狀透鏡技術(shù)、視差屏障技術(shù)、指向光源技術(shù)以及3D顯示技術(shù)發(fā)展趨勢。
    發(fā)表于 08-17 13:39 ?0次下載
    裸眼<b class='flag-5'>3D</b>顯示技術(shù)<b class='flag-5'>詳解</b>

    首發(fā)3D結(jié)構(gòu)人臉識別技術(shù),云從科技為身份識別再筑防火墻

    云從科技全新3D結(jié)構(gòu)人臉識別系統(tǒng)基于“飛龍II”深度學(xué)習(xí)結(jié)構(gòu)算法與3D
    的頭像 發(fā)表于 03-19 15:16 ?6393次閱讀

    OPPO實(shí)現(xiàn)了全球首個基于3D結(jié)構(gòu)技術(shù)的5G視頻通話演示

    此外,3D效、3D AR、3D游戲等,也都將是奧比中3D
    的頭像 發(fā)表于 06-20 17:48 ?4678次閱讀

    OPPO Find X的FaceKey 3D結(jié)構(gòu)給力 期待oppo findx蘭博基尼版

    OPPO更是帶來OPPO FaceKey 3D結(jié)構(gòu),通過在人臉建立15000個識別點(diǎn),帶來遠(yuǎn)比指紋更安全的解鎖和支付體驗(yàn)?;?b class='flag-5'>3D結(jié)構(gòu)
    的頭像 發(fā)表于 07-20 12:17 ?3790次閱讀

    vivo宣稱新品采用3D ToF技術(shù),是否比3D結(jié)構(gòu)更勝一籌?

    主流的人臉識別有哪些?你肯定回答2D紅外和3D結(jié)構(gòu),但是近日vivo宣稱下半年將推出3D ToF,運(yùn)用到vivo新品中,并量產(chǎn)商用。是不是
    發(fā)表于 07-11 05:16 ?2024次閱讀

    3d結(jié)構(gòu)的手機(jī)OPPOFindX體驗(yàn) OPPO FaceKey 3D結(jié)構(gòu)光在安卓機(jī)的首次量產(chǎn)

    3d結(jié)構(gòu)的手機(jī)OPPO Find X體驗(yàn)太給力,OPPO Find X采用了高端旗艦產(chǎn)品上才能見到的3D結(jié)構(gòu)
    的頭像 發(fā)表于 07-24 09:05 ?7346次閱讀

    丘鈦科技:3D結(jié)構(gòu)已實(shí)現(xiàn)量產(chǎn),3D TOF模組具備量產(chǎn)能力

    017年,蘋果發(fā)布iPhone X,基于3D結(jié)構(gòu)技術(shù)推出"Face ID"的生物識別技術(shù),支持人臉解鎖和人臉支付等新功能,帶火了一波3D結(jié)構(gòu)
    的頭像 發(fā)表于 08-23 17:42 ?1.4w次閱讀

    從HUAWEI Mate 20 Pro到3D結(jié)構(gòu)最全應(yīng)用

    HUAWEI Mate 20 Pro采用2400萬前置攝像頭,擁有3D結(jié)構(gòu)設(shè)計(jì),3D智能美顏,自拍清晰自然;同時支持3D人臉解鎖,帶來毫秒
    發(fā)表于 03-08 10:57 ?3173次閱讀

    淺析3D結(jié)構(gòu)技術(shù)

    HUAWEI Mate 20 Pro采用2400萬前置攝像頭,擁有3D結(jié)構(gòu)設(shè)計(jì),3D智能美顏,自拍清晰自然;同時支持3D人臉解鎖,帶來毫秒
    的頭像 發(fā)表于 10-23 15:55 ?2.1w次閱讀

    華為P30或?qū)⒅С?b class='flag-5'>3D結(jié)構(gòu)人臉識別

    按照以往的情況來看,要使用3D結(jié)構(gòu)人臉識別,采用水滴屏的手機(jī)是不太可能支持3D結(jié)構(gòu)人臉識別。
    發(fā)表于 01-29 09:20 ?5629次閱讀

    3D結(jié)構(gòu)相機(jī)的工作原理及優(yōu)點(diǎn)

    結(jié)構(gòu)3D相機(jī),一般指采用多幅條紋光柵,即先通過光柵投射模組按照時間序列依次投射在被測物體表面,再通過雙目對物體表面的光柵進(jìn)行拍照,基于事先編碼規(guī)則進(jìn)行解碼和雙目視差匹配,從而獲得高精度的3D
    發(fā)表于 04-22 10:10 ?6519次閱讀

    采用DLP 3D結(jié)構(gòu)軟件開發(fā)套件的3D打印機(jī)

    電子發(fā)燒友網(wǎng)站提供《采用DLP 3D結(jié)構(gòu)軟件開發(fā)套件的3D打印機(jī).zip》資料免費(fèi)下載
    發(fā)表于 09-07 11:24 ?5次下載
    采用DLP <b class='flag-5'>3D</b><b class='flag-5'>結(jié)構(gòu)</b><b class='flag-5'>光</b>軟件開發(fā)套件的<b class='flag-5'>3D</b>打印機(jī)

    3D結(jié)構(gòu)的優(yōu)點(diǎn)及參數(shù)如何進(jìn)行標(biāo)定

    首先,激光器投射結(jié)構(gòu)平面到平面棋盤格上形成激光條紋,并通過CCD 攝像機(jī)采集激光條紋圖像。然后,對圖像進(jìn)行處理,提取激光條紋上的兩個特征點(diǎn)??刂茩C(jī)器人按照一定的約束進(jìn)行運(yùn)動,從一個標(biāo)定位置移動
    的頭像 發(fā)表于 11-09 10:26 ?2203次閱讀

    3D視覺主要技術(shù)路徑 3D結(jié)構(gòu)技術(shù)原理

    3D傳感器作為3D視覺的眼睛,通過多個攝像頭與深度傳感器的組合能夠獲得物體三維位置及尺寸等數(shù)據(jù),實(shí)現(xiàn)三維信息采集。目前3D視覺傳感器主要有雙目相機(jī)、結(jié)構(gòu)
    發(fā)表于 11-22 21:21 ?3868次閱讀