专利名称：复合编码多分辨三维数字成像方法
技术领域：
本发明涉及复合编码多分辨三维数字成像方法，属于三维数字成像技术。
背景技术：
在基于三角法的主动三维传感技术中，以传统的三角测量为基础，由于三维物体表面形状对结构照明光束产生的空间调制，改变了成像光束的角度，即改变了成像光点在探测器阵列上的位置，通过对成像光点位置的确定和系统光路的几何参数，计算出距离。现有的技术包括采用单光束点结构照明的方法和采用片状光束的线结构照明的方法，以及相位测量轮廓术，包括相移轮廓术、Fourier变换轮廓术和空间相位探测轮廓术。相位测量轮廓术也最终归结为三角测量法，只不过在不同的测量技术中采用不同的方式来从观测光场中提取三角计算中所需要的几何参数。
基于空间点阵投影的方法是通过投射二维空间点阵到被测物体上，形成面结构光的照明，一次成像即可获得一个完整的被测物体的三维数字像，从而克服了现有三角法的主动三维传感技术中的单光束点结构照明和片状光束的线结构照明必须逐点或逐行扫描才能获得完整的三维数字像的缺点，提高了采样效率。与相位测量轮廓术比较，点阵编码方法是直接通过对成像点阵的位置确定来计算物体的深度，不存在相位�：臀蟛畲サ奈侍�。但这一传感技术的精度直接收到成像光点位置测量精度的影响，探测器灵敏度和成像系统的几何畸变都会影响其测量精度，因此，其测量精度不如相位测量轮廓术。
相位测量轮廓术采用条纹图编码，物体的深度信息编码在载波条纹中，通过计算折叠相位和相位展开，结合光学系统的结构参数间接获得物体的深度像。与直接几何量测量相比较，相位测量轮廓术具有更高的精度，最高可以达到百分之一个条纹周期；另外相位测量的方法对背景、对比度和噪声的变化不敏感。但对于被测物体存在不连续区域或表面梯度变化很大或存在信息盲区时，相位测量轮廓术的相位展开变成非常困难的问题，例如会产生相位�：臀蟛畲ィ斐扇莶腥辈蝗貌坏酵暾�。可对比的技术文献有下以三篇(1)发明专利ZL 02131096.3.
(2)Richard McBain，″high speed laser triangulation measurements of shape and thickness″，US Patent 6,466,305.
(3)ul R，Yoder JR.，″topography measuring apparatus″，US Patent 4,902,123.
发明内容
本发明的目的是提供一种利用复合编码实现多分辨三维数字成像的方法，该方法提高了测量结果的置信度和高的测量精度。
本发明是通过下述技术方案加以实现的，采用包括数字投影照明发射器、图像传感接收器和图像处理器的成像装置，利用点阵编码和条纹编码实现多分辨三维数字成像的方法，其特征在于包括以下过程1、数字投影照明发射器投射不同疏密程度的二维点阵图形照明物体，偏转图像传感接收器使其光轴与投影点阵照明场的中心位于同一直线。数字投影照明发射器的出瞳、图像传感接收器的入瞳和照明场的中心构成一个三角形，以数字投影照明发射器的出瞳与图像传感接收器的入瞳之间的连线为基线，它和投射在物体的所有点阵的中心构成了若干三角形，形成了三角测量系统；根据仿射变换的原理，分别投影在参考平面和被测物体表面的编码点阵，经过坐标旋转、平移和透视投影变换，可分别得到参考平面和被测物体表面上的编码点阵在图像接收传感器平面上的空间坐标的解析式，并可进一步得到参考平面和被测物体表面上两个点阵相对应点之间在成像平面x方向上的位置差与被测物体在相应点处深度值之间的关系；从而数字投影照明发射器投射二维空间点阵结构光照明，在图像接收传感器得到参考平面的点阵图像和投射在被测物体表面上的点阵图像，椐已知系统光路几何参数，图像处理器可计算点阵图像相应点之间在x方向上的位置差，再根据位置差与被测物体在相应点处深度值之间的关系计算出物体的深度图像。
2、数字投影照明发射器再投射条纹结构光照射被测物体表面，所投射的条纹结构光可以是单一频率条纹，也可以是时序变频条纹序列。对于单一频率条纹结构光，用相位映射的方法，结合点阵投影已经获得的物体较低分辨率的深度像进行相位展开，进一步获取更精细的多分辨三维数字像。对于时序变频条纹序列结构光投影，分别得到编码的条纹强度分布图序列，利用“相移算法”计算出各频率条纹强度分布图的相位图，在每个相位图中消除2π不确定性，从而对景物得到分辨率依次递进的深度像；此时点阵投影的作用是利用它获得的物体深度值确定变频条纹序列的边界条件，有效地节省相位展开过程中所需的二维编码条纹图，增加了相位展开算法的实时性；进一步获取精度更高、更精细物体多分辨三维数字像。
点阵编码是一种基于仿射变换的三维数字化技术，条纹编码是一种相位映射的三维数字化技术，二者结合是一种复合编码的技术，点阵编码获取的三维深度像值可以在一个“较粗”的轮廓上确定物体深度，并可由此确定相位映射中相位的绝对分布，解决相位�：奈侍猓徊⑶遥庇捎诖嬖谡彰髅で统上衩で保捎诘阏笸队笆歉莶慰计矫婧臀锾灞砻娴阏笸枷窆钩傻摹暗阏蠖浴蔽恢貌罾醇扑阄锾迳疃戎担暗阏蠖浴敝涫窍嗷ザ懒⒌模淙煌队霸谛畔⒚で械牡阌捎诓荒苄纬伞暗愣浴倍貌坏叫畔⒚で欣肷⒌愦Φ纳疃戎担换嵊跋熘芪颍换嵩斐晌蟛畲ィ匀豢梢缘玫揭桓鼋频娜疃认瘢欢谔跷仆队暗南辔宦掷酰唤稣庑┟で貌坏秸废辔恢担以斐晌蟛畹拇ィ现赜跋煜嗔谇虻南辔徽箍薹ǖ玫奖徊馕锾宓娜疃认�。
下面结合附图对基于点阵投影三维数字成像的技术方案作进一步的详细描述点阵投影三维数字成像技术是在仿射变换基础上建立起来的一种三维数字化技术。图1是投影在参考平面上点阵成像的结构示意图。点P是数字投影照明发射器的出瞳，Po为投影光轴，投影光线PP1、PP2和PP3与参考平面R的交点确定了投射的二维空间点阵在参考平面上的位置。点I是图像传感接收器的入瞳，Io为成像光轴，它与投影光轴的夹角为α，Ip是图像传感接收器平面相对于点I的对称平面，根据透视投影的原理，点阵在图像传感接收器上成像的位置可以通过计算成像光线与平面Ip的交点的位置得到。
点阵投影成像系统中，投射在参考平面上的点阵的成像过程可以分为三个步骤首先，把物坐标系xyz绕y轴正向旋转α角，变换为坐标系x′y′z′，使新坐标系的z′o′轴与成像光轴Io重合；然后，把坐标系x′y′z′沿z′轴负向平移L，使图像传感接收器的入瞳I为坐标原点，变换后的坐标系为xpypzp；最后，在坐标系xpypzp下做透视投影，透视投影平面Ip与zp轴垂直，在距原点F(焦距)的位置上，它与图像传感接收器平面相对于xpopyp对称。
那么，经过上述步骤一和二后，可得到参考平面R(z＝0)在xpypzp坐标系下的坐标可表示为xs=kxΔxcosαys=yzs=L-ksΔxsinα---(1)]]>其中α为投影光轴Po和成像光轴Io之间的夹角；L为图像传感接收器的入瞳I与照明场的中心o之间的距离；Δx为投影在参考平面R上的点阵沿x方向的间距；kx取整数，为Δx所乘系数，用来表示不同点在物坐标系下的x坐标值。
然后在坐标系xpypzp下做透视投影，即可确定该点阵在平面Ip上的位置
xszs=xp0F⇒xp0=kxΔxcosαL-kxΔxsinαF---(2)]]>其中F为成像系统的焦距。
对于一个三维被测物体，如图2所示，是投影在任意曲面的三维物体上点阵成像的结构示意图。与图1中相同的投射光线PP1、PP2和PP3与被测物体表面的相交与点B1、B2和B3，这些交点确定了投射的二维空间点阵在物体表面S上的空间位置。投射在物体表面S的点阵同样经过上述三个步骤，成像在图像传感接收器上。此时可以得到S上的点阵在xpypzp坐标系下的坐标xb=xcosα+zsinyb=yzb=L-xsinα+zcosα---(3)]]>那么在坐标系xpypzp下做透视投影，可得出物体表面上的点阵在透视投影平面Ip上的位置xp=xbzbzb=xcosα+zsinαL-xsinα+zcosαF---(4)]]>根据式(2)、(4)可得到两个点阵中相对应点形成的“点阵对”之间在x方向的位置差ΔxpΔxp＝xp-xp0(5)其中Δxp的计算表达式中包含有它与物体在该点深度值之间的关系，从而得到物体深度值的计算表达式。在光学系统的参数为已知的情况下，所有“点阵对”之间在x方向的位移可结合参考平面的点阵图像和被测物体表面上的点阵图像计算得到，计算出物体表面上所有离散点的深度值，从而获得物体的深度像。
基于点阵的仿射变换和基于条纹的相位映射三维数字化技术结的复合编码方法，在解决存在表面间断的物体或表面梯度很大物体三维数字化的问题具有显著效果；并且，复合编码的方法可获取多种编码方式的载波图，可以利用这种方法获得多重相位图，构造物体多分辨的三维数字像；并在一定程度上可缓解由于照明盲区和成像盲区造成数据残缺不全使得相位展开无法进行的问题。另外，由于有效地克服了相位�：臀蟛畲ノ侍猓沟谜庵指春媳嗦氲募际蹩刹馐缘纳疃确段б约翱刹馐缘亩韵蠓段б笥诘ヒ辉夭际�。
本发明与已有的方法和技术相比，本发明具有以下优点1)结合了基于点阵投影和条纹投影两种不同编码方式三维数字成像方法的优点。消除了相位�：臀蟛畲サ奈侍猓岣吡瞬饬拷峁闹眯哦龋贡Ｖち烁卟饬烤龋⒃谝欢ǔ潭壬匣航庥捎谛畔⒚で斐傻氖莶腥辈蝗奈侍�。
2)为满足不同的测试需要，可以投射多种形式的复合编码，包括点阵加单一频率条纹和点阵加时序变频条纹序列，融合利用不同传感方法获得数据，实现多种分辨率、不同精度的三维数字成像；3)这种复合编码技术可测试的深度范围，以及可测试的对象范围大于单一载波技术。
图1是投影在参考平面上的点阵成像原理图。
图2是投影在任意三维物体上的点阵成像原理图。
图3是复合编码三维成像系统结构示意图。
图4是计算模拟的一个台阶状物体。
图5是利用点阵投影方法获得图4中物体的三维数字像。
图6是利用条纹投影方法获得图4中物体的(a)展开相位图；(b)三维数字像。
图7是利用本发明提出的复合编码方法，点阵投影结合条纹投影获得的图4中物体的三维数字像。
具体实施例方式
按照上述方法，实现复合编码多分辨三维数字成像的装置，主要包括数字投影照明发射器、图像传感接收器和图像处理器。所说的数字投影照明发射器可以是数字液晶投影装置(LCD投影仪)，数字微镜投影装置(DMD投影仪)或硅基片液晶投影装置(LCOS投影仪)，可用计算机图像处理系统方便地生成二维点阵和条纹图形并写入数字投影装置；所说的图像传感接收器包括光学成像透镜与光电探测器构成，光学成像透镜可以是定焦距或变焦距的成像透镜或透镜组，二元光学成像系统，衍射元件成像系统，显微成像系统；所说的光电探测器件可以是电荷耦合器件，液晶器件，空间光调制器件，CMOS器件或数码相机。所说的图像处理器是数字信号处理器与可编程专用集成电路的组合，也可以是通用图像处理卡和计算机组合构成。其特征在于，数字投影照明发射器分别投射二维空间点阵和条纹图形，图像传感接收器接收经过被测物体深度信息调制的点阵和条纹编码图，再经图像处理器做相应的解码获取物体多分辨三维深度像。
下面结合附图对实施例作进一步的描述。
图3是复合编码三维成像系统结构示意图。如图所示，数字投影照明发射器101的投影镜102的出瞳P、图像传感接收器103的成像透镜104的入瞳I和照明场的中心o位于同一平面内，并构成一个三角形，形成了三角测量系统。由图像处理器105的计算机或数字信号处理器产生的二维点阵分别投射在参考平面106和物体107的表面S，投影光轴Po与成像光轴之Io间的夹角为α，以PI之间的连线为基线，它和投射在物体的所有点阵的中心构成了若干三角形，每一个都可形成一个三角测量系统。参考平面上的规则点阵和表征任意自由表面物体形貌的深度信息的变形点阵，分别通过图像传感接收器103接收，并传送到图像处理器105，通过比较参考平面和被测物体表面上点阵分别在图像传感接收器上形成的点阵像相对应点阵的位置差异，计算被测物体的深度值。然后，数字投影照明发射器101继续投射由图像处理器105产生的单一频率条纹到被测物体表面107，再由图像传感接收器103接收载波条纹图并送到图像处理器105，结合通过点阵投影方法获取的被测物体较低分辨率的三维深度值，对载波条纹图进行相位展开，因此对表面间断物体的表面或梯度较大表面等拓扑复杂物体的表面进行相位展开中存在的相位�：约坝捎谝跤暗刃畔⒚で斐傻奈蟛畲ノ侍猓伎梢杂行У乜朔佣玫轿锾逋暾娜窒�。另外一种复合编码的方式是点阵加时序变频条纹序列，在利用点阵投影的方法获得物体深度值后，数字投影照明发射器101也可以投射时序变频条纹序列到被测物体表面107，通过已知的物体的深度值，结合系统结构参数可以计算出发生第一次相位跳变对应的视场宽度的总相位差，也就得到了相应的视场内条纹周期数，从而确定了时序变频条纹序列相位展开算法的边界条件，减少了迭代次数，提高了算法的实效性。
图4是计算模拟的一个台阶状物体。台阶的高度等于图6中利用条纹投影方法获取物体深度像时所投射条纹相对应的等效波长的1.1倍。
图5是利用点阵投影方法获得的图4中物体的三维数字像。点阵图形中的点阵个数为64×64，对于物体表面梯度变化很大的区域，由于投射点阵采样率不足，无法获得这部分区域准确结果，如图所示，只能得到一个梯度变化较为缓慢的结果，原因就是丢掉了高频的信息，使得梯度变化很大的区域被平滑了。
图6是利用条纹投影方法获取物体的三维数字像。其中图6(a)是对载波条纹图进行相位展开后得到的展开相位图，由于图2中台阶状物体的高度已大于投影条纹对应的等效波长，存在2π的相位�：虼说貌坏秸返纳疃韧枷瘢缤�6(b)所示为由图6(a)计算得到的深度图像，相位模糊的存在使得由展开相位图计算得到的物体深度图出现偏差，如图6(b)所示深度图像中台阶的高度与实际高度不符。
图7是利用本发明提出的复合编码方法，结合点阵投影和条纹投影两种编码方法，利用相位展开算法获得的图4中物体的三维数字像。先进行点阵编码的成像，获取物体较低分辨率的深度像，再进行条纹编码成像，根据点阵投影方法已经得到的物体深度值进行相位展开，如图6(a)所示物体的展开相位图已经标记出不同相位分布的精确区域，图中颜色较浅的这部分区域实际为存在相位跳变的区域。而此时已经由点阵投影的方法获得了物体的深度值，虽然分辨率较低，但它是仍然从较粗的轮廓上反映了物体深度的真实分布，把利用点阵投影获得的深度值，结合系统的结构参数换算为相位值，对载波条纹图进行相位展开时利用点阵投影获得的相位值作为“控制点”来控制相位展开的过程。步骤如下当相位展开进行到这些“控制点”位置时，比较此时相位值与点阵投影获得的相位值，如果二者误差在允许范围内，相位展开继续进行；否则认为存在相位�：扑愣叩南辔徊睿⑿拚鼻暗愕南辔恢担约把卦辔徽箍肪斗祷氐健疤淝颉北咴档乃械愕南辔恢担饩鱿辔荒：侍猓患绦辔徽箍蹋悦恳豢刂频阋谰萆鲜鲈蚪写恚钡酱硗瓿赏枷裥枰邢辔徽箍那蛑械乃械�。结果如图7所示，图6中存在的相位�：侍庖丫饩觯ń鬃次锾逄荻缺浠洗蟠Ρ涞酶福渖疃认裼胧导式峁酉喾�
权利要求
1.一种复合编码多分辨三维数字成像方法，采用包括数字投影照明发射器、图像传感接收器和图像处理器的成像装置，利用点阵编码和条纹编码实现多分辨三维数字成像，其特征在于包括以下过程1)数字投影照明发射器投射不同疏密程度的二维点阵图形照明物体，偏转图像传感接收器使其光轴与投影点阵照明场的中心位于同一直线。数字投影照明发射器的出瞳、图像传感接收器的入瞳和照明场的中心构成一个三角形，以数字投影照明发射器的出瞳与图像传感接收器的入瞳之间的连线为基线，它和投射在物体的所有点阵的中心构成了若干三角形，形成了三角测量系统；根据仿射变换的原理，分别投影在参考平面和被测物体表面的编码点阵，经过坐标旋转、平移和透视投影变换，可分别得到参考平面和被测物体表面上的编码点阵在图像接收传感器平面上的空间坐标的解析式，并可进一步得到参考平面和被测物体表面上两个点阵相对应点之间在成像平面x方向上的位置差与被测物体在相应点处深度值之间的关系；从而数字投影照明发射器投射二维空间点阵结构光照明，在图像接收传感器得到参考平面的点阵图像和投射在被测物体表面上的点阵图像，椐已知系统光路几何参数，图像处理器可计算点阵图像相应点之间在x方向上的位置差，再根据位置差与被测物体在相应点处深度值之间的关系计算出物体的深度图像；2)数字投影照明发射器再投射条纹结构光照射被测物体表面，所投射的条纹结构光可以是单一频率条纹，也可以是时序变频条纹序列；对于单一频率条纹结构光，用相位映射的方法，结合点阵投影已经获得的物体较低分辨率的深度像进行相位展开，进一步获取更精细的多分辨三维数字像；对于时序变频条纹序列结构光投影，分别得到编码的条纹强度分布图序列，利用“相移算法”计算出各频率条纹强度分布图的相位图，在每个相位图中消除2π不确定性，从而对景物得到分辨率依次递进的深度像；此时点阵投影的作用是利用它获得的物体深度值确定变频条纹序列的边界条件，有效地节省相位展开过程中所需的二维编码条纹图，增加了相位展开算法的实时性；进一步获取精度更高、更精细物体多分辨三维数字像。
全文摘要
本发明公开了一种利用复合编码实现多分辨三维数字成像的方法，即，基于点阵投影和条纹投影相结合的三维数字化技术。该方法采用数字投影照明发射器、图像传感接收器和图像处理器构成的成像装置。以发射器出瞳、图像传感接收器入瞳与形成三角测量系统；首先，利用点阵投影三维数字成像没有相位�：奶氐悖缘阏蟊嗦牖袢∥锾宓慕系头直媛实娜疃认瘢偻渡涮跷频轿锾灞砻妫每占湎辔坏髦凭雀叩奶氐悖岷弦丫竦玫奈锾宓头直嫔疃认窠邢辔徽箍徊交袢”徊馕锾甯傅亩喾直嫒窒瘛１痉⒚鹘岷狭说阏笸队昂吞跷仆队傲街植煌嗦敕绞降娜殖上穹椒ǖ挠诺悖殖上窬雀撸酝仄烁丛拥那嬗薪锨康钠帐市浴�
文档编号G01B11/25GK1632451SQ20041009414
公开日2005年6月29日 申请日期2004年12月31日 优先权日2004年12月31日
发明者彭翔, 田劲东 申请人:深圳大学
专业数控铣床产品供应商
20年生产经验，实力工厂，精工品质，质量有保障
