CN100557384C - 一种基于双目视觉和激光测距的主动实时三维定位*** - Google Patents

一种基于双目视觉和激光测距的主动实时三维定位*** Download PDF

Info

Publication number
CN100557384C
CN100557384C CNB2003101133002A CN200310113300A CN100557384C CN 100557384 C CN100557384 C CN 100557384C CN B2003101133002 A CNB2003101133002 A CN B2003101133002A CN 200310113300 A CN200310113300 A CN 200310113300A CN 100557384 C CN100557384 C CN 100557384C
Authority
CN
China
Prior art keywords
target
information
storage area
subsystem
visual processes
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB2003101133002A
Other languages
English (en)
Other versions
CN1616920A (zh
Inventor
黄强
郝群
别海罡
丁凌
张伟民
权晓蕾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Institute of Technology BIT
Original Assignee
Beijing Institute of Technology BIT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Institute of Technology BIT filed Critical Beijing Institute of Technology BIT
Priority to CNB2003101133002A priority Critical patent/CN100557384C/zh
Publication of CN1616920A publication Critical patent/CN1616920A/zh
Application granted granted Critical
Publication of CN100557384C publication Critical patent/CN100557384C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Length Measuring Devices By Optical Means (AREA)

Abstract

本发明涉及一种基于双目视觉和激光测距的主动实时三维定位***,由视觉处理子***,控制子***及机械机构三大部分组成。摄像头在图像采集卡控制下获取目标图像,交由视觉处理计算机进行处理,获得在图像坐标中的二维位置信息,发送到公共存储区,控制计算机首先从公共存储区获得位置信息经过坐标转换和实时规划,再通过D/A板输出到驱动器驱动电机并同时通过轴角编码器反馈回路控制激光器准确照射到目标,最后将测距仪得到深度信息反馈到视觉计算机从而得出目标的三维位置信息。该***具有远距离精度高、主动性好、实时快速、成本低、工艺简单等优点。

Description

一种基于双目视觉和激光测距的主动实时三维定位***
所属技术领域:
本发明为一种基于双目视觉和激光测距的主动实时三维位置信息获取***,属于图像处理和自动化领域,用于快速准确获得物体的三维位置信息。
背景技术:
目前,使用双目立体视觉是获得目标三维位置信息的主要手段。常用的方法是由两个摄像头同步获得立体图像对,再根据立体视觉的原理,计算出图像公共视野里每一点的深度信息,生成深度图,再提取出目标对应的深度信息,来确定目标的三维位置信息。但这些设备都存在以下问题:
1.远距离精度低:以前研究的双目及多目立体视觉在测量近距离目标时(5米以内)具有比较高的精度(1毫米以上),在较远距离(5米以外)精度很差甚至无法测量。
2.主动性差:当空间三维场景在摄像机被投影为二维图像时,同一景物在不同点下的图像会有很大不同,而且场景中的诸多因素,如光照条件,景物几何形状和物理特性等,都被综合在单一的图像灰度值里。显然,要从包含了如此之多不利因素的图像里很难准确地求得高精度的深度信息。而在应用中,大部分情况下也是不需要对每一个点求深度信息的。因此,许多计算是没有必要的,也缺乏主动选择目标的能力。
3.运算量大,实时性差:立体视觉要求能够求解一对立体图像中的每一个对应点,图像所包含的丰富信息,使得逐点对应匹配的速度很慢,而且易产生“病态”计算问题。虽然为解决此问题,在正则化框架下加入了一定约束,使问题转化为求多条件函数的最优解,但大大增加了计算难度和计算量,使视觉处理速度难以提高,无法满足实时性要求,限制了应用领域。
为了提高视觉子***对目标三维定位的主动性,降低立体视觉图像处理的计算量和提高***的实时性,主动快速的获得目标的位置信息,本发明提出了一种新的确定目标三维位置信息的方法以及应用该方法实现的一套定位***。
发明内容:
整个***由视觉处理子***,控制子***及机械机构三大部分组成。
视觉处理子***由视觉处理计算机(内置图像采集卡、memo-link主卡)、摄像机、激光测距仪组成。本发明所采用的内置图像采集卡安装在PCI插槽里,并与所采用的摄像机能兼容。Memo-link是一种用于两个计算机间高速通信的设备,该设备由主卡和子卡两块组成,用RS485接口互连,在本发明中memo-link被视为该***的公共存储区。
控制子***包括控制计算机(内置D/A板、memo-link子卡)、驱动器、电机(集成轴角编码器)。
机械机构由轴承及用于安装电机、摄像头和激光测距仪的固定支架组成,具有二维自由度,主要起安装和支撑作用。具体构架为:两个与图像采集卡兼容的摄像机固定在机械机构内的长方形支架上,在两个摄像机的中点处安防着激光测距仪的发射部分也就是半导体激光器,在激光器的正上方安装着激光测距仪的接收部分即一个带有直径4厘米焦距8厘米聚焦镜头的线阵CCD。在长方体固定支架的后方水平放置着一个15瓦的无刷直流电机,电机直径为4厘米长为10厘米内置轴角编码器,用于驱动***上下转动(Y轴方向)到指定角度。在其下方为一个筒装支架,外径为6厘米,内径为4厘米,里面安装了一个15瓦的无刷直径电机,该电机与水平放置电机完全相同,用于驱动***左右转动(X轴方向)到指定角度。
其主要技术方案为:
由摄像机获取前方目标的图像后,传入图像采集卡,由图像采集卡将摄像机获取目标的图像转换为数字信号,并获得目标位置信息,将其存储在安装于视觉计算机PCI插槽内memo-link主卡的公共存储区内。控制计算机由memo-link子卡从公共存储区获得二维位置信息并将视觉坐标系下目标的位置信息转化为以激光发射器为原点的坐标系下的位置信息,计算出目标偏移原点的控制量,再通过12位的D/A转换器分别将控制量输出到电机的驱动器来驱动电机转动并同时通过电机内置的轴角编码器构成的反馈回路来控制电机准确的转动到要求的角度----即将目标就位于激光测距仪接收端的聚焦透镜将目标的反射信号汇聚到线阵CCD上,根据线阵CCD的输出用三角测量法计算出目标的距离信息(也就是深度信息),最后检测到的深度信息和二维位置信息反馈到视觉计算机便显示出了目标的三维位置信息。
本发明的有益效果是:
1.精度高。激光测距仪有很高的精度,除了能够在近距离(5米以内)的距离实现立体视觉的精度,尤其是在测量较远距离(>5米)的目标时,有立体视觉无法比拟的精度和稳定性。
2.具有主动性。在应用中可以根据使用要求对感兴趣的点求距离信息----也就是深度,而不必对整幅图像逐点求解,减少了不必要的计算。
3.造价低。本发明使用了双CPU的结构,该CPU也可以用DSP或者MCU等代替,比类似产品价格低。
4.实时快速。本发明中目标的深度信息是由激光测距测得的,可以达到100Hz以上的测试频率。而且不用对立体图像进行对应点匹配,因此速度快,实时性非常好。
5.工艺简单。机械部分仅有实现两个自由度的电机和固定摄像头,激光测距仪的安装支架组成,加工、安装方便。
而且本发明还具有体积小重量轻的特点,可以很容易集成到其他***中,作为一种功能单元存在。
附图说明:
下面结合附图和实施例对使用进一步说明。
图1是本发明的***示意图
图2是机械机构的正视图
图3是机械机构的俯视图
图4是视觉处理子***工作流程图
图5是控制子***工作流程图
图6是控制子***框图
图1,2,3中:1.目标,2.摄像机,3.激光测距仪的发射部分也就是半导体激光器,4.激光测距仪的接收部分即线阵CCD,5.Y轴电机(实现上下运动),6.X轴电机(实现左右运动),7.长方体支架,8.视觉处理计算机(内置图像采集卡),9.公共存储区,10.控制计算机(内置D/A板,驱动器)。
具体实施方式:
该***实现三维定位的具体步骤如下:
第一步:双目摄像机2将视野中的目标1的图像,送至视觉处理计算机8内的图像采集卡
第二步:图像采集卡将图像信号转换成数字信号,交由视觉处理计算机8(图3)进行处理,计算出目标在视觉平面的二维位置并将该信息发送到公共存储区9里。
第三步:控制计算机10读取公共存储区9中的位置数据,由控制程序(图4)根据摄像机2和半导体激光发射器3的安装位置进行坐标转换和实时运动规划。
第四步:控制程序将驱动信号发送至控制计算机10的内置D/A板。D/A板转为模拟信号后给驱动器驱动对应的X,Y轴电机5、6,使半导体激光器3准确照射到目标1上(图5)。
第五步:根据从目标1上获取的反射光通过激光测距仪的接收部分即线阵CCD4输出用三角测量法可以获得目标1的深度信息并传送给视觉处理计算机8综合处理后得到目标1的三维信息。

Claims (1)

1.一种基于双目视觉和激光测距的主动实时三维定位***,包括视觉处理子***,控制子***及机械机构三大部分,其中视觉处理子***由视觉处理计算机、摄像头、激光测距仪组成,所述视觉处理计算机内置图像采集卡、公共存储区,控制子***包括内置了D/A板的控制计算机、集成了轴角编码器的电机以及驱动器,其特征在于:由摄像机获取前方目标的图像后,由图像采集卡将其转换为数字信号,获得目标位置信息并存储在公共存储区内,控制计算机从公共存储区获得二维位置信息,并将二维位置信息从视觉坐标系下转化为以激光发射器为原点的坐标系下,计算出目标偏移原点的控制量,再通过D/A转换器分别将控制量输出到电机的驱动器来驱动电机转动,同时通过电机内置的轴角编码器构成的反馈回路来控制电机准确的转动对准待测目标,由激光测距仪接收端将目标的反射信号汇聚到线阵CCD上,根据三角测量法计算出目标的距离信息,也就是深度信息,最后检测到深度信息和二维位置信息反馈到视觉计算机,便综合出目标的三维位置信息。
CNB2003101133002A 2003-11-14 2003-11-14 一种基于双目视觉和激光测距的主动实时三维定位*** Expired - Fee Related CN100557384C (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CNB2003101133002A CN100557384C (zh) 2003-11-14 2003-11-14 一种基于双目视觉和激光测距的主动实时三维定位***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CNB2003101133002A CN100557384C (zh) 2003-11-14 2003-11-14 一种基于双目视觉和激光测距的主动实时三维定位***

Publications (2)

Publication Number Publication Date
CN1616920A CN1616920A (zh) 2005-05-18
CN100557384C true CN100557384C (zh) 2009-11-04

Family

ID=34759884

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2003101133002A Expired - Fee Related CN100557384C (zh) 2003-11-14 2003-11-14 一种基于双目视觉和激光测距的主动实时三维定位***

Country Status (1)

Country Link
CN (1) CN100557384C (zh)

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1321340C (zh) * 2005-09-01 2007-06-13 上海交通大学 基于面阵投影的同步扫描双目视觉三维成像的方法
CN101318263B (zh) * 2007-06-08 2011-12-07 深圳富泰宏精密工业有限公司 激光雕刻***及采用其进行激光雕刻的方法
CN101587082B (zh) * 2009-06-24 2011-08-03 天津工业大学 一种应用于织物疵点检测的快速三维重建方法
CN101699219B (zh) * 2009-10-30 2011-01-26 北京理工大学 双目视觉三维测量的方法及传感器
CN101858743B (zh) * 2010-06-04 2012-02-29 西安天和防务技术股份有限公司 基于大视场摄像及图像处理的测距装置及其方法
JP2012118698A (ja) * 2010-11-30 2012-06-21 Fuji Heavy Ind Ltd 画像処理装置
CN102510512B (zh) * 2011-11-17 2014-03-05 杭州电子科技大学 基于双目视觉节点的动态三维多媒体传感网络自定位方法
CN103159136A (zh) * 2011-12-14 2013-06-19 中铝国际技术发展有限公司 主动视觉控制的天车精确定位***
CN102914262B (zh) * 2012-09-29 2015-02-11 北京控制工程研究所 一种基于附加视距的非合作目标贴近测量方法
CN104079868B (zh) * 2013-03-29 2017-06-30 中原工学院 一种单视点视频监控的激光辅助测距装置和方法
CN103557796B (zh) * 2013-11-19 2016-06-08 天津工业大学 基于激光测距和计算机视觉的三维定位***及定位方法
CN104061876B (zh) * 2014-07-17 2017-01-18 宏峰集团(福建)有限公司 基于数字图像测量原理的建筑模板施工监测***
CN104197926B (zh) * 2014-08-06 2017-08-11 北京信息科技大学 一种采用主动视觉方式的机器人导航装置
CN104346614B (zh) * 2014-09-04 2018-06-01 四川农业大学 一种实景下的西瓜图像处理和定位方法
US10028102B2 (en) * 2014-12-26 2018-07-17 Here Global B.V. Localization of a device using multilateration
CN105108344A (zh) * 2015-08-31 2015-12-02 鞍山英程利远科技有限公司 一种机器人光纤激光打标机智能控制***
CN105783880B (zh) * 2016-03-22 2018-05-22 天津大学 一种单目激光辅助舱段对接方法
CN108028887B (zh) * 2016-03-23 2020-06-02 华为技术有限公司 一种终端的拍照对焦方法、装置及设备
CN106323242A (zh) * 2016-08-03 2017-01-11 北京奇虎科技有限公司 无人机对空间结构检测方法、装置
CN106382918A (zh) * 2016-08-31 2017-02-08 胡钊政 一种三维视觉传感器
CN106645066B (zh) * 2016-12-13 2019-02-01 天津大学 液膜轴向流动参数双视角测量方法
CN106595647B (zh) * 2016-12-14 2020-05-05 北京理工大学珠海学院 行为状态的监测方法、装置及***
CN107152295B (zh) * 2017-06-28 2018-12-28 中船重型装备有限公司 一种盾构管片拼装机用视觉平台自动抓取方法及***
CN107747910A (zh) * 2017-09-19 2018-03-02 浙江大学 一种视觉引导的隧道标志点坐标激光测量***及方法
CN108318887A (zh) * 2018-01-18 2018-07-24 西安工业大学 激光辅助双目测距***
JP6719494B2 (ja) * 2018-02-07 2020-07-08 直之 村上 追尾レーザー距離計測器の駆動計測で、3次元の数値駆動の制御機器の3次元の駆動数値を演算する方法。
CN108489392B (zh) * 2018-04-11 2019-10-08 上海交通大学 机械臂末端重复定位精度测量装置与方法
CN109495692A (zh) * 2019-01-09 2019-03-19 湖南农业大学 一种基于立体机器视觉的激光自动聚焦打击装置
CN111098035A (zh) * 2019-12-24 2020-05-05 武汉嘉铭激光股份有限公司 一种激光三维蚀刻***及蚀刻方法
EP4365538A1 (en) * 2021-06-28 2024-05-08 Elementary Optomation Co., Ltd Measurement and positioning system based on machine vision and laser triangulation
CN114018158A (zh) * 2021-11-02 2022-02-08 中国大唐集团科技工程有限公司 一种非接触式三维热位移探测***及其应用

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
双目立体视觉技术在三维测量中的应用研究. 张长命.电子科技大学学位论文. 2001 *
基于立体视觉的三维曲面测量关键技术研究. 张爱武,李明哲,胡少兴.***工程与电子技术,第23卷第10期. 2001 *

Also Published As

Publication number Publication date
CN1616920A (zh) 2005-05-18

Similar Documents

Publication Publication Date Title
CN100557384C (zh) 一种基于双目视觉和激光测距的主动实时三维定位***
CN105759244B (zh) 基于双摄像头的高精度室内定位***及定位方法
CN102840825B (zh) 一种质点定位***及方法
CN106886030B (zh) 应用于服务机器人的同步式地图构建与定位***及方法
CN103308149B (zh) 机器视觉同步对焦扫描式激光测振装置
CN103679687A (zh) 一种智能跟踪高速球机的目标跟踪的方法
KR20140049361A (ko) 다중 센서 시스템, 이를 이용하는 3차원 월드 모델링 장치 및 방법
CN1712892A (zh) 三维测量装置及电子存储媒体
CN114745529B (zh) 一种投影仪单tof梯形校正的方法和投影仪
CN101339654A (zh) 一种基于标志点的增强现实三维注册方法和***
KR101222104B1 (ko) 라인 스캔 카메라를 이용한 전방위 입체 영상 생성 방법 및 장치
CN205027316U (zh) 一种快速三维激光扫描仪
CN103090846A (zh) 一种测距装置、测距***及其测距方法
JP2002098521A (ja) 3次元形状データ生成装置
CN103003666A (zh) 用于三维空间测量的平行的在线-离线重构
CN103412318A (zh) 一种便携式红外目标定位仪及定位控制方法
CN112254670B (zh) 一种基于光扫描和智能视觉融合的3d信息采集设备
CN104165587A (zh) 一种基于激光与视觉的实时三维成像***
CN112492292A (zh) 一种自由姿态的智能视觉3d信息采集设备
CN112303423A (zh) 一种转动稳定的智能三维信息采集设备
CN106969724B (zh) 一种自旋转十字线激光扫描的环境三维形貌感知装置
CN210268635U (zh) 一种基于双目视觉的水下机器人障碍测距装置
CN203443557U (zh) 一种新型便携式ccd双轴自准直仪图像测量装置
CN112254676B (zh) 一种便携式智能3d信息采集设备
CN212992427U (zh) 一种图像采集模组

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20091104

Termination date: 20111114