CN107063230B - 一种光照自适应的拖拉机视觉导航图像采集***及方法 - Google Patents

一种光照自适应的拖拉机视觉导航图像采集***及方法 Download PDF

Info

Publication number
CN107063230B
CN107063230B CN201710172777.XA CN201710172777A CN107063230B CN 107063230 B CN107063230 B CN 107063230B CN 201710172777 A CN201710172777 A CN 201710172777A CN 107063230 B CN107063230 B CN 107063230B
Authority
CN
China
Prior art keywords
camera
illumination
personal computer
visible light
industrial personal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710172777.XA
Other languages
English (en)
Other versions
CN107063230A (zh
Inventor
田光兆
顾宝兴
王海青
周俊
安秋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing Agricultural University
Original Assignee
Nanjing Agricultural University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Agricultural University filed Critical Nanjing Agricultural University
Priority to CN201710172777.XA priority Critical patent/CN107063230B/zh
Publication of CN107063230A publication Critical patent/CN107063230A/zh
Application granted granted Critical
Publication of CN107063230B publication Critical patent/CN107063230B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)

Abstract

本发明涉及一种光照自适应的拖拉机视觉导航图像采集***及方法,包括工控机;该工控机通过图像采集卡分别与可见光相机矩阵和红外相机相连;所述可见光相机矩阵由多个具有不同光衰减度的相机构成,每个相机能在所述工控机的控制下单独拍照;所述工控机还同时与照度传感器、红外光源和电源相连并控制其工作。工控机通过照度传感器感测的环境照度,选择性的开启可见光相机或红外相机,为拖拉机视觉导航***采集到高质量的图像,提高视觉导航可靠性和稳定性。

Description

一种光照自适应的拖拉机视觉导航图像采集***及方法
技术领域
本发明涉及一种农业机械控制技术,尤其是一种适用于无人驾驶拖拉机的控制技术,具体的说是一种光照自适应的拖拉机视觉导航图像采集***及方法。
背景技术
在无人驾驶拖拉机的研制过程中,其视觉导航***容易受到自然光照的影响,尤其是在晴天午后、阴天傍晚时间段。目前的解决方案有3种:(1)采用普通相机拍摄,加强后期图像处理算法研究,通过改进算法抑制光照的影响;(2)采用单一红外相机拍摄,克服弱光照影响;(3)采用单一普通相机加衰减滤光片,克服强光照影响。若拍摄的原始图像质量较差,方案1收效甚微。方案2和3只针对某一特定的光照条件起作用。但是农机作业环境恶劣,光照条件复杂多变,农田往返作业可能顺光逆光交替出现,方案2和3不具有通用性。
发明内容
本发明的目的是针对当前在无人驾驶拖拉机在视觉导航方面遇到的困难,提供一种光照自适应的拖拉机视觉导航图像采集***及方法,能够在复杂光照的农田自然条件下,根据环境光照的变化,自动调整图像采集方式,为拖拉机视觉导航***采集到高质量的图像,提高视觉导航可靠性和稳定性。
本发明的技术方案是:
一种光照自适应的拖拉机视觉导航图像采集***,包括工控机;该工控机通过图像采集卡分别与可见光相机矩阵和红外相机相连;所述可见光相机矩阵由多个具有不同光衰减度的相机构成,每个相机能在所述工控机的控制下单独拍照;所述工控机还同时与照度传感器、红外光源和电源相连并控制其工作。
进一步的,所述可见光相机矩阵包括按3x3排列的9个相机,并在其中的8个相机上安装不同衰减度的滤光片。
进一步的,所述滤光片的衰减度为10%~80%,变化率为10%。
进一步的,所述红外光源的波长能够在所述工控机的控制下而变化。
一种光照自适应的拖拉机视觉导航图像采集的方法,包括以下步骤:
1)通过照度传感器感测工作环境的照度值,并传输给工控机;工控机判断照度值的大小,以便选取适当的相机。
2)如果步骤1)的照度值在农业环境视觉导航的正常范围(150Lux~10000Lux),工控机从可见光相机矩阵中选择无衰减滤光片的相机采集图像;
3)如果步骤1)的自然光照过强,即,照度值高于正常范围的上限10000Lux时,工控机从相机矩阵中选择具有衰减滤光片的相机采集图像;照度值越大,选取衰减比例越大的相机;
4)如果步骤1)的自然光照偏弱,即,照度值低于正常范围的下限150Lux时,工控机自动关闭可见光相机矩阵,同时开启红外光源,并通过红外相机采集图像;其中,工控机通过程序调整红外光源的波长,并对在多种不同波长下获得的图像进行对比,确定当前作业环境下红外光源最佳参数,并在此波长下采集红外图像。
进一步的,所述步骤1)中的采集频率为1Hz。
进一步的,所述步骤3)中按以下方法选取相机,设f为照度值:
当10000Lux≤f<20000Lux,启用可见光相机矩阵中衰减度为10%的2号相机采集图像;
当20000Lux≤f<30000Lux,启用可见光相机矩阵中衰减度为20%的3号相机采集图像;
当30000Lux≤f<40000Lux,启用可见光相机矩阵中衰减度为30%的4号相机采集图像;
当40000Lux≤f<50000Lux,启用可见光相机矩阵中衰减度为40%的5号相机采集图像;
当50000Lux≤f<60000Lux,启用可见光相机矩阵中衰减度为50%的6号相机采集图像;
当60000Lux≤f<70000Lux,启用可见光相机矩阵中衰减度为60%的7号相机采集图像;
当70000Lux≤f<80000Lux,启用可见光相机矩阵中衰减度为70%的8号相机采集图像;
当f≥80000Lux,启用可见光相机矩阵中衰减度为80%的9号相机采集图像。
本发明的有益效果:
本发明设计合理,应用方便,能够在复杂光照的农田自然条件下,根据照度传感器采集到的数据,自动调整图像采集方式,为拖拉机视觉导航***采集到高质量的图像,提高视觉导航可靠性和稳定性。
附图说明
图1是本发明的图像采集***的结构示意图。
图2是本发明的可见光相机矩阵的结构示意图。
图3是本发明的图像采集方法的流程示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的说明。
如图1和2所示,一种光照自适应的拖拉机视觉导航图像采集***,包括工控机;该工控机通过图像采集卡分别与可见光相机矩阵和红外相机相连;所述可见光相机矩阵由多个具有不同光衰减度的相机构成,每个相机能在所述工控机的控制下单独拍照;所述工控机还同时与照度传感器、红外光源和电源相连并控制其工作。
所述可见光相机矩阵包括按3x3排列的9个相机,并在其中的8个相机上安装不同衰减度的滤光片。其中:1号相机无滤光片,2号相机的滤光片衰减10%,3号相机的滤光片衰减20%,4号相机的滤光片衰减30%,5号相机的滤光片衰减40%,6号相机的滤光片衰减50%,7号相机的滤光片衰减60%,8号相机的滤光片衰减70%,9号相机的滤光片衰减80%。
所述红外光源的波长能够在所述工控机的控制下而变化。
如图3所示,一种采用上述光照自适应的拖拉机视觉导航图像采集***进行图像采集的方法,包括以下步骤:
1)通过照度传感器感测工作环境的照度值,并传输给工控机;工控机判断照度值的大小,以便选取适当的相机。其中,照度传感器采集频率为1Hz。
2)如果步骤1)的照度值在农业环境视觉导航的正常范围(150Lux~10000Lux),工控机从可见光相机矩阵中选择无衰减滤光片的相机采集图像;
3)如果步骤1)的自然光照过强,即,照度值高于正常范围的上限10000Lux时,工控机从相机矩阵中选择具有衰减滤光片的相机采集图像;照度值越大,选取衰减比例越大的相机。具体如下,设f为照度值:
当10000Lux≤f<20000Lux,启用可见光相机矩阵中衰减度为10%的2号相机采集图像;
当20000Lux≤f<30000Lux,启用可见光相机矩阵中衰减度为20%的3号相机采集图像;
当30000Lux≤f<40000Lux,启用可见光相机矩阵中衰减度为30%的4号相机采集图像;
当40000Lux≤f<50000Lux,启用可见光相机矩阵中衰减度为40%的5号相机采集图像;
当50000Lux≤f<60000Lux,启用可见光相机矩阵中衰减度为50%的6号相机采集图像;
当60000Lux≤f<70000Lux,启用可见光相机矩阵中衰减度为60%的7号相机采集图像;
当70000Lux≤f<80000Lux,启用可见光相机矩阵中衰减度为70%的8号相机采集图像;
当f≥80000Lux,启用可见光相机矩阵中衰减度为80%的9号相机采集图像。
4)如果步骤1)的自然光照偏弱,即,照度值低于正常范围的下限150Lux时,工控机自动关闭可见光相机矩阵,同时开启红外光源,并通过红外相机采集图像。其中,工控机通过程序调整红外光源的波长,并对在多种不同波长下获得的图像进行对比,确定当前作业环境下红外光源最佳参数,并在此波长下采集红外图像。所述红外光源可通过程序设置波长从800nm~1300nm增量式变化,每次递增50nm。
本发明未涉及部分均与现有技术相同或可采用现有技术加以实现。

Claims (4)

1.一种光照自适应的拖拉机视觉导航图像采集的方法,采用光照自适应的拖拉机视觉导航图像采集***;该光照自适应的拖拉机视觉导航图像采集***包括工控机;该工控机通过图像采集卡分别与可见光相机矩阵和红外相机相连;所述可见光相机矩阵由多个具有不同光衰减度的相机构成,每个相机能在所述工控机的控制下单独拍照;所述工控机还同时与照度传感器、红外光源和电源相连并控制其工作;所述可见光相机矩阵包括按3x3排列的9个相机,并在其中的8个相机上安装不同衰减度的滤光片;所述红外光源的波长能够在所述工控机的控制下而变化;其特征是:所述方法包括以下步骤:
1)通过照度传感器感测工作环境的照度值,并传输给工控机;工控机判断照度值的大小,以便选取适当的相机;
2)如果步骤1)的照度值在农业环境视觉导航的正常范围150Lux~10000Lux,工控机从可见光相机矩阵中选择无衰减滤光片的1号相机采集图像;
3)如果步骤1)的自然光照过强,即,照度值高于正常范围的上限10000Lux时,工控机从相机矩阵中选择具有衰减滤光片的2号相机至9号相机中的一个采集图像;照度值越大,选取衰减比例越大的相机;
4)如果步骤1)的自然光照偏弱,即,照度值低于正常范围的下限150Lux时,工控机自动关闭可见光相机矩阵,同时开启红外光源,并通过红外相机采集图像;其中,工控机通过程序调整红外光源的波长,并对在多种不同波长下获得的图像进行对比,确定当前作业环境下红外光源最佳参数,并在此波长下采集红外图像。
2.根据权利要求1所述的光照自适应的拖拉机视觉导航图像采集的方法,其特征是所述滤光片的衰减度为10%~80%,变化率为10%。
3.根据权利要求1所述的光照自适应的拖拉机视觉导航图像采集的方法,其特征是所述步骤1)中的采集频率为1Hz。
4.根据权利要求1所述的光照自适应的拖拉机视觉导航图像采集的方法,其特征是所述步骤3)中按以下方法选取相机,设f为照度值:
当10000Lux≤f<20000Lux,启用可见光相机矩阵中衰减度为10%的2号相机采集图像;
当20000Lux≤f<30000Lux,启用可见光相机矩阵中衰减度为20%的3号相机采集图像;
当30000Lux≤f<40000Lux,启用可见光相机矩阵中衰减度为30%的4号相机采集图像;
当40000Lux≤f<50000Lux,启用可见光相机矩阵中衰减度为40%的5号相机采集图像;
当50000Lux≤f<60000Lux,启用可见光相机矩阵中衰减度为50%的6号相机采集图像;
当60000Lux≤f<70000Lux,启用可见光相机矩阵中衰减度为60%的7号相机采集图像;
当70000Lux≤f<80000Lux,启用可见光相机矩阵中衰减度为70%的8号相机采集图像;
当f≥80000Lux,启用可见光相机矩阵中衰减度为80%的9号相机采集图像。
CN201710172777.XA 2017-03-22 2017-03-22 一种光照自适应的拖拉机视觉导航图像采集***及方法 Active CN107063230B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710172777.XA CN107063230B (zh) 2017-03-22 2017-03-22 一种光照自适应的拖拉机视觉导航图像采集***及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710172777.XA CN107063230B (zh) 2017-03-22 2017-03-22 一种光照自适应的拖拉机视觉导航图像采集***及方法

Publications (2)

Publication Number Publication Date
CN107063230A CN107063230A (zh) 2017-08-18
CN107063230B true CN107063230B (zh) 2020-08-11

Family

ID=59620866

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710172777.XA Active CN107063230B (zh) 2017-03-22 2017-03-22 一种光照自适应的拖拉机视觉导航图像采集***及方法

Country Status (1)

Country Link
CN (1) CN107063230B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1805551A (zh) * 2005-01-11 2006-07-19 吴水超 一种多摄像头实现宽动态范围图像采集的简易方法
CN102590883A (zh) * 2011-09-30 2012-07-18 长春奥普光电技术股份有限公司 机场道面异物扫描装置
CN103546723A (zh) * 2013-09-27 2014-01-29 深圳市飞瑞斯科技有限公司 一种监控***及方法
CN105583162A (zh) * 2014-11-05 2016-05-18 南京大目信息科技有限公司 一种通用型全自动胶囊缺陷检测***
CN106056566A (zh) * 2016-06-02 2016-10-26 中国民航大学 一种机载视觉增强综合光电信息采集及处理***

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013219560A (ja) * 2012-04-09 2013-10-24 Sony Corp 撮像装置、撮像方法及びカメラシステム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1805551A (zh) * 2005-01-11 2006-07-19 吴水超 一种多摄像头实现宽动态范围图像采集的简易方法
CN102590883A (zh) * 2011-09-30 2012-07-18 长春奥普光电技术股份有限公司 机场道面异物扫描装置
CN103546723A (zh) * 2013-09-27 2014-01-29 深圳市飞瑞斯科技有限公司 一种监控***及方法
CN105583162A (zh) * 2014-11-05 2016-05-18 南京大目信息科技有限公司 一种通用型全自动胶囊缺陷检测***
CN106056566A (zh) * 2016-06-02 2016-10-26 中国民航大学 一种机载视觉增强综合光电信息采集及处理***

Also Published As

Publication number Publication date
CN107063230A (zh) 2017-08-18

Similar Documents

Publication Publication Date Title
KR101932368B1 (ko) 헤드 마운트 표시 장치 및 표시 방법
US9819874B2 (en) Camera color temperature compensation system and smart terminal employing same
CN106375645B (zh) 一种基于红外摄像装置的自适应控制***
US20200382717A1 (en) Eye-tracking module with scenario-based mode switching function
CN103024279A (zh) 摄像头亮度调节装置及其实现方法
CN106295536B (zh) 自适应式虹膜识别装置及利用该装置进行虹膜识别的方法
CN105426848A (zh) 一种提高生物识别成功率的成像方法
CA3045309A1 (en) Systems and methods for image capture in an assembly line grow pod
CN104184957A (zh) 一种适用于空间探测成像的基于自适应预期图像平均亮度的自动曝光控制方法
CN101453563A (zh) 摄影装置及其显示亮度调整方法
CN105144689A (zh) 摄像装置及图像显示方法
CN203827438U (zh) 一种人像拍摄***
CN105869568A (zh) Led显示屏的屏幕亮度色度校正装置和方法
CN106157930A (zh) 基于头戴式可视设备的亮度调节方法及装置
CN208954611U (zh) 一种户外led显示屏亮度校正***
CN102883100A (zh) 一种自动调整摄像参数的装置与方法
JP2016139116A (ja) 頭部装着型表示装置、表示方法
CN102968177B (zh) 手势感测方法
CN114938556B (zh) 台灯光线自动调节方法、装置、电子设备及存储介质
CN207219100U (zh) 一种照度实时调节照明***
CN107063230B (zh) 一种光照自适应的拖拉机视觉导航图像采集***及方法
CN113939068A (zh) 一种智能led灯调光控制装置及智能led灯
CN105513566A (zh) 可依据不同环境执行最佳化调整的影像调整方法及其显示器
CN205864557U (zh) 一种具有自动补光功能的摄像机
WO2019037994A1 (en) INDEPENDENT PLANT CULTURE CABINET

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant