CN114845052B - 一种拍摄参数调整方法、装置、摄像机及目标设备 - Google Patents
一种拍摄参数调整方法、装置、摄像机及目标设备 Download PDFInfo
- Publication number
- CN114845052B CN114845052B CN202210428444.XA CN202210428444A CN114845052B CN 114845052 B CN114845052 B CN 114845052B CN 202210428444 A CN202210428444 A CN 202210428444A CN 114845052 B CN114845052 B CN 114845052B
- Authority
- CN
- China
- Prior art keywords
- image
- preset
- target
- detected
- detection result
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 99
- 238000001514 detection method Methods 0.000 claims abstract description 304
- 230000001502 supplementing effect Effects 0.000 claims description 25
- 230000004927 fusion Effects 0.000 claims description 12
- 230000003068 static effect Effects 0.000 claims description 11
- 239000013589 supplement Substances 0.000 claims description 5
- 230000000694 effects Effects 0.000 abstract description 30
- 238000003384 imaging method Methods 0.000 abstract description 30
- 230000007613 environmental effect Effects 0.000 description 11
- 238000004590 computer program Methods 0.000 description 10
- 238000013459 approach Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 8
- 238000012549 training Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 6
- 230000008901 benefit Effects 0.000 description 5
- 230000009471 action Effects 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 238000007500 overflow downdraw method Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 241000255925 Diptera Species 0.000 description 1
- 241001465754 Metazoa Species 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000007499 fusion processing Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000010422 painting Methods 0.000 description 1
- 239000000047 product Substances 0.000 description 1
- 230000001681 protective effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
本申请实施例提供了一种拍摄参数调整方法、装置、摄像机及目标设备。方案如下:获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像;对待检测图像中的第一对象进行检测,得到第一检测结果;获取预设图像中第二对象的第二检测结果;基于第一检测结果和第二检测结果,计算待检测图像中第一对象与预设图像中第二对象间的匹配度;在匹配度小于预设匹配度阈值时,调整可见光摄像头在目标环境光亮度下的拍摄参数。通过本申请实施例提供的技术方案,解决了基于平均亮度值进行拍摄参数调整存在误差的问题,提高了拍摄参数调整的准确性,从而使得基于调整后的拍摄所采集到的图像较多图像细节,提高了图像的成像效果。
Description
技术领域
本申请涉及图像处理技术领域,特别是涉及一种拍摄参数调整方法、装置、摄像机及目标设备。
背景技术
当环境光亮度较低(如夜晚或阴天)时,摄像机采集到的图像存在图像细节不足,导致成像效果较差的问题。
相关技术为了解决上述问题,在环境光亮度较低时,根据此时采集到的图像的平均亮度值,调整摄像机的拍摄参数,以期采集更多的细节;然而,当摄像机的采集场景中存在蚊帐、防护网等半遮挡物时,由于该半遮挡物在图像中的反光光斑会导致该图像的平均亮度值偏高,那么此时,基于该平均亮度值调整得到的拍摄参数存在误差,从而导致摄像机基于该拍摄参数所拍摄出来的图像则会明显现出半遮挡物的光斑,而其他细节不清楚,成像效果较差。
发明内容
本申请实施例的目的在于提供一种拍摄参数调整方法、装置、摄像机及目标设备,以解决基于平均亮度值进行拍摄参数调整存在误差的问题,提高拍摄参数调整的准确性,从而使得基于调整后的拍摄所采集到的图像较多图像细节,提高图像的成像效果。具体技术方案如下:
本申请实施例提供了一种拍摄参数调整方法,所述方法包括:
获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像;
对所述待检测图像中的第一对象进行检测,得到第一检测结果;
获取预设图像中第二对象的第二检测结果,所述预设图像为所述可见光摄像头在预设环境光亮度下针对所述目标场景采集的可见光图像;
基于所述第一检测结果和所述第二检测结果,计算所述待检测图像中第一对象与预设图像中第二对象间的匹配度;
在所述匹配度小于预设匹配度阈值时,调整所述可见光摄像头在所述目标环境光亮度下的拍摄参数。
可选的,若检测结果用于指示图像中各对象的位置信息,或者检测结果用于指示图像中各对象的位置信息和每一位置信息对应对象的类别信息,则基于所述第一检测结果和所述第二检测结果,计算所述待检测图像中第一对象与预设图像中第二对象间的匹配度的步骤,包括:
根据所述第一检测结果和所述第二检测结果,确定目标对象的第一数量,作为所述待检测图像中第一对象与所述预设图像中第二对象间的匹配度;或者
根据所述第一检测结果和所述第二检测结果,确定所述目标对象中包括的匹配像素点的第二数量,作为所述待检测图像中第一对象与所述预设图像中第二对象间的匹配度;或者
根据所述第一检测结果和所述第二检测结果,确定所述待检测图像中目标对象中包括的匹配像素点的第一面积和,作为所述待检测图像中第一对象与所述预设图像中第二对象间的匹配度;
其中,所述目标对象为所述待检测图像与所述预设图像中位置信息匹配的对象,或者所述待检测图像与所述预设图像中位置信息和类别信息均匹配的对象。
可选的,若检测结果用于指示图像中各对象的位置信息,或者检测结果用于指示图像中各对象的位置信息和每一位置信息对应对象的类别信息,则所述基于所述第一检测结果和所述第二检测结果,计算所述待检测图像中第一对象与预设图像中第二对象间的匹配度的步骤,包括:
根据所述第一检测结果和所述第二检测结果,确定目标对象的第三数量,并计算所述第三数量与第四数量的比值,作为所述待检测图像中第一对象与所述预设图像中第二对象间的匹配度;或者
根据所述第一检测结果和所述第二检测结果,确定所述目标对象中包括的匹配像素点的第五数量,并计算所述第五数量与第六数量的比值,作为所述待检测图像中第一对象与所述预设图像中第二对象间的匹配度;或者
根据所述第一检测结果和所述第二检测结果,确定所述目标对象中包括的匹配像素点的第二面积和,并计算所述第二面积和与第三面积和的比值,作为所述待检测图像中第一对象与所述预设图像中第二对象间的匹配度;
其中,所述目标对象为所述待检测图像与所述预设图像中位置信息匹配的对象,或者所述待检测图像与所述预设图像中位置信息和类别信息均匹配的对象,所述第四数量为所述第二检测结果指示的位置信息的数量,所述第六数量为所述第二检测结果指示的各位置信息对应像素点的和值,所述第三面积和为所述第二检测结果指示的各位置信息对应像素点面积的和值。
可选的,在对所述待检测图像中的第一对象进行检测,得到第一检测结果之前,所述方法还包括:
获取红外摄像头在所述目标环境光亮度下针对所述目标场景采集的红外图像;
对所述待检测图像和所述红外图像进行图像融合,得到融合后的待检测图像;
所述对所述待检测图像中的第一对象进行检测,得到第一检测结果的步骤,包括:
基于预设目标检测算法,对融合后的待检测图像中的每一对象进行目标检测,得到融合后的待检测图像的第四检测结果;
从所述第四检测结果中获取处于静止状态的第三对象的检测结果,作为所述待检测图像中第一对象的第一检测结果。
可选的,所述在所述匹配度小于预设匹配度阈值时,调整所述可见光摄像头在所述目标环境光亮度下的拍摄参数的步骤,包括:
在所述匹配度小于预设匹配度阈值时,从预设拍摄参数集合中选取未被选择的拍摄参数,作为待调整拍摄参数;
将所述可见光摄像头在所述目标环境光亮度下的拍摄参数调整为所述待调整拍摄参数;
基于所述待调整拍摄参数,返回执行所述获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像的步骤,直至所述匹配度不小于所述预设匹配度阈值,将当前时刻的拍摄参数确定为所述可见光摄像头在所述目标环境光亮度下的目标拍摄参数。
可选的,所述方法还包括:
在所述预设拍摄参数集合中的每一拍摄参数均被选择为所述待调整拍摄参数的情况下,若每一待调整拍摄参数下的匹配度均小于所述预设匹配度阈值,则利用红外补光灯增大所述目标场景的红外补光强度,并基于增大后的红外补光强度,返回执行所述获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像的步骤。
可选的,所述方法应用于摄像机中的图像处理器或与所述摄像机通信连接的目标设备。
本申请实施例还提供了一种拍摄参数调整装置,所述装置包括:
第一获取模块,用于获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像;
检测模块,用于对所述待检测图像中的第一对象进行检测,得到第一检测结果;
第二获取模块,用于获取预设图像中第二对象的第二检测结果,所述预设图像为所述可见光摄像头在预设环境光亮度下针对所述目标场景采集的可见光图像;
计算模块,用于基于所述第一检测结果和所述第二检测结果,计算所述待检测图像中第一对象与预设图像中第二对象间的匹配度;
调整模块,用于在所述匹配度小于预设匹配度阈值时,调整所述可见光摄像头在所述目标环境光亮度下的拍摄参数。
本申请实施例还提供了一种摄像机,所述摄像机包括可见光摄像头和图像处理器;
所述可见光摄像头,用于采集目标场景的可见光图像;
所述图像处理器,用于获取所述可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像;对所述待检测图像中的第一对象进行检测,得到第一检测结果;获取预设图像中第二对象的第二检测结果,所述预设图像为所述可见光摄像头在预设环境光亮度下针对所述目标场景采集的可见光图像;基于所述第一检测结果和所述第二检测结果,计算所述待检测图像中第一对象与预设图像中第二对象间的匹配度;在所述匹配度小于预设匹配度阈值时,调整所述可见光摄像头在所述目标环境光亮度下的拍摄参数。
可选的,所述摄像机还包括红外摄像头和红外补光灯;
所述红外摄像头,用于采集目标场景的红外图像;
所述图像处理器,还用于在对所述待检测图像中的第一对象进行检测,得到第一检测结果之前,获取红外摄像头在所述目标环境光亮度下针对所述目标场景采集的红外图像;对所述待检测图像和所述红外图像进行图像融合,得到融合后的待检测图像;
所述图像处理器,具体用于基于预设目标检测算法,对融合后的待检测图像中的每一对象进行目标检测,得到融合后的待检测图像的第四检测结果;从所述第四检测结果中获取处于静止状态的第三对象的检测结果,作为所述待检测图像中第一对象的第一检测结果;
所述红外补光灯,用于增大所述目标场景的红外补光强度。
本申请实施例还提供了一种目标设备,所述目标设备与摄像机通信连接;
所述目标设备,用于获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像;对所述待检测图像中的第一对象进行检测,得到第一检测结果;获取预设图像中第二对象的第二检测结果,所述预设图像为所述可见光摄像头在预设环境光亮度下针对所述目标场景采集的可见光图像;基于所述第一检测结果和所述第二检测结果,计算所述待检测图像中第一对象与预设图像中第二对象间的匹配度;在所述匹配度小于预设匹配度阈值时,调整所述可见光摄像头在所述目标环境光亮度下的拍摄参数。
本申请实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述任一所述的拍摄参数调整方法步骤。
本申请实施例还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述任一所述的拍摄参数调整方法。
本申请实施例有益效果:
本申请实施例提供的技术方案,可以在获取到可见光摄像头在目标环境光亮度下针对目标场景采集的待检测图像后,对该待检测图像中的第一对象进行检测,得到第一检测结果,从而根据第一检测结果以及预设图像中第二对象的第二检测结果,计算待检测图像中第一对象与预设图像中第二对象间的匹配度,并在该匹配度小于预设匹配度阈值时,调整可见光摄像头在目标环境光亮度下的拍摄参数。
相比于相关技术,由于相同拍摄条件下,同一可见光摄像头对同一场景进行图像采集所得到图像应该相同,也就是此时可见光摄像头所采集到的图像中各对象间的匹配度最大。因此,当可见光摄像头在不同环境光亮度下对同一目标场景进行图像采集时,可见光摄像头所采集到的图像中各对象间的匹配度越小,则可见光摄像头所采集到的图像中所包括的图像细节间的差距越大。因此,在本申请实施例中,在获取到目标环境光亮度下可见光摄像头针对目标场景采集的待检测图像后,通过计算该待检测图像中第一对象与可见光摄像头在预设环境光亮度下采集到的预设图像中第二对象间的匹配度,使得该匹配度可以准确反映出不同环境光亮度下对应的图像成像效果。由于预设图像是在预设环境光亮度下,如白天所对应的环境光亮度,当匹配度小于预设匹配度阈值时,可以确定目标环境光亮度下采集的待检测图像所包括的图像细节明显少于预设环境光亮度下采集的预设图像所包括的图像细节,此时,通过对可见光摄像头的拍摄参数的调整,可以提高目标环境光亮度下采集的可见光图像中第一对象与预设环境光亮度下采集的预设图像中第二对象间的匹配度,从而使得目标环境光亮度下采集的图像的成像效果趋近于预设环境光亮度下采集的预设图像的成像效果。这解决了基于平均亮度值进行拍摄参数调整存在误差的问题,提高了拍摄参数调整的准确性,从而使得基于调整后的拍摄所采集到的图像较多图像细节,提高了图像的成像效果。
当然,实施本申请的任一产品或方法并不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,还可以根据这些附图获得其他的实施例。
图1为本申请实施例提供的拍摄参数调整方法的第一种流程示意图;
图2为本申请实施例提供的拍摄参数调整方法的第二种流程示意图;
图3为本申请实施例提供的拍摄参数调整方法的第三种流程示意图;
图4为本申请实施例提供的拍摄参数调整方法的第四种流程示意图;
图5为本申请实施例提供的拍摄参数调整方法的第五种流程示意图;
图6为本申请实施例提供的拍摄参数调整方法的第六种流程示意图;
图7为本申请实施例提供的拍摄参数调整方法的第七种流程示意图;
图8为本申请实施例提供的拍摄参数调整方法的第八种流程示意图;
图9为本申请实施例提供的拍摄参数调整方法的第九种流程示意图;
图10为本申请实施例提供的拍摄参数调整方法的第十种流程示意图;
图11为本申请实施例提供的拍摄参数调整装置的一种结构示意图;
图12为本申请实施例提供的摄像机的一种结构示意图;
图13为本申请实施例提供的目标设备的一种结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员基于本申请所获得的所有其他实施例,都属于本申请保护的范围。
为了解决相关技术中的问题,本申请实施例提供了一种拍摄参数调整方法。如图1所示,图1为本申请实施例提供的拍摄参数调整方法的第一种流程示意图。该方法包括以下步骤。
步骤S101,获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像。
步骤S102,对待检测图像中的第一对象进行检测,得到第一检测结果。
步骤S103,获取预设图像中第二对象的第二检测结果,预设图像为可见光摄像头在预设环境光亮度下针对目标场景采集的可见光图像。
步骤S104,基于第一检测结果和第二检测结果,计算待检测图像中第一对象与预设图像中第二对象间的匹配度。
步骤S105,在匹配度小于预设匹配度阈值时,调整可见光摄像头在目标环境光亮度下的拍摄参数。
在本申请实施例中,图1所示的拍摄参数调整方法可以应用于摄像机中的图像处理器,或者应用于与摄像机通信连接的目标设备。其中,图像处理器可以为一人工智能(Artificial Intelligence,AI)芯片。目标设备可以摄像机的图像处理平台,如云服务器等。在此,对图像处理器和目标设备不作具体限定。为便于理解,下面以电子设备为执行主体,对本申请实施例提供的拍摄参数调整方法进行说明,并不起任何限定作用。
在上述摄像机中可以包括可见光摄像头。该可见光摄像头可以用于实时采集目标场景的可见光图像。其中,目标场景为可见光摄像头的视场角内可以拍摄到的场景。除此以外,上述摄像机还可以包括红外摄像头或红外补光灯等,在此,对上述摄像机所包括的部件不作具体说明。
通过图1所示的方法,相比于相关技术,由于相同拍摄条件下,同一可见光摄像头对同一场景进行图像采集所得到图像应该相同,也就是此时可见光摄像头所采集到的图像中各对象间的匹配度最大。因此,当可见光摄像头在不同环境光亮度下对同一目标场景进行图像采集时,可见光摄像头所采集到的图像中各对象间的匹配度越小,则可见光摄像头所采集到的图像中所包括的图像细节间的差距越大。因此,在本申请实施例中,在获取到目标环境光亮度下可见光摄像头针对目标场景采集的待检测图像后,通过计算该待检测图像中第一对象与可见光摄像头在预设环境光亮度下采集到的预设图像中第二对象间的匹配度,使得该匹配度可以准确反映出不同环境光亮度下对应的图像成像效果。由于预设图像是在预设环境光亮度下,如白天所对应的环境光亮度,当匹配度小于预设匹配度阈值时,可以确定目标环境光亮度下采集的待检测图像所包括的图像细节明显少于预设环境光亮度下采集的预设图像所包括的图像细节,此时,通过对可见光摄像头的拍摄参数的调整,可以提高目标环境光亮度下采集的可见光图像中第一对象与预设环境光亮度下采集的预设图像中第二对象间的匹配度,从而使得目标环境光亮度下采集的图像的成像效果趋近于预设环境光亮度下采集的预设图像的成像效果。这解决了基于平均亮度值进行拍摄参数调整存在误差的问题,提高了拍摄参数调整的准确性,从而使得基于调整后的拍摄所采集到的图像较多图像细节,提高了图像的成像效果。
下面通过具体的实施例,对本申请实施例进行说明。
针对上述步骤S101,即获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像。
在本步骤中,上述可见光摄像头可以实时针对目标场景进行图像采集。电子设备可以获取可见光摄像头在目标环境光亮度下采集的可见光图像,作为待检测图像。
一个可选的实施例中,在获取上述待检测图像时,可见光摄像头进行图像采集得到上述待检测图像后,可以将该待检测图像发送给电子设备。此时,电子设备将接收到该待检测图像。
另一个可选的实施例中,在获取上述待检测图像时,可见光摄像头进行图像采集得到可见光图像后,可以根据采集到的可见光图像所对应的环境光亮度,对采集到的可见光图像进行存储。例如,按照环境光亮度和可见光图像间的对应关系,对采集到的可见光图像进行存储。电子设备可以从存储的图像中,获取目标环境光亮度所对应的可见光图像,得到待检测图像。
在本申请实施例中,上述环境光亮度可以由环境光检测的传感器检测得到,该传感器可以集成在上述摄像机中,也可以集成在其他设备中,如集成在上述目标设备中。
上述目标环境光亮度可以为当前时刻的环境光亮度,也可以为预先指定的环境光亮度。为便于理解,下面仅以目标环境光亮度为当前时刻的环境光亮度为例进行说明,并不起任何限定作用。
针对上述步骤S102,即对待检测图像中的第一对象进行检测,得到第一检测结果。
一个可选的实施例中,电子设备在获得上述待检测图像后,可以基于预设目标检测算法,对该待检测图像包括的每一对象进行目标检测,得到该可见光图像中每一对象的检测结果。电子设备可以从该检测结果中,选择出第一对象的检测结果,作为第一检测结果。
在上述待检测图像中可以包括多个目标物,如人员、车辆、树木、座椅、建筑、壁画等,每一目标物均为该待检测图像中的一个待检测的对象。在此,对上述待检测图像中包括的对象不作具体限定。
一个可选的实施例中,上述待检测图像中的第一对象可以为待检测图像中处于静止状态的目标物。例如,待检测图像中的树木、建筑、静止的车辆等。
上述处于静止状态的目标物可以表示为待检测图像中位置不变、以及位置变化相对较小的目标物。
另一个可选的实施例中,上述待检测图像中的第一对象还可以是根据物品的类别信息等预先设定的指定目标物。例如,预先可以将树木、标志牌等设置为指定目标物,当待检测图像中包括指定目标物时,该指定目标物即为待检测图像中的第一对象。
在本申请实施例中,对上述待检测图像中的第一对象不作具体限定。为便于理解,下文仅以第一对象为待检测图像中处于静止状态的目标物为例进行说明,并不起任何限定作用。
上述检测结果可以用于指示图像中目标物的属性信息。该属性信息可以为目标物的位置信息、类别信息、颜色信息、形状信息中的一种或多种。在此,对上述检测结果所指示的目标物的属性信息不作具体限定。
在本申请实施例中,由于可见光摄像头进行图像采集时,目标场景中可能包括处于移动状态的目标物,如人员或行驶的车辆等,这将严重影响后期待检测图像和预设图像间的匹配度,因此,将待检测图像中处于静止状态的目标物或者预先设定的指定目标确定为第一对象,可以有效降低图像中处于移动状态的目标物所造成的干扰,提高后期计算得到的匹配度的准确性。
一个可选的实施例中,在获取第一检测结果时,电子设备针对待检测图像中的每一目标物进行目标检测后,可以根据每一目标物的检测结果所指示的目标物的类别信息,丢弃类别信息为预设类别的检测结果,得到上述第一检测结果。例如,电子设备可以丢弃类别信息为人员、动物、车辆等预设类别的检测结果,并将剩余的检测结果确定为待检测图像中第一对象所对应的第一检测结果。
另一个可选的实施例中,若第一对象为待检测图像中处于静止状态的对象,则上述步骤S102,对待检测图像中的第一对象进行检测,得到第一检测结果可以表示为:
基于预设目标检测算法,对待检测图像中的每一对象进行目标检测,得到待检测图像的第三检测结果;从第三检测结果中获取处于静止状态的第一对象的第一检测结果。
例如,当上述待检测图像是可见光摄像头实时对目标场景进行图像采集得到的可见光图像时,电子设备可以在获取上述待检测图像时,还可以获取该待检测图像采集前/采集后预设数量个可见光图像,通过对获取到的多个可见光图像的检测分析,确定出该待检测图像中的处于移动状态的目标物,从而丢弃所有处于移动状态的目标物的检测结果,得到待检测图像中所有处于静止状态的目标物的检测结果,作为待检测图像中第一对象的第一检测结果。在此,对上述待检测图像中处于移动状态的目标物的检测方法不作具体限定。
在本申请实施例中,由于上述摄像机的安装位置以及可见光图像的采集角度、可见光图像的采集时间点等的不同,这将导致不同可见光图像中的目标物有所不同,从而导致图像包括的对象、以及对象的检测结果有所不同。并且,根据待检测对象中第一对象的不同,电子设备可以采用不同的方法得到待检测图像中第一对象的第一检测结果。在此,对上述待检测图像中第一对象的数量、第一检测结果以及第一检测结果的获取方式不作具体限定。
一个可选的实施例中,在基于上述预设目标检测算法,对上述待检测图像进行目标检测时,电子设备可以利用预先训练得到的目标检测模型,对上述待检测图像进行目标检测。
上述目标检测模型是利用预设训练集训练得到的,该预设训练集中可以包括多个样本图像,以及每一样本图像的标签信息,该标签信息用于指示样本图像中目标物的属性信息。其中,样本图像可以为可见光图像。关于目标检测模型的训练过程可参照相关技术中的训练方式,在此不作具体说明。
一个可选的实施例中,为了提高训练得到的目标检测模型的准确性,上述预设训练集中的样本图像可以为补光场景中采集到的图像。也就是样本图像采集时通过对采集场景的补光操作,使得采集到的样本图像中的每一目标物清晰度更加清楚。
针对上述步骤S103,即获取预设图像中第二对象的第二检测结果,预设图像为可见光摄像头在预设环境光亮度下针对目标场景采集的可见光图像。
在本申请实施例中,电子设备除了获取上述待检测图像以外,电子设备还可以获取可见光摄像头在环境光亮度为预设环境光亮度下针对目标场景采集的可见光图像,得到预设图像。在获取到该预设图像后,电子设备可以对该预设图像进行目标检测,得到该预设图像中第二对象的第二检测结果。
一个可选的实施例中,电子设备在获取到上述预设图像后,可以对该预设图像进行存储。在执行上述步骤S103时,电子设备可以获取存储的预设图像,并对该预设图像进行目标检测,得到预设图像中第二对象的第二检测结果。
另一个可选的实施例中,电子设备在获取到上述预设图像后,可以对该预设图像进行目标检测,得到预设图像中第二对象的第二检测结果,并对该第二检测结果进行存储。在执行上述步骤S103时,电子设备可以获取存储的第二检测结果。
在本申请实施例中,对上述第二检测结果的获取方式不作具体限定。
一个可选的实施例中,上述第二对象可以为预设图像中处于静止状态的目标物。或者,上述第二对象可以为预设图像中的指定目标物。关于上述预设图像中第二对象的第二检测结果的获取方式可参照上述第一检测结果的获取方式,在此,对上述第二检测结果的获取过程不作具体说明。
上述预设图像中可以包括一个或多个第二对象,在此,对上述第二对象的数量不作具体限定。
在本申请实施例中,上述预设图像可以为图像清晰度大于预设清晰度阈值的可见光图像。其中,图像清晰度可以以图像中目标物的数量表示,或者以图像中目标物的数量与真实场景中目标物数量的比值。例如,预设图像的图像清晰度可以表示为预设图像中检测出的目标物的数量与真实目标场景中目标物数量的比值。
一个可选的实施例中,为了提高后期可见光摄像头的拍摄参数调整的准确性,上述预设环境光亮度可以为预先指定的环境光亮度。该预设环境光亮度可以为正常光照下的环境光亮度,例如,预设环境光亮度可以为正常光照条件下上午10:00时的环境光亮度。该预设环境光亮度也可以是通过补光设备进行补光后的环境光亮度。在此,对上述预设环境光亮度不作具体限定。
在本申请实施例中,考虑到可见光摄像头在相同环境光亮度下对同一场景进行采集得到的图像相同的情况,上述目标环境光亮度与上述预设环境光亮度不同,因此,上述待检测图像与上述预设图像不同。
针对上述目标环境光亮度和上述预设环境光亮度,目标环境光亮度可以大于预设环境光亮度,或者,目标环境光亮度可以小于预设环境光亮度。在此,对上述目标环境光亮度和预设环境光亮度的大小不作具体限定。
一个可选的实施例中,由于相同拍摄条件下,可见光摄像头针对目标场景所采集到的图像中图像细节相同,因此,为了节约相同或相近环境光亮度下拍摄参数调整所需的计算资源,并且提高拍摄参数调整的有效性,上述目标环境光亮度与预设环境光亮度间的差值可以大于与预设差值。
上述预设差值可以根据实际应用场景以及用户需求等进行设定,在此,对上述预设差值不作具体限定。
为便于理解,下面仅以预设环境光亮度为白天某一时间点的环境光亮度,目标环境光亮度为夜晚某一时间点的环境光亮度为例进行说明,并不起任何限定作用。
在图1所示的实施例中,上述步骤S103是在步骤S102之后执行的,除此以外,上述步骤S103还可以与上述步骤S101同时执行,或者在步骤S101之前/之后执行。在此,对上述步骤S101和步骤S102,与步骤S103的执行顺序不作具体限定。
在本申请实施例中,针对上述待检测图像中的第一对象以及预设图像中的第二对象,考虑到待检测图像与预设图像采集时对应的环境光亮度、时间点等的不同,上述第一对象和第二对象的数量各类别可能相同,也可能不同。
为便于理解,以目标场景中包括一个黑色的凳子为例,由于上述预设环境光亮度为白天的环境光亮度,目标环境光亮度为夜晚的环境光亮度,因此,上述待检测图像中的该凳子的清晰度明显小于预设图像中给凳子的清晰度,此时,在对待检测图像进行目标检测时,可能无法检测出该凳子,导致第一检测结果中不包括该凳子的检测结果。
针对上述步骤S104,即基于第一检测结果和第二检测结果,计算待检测图像中第一对象与预设图像中第二对象间的匹配度。
在本步骤中,电子设备在确定上述第一检测结果和第二检测结果后,可以根据第一检测结果所指示的待检测图像中第一对象的属性信息,和第二检测结果所指示的预设图像中第二对象的属性信息,计算待检测图像中第一对象相对于预设图像中第二对象的匹配度,得到待检测图像中第一对象和预设图像中第二对象间的匹配度。关于匹配度的计算方式可参见下文描述,在此不作具体说明。
在本申请实施例中,上述匹配度用于指示待检测图像中第一对象相对于预设图像中第二对象的匹配程度。由于待检测图像和预设图像是由同一可见光摄像头在不同环境光亮度下针对同一场景采集到的可见光图像,因此,该匹配度可以反映可见光摄像头在不同环境光亮度下采集到的图像所包括的图像细节间的差异。进一步的,由于预设环境光亮度为预先设定的环境光亮度,在该环境光亮度下采集到的可见光图像所包括的图像细节较多,因此,当上述匹配度越小时,表明待检测图像中的第一对象与预设图像中的第二对象间的匹配程度较低,也就是目标环境光亮度下采集到的可见光图像所包括的图像细节,低于预设环境光亮度下采集到的可见光图像所包括的图像细节。当上述匹配度越大时,表明待检测图像中的第一对象与预设图像中的第二对象间的匹配程度较高,也就是目标环境光亮度下采集到的可见光图像所包括的图像细节,趋近于预设环境光亮度下采集到的可见光图像所包括的图像细节。
针对上述步骤S105,即在匹配度小于预设匹配度阈值时,调整可见光摄像头在目标环境光亮度下的拍摄参数。
在本申请实施例中,电子设备在计算得到上述匹配度后,可以将该匹配度与预设匹配度阈值进行比较。该预设匹配度阈值可以根据具体应用场景、用户需求等进行设定,在此,对预设匹配度阈值不作具体限定。
一个可选的实施例中,当上述匹配度小于预设匹配度阈值时,电子设备可以确定待检测图像中的第一对象与预设图像中的第二对象间的匹配程度较低,也就是可见光摄像头基于待检测图像采集时的拍摄参数,在目标环境光亮度下采集到的可见光图像所包括的图像细节,低于预设环境光亮度下采集到的可见光图像所包括的图像细节。此时,电子设备可以对可见光摄像头在目标环境光亮度下的拍摄参数进行调整。
上述可见光摄像头的拍摄参数包括但不限于可见光摄像头的曝光参数、景深参数和增益参数。其中,曝光参数可以与可见光摄像头的光圈、快门速度以及感光度有关。例如,曝光参数可以为光圈的档位值、快门速度值、感光度值。在此,对可见光摄像头的拍摄参数不作具体限定。
在本申请实施例中,当上述匹配度小于预设匹配度阈值时,电子设备可以对可见光摄像头在目标环境光亮度下的拍摄参数进行一次或多次调整。另外,根据上述目标环境光亮度和预设环境光亮度的大小,可见光摄像头进行图像采集时的拍摄参数的不同,电子设备对可见光摄像头拍摄参数的调整方式也有所不同。关于上述可见光摄像头的拍摄参数的调整方式可参见下文描述,在此不作具体说明。
一个可选的实施例中,当上述匹配度不小于预设匹配度阈值时,电子设备可以确定可见光光摄像头基于待检测图像采集时的拍摄参数,在目标环境光亮度下采集到的可见光图像所包括的图像细节,已经趋近于预设环境光亮度下采集到的可见光图像所包括的图像细节。此时,电子设备可以不对可见光摄像头在待检测图像采集时的拍摄参数进行调整。也就是将该拍摄参数确定为目标环境光亮度下可见光摄像头进行图像采集时的拍摄参数。
一个可选的实施例中,为了进一步提高上述可见光摄像头参数调整的准确性,电子设备在对可见光摄像头的拍摄参数进行调整后,可以返回执行上述步骤S101,也就是返回执行上述获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像的步骤,直至计算得到的匹配度大于等于预设匹配度阈值时,将当前时刻的拍摄参数确定为可见光摄像头在目标环境光亮度下的目标拍摄参数。
在本申请实施例中,可见光摄像头在采集上述待检测图像和预设图像时,可见光摄像头的拍摄参数可以相同,也可以不同。在此,对可见光摄像头在采集待检测图像和预设图像时的拍摄参数不作具体限定。
一个可选的实施例中,上述检测结果可以用于指示图像中各对象的位置信息,也就是上述检测结果所指示的目标物的属性信息中包括目标物的位置信息。
另一个可选的实施例中,上述检测结果用于指示图像中各对象的位置信息和每一位置信息对应对象的类别信息,也就是上述检测结果所指示的目标物的属性信息中包括目标物的位置信息和目标物的类别信息。
在此,对上述检测结果所指示的目标物的属性信息不作具体限定。
一个可选的实施例中,根据上述图1所示的方法,本申请实施例还提供了一种拍摄参数调整方法。如图2所示,图2为本申请实施例提供的拍摄参数调整方法的第二种流程示意图。在图2所示的方法中,将上述步骤S104可以细化为以下步骤,即步骤S1041。
步骤S1041,根据第一检测结果和第二检测结果,确定目标对象的第一数量,作为待检测图像中第一对象与预设图像中第二对象间的匹配度。
上述目标对象为待检测图像与预设图像中位置信息匹配的对象,或者待检测图像与预设图像中位置信息和类别信息均匹配的对象。
在本申请实施例中,上述第一检测结果指示了上述待检测图像中各第一对象的位置信息。上述第二检测结果指示了上述预设图像中各第二对象的位置信息。
一个可选的实施例中,通过对待检测图像和预设图像的目标检测,针对上述待检测图像和预设图像中的每一对象,电子设备可以利用检测框对待检测图像和预设图像中的每一对象所在的区域进行标记。此时,上述位置信息可以表示为各对象所对应检测框在图像中的位置坐标。
在上述检测结果中,每一位置信息表示图像中相应位置处存在一个检测到的对象。因此,电子设备可以根据上述第一检测结果确定出待检测图像中每一第一对象所在的位置,并根据上述第二检测结果确定出预设图像中每一第二对象所在的位置。此时,电子设备可以根据待检测图像中每一第一对象的位置信息和预设图像中每一第二对象的位置信息,对待检测图像中的第一对象和预设图像中的第二对象的位置进行匹配,从而确定出待检测图像和预设图像中位置匹配的对象(记为第一目标对象)。电子设备可以将待检测图像和预设图像中的第一目标对象确定为同一对象。此时,电子设备可以统计待检测图像和预设图像中位置匹配的对象的数量(记为第一数量),并将该第一数量确定为待检测图像中第一对象与预设图像中第二对象间的匹配度。
一个可选的实施例中,电子设备在确定上述第一数量时,可以将待检测图像中每一第一对象的位置信息,与预设图像中每一第二对象的位置信息进行匹配,统计待检测图像和预设图像中位置信息相同的对象的数量,得到第一数量。
另一个可选的实施例中,考虑当环境光亮度的大小以及目标场景的其他因素(如天气等)的影响,可能导致检测到的同一场景中的同一对象所在的位置存在一定的差异,因此,电子设备在确定上述第一数量时,可以将待检测图像中每一第一对象的位置信息,与预设图像中每一第二对象的位置信息进行匹配,统计待检测图像和预设图像中位置信息间误差在预设误差阈值内的对象的数量,作为第一数量。
上述预设误差阈值可以根据具体应用场景和用户需求等进行设置,在此,对上述预设误差阈值不作具体限定。
通过上述步骤S1041,电子设备可以根据待检测图像中第一对象的位置信息与预设图像中第二对象的位置信息,将待检测图像和预设图像中位置信息匹配的对象的数量,确定为待检测图像中第一对象和预设图像中第二对象间的匹配度,有效提高了确定出的匹配度的准确性。
在图2所示的实施例中,仅以目标对象为上述第一目标对象为例进行说明。除此以外,当上述目标对象为待检测图像与预设图像中位置信息和类别信息均匹配的对象(记为第二目标对象)时,也可采用上述步骤S1041所示的方法确定待检测图像中第一对象和预设图像中第二对象间的匹配度,在此不作具体说明。
另一个可选的实施例中,如图3所示,图3为本申请实施例提供的拍摄参数调整方法的第三种流程示意图。在图3所示的方法中,将上述步骤S104可以细化为以下步骤,即步骤S1042。
步骤S1042,根据第一检测结果和第二检测结果,确定目标对象中包括的匹配像素点的第二数量,作为待检测图像中第一对象与预设图像中第二对象间的匹配度。
在本步骤中,电子设备在确定上述待检测图像和预设图像中的目标对象后,针对待检测图像和预设图像中位置匹配的每一对象(即每一目标对象),可以将待检测图像中该目标对象包括的每一像素点的像素信息,与预设图像中该目标对象对应位置处的像素点的像素信息进行匹配,确定该目标对象中包括的匹配像素点。统计各目标对象中包括的各匹配像素点的数量(记为第二数量),并将该第二数量作为待检测图像中第一对象与预设图像中第二对象间的匹配度。
在本申请实施例中,上述像素信息可以为像素点的像素值。上述匹配像素点可以表示为:两张图像中相同位置处像素点的像素值相同,也可以表示为,两张图像中相同位置处像素点的像素值间的误差在预设误差范围内。在此,预设误差范围不作具体限定。
通过上述步骤S1042,电子设备可以根据待检测图像中第一对象的位置信息与预设图像中第二对象的位置信息,将待检测图像和预设图像中位置信息匹配的对象所包括的匹配像素点的数量,确定为待检测图像中第一对象和预设图像中第二对象间的匹配度,有效提高了确定出的匹配度的准确性。
再一个可选的实施例中,如图4所示,图4为本申请实施例提供的拍摄参数调整方法的第四种流程示意图。在图4所示的方法中,将上述步骤S104可以细化为以下步骤,即步骤S1043。
步骤S1043,根据第一检测结果和第二检测结果,确定待检测图像中目标对象中包括的匹配像素点的第一面积和,作为待检测图像中第一对象与预设图像中第二对象间的匹配度。
在本步骤中,电子设备在确定上述待检测图像和预设图像中各目标对象所包括的匹配像素点的数量后,可以确定各目标对象中包括的匹配像素点的面积和值(记为第一面积和),并将该第一面积和确定为待检测图像中第一对象和预设图像中第二对象间的匹配度。
一个可选的实施例中,上述匹配像素点的面积和值可以表示为图像中匹配像素点所在区域的面积和值。
在本申请实施例中,上述像素信息可以为像素点的像素值。上述匹配像素点可以表示为:两张图像中相同位置处像素点的像素值相同,也可以表示为,两张图像中相同位置处像素点的像素值间的误差在预设误差范围内。在此,预设误差范围不作具体限定。
通过上述步骤S1043,电子设备可以根据待检测图像中第一对象的位置信息与预设图像中第二对象的位置信息,将待检测图像和预设图像中位置信息匹配的对象所包括的匹配像素点的面积,确定为待检测图像中第一对象和预设图像中第二对象间的匹配度,有效提高了确定出的匹配度的准确性。
一个可选的实施例中,根据上述图1所示的方法,本申请实施例还提供了一种拍摄参数调整方法。如图5所示,图5为本申请实施例提供的拍摄参数调整方法的第五种流程示意图。在图5所示的方法中,将上述步骤S104细化为以下步骤,即步骤S1044-步骤S1045。
步骤S1044,根据第一检测结果和第二检测结果,确定目标对象的第三数量。
上述目标对象为待检测图像与预设图像中位置信息匹配的对象,或者待检测图像与预设图像中位置信息和类别信息均匹配的对象。
在本申请实施例中,上述第一检测结果指示了待检测图像中第一对象的位置信息和每一位置信息对应的第一对象的类别信息。上述第二检测结果指示了预设图像中第二对象的位置信息和每一位置信息对应的第二对象的类别信息。
在上述检测结果中,每一位置信息表示图像中相应位置处存在一个检测到的对象,每一位置信息所对应的类别信息表示图像中相应位置处的对象所对应的类别。因此,电子设备可以根据上述第一检测结果中确定出待检测图像中每一第一对象所在的位置和类别,并根据第二检测结果确定出预设图像中每一第二对象所在的位置和类别。此时,电子设备可以根据待检测图像每一第一对象的位置信息和类别信息,以及预设图像中每一第二对象的位置信息和类别信息,对待检测图像和预设图像中的对象进行匹配,从而确定出待检测图像和预设图像中位置信息和类别信息均匹配的对象(即上述第二目标对象)。电子设备可以将待检测图像和预设图像中的每一第二目标对象,确定为同一对象。此时,电子设备可以统计待检测图像和预设图像中第二目标对象的数量(记为第三数量)。
一个可选的实施例中,电子设备在确定上述第三数量时,可以将待检测图像中每一第一对象的位置信息和类别信息,与预设图像中每一第二对象的位置信息和类别信息进行匹配,统计待检测图像和预设图像中位置信息和类别信息均相同的对象的数量,得到第三数量。
另一个可选的实施例中,考虑当环境光亮度的大小以及目标场景的其他因素的影响,可能导致检测到的同一场景中的同一对象所在的位置存在一定的差异,因此,电子设备在确定上述第三数量时,可以将待检测图像中每一第一对象的位置信息和类别信息,与预设图像中每一第二对象的位置信息和类别信息进行匹配,统计待检测图像和预设图像中位置信息间误差在预设误差阈值内、且类别信息相同的对象的数量,得到第三数量。
步骤S1045,计算第三数量与第四数量的比值,作为待检测图像中第一对象与预设图像中第二对象间的匹配度。
上述第四数量为第二检测结果指示的位置信息的数量。也就是预设图像中第二对象的数量。
在本申请实施例中,在确定上述第三数量后,电子设备可以根据第二检测结果中指示的位置信息的数量,确定预设图像中第二对象的数量(记为第四数量),也就是统计第二检测结果中位置信息所表示的位置的数量,作为预设图像中第二对象的第四数量。电子设备可以计算上述第三数量与第四数量的比值,作为待检测图像中第一对象与预设图像中第二对象间的匹配度。
在本申请实施例中,由于可见光摄像头在目标环境光亮度下的拍摄参数的调整,是在目标环境光亮度下采集到的图像的图像细节少于预设环境光亮度下采集到的图像的图像细节时进行的,因此,通过计算第三数量与第四数量的比值,可以准确确定待检测图像中检测出的第一对象相对于预设图像中检测出的第二对象的比重。进一步的,由于预设图像中检测出的第二对象的数量趋近于真实场景中第二对象的数量,因此,上述第三数量与第四数量的比值越趋近于1,则待检测图像所包括的图像细节越趋近于真实目标场景,此时,待检测图像所包括的图像细节越多。
通过上述步骤S1044-步骤S1045,电子设备根据目标环境光亮度下采集到的预设图像中第二对象的数量,以及待检测图像和预设图像中匹配的对象的数量,计算得到待检测图像中第一对象和预设图像中第二对象的匹配度,提高了确定出的匹配度的准确性。
在图5所示的实施例中,待检测图像中第一对象和预设图像中第二对象的匹配度是通过上述步骤S1045中的第三数量和第四数量的比值表示的,除此以外,该匹配度还可以以其他形式表示,例如,匹配度可以表示为:上述第四数量与第三数量的差值的倒数。在此,对上述匹配度的表示方式不作具体限定。
在图5所示的实施例中,仅以目标对象为上述目标对象为例进行说明。除此以外,当上述目标对象为上述目标对象时,也可以采用上述步骤S1044和步骤S1045,确定待检测图像中第一对象和预设图像中第二对象的匹配度,在此不作具体说明。
另一个可选的实施例中,如图6所示,图6为本申请实施例提供的拍摄参数调整方法的第六种流程示意图。在图6所示的方法中,将上述步骤S104细化为以下步骤,即步骤S1046-步骤S1047。
步骤S1046,根据第一检测结果和第二检测结果,确定目标对象中包括的匹配像素点的第五数量。
上述第五数量的确定方式可参照上述第二数量的确定方式,在此不作具体说明。
步骤S1047,计算第五数量与第六数量的比值,作为待检测图像中第一对象与预设图像中第二对象间的匹配度。
上述第六数量为第二检测结果指示的各位置信息对应像素点的和值。
通过上述步骤S1046-步骤S1047,电子设备根据目标环境光亮度下采集到的预设图像中第二对象包括的像素点的数量,以及待检测图像和预设图像中目标对象所包括的匹配像素点的数量,计算得到待检测图像中第一对象和预设图像中第二对象的匹配度,提高了确定出的匹配度的准确性。
再一个可选的实施例中,如图7所示,图7为本申请实施例提供的拍摄参数调整方法的第七种流程示意图。在图7所示的方法中,将上述步骤S104细化为以下步骤,即步骤S1048-步骤S1049。
步骤S1048,根据第一检测结果和第二检测结果,确定目标对象中包括的匹配像素点的第二面积和。
上述第二面积和的确定方式可参照上述第一面积和的确定方式,在此,不作具体说明。
步骤S1049,计算第二面积和与第三面积和的比值,作为待检测图像中第一对象与预设图像中第二对象间的匹配度。
上述第三面积和为第二检测结果指示的各位置信息对应像素点面积的和值。
通过上述步骤S1048-步骤S1049,电子设备根据目标环境光亮度下采集到的预设图像中第二对象包括的像素点的面积和值,以及待检测图像和预设图像中目标对象所包括的匹配像素点的面积和值,计算得到待检测图像中第一对象和预设图像中第二对象的匹配度,提高了确定出的匹配度的准确性。
在本申请实施例中,对上述待检测图像中第一对象和预设图像中第二对象的匹配度的表示形式不作具限定。
一个可选的实施例中,当上述摄像机还包括红外摄像头时,根据图1所示的方法,本申请实施例还提供了一种拍摄参数调整方法。如图8所示,图8为本申请实施例提供的拍摄参数调整方法的第八种流程示意图。该方法包括以下步骤。
步骤S801,获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像。
上述步骤S801与上述步骤S101相同。
步骤S802,获取红外摄像头在目标环境光亮度下针对目标场景采集的红外图像。
在本步骤中,上述摄像机中除了包括上述可见光摄像头以外,还可以包括红外摄像头。可见光摄像头在目标环境光亮度下获取针对目标场景的待检测图像时,红外摄像头也可以在目标环境光亮度下获取针对目标场景的红外图像。电子设备在获取待检测图像时,也可以获取红外摄像头采集的目标环境光亮度下针对目标场景的红外图像。红外图像的获取方式可参照上述待检测图像的获取方式,在此不作具体说明。
一个可选的实施例中,为了保证获取到的红外图像与上述待检测图像间的关联性,电子设备可以根据待检测图像的采集时间点,获取红外摄像头在相同时间点采集到的红外图像。
在图8所示的实施例中,上述步骤S802是在步骤S801之后执行的,除此以外,电子设备还可以在执行上述步骤S801的同时执行上述步骤S802。在此,对上述步骤S801和步骤S802的执行顺序不作具体限定。
步骤S803,对待检测图像和红外图像进行图像融合,得到融合后的待检测图像。
上述待检测图像和红外图像的图像融合方法可参照相关技术中的图像融合方法。在此,对上述图像融合过程不作具体说明。
在本申请实施例中,当上述目标环境光亮度为夜晚时的环境光亮度时,可见光摄像头的成像效果将受到黑夜的影响,因此,通过对上述红外摄像头所采集到的红外图像与可见光摄像头所采集到的可见光摄像头的图像融合,可以使得融合得到的可见光图像中包括更多的图像信息,有效提高了黑夜采集到的图像的成像效果。
步骤S804,基于预设目标检测算法,对融合后的待检测图像中的每一对象进行目标检测,得到融合后的待检测图像的第四检测结果。
电子设备对上述融合后的待检测图像的目标检测方式可参照上述待检测图像的目标检测方式,在此不作具体说明。
步骤S805,从第四检测结果中获取处于静止状态的第三对象的检测结果,作为待检测图像中第一对象的第一检测结果。
在本步骤中,由于进行图像融合的红外图像和待检测图像均是针对目标场景进行图像采集得到的,这使得融合后的待检测图像中包括的对象应该与待检测图像中包括的对象的是相同的,因此,电子设备在得到上述第四检测结果后,可以将第四检测结果中处于静止状态的第三对象的检测结果,确定为待检测图像中第一对象的第一检测结果。
在本申请实施例中,通过对待检测图像和红外图像的图像融合,可以使得融合后的待检测图像中包括更多的图像细节,从而将融合后的待检测图像中处于静止状态的第三对象的检测结果,确定为待检测图像中第一对象的第一检测结果,有效提高了确定出的第一检测结果的准确性。
上述步骤S804和步骤S805是对上述步骤S102的细化。
步骤S806,获取预设图像中第二对象的第二检测结果,预设图像为可见光摄像头在预设环境光亮度下针对目标场景采集的可见光图像。
步骤S807,基于第一检测结果和第二检测结果,计算待检测图像中第一对象与预设图像中第二对象间的匹配度。
步骤S808,在匹配度小于预设匹配度阈值时,调整可见光摄像头在目标环境光亮度下的拍摄参数。
上述步骤S806-步骤S808与上述步骤S103-步骤S105相同。
一个可选的实施例中,当上述目标环境光亮度为当前时刻的环境光亮度时,根据图1所示的方法,本申请实施例还提供了一种拍摄参数调整方法。如图9所示,图9为本申请实施例提供的拍摄参数调整方法的第九种流程示意图。该方法包括以下步骤。
步骤S901,获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像。
步骤S902,对待检测图像中的第一对象进行检测,得到第一检测结果。
步骤S903,获取预设图像中第二对象的第二检测结果,预设图像为可见光摄像头在预设环境光亮度下针对目标场景采集的可见光图像。
步骤S904,基于第一检测结果和第二检测结果,计算待检测图像中第一对象与预设图像中第二对象间的匹配度。
上述步骤S901-步骤S904与上述步骤S101-步骤S104相同。
步骤S905,在匹配度小于预设匹配度阈值时,从预设拍摄参数集合中选取未被选择的拍摄参数,作为待调整拍摄参数。
在本申请实施例中,电子设备中预先存储有可见光摄像头的预设拍摄参数集合,该预设拍摄参数集合中包括多个拍摄参数,每一拍摄参数均可以被选取为可见光摄像头在某一环境光亮度下的拍摄参数。
一个可选的实施例中,上述预设拍摄参数集合中的每一拍摄参数可以为上述可见光摄像头的拍摄参数的可调整范围内的每一拍摄参数。
为便于理解,以拍摄参数的可调整范围为0-100为例,上述预设拍摄参数集合所包括的拍摄参数为0至100,这101个数值。
另一个可选的实施例中,上述预设拍摄参数集合中的每一拍摄参数可以为按照预设采样间隔,从上述可见光摄像头的拍摄参数的可调整范围内选取出的多个拍摄参数。
为便于理解,仍以拍摄参数的可调整范围为0-100为例。现假设上述预设采样间隔为25,则上述预设拍摄参数集合中的拍摄参数为0、25、50、75、100。
在本申请实施例中,对上述预设拍摄参数集合中每一拍摄参数的确定方式,以及预设拍摄参数中包括的拍摄参数的数量不作具体限定。
电子设备在通过上述步骤S904计算得到上述匹配度后,可以将该匹配度与预设匹配度阈值进行比较。
当匹配度大于等于预设匹配度阈值时,电子设备可以确定上述待检测图像中第一对象和预设图像中第二对象间的匹配度较高,也就是可见光摄像头基于待检测图像采集时的拍摄参数,在目标环境光亮度下采集到的图像中的图像细节,与可见光摄像头在预设环境光亮度下采集到的图像的图像细节相近,此时,电子设备可以确定不需要对可见光摄像头的拍摄参数进行调整,也就是可见光摄像头采集待检测图像时的拍摄参数,可以直接用于该可见光摄像头在目标环境光亮度下的图像采集,此时采集到的可见光图像中包括较多的图像细节。
当匹配度小于预设匹配度阈值时,电子设备可以确定上述待检测图像中第一对象和预设图像中第二对象间的匹配度较低,也就是可见光摄像头基于待检测图像采集时的拍摄参数,在目标环境光亮度下采集到的图像的图像细节,与可见光摄像头在预设环境光亮度下采集到的预设图像的图像细节间的误差较大,此时,电子设备可以确定需要对目标环境光亮度下可见光摄像头的拍摄参数进行调整。
因此,当上述匹配度小于预设匹配度阈值时,电子设备可以从上述预设拍摄参数集合中选取未被选择为可见光摄像头在目标环境光亮度下的拍摄参数,作为待调整拍摄参数。
上述待调整拍摄参数可以为预设拍摄参数集合中任一未被选择的拍摄参数,在此,对上述待调整拍摄参数不作具体限定。
步骤S906,将可见光摄像头在目标环境光亮度下的拍摄参数调整为待调整拍摄参数。
在本步骤中,电子设备可以执行上述步骤S505所选取出的待调整拍摄参数确定为当前时刻的可见光摄像头在目标环境光亮度下的拍摄参数。
步骤S907,基于待调整拍摄参数,返回执行获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像的步骤,直至匹配度不小于预设匹配度阈值,将当前时刻的拍摄参数确定为可见光摄像头在目标环境光亮度下的目标拍摄参数。
在本步骤中,电子设备在将可见光摄像头在目标环境光亮度下的拍摄参数调整为上述待调整拍摄参数后,可见光摄像头将基于该待调整拍摄参数在目标环境光亮度下针对目标场景进行图像采集,得到可见光图像。电子设备返回执行上述步骤S901,也就是返回执行获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像的步骤,直至待检测图像中第一对象与预设图像中第二对象间的匹配度不小于上述预设匹配度阈值时,将当前时刻的拍摄参数确定为可见光摄像头在目标环境光亮度下的目标拍摄参数。
在图9所示的实施例中,由于待检测图像中第一对象与预设图像中第二对象间的匹配度小于预设匹配度阈值时,电子设备将一直从上述预设拍摄参数集合中选取未被选择的拍摄参数,作为待调整拍摄参数,重复执行上述步骤S501-步骤S906,直至待检测图像中第一对象与预设图像中第二对象间的匹配度不小于预设匹配度阈值时,确定出目标环境光亮度对应的目标拍摄参数。因此,针对上述待调整拍摄参数的选取,即电子设备从预设拍摄参数集合选取待调整拍摄参数时,可以随机选取一个未被选择的拍摄参数作为待调整拍摄参数。也就是在待调整拍摄参数选取时,对待调整拍摄参数的选取方式不作具体限定。
在本申请实施例中,通过上述步骤S905-步骤S907,电子设备可以选择出可见光摄像头在目标环境光亮度下进行图像采集所采用的拍摄参数,准确有效的实现对可见光摄像头在目标环境光亮度下的拍摄参数的调整。
在图9所示实施例中,当选取出的任一待调整拍摄参数下对应的匹配度不小于预设匹配度阈值,则将该待调整拍摄参数确定为可见光摄像头在目标环境光亮度下的目标拍摄参数。为了进一步提高确定出的目标拍摄参数的准确性,电子设备还可以针对上述预设拍摄参数集中的每一拍摄参数,将可见光摄像头当前的拍摄参数调整为该拍摄参数,并执行上述步骤S901-步骤S904,得到预设拍摄参数集中的每一拍摄参数所对应的匹配度。此时,电子设备可以将最大匹配度所对应的拍摄参数确定为可见光摄像头在目标环境光亮度下的目标拍摄参数。
在上述实施例中,当上述匹配度小于预设匹配度阈值时,均以可见光摄像头在目标环境光亮度下的拍摄参数进行了多次调整为例说明的。除此以外,电子设备也可以采用其他方式对可见光摄像头在目标环境光亮度下的拍摄参数进行调整。
为便于理解,以上述拍摄参数为可见光摄像头的曝光参数,拍摄参数的调整是通过调整快门速度值实现为例进行说明。
当上述预设环境光亮度大于目标环境光亮度时,若上述匹配度小于预设匹配度阈值,则电子设备可以确定可见光摄像头基于当前时刻的拍摄参数,在目标环境光亮度下进行图像采集时的曝光量不足。此时,电子设备可以基于当前时刻可见光摄像头的快门速度,将该快门速度增加预设数值,从而增加可见光摄像头在目标环境光亮度下进行图像采集的曝光量。
当上述预设环境光亮度小于目标环境光亮度时,若上述匹配度小于预设匹配度阈值,则电子设备可以确定可见光摄像头基于当前时刻的拍摄参数,在目标环境光亮度下进行图像采集时的曝光量过大,例如,强环境光亮度下出现的图像过曝情况。此时,电子设备可以基于当前时刻可见光摄像头的快门速度,将该快门速度减少预设数值,从而降低可见光摄像头在目标环境光亮度下进行图像采集的曝光量。
在本申请实施例中,对上述可见光摄像头在目标环境光亮度下的参数调整方法不作具体限定。
一个可选的实施例中,当上述摄像头中包括上述红外摄像头和红外补光灯时,若目标环境光亮度为目标场景处于夜晚时的环境光亮度,则针对上述步骤S901,可见光摄像头所采集到可见光图像可以是在某一红外补光强度下采集到的可见光图像,红外摄像头所采集到的红外图像也是在该红外补光强度下采集到的红外图像。
一个可选的实施例中,当存在红外补光的情况下,根据图8和图9所示的方法,本申请实施例还提供了一种拍摄参数调整方法。如图10所示,图10为本申请实施例提供的拍摄参数调整方法的第十种流程示意图。该方法包括以下步骤。
步骤S1001,获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像。
步骤S1002,获取红外摄像头在目标环境光亮度下针对目标场景采集的红外图像。
步骤S1003,对待检测图像和红外图像进行图像融合,得到融合后的待检测图像。
步骤S1004,基于预设目标检测算法,对融合后的待检测图像中的每一对象进行目标检测,得到融合后的待检测图像的第四检测结果。
步骤S1005,从第四检测结果中获取处于静止状态的第三对象的检测结果,作为待检测图像中第一对象的第一检测结果。
步骤S1006,获取预设图像中第二对象的第二检测结果,预设图像为可见光摄像头在预设环境光亮度下针对目标场景采集的可见光图像。
步骤S1007,基于第一检测结果和第二检测结果,计算待检测图像中第一对象与预设图像中第二对象间的匹配度。
上述步骤S1001-步骤S1007与上述步骤S401-步骤S407相同。
步骤S1008,在匹配度小于预设匹配度阈值时,从预设拍摄参数集合中选取未被选择的拍摄参数,作为待调整拍摄参数。
步骤S1009,将可见光摄像头在目标环境光亮度下的拍摄参数调整为待调整拍摄参数。
步骤S1010,基于待调整拍摄参数,返回执行获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像的步骤,直至匹配度不小于预设匹配度阈值,将当前时刻的拍摄参数确定为可见光摄像头在目标环境光亮度下的目标拍摄参数。
上述步骤S1008-步骤S1010与上述步骤S505-步骤S507相同。
步骤S1011,在预设拍摄参数集合中的每一拍摄参数均被选择为待调整拍摄参数的情况下,若每一待调整拍摄参数下的匹配度均小于预设匹配度阈值,则利用红外补光灯增大目标场景的红外补光强度,并基于增大后的红外补光强度,返回执行获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像的步骤。
在本申请实施例中,上述摄像机还可以包括红外补光灯。上述步骤S1001-步骤S1010均是在红外补光灯的红外补光强度为某一数值下执行的,在此,当前时刻红外补光灯的红外补光强度不作具体限定。
当电子设备将上述预设拍摄参数集合中的每一拍摄参数均确定为待调整拍摄参数后,若每一待调整拍摄参数下对应的匹配度均小于上述预设匹配度阈值,则电子设备可以调整红外补光灯的红外补光强度。也就是增大红外补光灯的红外补光强度,并在调整后的红外补光强度下,返回执行上述步骤S1001,也就是返回执行获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像的步骤。
通过上述步骤S1011,在目标场景处于黑夜场景时,电子设备通过增大目标场景的红外补光强度,可以有效提高红外图像的成像效果,从而提高红外图像和可见光图像进行图像融合后的得到的可见光图像的成像效果。也就是提高了上述融合后的待检测图像的成像效果,这有效降低了黑夜对可见光图像的影响。此时,在红外补光强度增强的情况下,在匹配度小于预设匹配度阈值时,调整可见光摄像头的拍摄参数,提高了拍摄参数调整的准确性,并且增加了环境光亮度较低时采集到的图像中的图像细节,提高了环境光亮度较低时采集到的图像的成像效果。
在上述图10所示的实施例中,在执行上述步骤S1010确定可见光摄像头在目标环境光亮度下的目标拍摄参数时,电子设备还可以将红外补光灯当前时刻的红外补光强度确定为红外摄像头在目标环境光亮度下的目标红外补光强度。红外摄像头在进行图像采集时,若当前环境光亮度为目标环境光亮度,则将红外补光灯的补光强度调整为目标红外补光强度。
基于同一种发明构思,根据上述本申请实施例提供的拍摄参数调整方法,本申请实施例还提供了一种拍摄参数调整装置。如图11所示,图11为本申请实施例提供的拍摄参数调整装置的一种结构示意图。该装置包括以下模块。
第一获取模块1101,用于获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像;
检测模块1102,用于对待检测图像中的第一对象进行检测,得到第一检测结果;
第二获取模块1103,用于获取预设图像中第二对象的第二检测结果,预设图像为可见光摄像头在预设环境光亮度下针对目标场景采集的可见光图像;
计算模块1104,用于基于第一检测结果和第二检测结果,计算待检测图像中第一对象与预设图像中第二对象间的匹配度;
调整模块1105,用于在匹配度小于预设匹配度阈值时,调整可见光摄像头在目标环境光亮度下的拍摄参数。
可选的,上述计算模块1104,具体可以用于若检测结果用于指示图像中各对象的位置信息,或者检测结果用于指示图像中各对象的位置信息和每一位置信息对应对象的类别信息,则根据第一检测结果和第二检测结果,确定目标对象的第一数量,作为待检测图像中第一对象与预设图像中第二对象间的匹配度;或者根据第一检测结果和第二检测结果,确定目标对象中包括的匹配像素点的第二数量,作为待检测图像中第一对象与预设图像中第二对象间的匹配度;或者根据第一检测结果和第二检测结果,确定待检测图像中目标对象中包括的匹配像素点的第一面积和,作为待检测图像中第一对象与预设图像中第二对象间的匹配度;其中,目标对象为待检测图像与预设图像中位置信息匹配的对象,或者待检测图像与预设图像中位置信息和类别信息均匹配的对象。
可选的,上述计算模块1104,具体可以用于若检测结果用于指示图像中各对象的位置信息,或者检测结果用于指示图像中各对象的位置信息和每一位置信息对应对象的类别信息,则根据第一检测结果和第二检测结果,确定目标对象的第三数量,并计算第三数量与第四数量的比值,作为待检测图像中第一对象与预设图像中第二对象间的匹配度;或者根据第一检测结果和第二检测结果,确定目标对象中包括的匹配像素点的第五数量,并计算第五数量与第六数量的比值,作为待检测图像中第一对象与预设图像中第二对象间的匹配度;或者根据第一检测结果和第二检测结果,确定目标对象中包括的匹配像素点的第二面积和,并计算第二面积和与第三面积和的比值,作为待检测图像中第一对象与预设图像中第二对象间的匹配度;其中,目标对象为待检测图像与预设图像中位置信息匹配的对象,或者待检测图像与预设图像中位置信息和类别信息均匹配的对象,第四数量为第二检测结果指示的位置信息的数量,第六数量为第二检测结果指示的各位置信息对应像素点的和值,第三面积和为第二检测结果指示的各位置信息对应像素点面积的和值。
可选的,上述拍摄参数调整装置还可以包括:
第三获取模块,用于在对待检测图像中的第一对象进行检测,得到第一检测结果之前,获取红外摄像头在目标环境光亮度下针对目标场景采集的红外图像;
融合模块,用于对待检测图像和红外图像进行图像融合,得到融合后的待检测图像;
上述检测模块,具体可以用于基于预设目标检测算法,对融合后的待检测图像中的每一对象进行目标检测,得到融合后的待检测图像的第四检测结果;从第四检测结果中获取处于静止状态的第三对象的检测结果,作为待检测图像中第一对象的第一检测结果。
可选的,上述调整模块1105,具体可以用于在匹配度小于预设匹配度阈值时,从预设拍摄参数集合中选取未被选择的拍摄参数,作为待调整拍摄参数;将可见光摄像头在目标环境光亮度下的拍摄参数调整为待调整拍摄参数;
基于待调整拍摄参数,调用第一获取模块返回执行获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像的步骤,直至匹配度不小于预设匹配度阈值,将当前时刻的拍摄参数确定为可见光摄像头在目标环境光亮度下的目标拍摄参数。
可选的,上述拍摄参数调整模块还可以包括:
在预设拍摄参数集合中的每一拍摄参数均被选择为待调整拍摄参数的情况下,若每一待调整拍摄参数下的匹配度均小于预设匹配度阈值,则利用红外补光灯增大目标场景的红外补光强度,并基于增大后的红外补光强度,调用第一获取模块返回执行获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像的步骤。
可选的,上述拍摄参数调整装置可以应用于摄像机中的图像处理器或与摄像机通信连接的目标设备。
通过本申请实施例提供的装置,相比于相关技术,由于相同拍摄条件下,同一可见光摄像头对同一场景进行图像采集所得到图像应该相同,也就是此时可见光摄像头所采集到的图像中各对象间的匹配度最大。因此,当可见光摄像头在不同环境光亮度下对同一目标场景进行图像采集时,可见光摄像头所采集到的图像中各对象间的匹配度越小,则可见光摄像头所采集到的图像中所包括的图像细节间的差距越大。因此,在本申请实施例中,在获取到目标环境光亮度下可见光摄像头针对目标场景采集的待检测图像后,通过计算该待检测图像中第一对象与可见光摄像头在预设环境光亮度下采集到的预设图像中第二对象间的匹配度,使得该匹配度可以准确反映出不同环境光亮度下对应的图像成像效果。由于预设图像是在预设环境光亮度下,如白天所对应的环境光亮度,当匹配度小于预设匹配度阈值时,可以确定目标环境光亮度下采集的待检测图像所包括的图像细节明显少于预设环境光亮度下采集的预设图像所包括的图像细节,此时,通过对可见光摄像头的拍摄参数的调整,可以提高目标环境光亮度下采集的可见光图像中第一对象与预设环境光亮度下采集的预设图像中第二对象间的匹配度,从而使得目标环境光亮度下采集的图像的成像效果趋近于预设环境光亮度下采集的预设图像的成像效果。这解决了基于平均亮度值进行拍摄参数调整存在误差的问题,提高了拍摄参数调整的准确性,从而使得基于调整后的拍摄所采集到的图像较多图像细节,提高了图像的成像效果。
基于同一种发明构思,根据上述本申请实施例提供的拍摄参数调整方法,本申请实施例还提供了一种摄像机,如图12所示,图12为本申请实施例提供的摄像机的一种结构示意图。该摄像机包括可见光摄像头1201和图像处理器1202;
上述可见光摄像头1201,用于采集目标场景的可见光图像;
上述图像处理器1202,用于获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像;对待检测图像中的第一对象进行检测,得到第一检测结果;获取预设图像中第二对象的第二检测结果,预设图像为可见光摄像头在预设环境光亮度下针对目标场景采集的可见光图像;基于第一检测结果和第二检测结果,计算待检测图像中第一对象与预设图像中第二对象间的匹配度;在匹配度小于预设匹配度阈值时,调整可见光摄像头在目标环境光亮度下的拍摄参数。
可选的,上述摄像机还可以包括红外摄像头和红外补光灯;
上述红外摄像头,用于采集目标场景的红外图像;
上述图像处理器1202,还可以用于在对待检测图像中的第一对象进行检测,得到第一检测结果之前,获取红外摄像头在目标环境光亮度下针对目标场景采集的红外图像;对待检测图像和红外图像进行图像融合,得到融合后的待检测图像;
上述图像处理器1202,具体可以用于基于预设目标检测算法,对融合后的待检测图像中的每一对象进行目标检测,得到融合后的待检测图像的第四检测结果;从第四检测结果中获取处于静止状态的第三对象的检测结果,作为待检测图像中第一对象的第一检测结果。
上述红外补光灯,用于增大目标场景的红外补光强度。
通过本申请实施例提供的摄像机,相比于相关技术,由于相同拍摄条件下,同一可见光摄像头对同一场景进行图像采集所得到图像应该相同,也就是此时可见光摄像头所采集到的图像中各对象间的匹配度最大。因此,当可见光摄像头在不同环境光亮度下对同一目标场景进行图像采集时,可见光摄像头所采集到的图像中各对象间的匹配度越小,则可见光摄像头所采集到的图像中所包括的图像细节间的差距越大。因此,在本申请实施例中,在获取到目标环境光亮度下可见光摄像头针对目标场景采集的待检测图像后,通过计算该待检测图像中第一对象与可见光摄像头在预设环境光亮度下采集到的预设图像中第二对象间的匹配度,使得该匹配度可以准确反映出不同环境光亮度下对应的图像成像效果。由于预设图像是在预设环境光亮度下,如白天所对应的环境光亮度,当匹配度小于预设匹配度阈值时,可以确定目标环境光亮度下采集的待检测图像所包括的图像细节明显少于预设环境光亮度下采集的预设图像所包括的图像细节,此时,通过对可见光摄像头的拍摄参数的调整,可以提高目标环境光亮度下采集的可见光图像中第一对象与预设环境光亮度下采集的预设图像中第二对象间的匹配度,从而使得目标环境光亮度下采集的图像的成像效果趋近于预设环境光亮度下采集的预设图像的成像效果。这解决了基于平均亮度值进行拍摄参数调整存在误差的问题,提高了拍摄参数调整的准确性,从而使得基于调整后的拍摄所采集到的图像较多图像细节,提高了图像的成像效果。
基于同一种发明构思,根据上述本申请实施例提供的拍摄参数调整方法,本申请实施例还提供了一种目标设备。如图13所示,图13为本申请实施例提供的目标设备的一种结构示意图。该目标设备1301与摄像机1302通信连接,摄像机1302包括可见光摄像头1303。
上述目标设备1301,用于获取可见光摄像头1303在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像;对待检测图像中的第一对象进行检测,得到第一检测结果;获取预设图像中第二对象的第二检测结果,预设图像为可见光摄像头1303在预设环境光亮度下针对目标场景采集的可见光图像;基于第一检测结果和第二检测结果,计算待检测图像中第一对象与预设图像中第二对象间的匹配度;在匹配度小于预设匹配度阈值时,调整可见光摄像头1303在目标环境光亮度下的拍摄参数。
通过本申请实施例提供的目标设备,相比于相关技术,由于相同拍摄条件下,同一可见光摄像头对同一场景进行图像采集所得到图像应该相同,也就是此时可见光摄像头所采集到的图像中各对象间的匹配度最大。因此,当可见光摄像头在不同环境光亮度下对同一目标场景进行图像采集时,可见光摄像头所采集到的图像中各对象间的匹配度越小,则可见光摄像头所采集到的图像中所包括的图像细节间的差距越大。因此,在本申请实施例中,在获取到目标环境光亮度下可见光摄像头针对目标场景采集的待检测图像后,通过计算该待检测图像中第一对象与可见光摄像头在预设环境光亮度下采集到的预设图像中第二对象间的匹配度,使得该匹配度可以准确反映出不同环境光亮度下对应的图像成像效果。由于预设图像是在预设环境光亮度下,如白天所对应的环境光亮度,当匹配度小于预设匹配度阈值时,可以确定目标环境光亮度下采集的待检测图像所包括的图像细节明显少于预设环境光亮度下采集的预设图像所包括的图像细节,此时,通过对可见光摄像头的拍摄参数的调整,可以提高目标环境光亮度下采集的可见光图像中第一对象与预设环境光亮度下采集的预设图像中第二对象间的匹配度,从而使得目标环境光亮度下采集的图像的成像效果趋近于预设环境光亮度下采集的预设图像的成像效果。这解决了基于平均亮度值进行拍摄参数调整存在误差的问题,提高了拍摄参数调整的准确性,从而使得基于调整后的拍摄所采集到的图像较多图像细节,提高了图像的成像效果。
基于同一种发明构思,根据上述本申请实施例提供的拍摄参数调整方法,本申请实施例还提供了一种计算机可读存储介质,该计算机可读存储介质内存储有计算机程序,计算机程序被处理器执行时实现上述任一拍摄参数调整方法的步骤。
基于同一种发明构思,根据上述本申请实施例提供的拍摄参数调整方法,本申请实施例还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例中任一拍摄参数调整方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行计算机程序指令时,全部或部分地产生按照本申请实施例的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置、摄像机、目标设备、计算机可读存储介质及计算机程序产品等实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上仅为本申请的较佳实施例,并非用于限定本申请的保护范围。凡在本申请的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本申请的保护范围内。
Claims (11)
1.一种拍摄参数调整方法,其特征在于,所述方法包括:
获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像;
对所述待检测图像中的第一对象进行检测,得到第一检测结果;
获取预设图像中第二对象的第二检测结果,所述预设图像为所述可见光摄像头在预设环境光亮度下针对所述目标场景采集的可见光图像;其中,所述预设环境光亮度与所述目标环境光亮度不同;
基于所述第一检测结果和所述第二检测结果,计算所述待检测图像中第一对象与预设图像中第二对象间的匹配度;
在所述匹配度小于预设匹配度阈值时,调整所述可见光摄像头在所述目标环境光亮度下的拍摄参数;
所述在所述匹配度小于预设匹配度阈值时,调整所述可见光摄像头在所述目标环境光亮度下的拍摄参数的步骤,包括:
在所述匹配度小于预设匹配度阈值时,从预设拍摄参数集合中选取未被选择的拍摄参数,作为待调整拍摄参数;
将所述可见光摄像头在所述目标环境光亮度下的拍摄参数调整为所述待调整拍摄参数;
基于所述待调整拍摄参数,返回执行所述获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像的步骤,直至所述匹配度不小于所述预设匹配度阈值,将当前时刻的拍摄参数确定为所述可见光摄像头在所述目标环境光亮度下的目标拍摄参数。
2.根据权利要求1所述的方法,其特征在于,若检测结果用于指示图像中各对象的位置信息,或者检测结果用于指示图像中各对象的位置信息和每一位置信息对应对象的类别信息,则基于所述第一检测结果和所述第二检测结果,计算所述待检测图像中第一对象与预设图像中第二对象间的匹配度的步骤,包括:
根据所述第一检测结果和所述第二检测结果,确定目标对象的第一数量,作为所述待检测图像中第一对象与所述预设图像中第二对象间的匹配度;或者
根据所述第一检测结果和所述第二检测结果,确定所述目标对象中包括的匹配像素点的第二数量,作为所述待检测图像中第一对象与所述预设图像中第二对象间的匹配度;或者
根据所述第一检测结果和所述第二检测结果,确定所述待检测图像中目标对象中包括的匹配像素点的第一面积和,作为所述待检测图像中第一对象与所述预设图像中第二对象间的匹配度;
其中,所述目标对象为所述待检测图像与所述预设图像中位置信息匹配的对象,或者所述待检测图像与所述预设图像中位置信息和类别信息均匹配的对象。
3.根据权利要求1所述的方法,其特征在于,若检测结果用于指示图像中各对象的位置信息,或者检测结果用于指示图像中各对象的位置信息和每一位置信息对应对象的类别信息,则所述基于所述第一检测结果和所述第二检测结果,计算所述待检测图像中第一对象与预设图像中第二对象间的匹配度的步骤,包括:
根据所述第一检测结果和所述第二检测结果,确定目标对象的第三数量,并计算所述第三数量与第四数量的比值,作为所述待检测图像中第一对象与所述预设图像中第二对象间的匹配度;或者
根据所述第一检测结果和所述第二检测结果,确定所述目标对象中包括的匹配像素点的第五数量,并计算所述第五数量与第六数量的比值,作为所述待检测图像中第一对象与所述预设图像中第二对象间的匹配度;或者
根据所述第一检测结果和所述第二检测结果,确定所述目标对象中包括的匹配像素点的第二面积和,并计算所述第二面积和与第三面积和的比值,作为所述待检测图像中第一对象与所述预设图像中第二对象间的匹配度;
其中,所述目标对象为所述待检测图像与所述预设图像中位置信息匹配的对象,或者所述待检测图像与所述预设图像中位置信息和类别信息均匹配的对象,所述第四数量为所述第二检测结果指示的位置信息的数量,所述第六数量为所述第二检测结果指示的各位置信息对应像素点的和值,所述第三面积和为所述第二检测结果指示的各位置信息对应像素点面积的和值。
4.根据权利要求1所述的方法,其特征在于,若所述第一对象为所述待检测图像中处于静止状态的对象,则所述对所述待检测图像中的第一对象进行检测,得到第一检测结果的步骤,包括:
基于预设目标检测算法,对所述待检测图像中的每一对象进行目标检测,得到所述待检测图像的第三检测结果;
从所述第三检测结果中获取处于静止状态的第一对象的第一检测结果。
5.根据权利要求4所述的方法,其特征在于,在对所述待检测图像中的第一对象进行检测,得到第一检测结果之前,所述方法还包括:
获取红外摄像头在所述目标环境光亮度下针对所述目标场景采集的红外图像;
对所述待检测图像和所述红外图像进行图像融合,得到融合后的待检测图像;
所述对所述待检测图像中的第一对象进行检测,得到第一检测结果的步骤,包括:
基于预设目标检测算法,对融合后的待检测图像中的每一对象进行目标检测,得到融合后的待检测图像的第四检测结果;
从所述第四检测结果中获取处于静止状态的第三对象的检测结果,作为所述待检测图像中第一对象的第一检测结果。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在所述预设拍摄参数集合中的每一拍摄参数均被选择为所述待调整拍摄参数的情况下,若每一待调整拍摄参数下的匹配度均小于所述预设匹配度阈值,则利用红外补光灯增大所述目标场景的红外补光强度,并基于增大后的红外补光强度,返回执行所述获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像的步骤。
7.根据权利要求1所述的方法,其特征在于,所述方法应用于摄像机中的图像处理器或与所述摄像机通信连接的目标设备。
8.一种拍摄参数调整装置,其特征在于,所述装置包括:
第一获取模块,用于获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像;
检测模块,用于对所述待检测图像中的第一对象进行检测,得到第一检测结果;
第二获取模块,用于获取预设图像中第二对象的第二检测结果,所述预设图像为所述可见光摄像头在预设环境光亮度下针对所述目标场景采集的可见光图像;其中,所述预设环境光亮度与所述目标环境光亮度不同;
计算模块,用于基于所述第一检测结果和所述第二检测结果,计算所述待检测图像中第一对象与预设图像中第二对象间的匹配度;
调整模块,用于在所述匹配度小于预设匹配度阈值时,调整所述可见光摄像头在所述目标环境光亮度下的拍摄参数;
调整模块,具体用于在所述匹配度小于预设匹配度阈值时,从预设拍摄参数集合中选取未被选择的拍摄参数,作为待调整拍摄参数;将所述可见光摄像头在所述目标环境光亮度下的拍摄参数调整为所述待调整拍摄参数;基于所述待调整拍摄参数,调用所述第一获取模块返回执行所述获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像的步骤,直至所述匹配度不小于所述预设匹配度阈值,将当前时刻的拍摄参数确定为所述可见光摄像头在所述目标环境光亮度下的目标拍摄参数。
9.一种摄像机,其特征在于,所述摄像机包括可见光摄像头和图像处理器;
所述可见光摄像头,用于采集目标场景的可见光图像;
所述图像处理器,用于获取所述可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像;对所述待检测图像中的第一对象进行检测,得到第一检测结果;获取预设图像中第二对象的第二检测结果,所述预设图像为所述可见光摄像头在预设环境光亮度下针对所述目标场景采集的可见光图像;其中,所述预设环境光亮度与所述目标环境光亮度不同;基于所述第一检测结果和所述第二检测结果,计算所述待检测图像中第一对象与预设图像中第二对象间的匹配度;在所述匹配度小于预设匹配度阈值时,调整所述可见光摄像头在所述目标环境光亮度下的拍摄参数;
所述在所述匹配度小于预设匹配度阈值时,调整所述可见光摄像头在所述目标环境光亮度下的拍摄参数的步骤,包括:
在所述匹配度小于预设匹配度阈值时,从预设拍摄参数集合中选取未被选择的拍摄参数,作为待调整拍摄参数;
将所述可见光摄像头在所述目标环境光亮度下的拍摄参数调整为所述待调整拍摄参数;
基于所述待调整拍摄参数,返回执行所述获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像的步骤,直至所述匹配度不小于所述预设匹配度阈值,将当前时刻的拍摄参数确定为所述可见光摄像头在所述目标环境光亮度下的目标拍摄参数。
10.根据权利要求9所述的摄像机,其特征在于,所述摄像机还包括红外摄像头和红外补光灯;
所述红外摄像头,用于采集目标场景的红外图像;
所述图像处理器,还用于在对所述待检测图像中的第一对象进行检测,得到第一检测结果之前,获取红外摄像头在所述目标环境光亮度下针对所述目标场景采集的红外图像;对所述待检测图像和所述红外图像进行图像融合,得到融合后的待检测图像;
所述图像处理器,具体用于基于预设目标检测算法,对融合后的待检测图像中的每一对象进行目标检测,得到融合后的待检测图像的第四检测结果;从所述第四检测结果中获取处于静止状态的第三对象的检测结果,作为所述待检测图像中第一对象的第一检测结果;
所述红外补光灯,用于增大所述目标场景的红外补光强度。
11.一种目标设备,其特征在于,所述目标设备与摄像机通信连接;
所述目标设备,用于获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像;对所述待检测图像中的第一对象进行检测,得到第一检测结果;获取预设图像中第二对象的第二检测结果,所述预设图像为所述可见光摄像头在预设环境光亮度下针对所述目标场景采集的可见光图像;其中,所述预设环境光亮度与所述目标环境光亮度不同;基于所述第一检测结果和所述第二检测结果,计算所述待检测图像中第一对象与预设图像中第二对象间的匹配度;在所述匹配度小于预设匹配度阈值时,调整所述可见光摄像头在所述目标环境光亮度下的拍摄参数;
所述在所述匹配度小于预设匹配度阈值时,调整所述可见光摄像头在所述目标环境光亮度下的拍摄参数的步骤,包括:
在所述匹配度小于预设匹配度阈值时,从预设拍摄参数集合中选取未被选择的拍摄参数,作为待调整拍摄参数;
将所述可见光摄像头在所述目标环境光亮度下的拍摄参数调整为所述待调整拍摄参数;
基于所述待调整拍摄参数,返回执行所述获取可见光摄像头在目标环境光亮度下针对目标场景采集的可见光图像,作为待检测图像的步骤,直至所述匹配度不小于所述预设匹配度阈值,将当前时刻的拍摄参数确定为所述可见光摄像头在所述目标环境光亮度下的目标拍摄参数。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210428444.XA CN114845052B (zh) | 2022-04-22 | 2022-04-22 | 一种拍摄参数调整方法、装置、摄像机及目标设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210428444.XA CN114845052B (zh) | 2022-04-22 | 2022-04-22 | 一种拍摄参数调整方法、装置、摄像机及目标设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114845052A CN114845052A (zh) | 2022-08-02 |
CN114845052B true CN114845052B (zh) | 2024-03-12 |
Family
ID=82565966
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210428444.XA Active CN114845052B (zh) | 2022-04-22 | 2022-04-22 | 一种拍摄参数调整方法、装置、摄像机及目标设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114845052B (zh) |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018233373A1 (zh) * | 2017-06-23 | 2018-12-27 | 华为技术有限公司 | 一种图像处理方法、装置与设备 |
CN111050069A (zh) * | 2019-12-12 | 2020-04-21 | 维沃移动通信有限公司 | 一种拍摄方法及电子设备 |
WO2021017561A1 (zh) * | 2019-07-30 | 2021-02-04 | 深圳市商汤科技有限公司 | 人脸识别方法及装置、电子设备和存储介质 |
CN112565599A (zh) * | 2020-11-27 | 2021-03-26 | Oppo广东移动通信有限公司 | 图像拍摄方法、装置、电子设备、服务器及存储介质 |
CN112770057A (zh) * | 2021-01-20 | 2021-05-07 | 北京地平线机器人技术研发有限公司 | 摄像头参数调整方法和装置、电子设备和存储介质 |
CN112866581A (zh) * | 2021-01-18 | 2021-05-28 | 盛视科技股份有限公司 | 摄像头自动曝光补偿方法、装置及电子设备 |
CN112887615A (zh) * | 2021-01-27 | 2021-06-01 | 维沃移动通信有限公司 | 拍摄的方法及装置 |
CN113411507A (zh) * | 2021-05-10 | 2021-09-17 | 深圳数联天下智能科技有限公司 | 测肤图像的获取方法、装置、设备及存储介质 |
WO2022052475A1 (zh) * | 2020-09-14 | 2022-03-17 | 上海商汤智能科技有限公司 | 拍摄处理方法和装置、设备、存储介质、程序产品 |
-
2022
- 2022-04-22 CN CN202210428444.XA patent/CN114845052B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018233373A1 (zh) * | 2017-06-23 | 2018-12-27 | 华为技术有限公司 | 一种图像处理方法、装置与设备 |
WO2021017561A1 (zh) * | 2019-07-30 | 2021-02-04 | 深圳市商汤科技有限公司 | 人脸识别方法及装置、电子设备和存储介质 |
CN111050069A (zh) * | 2019-12-12 | 2020-04-21 | 维沃移动通信有限公司 | 一种拍摄方法及电子设备 |
WO2022052475A1 (zh) * | 2020-09-14 | 2022-03-17 | 上海商汤智能科技有限公司 | 拍摄处理方法和装置、设备、存储介质、程序产品 |
CN112565599A (zh) * | 2020-11-27 | 2021-03-26 | Oppo广东移动通信有限公司 | 图像拍摄方法、装置、电子设备、服务器及存储介质 |
CN112866581A (zh) * | 2021-01-18 | 2021-05-28 | 盛视科技股份有限公司 | 摄像头自动曝光补偿方法、装置及电子设备 |
CN112770057A (zh) * | 2021-01-20 | 2021-05-07 | 北京地平线机器人技术研发有限公司 | 摄像头参数调整方法和装置、电子设备和存储介质 |
CN112887615A (zh) * | 2021-01-27 | 2021-06-01 | 维沃移动通信有限公司 | 拍摄的方法及装置 |
CN113411507A (zh) * | 2021-05-10 | 2021-09-17 | 深圳数联天下智能科技有限公司 | 测肤图像的获取方法、装置、设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN114845052A (zh) | 2022-08-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20210250494A1 (en) | Real time assessment of picture quality | |
CN103591894B (zh) | 通过摄像头测量物体长度的方法与装置 | |
CN105227857B (zh) | 一种自动曝光的方法和装置 | |
CN113992861B (zh) | 一种图像处理方法及图像处理装置 | |
TW202009805A (zh) | 圖像處理方法和裝置 | |
CN107920211A (zh) | 一种拍照方法、终端及计算机可读存储介质 | |
US20130223693A1 (en) | Methods and systems for determining fish catches | |
CN105635565A (zh) | 一种拍摄方法及设备 | |
CN108600736B (zh) | 终端光感校准方法、装置、终端及存储介质 | |
CN112689100B (zh) | 图像检测方法、装置、设备和存储介质 | |
CN109146906A (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN103390290A (zh) | 信息处理设备及信息处理方法 | |
CN110334583A (zh) | 一种小区域土壤植被覆盖率测量方法、装置及电子设备 | |
CN108830881B (zh) | 一种运动生物的视频追踪方法和装置 | |
CN114845052B (zh) | 一种拍摄参数调整方法、装置、摄像机及目标设备 | |
CN117376717A (zh) | 一种相机扰动校正方法与*** | |
CN110018483A (zh) | 物体距离估算方法与电子装置 | |
CN109788278B (zh) | 相机炫光测试方法及其炫光采集装置 | |
CN112804463A (zh) | 一种曝光时间控制方法、装置、终端及可读存储介质 | |
Park et al. | Small object detection technology using multi-modal data based on deep learning | |
JP3735621B2 (ja) | 全天下光環境評価方法 | |
CN116843683B (zh) | 设备成像清晰度评估方法、***和装置 | |
CN110505371B (zh) | 一种红外遮挡检测方法及摄像设备 | |
TWI755250B (zh) | 植物生長曲線確定方法、裝置、電子設備及存儲媒體 | |
CN117647521A (zh) | 一种林分地上碳储量的估计方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |