CN113747006B - 应用于柜体的拍摄***及冰箱 - Google Patents

Abstract

本申请实施例涉及拍摄技术领域，公开了一种拍摄***、冰箱、拍摄方法及存储介质。拍摄***包括：多个摄像模组、电路板；电路板设置有主控制器，主控制器的多个第一连接引脚设置在电路板上；每个摄像模组包括图像传感器、与图像传感器连接的图像处理器；图像处理器通过数据传输线连接至一个第一连接引脚。图像传感器与图像处理器之间的信号传输的距离较短，图像处理器能够在较短的距离中接收到图片质量较佳的待处理图像，并对待处理图像进行图像处理并发送至主控制器，由于图像处理器与主控制器之间为信号传输不会受到传输线长度的影响，即传输线的长度不会影响图片传输的品质，因此可以扩展摄像模组之间的距离，提高目标图像的精确度。

Description

应用于柜体的拍摄***及冰箱

技术领域

本申请实施例涉及拍摄技术领域，特别涉及一种应用于柜体的拍摄***、冰箱、拍摄方法及存储介质。

背景技术

目前，随着家居智能化的发展，家居电器也逐渐走向智能化，包括冰箱，用户对冰箱的智能化也提出了进一步的要求；相关技术中已经出现了在冰箱内部安装摄像头的技术，从而使得用户可以监控到冰箱内部的物品的变化，而目前为了满足用户的存储需求，冰箱的尺寸越来越大，现有的方案为了适应大尺寸冰箱，安装有两个图像传感器，即图像sensor，两个图像sensor需要被同时触发，才能拍到同一时刻的图像，该同一时刻拍到的两幅图像需要被发送到ISP(图像信号处理)中处理后再发送给后台服务器，由后台服务器合成为涵盖柜体内全部画面的整图。

然而，图像sensor与ISP之间传输图像数据采用MIPI接口，多个图像sensor之间通过帧同步信号保持同步，但是MIPI接口以及帧同步信号等数字信号对走线距离有一定的要求，MIPI接口的走线太长会导致信号衰减畸变严重，这样ISP接收到的YUV数据或者RAW数据会损伤失真，两个图像sensor之间的帧同步信号线过长也会导致帧同步信号衰减，无法做到图像帧精确同步。而在大型冰箱的应用场景中，两个图像sensor的距离无法控制在一个较小的范围内，从而导致该同一时刻拍到的两幅图像由于存在较大的传输误差导致无法精确同步，最终影响到两幅图的合成效果和后台对图像物品的分类识别。

发明内容

本申请实施例的目的在于提供一种应用于柜体的拍摄***、冰箱、拍摄方法及存储介质，提高获取的目标图像的精确度。

为解决上述技术问题，本申请的实施例提供了一种应用于柜体的拍摄***，包括：多个摄像模组、电路板；所述电路板设置有主控制器，所述主控制器的多个第一连接引脚设置在所述电路板上；每个所述摄像模组包括图像传感器、与所述图像传感器连接的图像处理器；所述图像处理器通过数据传输线连接至一个所述第一连接引脚；所述主控制器用于发送拍照指令至每个所述图像处理器；所述图像处理器用于在接收所述拍照指令之后，控制所述图像传感器获取待处理图像；所述图像处理器还用于接收所述待处理图像，并对所述待处理图像进行图像处理，得到处理后的图像，并将所述处理后的图像发送至所述主控制器；所述主控制器用于将多个所述处理后的图像合并为一个目标图像。

本申请的实施例还提供了一种冰箱，包括上述的应用于柜体的拍摄***。

本申请的实施例还提供了一种拍摄方法，应用于柜体的拍摄***的主控制器，所述拍摄***还包括多个摄像模组、电路板；所述电路板设置有主控制器，所述主控制器的多个第一连接引脚设置在所述电路板上；每个所述摄像模组包括图像传感器、与所述图像传感器连接的图像处理器；所述图像处理器通过数据传输线连接至一个所述第一连接引脚；所述拍摄方法包括：发送拍照指令至每个所述图像处理器，供所述图像处理器控制所述图像传感器获取待处理图像，并对所述待处理图像进行图像处理，得到处理后的图像；接收每个图像处理器发送的所述处理后的图像；将多个所述处理后的图像合并为一个目标图像。

本申请实施例相对于现有技术而言，图像传感器与图像处理器之间的信号传输的距离较短，图像处理器能够在较短的距离中接收到图片质量较佳的待处理图像，并对待处理图像进行图像处理，将处理后的图像发送至主控制器，由于图像处理器与主控制器之间为信号传输不会受到传输线长度的影响，即传输线的长度不会影响图片传输的品质，因此，本申请可以扩展摄像模组之间的距离，提高目标图像的精确度。

另外，所述电路板还设置有帧同步信号中继模块，所述信号中继模块的多个第二连接引脚设置在所述电路板上；每个所述图像传感器通过帧同步信号线连接至一个所述第二连接引脚；所述信号中继模块用于将所述图像传感器传输的帧同步信号衰减后复原，并将所述复原后的帧同步信号发送至其他所述图像传感器。在能够扩展摄像模组之间的距离情况下，提高拍摄的图像同步精度。

另外，每个所述第一连接引脚与每个所述第二连接引脚设置在一个接口中，每个所述摄像模组的所述数据传输线、所述帧同步信号线设置在同一个线缆中。使得走线变得简洁，提高连接过程的便捷性。

另外，所述电路板还设置有角度检测模块，所述角度检测模块连接至所述主控制器，所述角度检测模块用于检测旋转角度，所述主控制器用于在所述旋转角度大于预设角度阈值时，发送所述拍照指令至每个所述图像处理器触发拍照。

另外，所述主控制器包括第一控制模块、第二控制模块；所述第一控制模块连接所述角度检测模块、图像处理器，所述第一控制模块用于在所述旋转角度大于预设角度阈值时，发送所述拍照指令至每个所述图像处理器；所述第一控制模块还用于将所述图像处理器发送的待处理图像转发给所述第二控制模块；所述第二控制模块将多个所述处理后的图像合并为一个所述目标图像。通过两个控制模块分别处理不同的任务，两个控制模块分工合作，提高主控制器的处理速度。

另外，所述信号中继模块包括逻辑与门器件；所述逻辑与门器件的第一端连接外接电源，所述逻辑与门器件的第二端作为一个所述第一连接引脚；所述逻辑与门器件的第三端连接地，所述逻辑与门器件的第四端连接所述外接电源，所述逻辑与门器件的第五端悬空；所述逻辑与门器件的第六端作为其他所述第二连接引脚。

附图说明

一个或多个实施例通过与之对应的附图中的图片进行示例性说明，这些示例性说明并不构成对实施例的限定，附图中具有相同参考数字标号的元件表示为类似的元件，除非有特别申明，附图中的图不构成比例限制。

图1是根据本申请一实施例的拍摄***的结构示意图；

图2是根据本申请一实施例的拍摄***的结构示意图；

图3是根据本申请一实施例的信号中继模块的具体电路结构示意图；

图4是根据本申请一实施例的拍摄***的结构示意图；

图5是根据本申请一实施例的电路板的结构示意图；

图6是根据本申请一实施例的拍摄方法的流程示意图；

图7是根据本申请一实施例的拍摄方法的流程示意图。

具体实施方式

为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合附图对本申请的各实施例进行详细的阐述。然而，本领域的普通技术人员可以理解，在本申请各实施例中，为了使读者更好地理解本申请而提出了许多技术细节。但是，即使没有这些技术细节和基于以下各实施例的种种变化和修改，也可以实现本申请所要求保护的技术方案。以下各个实施例的划分是为了描述方便，不应对本申请的具体实现方式构成任何限定，各个实施例在不矛盾的前提下可以相互结合相互引用。

本申请一实施例涉及一种拍摄***，具体结构示意图如图1所示，包括：多个摄像模组10、电路板20；电路板20设置有主控制器201，主控制器201的多个第一连接引脚a设置在电路板20上；每个摄像模组10包括图像传感器101、与图像传感器101连接的图像处理器102；图像处理器102通过数据传输线ab连接至一个第一连接引脚a。

具体地说，主控制器201用于发送拍照指令至每个图像处理器102；图像处理器102用于在接收拍照指令之后，控制图像传感器101获取待处理图像；图像处理器102还用于接收待处理图像，并对待处理图像进行图像处理，得到处理后的图像，并将处理后的图像发送至主控制器201；主控制器201用于将多个处理后的图像合并为一个目标图像。

具体地说，电路板20安装在柜体的柜门上，内嵌于柜门中，摄像模组10设置在柜门靠近柜体内部的表面，从而可以拍摄柜体内部的物品。需要说明的是，本实施例中的摄像模组10可以移动，从而可以根据用户的不同拍摄需求将摄像模组10设置在不同的位置，本实施例不作具体限定。

具体地说，主控制器201的多个第一连接引脚a的数量与摄像模组10的数量相同，且每个第一连接引脚a对应连接一个摄像模组10的图像处理器102，从而实现主控制器201与图像处理器102之间的连接。

具体的说，本实施例的图像处理器102还可以实现其他处理器的功能，本实施例不作具体限定。

需要说明的是，图1中仅以两个摄像模组10为示例进行描述，实际应用中可以根据实际需求对摄像模组10的数量进行调整，本实施例不作具体的限定。

本实施例中，图像传感器101与图像处理器102集成在一个摄像模组10中，因此，图像传感器101与图像处理器102之间的信号传输的距离较短，图像处理器102能够在较短的距离中接收到图片质量较佳的待处理图像，并对待处理图像进行图像处理，将处理后的图像发送至主控制器201，由于图像处理器102与主控制器201之间为信号传输不会受到传输线长度的影响，即传输线的长度不会影响图片传输的品质，因此，本申请可以扩展摄像模组10之间的距离，提高目标图像的精确度。

在一个实施例中，如图2所示，为本实施例的拍摄***的结构示意图，电路板20还设置有信号中继模块202，信号中继模块202的多个第二连接引脚c设置在电路板20上；每个图像传感器101通过帧同步信号线cd连接至一个第二连接引脚c；信号中继模块202用于将图像传感器101传输的衰减后的帧同步信号复原再生，并将复原再生后的帧同步信号发送至其他图像传感器101。

相关技术中，为了将多个摄像模组10获取图像的过程能够精确地同步，会使用帧同步信号线cd将多个图像传感器101连接在一起，从而提高图像获取的精度；然而，帧同步信号的传输也会受到距离的限制，较长的距离会使得帧同步信号衰减，无法实现图像的同步拍摄；因此本实施例的电路板20还设置有信号中继模块202，可以将帧同步信号复原，将不同的图像传感器101均连接至信号中继模块202，图像传感器101的帧同步信号发送至信号中继模块202，信号中继模块202可以将帧同步信号进行复原再生并发送至其他的图像传感器101，从而在能够扩展摄像模组10之间的距离情况下，提高拍摄的同步精度。

具体地说，信号中继模块202的第二连接引脚c的数量与摄像模组10的数量相同，摄像模组10包括一个图像传感器101、一个图像处理器102，每个第二连接引脚c通过帧同步信号线cd与一个图像传感器101连接，从而实现每个摄像模组10的图像传感器101可以进行同步获取图像，提高拍摄的同步精度。

在一个实施例中，每个第一连接引脚a与每个第二连接引脚c设置在一个接口中，每个摄像模组10的数据传输线ab、帧同步信号线cd设置在同一个线缆中。

具体地说，第一连接引脚a与第二连接引脚c的数量是相同的且一一对应，每个数据传输线ab、帧同步信号线cd的数量也是相同的且一一对应，每个数据传输线ab与对应帧同步信号线cd设置在同一个线缆中，第一连接引脚a与对应的第二连接引脚c也设置在一个接口中，当线缆接在接口上时，数据传输线ab与第一连接引脚a连接，帧同步信号线cd与第二连接引脚c连接，从而使得走线的连接较为简单，走线连接的过程更加便捷。

在一个实施例中，如图3所示，为信号中继模块的具体电路结构示意图，信号中继模块202包括逻辑与门器件30；逻辑与门器件30的第一端A连接外接电源VCC，逻辑与门器件30的第二端B作为一个第二连接引脚c；逻辑与门器件30的第三端GND连接地，逻辑与门器件30的第四端VCC1连接外接电源VCC，逻辑与门器件30的第五端NV悬空；逻辑与门器件30的第六端Y作为第二连接引脚c。

具体地说，本实施例的逻辑与门器件30为单路双输入正与门器件，单路双输入正与门器件的第二端即引脚B接输入信号CAM1_FSYNC，CAM1_FSYNC为一个摄像模组10的图像传感器101输出的帧同步信号；单路双输入正与门的第六端即引脚Y输出复原再生后的帧同步信号CAM2_FSYNC，输入至其他的摄像模组10的图像传感器101。单路双输入正与门的第一端即引脚A和第二端即引脚B作为输入，由于引脚A的电平为外接电源的电压，根据与门电路逻辑，引脚Y输出电平与引脚B输入电平有关，帧同步信号CAM1_FSYNC经过较远距离的传输后，信号出现衰减，帧同步信号CAM1_FSYNC达不到一个较高的电压值，例如未达到外接电源VCC的电压例如VCC的电压为1.8V，若呈波浪锯齿状的帧同步信号CAM1_FSYNC的电压为1.17V，即为逻辑与门器件30判断输入电平为高电平范围为VCC电压1.8V的65％，经过该逻辑与门器件30后，可以恢复稳定输出1.8V的电压即外接VCC的电压，从而得到复原再生后的帧同步信号CAM2_FSYNC。一般帧同步信号为60HZ，高低电平持续时间为毫秒级，逻辑与门器件30的延时为纳秒极，所以也不会影响帧同步信号的频率。

在一个实施例中，如图4所示，为本实施例的拍摄***的结构示意图，电路板20还设置有角度检测模块203，角度检测模块连接至主控制器201，角度检测模块203用于检测旋转角度，主控制器201用于在旋转角度大于预设角度阈值时，发送拍照指令至每个图像处理器102。本实施例的电路板20还包括角度检测模块203，可以检测电路板20的旋转角度，通过旋转至预设角度阈值时，向图像处理器102发送拍照指令，可以仅在柜门打开至一定角度时开始拍摄，可以避免摄像模组10一种处于开启状态导致资源的浪费，节省耗电。需要说明的是，预设角度阈值可以根据用户实际的生活习惯进行设置，本实施例不作具体的限定。例如，用户习惯在选择角度为60°时，存放或拿去柜子内的物品，因此，可以将预设角度阈值设置为60°，从而在柜门打开至60°时开始拍摄，节省耗电。

需要说明的是，角度检测模块203的数量可以根据实际需要设置，本实施例不作具体限定。

具体地说，角度检测模块203包括有陀螺仪、加速传感器、微处理器，电路板20设置在柜体的柜门上，当柜门转动时，陀螺仪、加速传感器会开始将获取的运动参数发送给微处理器，微处理器经过运算得到柜门的旋转角度。需要说明的是，由于角度检测模块203在使用时间较长时会存在获取角度不精准的情况，因此，可以在电路板20上设置一个距离接近传感器，通过距离接近传感器检测柜门是否关闭，当柜门关闭时，通知角度检测模块203进行归零校准，从而使得每次开启柜门时获取的旋转角度更加准确。

具体地说，电路板20设置在柜门远离转轴的一侧，当柜门转动时，角度检测模块203灵敏的侦测到柜门的转动，实时输出柜门旋转角度。

在一个实施例中，如图5所示，为电路板的结构示意图，主控制器201包括第一控制模块2011、第二控制模块2012；第一控制模块连接角度检测模块203、图像处理器102，第一控制模块2011用于在旋转角度大于预设角度阈值时，发送拍照指令至每个图像处理器102；第一控制模块2011还用于将图像处理器102发送的待处理图像转发给第二控制模块2012；第二控制模块2012将多个处理后的图像合并为一个目标图像。通过两个控制模块分别处理不同的任务，两个控制模块中之间可以分工合作，提高电路板20的处理速度。

具体地说，第二控制模块2012将多个处理后的图像合并为一个目标图像之后，还会将合并后的目标图像发送给后台服务器，后台服务器可以对目标图像即柜体中的物品进行监控。

具体地说，第一控制模块2011具有独立电池，当柜体断电时，***处于休眠状态，只有第一控制模块2011由电池供电，保持工作状态，第一控制模块2011会定时唤醒***，即给第二控制模块2012供电，使得第二控制模块2012可以向后台服务器报备***断电，后台服务器可以了解柜体的情况。另外，柜体上还可以设置有GPS定位，当柜体断电，第二控制模块2012可以向后台服务器报备并发送位置信息，后台服务器可以对柜体进行定位，从而通知用户到达柜体所在位置，检测柜体的情况；之后第一控制模块2011停止给第二控制模块2012供电，通过独立电池供电，第一控制模块2011可保持长时间工作，尽量减少其它模块的功耗。需要说明的是，第一控制模块2011的独立电池在柜体通电时可以进行充电，从而确保该独立电池的电量充足，可以应对紧急情况的发生。

本申请一实施例涉及一种冰箱，包括上述的应用于柜体的拍摄***。

本实施例涉及的冰箱的摄像模组集成有图像传感器与图像处理器，图像传感器与图像处理器之间的信号传输的距离较短，图像处理器能够在较短的距离中接收到图片质量较佳的待处理图像，并对待处理图像进行图像处理，将处理后的图像发送至主控制器201，由于图像处理器与主控制器201之间为信号传输不会受到传输线长度的影响，即传输线的长度不会影响图片传输的品质，因此，本申请可以扩展摄像模组之间的距离，提高目标图像的精确度。

不难发现，本实施例为与上一实施例相对应的实施例，本实施例可与上一实施例互相配合实施。上一实施例中提到的相关技术细节在本实施例中依然有效，为了减少重复，这里不再赘述。相应地，本实施例中提到的相关技术细节也可应用在上一实施例中。

本申请一实施例涉及一种拍摄方法，应用与上一实施例中的拍摄***的主控制器，拍摄方法的具体流程示意图如图6所示，具体包括以下步骤：

步骤301，发送拍照指令至每个图像处理器。

具体地说，主控制器发送拍照指令给每个摄像模组的图像处理器，供图像处理器控制图像传感器获取待处理图像，并对待处理图像进行图像处理，得到处理后的图像；

步骤302，接收每个图像处理器发送的处理后的图像。

步骤303，将多个处理后的图像合并为一个目标图像。

不难发现，本实施例为与上一实施例的拍摄***相对应的方法实施例，本实施例可与上一实施例互相配合实施。上一实施例中提到的相关技术细节在本实施例中依然有效，为了减少重复，这里不再赘述。相应地，本实施例中提到的相关技术细节也可应用在上一实施例中。

在一个实施例中，电路板还设置有角度检测模块，角度检测模块连接至主控制器。本实施例的具体流程示意图如图7所示，具体包括如下步骤：

步骤401，接收角度检测模块发送的旋转角度。

步骤402，判断旋转角度大于或等于预设角度阈值，若是，则进入步骤403，若否，则结束。

步骤403，发送拍照指令至每个图像处理器。

步骤404，接收每个图像处理器发送的处理后的图像。

步骤405，将多个处理后的图像合并为一个目标图像。

本实施例的步骤403至步骤405与上一实施例的步骤301至步骤303相同，为避免重复，在此不再赘述。

上面各种方法的步骤划分，只是为了描述清楚，实现时可以合并为一个步骤或者对某些步骤进行拆分，分解为多个步骤，只要包括相同的逻辑关系，都在本专利的保护范围内；对算法中或者流程中添加无关紧要的修改或者引入无关紧要的设计，但不改变其算法和流程的核心设计都在该专利的保护范围内。

本申请一实施例涉及一种计算机可读存储介质，存储有计算机程序。计算机程序被处理器执行时实现上述方法实施例。

即，本领域技术人员可以理解，实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序存储在一个存储介质中，包括若干指令用以使得一个设备(可以是单片机，芯片等)或处理器(processor)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

本领域的普通技术人员可以理解，上述各实施例是实现本申请的具体实施例，而在实际应用中，可以在形式上和细节上对其作各种改变，而不偏离本申请的精神和范围。

Claims (9)

1.一种应用于柜体的拍摄***，其特征在于，包括：多个摄像模组、电路板；所述电路板设置有主控制器，所述主控制器的多个第一连接引脚设置在所述电路板上；

每个所述摄像模组包括图像传感器、与所述图像传感器连接的图像处理器；所述图像处理器通过数据传输线连接至一个所述第一连接引脚；

所述主控制器用于发送拍照指令至每个所述图像处理器；所述图像处理器用于在接收所述拍照指令之后，控制所述图像传感器获取待处理图像；

所述图像处理器还用于接收所述待处理图像，并对所述待处理图像进行图像处理，得到处理后的图像，并将所述处理后的图像发送至所述主控制器；

所述主控制器用于将多个所述处理后的图像合并为一个目标图像；

所述电路板还设置有信号中继模块，所述信号中继模块的多个第二连接引脚设置在所述电路板上；

每个所述图像传感器通过帧同步信号线连接至一个所述第二连接引脚；

所述信号中继模块用于将所述图像传感器传输的衰减后的帧同步信号复原再生，并将所述复原再生后的帧同步信号发送至其他所述图像传感器。

2.根据权利要求1所述的拍摄***，其特征在于，每个所述第一连接引脚与每个所述第二连接引脚设置在一个接口中，每个所述摄像模组的所述数据传输线、所述帧同步信号线设置在同一个线缆中。

3.根据权利要求1至2任一项所述的拍摄***，其特征在于，所述电路板还设置有角度检测模块，所述角度检测模块连接至所述主控制器，所述角度检测模块用于检测旋转角度，所述主控制器用于在所述旋转角度大于预设角度阈值时，发送所述拍照指令至每个所述图像处理器触发拍照。

4.根据权利要求3所述的拍摄***，其特征在于，所述主控制器包括第一控制模块、第二控制模块；所述第一控制模块连接所述角度检测模块、图像处理器，

所述第一控制模块用于在所述旋转角度大于预设角度阈值时，发送所述拍照指令至每个所述图像处理器；所述第一控制模块还用于将所述图像处理器发送的待处理图像转发给所述第二控制模块；

所述第二控制模块将多个所述处理后的图像合并为一个所述目标图像。

5.根据权利要求1所述的拍摄***，其特征在于，所述信号中继模块包括逻辑与门器件；

所述逻辑与门器件的第一端连接外接电源，所述逻辑与门器件的第二端作为一个所述第二连接引脚；所述逻辑与门器件的第三端接地；所述逻辑与门器件的第四端连接所述外接电源，所述逻辑与门器件的第五端悬空；所述逻辑与门器件的第六端作为其他所述第二连接引脚。

6.一种冰箱，其特征在于，包括权利要求1至5任一项所述的应用于柜体的拍摄***。

7.一种拍摄方法，其特征在于，应用于柜体的拍摄***的主控制器，所述拍摄***还包括多个摄像模组、电路板；所述电路板设置有主控制器，所述主控制器的多个第一连接引脚设置在所述电路板上；

每个所述摄像模组包括图像传感器、与所述图像传感器连接的图像处理器；所述图像处理器通过数据传输线连接至一个所述第一连接引脚；

所述拍摄方法包括：

发送拍照指令至每个所述图像处理器，供所述图像处理器控制所述图像传感器获取待处理图像，并对所述待处理图像进行图像处理，得到处理后的图像；

接收每个图像处理器发送的所述处理后的图像；

将多个所述处理后的图像合并为一个目标图像；

所述电路板还设置有帧同步信号中继模块，所述信号中继模块的多个第二连接引脚设置在所述电路板上；每个所述图像传感器通过帧同步信号线连接至一个所述第二连接引脚；所述信号中继模块用于将所述图像传感器传输的帧同步信号衰减后复原，并将所述复原后的帧同步信号发送至其他所述图像传感器。

8.根据权利要求7所述的拍摄方法，其特征在于，所述电路板还设置有角度检测模块，所述角度检测模块连接至所述主控制器；

在所述发送拍照指令至每个所述图像处理器之前，还包括：

接收所述角度检测模块发送的旋转角度；

在所述旋转角度大于或等于预设角度阈值时，执行发送所述拍照指令至每个所述图像处理器的步骤。

9.一种计算机可读存储介质，存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求7至8中任一项所述的拍摄方法。

Images