CN104766315B - 标定图像采集装置和显示屏幕相对位置关系的方法、设备 - Google Patents
标定图像采集装置和显示屏幕相对位置关系的方法、设备 Download PDFInfo
- Publication number
- CN104766315B CN104766315B CN201510145995.5A CN201510145995A CN104766315B CN 104766315 B CN104766315 B CN 104766315B CN 201510145995 A CN201510145995 A CN 201510145995A CN 104766315 B CN104766315 B CN 104766315B
- Authority
- CN
- China
- Prior art keywords
- image
- mirror
- referential
- display screen
- pattern
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Controls And Circuits For Display Device (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明实施例公开了一种标定图像采集装置和显示屏幕相对位置关系的方法，包括：在电子设备的显示屏幕上显示一图案；通过图像采集装置获得一采集图像，其中，所述采集图像中包括镜子对应的图像以及所述镜子通过物理成像方式所呈现的所述图案的虚像图像；分析所述采集图像，确定所述图像采集装置与所述显示屏幕的相对位置关系；基于所述相对位置关系将所述图像采集装置所采集的操作体的空间操作对应到所述显示屏幕上响应。本发明实施例还公开了一种电子设备。
Description
技术领域
本发明涉及信息处理技术，尤其涉及一种标定图像采集装置和显示屏幕相对位置关系的方法及电子设备。
背景技术
当前，三维(3D)摄像头技术发展迅猛，随着体积不断减小、功耗和成本不断降低、精度不断提高、相关应用服务和生态***的不断完善以及业界诸如因特尔、微软等各大厂商的大力推广，3D摄像头产品已逐渐从实验室和工业领域应用转向个人消费市场，成为大众化的产品。
由于电子设备中的虚拟世界一般围绕电子设备屏幕为参考系来建立，而电子设备通过3D摄像头感知到的真实3D世界一般围绕3D摄像头为参考系建立，为了能够更好的将电子设备中的虚拟世界与用户生活的真实世界结合在一起，需要建立电子设备屏幕参考系与3D摄像头参考系之间的对应关系，即需要标定电子设备屏幕和3D摄像头之间的位置关系。但是现有标定方法较为复杂，普通用户难以掌握，因此一些集成了3D摄像头的设备制造商往往将3D摄像头固定在电子设备上的某一位置，不允许用户随意挪动，从而在设备出厂前就将摄像头与电子设备屏幕之间的位置关系测量好，将相关参数永久保留在电子设备中，用户无需标定即可直接使用该电子设备。但是，上述方式使用户受限于3D摄像头出厂时的参数配置，例如视场角、采集图像的分辨率、清晰度等，因此，限制了用户的使用自由度，降低了用户体验。
发明内容
为解决现有存在的技术问题，本发明实施例提供了一种标定图像采集装置和显示屏幕相对位置关系的方法及电子设备。
本发明实施例的技术方案是这样实现的：
本发明实施例提供了一种标定图像采集装置和显示屏幕相对位置关系的方法，所述方法包括：
在电子设备的显示屏幕上显示一图案；
通过图像采集装置获得一采集图像，其中，所述采集图像中包括镜子对应的图像以及所述镜子通过物理成像方式所呈现的所述图案的虚像图像；
分析所述采集图像，确定所述图像采集装置与所述显示屏幕的相对位置关系；
基于所述相对位置关系将所述图像采集装置所采集的操作体的空间操作对应到所述显示屏幕上响应。
本发明实施例还提供一种电子设备，所述电子设备包括：
显示单元，用于在电子设备的显示屏幕上显示一图案；
图像获取单元，用于通过图像采集装置获得一采集图像，其中，所述采集图像中包括镜子对应的图像以及所述镜子通过物理成像方式所呈现的所述图案的虚像图像；
分析单元，用于分析所述采集图像，确定所述图像采集装置与所述显示屏幕的相对位置关系；
响应单元，用于基于所述相对位置关系将所述图像采集装置所采集的操作体的空间操作对应到所述显示屏幕上响应。
本发明实施例所述的标定图像采集装置和显示屏幕相对位置关系的方法及电子设备，能够在电子设备的显示屏幕上显示一图案，通过图像采集装置获取一包含有镜子对应的图像以及所述镜子通过物理成像方式所呈现的所述图案的虚像图像的采集图像；进而依据所述采集图像确定出所述图像采集装置与所述显示屏幕的相对位置关系，以最终将所述图像采集装置所采集的操作体的空间操作对应到所述显示屏幕上响应，实现图像采集装置对应的真实世界与所述电子设备的显示屏幕显示的虚拟世界结合，提升用户体验。
另外，本发明实施例所述的标定图像采集装置和显示屏幕相对位置关系的方法简单、便于用户实现，因此，无需将与所述电子设备连接的图像采集装置，或者所述电子设备中的所述图像采集装置固定于所述电子设备中，因此，与现有固定所述图像采集装置的方式相比，本发明实施例使用自由度更高，更能满足用户的不同需求。
附图说明
图1为本发明实施例标定图像采集装置和显示屏幕相对位置关系的方法的实现流程示意图一；
图2为本发明实施例应用场景示意图；
图3为本发明实施例标定图像采集装置和显示屏幕相对位置关系的方法的实现流程示意图二；
图4为本发明实施例标定图像采集装置和显示屏幕相对位置关系的方法的实现流程示意图三；
图5为本发明实施例电子设备的结构示意图一；
图6为本发明实施例电子设备的结构示意图二。
具体实施方式
本发明实施例的基本思想是：在电子设备的显示屏幕上显示一图案；通过图像采集装置获得一采集图像，其中，所述采集图像中包括镜子对应的图像以及所述镜子通过物理成像方式所呈现的所述图案的虚像图像；分析所述采集图像，确定所述图像采集装置与所述显示屏幕的相对位置关系；基于所述相对位置关系将所述图像采集装置所采集的操作体的空间操作对应到所述显示屏幕上响应。
在3D摄像头的实际使用场景中，3D摄像头一般作为输入端，主要对用户及用户所处环境进行感知；而电子设备的显示屏幕作为输出端，主要用于向用户输出所述3D摄像头感知到的用户及用户所处环境相适应的内容；因此，考虑到3D摄像头对用户及用户所处环境对应的图像的采集便利性，以及显示屏幕向用户输出内容的便利性，3D摄像头与显示屏幕常被设置于同一朝向；因此，本发明主要基于3D摄像头与显示屏幕处于同一朝向的应用场景下，实现标定图像采集装置和显示屏幕相对位置关系的目的。
为了能够更加详尽地了解本发明的特点与技术内容，下面结合附图对本发明的实现进行详细阐述，所附附图仅供参考说明之用，并非用来限定本发明。
实施例一
图1为本发明实施例标定图像采集装置和显示屏幕相对位置关系的方法的实现流程示意图一；所述方法应用于一电子设备；所述电子设备连接或包括有图像采集装置；所述图像采集装置支持3D图像采集；如图1所示，所述方法包括：
步骤101：在电子设备的显示屏幕上显示一图案；
本实施例中，所述电子设备可以具体为电脑、电视机等支持3D显示的电子设备。
本实施例中，当所述电子设备包括有所述图像采集装置时，所述图像采集装置能够相对于所述电子设备转动，或移动。
本实施例中，所述图案为二维图像，也即所述图案与所述显示屏幕在同一平面。
步骤102：通过所述电子设备的图像采集装置获得一采集图像，其中，所述采集图像中包括镜子对应的图像以及所述镜子通过物理成像方式所呈现的所述图案的虚像图像；
本实施例中，由于所述图像采集装置的图像采集方向与电子设备的显示屏幕处于同一朝向，此时，如图2所示，在所述电子设备的显示屏幕21前方放置一镜子22时，所述镜子22能够反射所述显示屏幕21中的所述图案23，进而，使得所述图像采集装置24能够采集到所述镜子对应的图像，以及所述镜子通过物理成像方式所呈现的所述图案的虚像图像，如此，为标定图像采集装置和显示屏幕相对位置关系奠定了基础。
这里，值得注意的是，图2给出的应用场景仅是用于解释本发明实施例，并非用于限制本发明实施例，在实际应用中，所述镜子放置的位置不受限制，只要能够反射出所述显示屏幕呈现的图案、以及镜子即可。
本实施例中，由于所述图像采集装置支持3D图像采集，因此，所述图像采集装置采集到所述采集图像均为一三维图像；进一步地，所述图像采集装置可以具体为3D摄像头。
步骤103：分析所述采集图像，确定所述图像采集装置与所述显示屏幕的相对位置关系；
本实施例中，基于所述镜子成像原理分析所述镜子对应的图像，以及所述图案对应的所述虚像图像，进而确定所述图像采集装置与所述显示屏幕的相对位置关系，也即所述图像采集装置对应的参考系与所述电子设备的显示屏幕对应的参考系的参数转换关系。
步骤104：基于所述相对位置关系将所述图像采集装置所采集的操作体的空间操作对应到所述显示屏幕上响应。
本实施例中，当所述电子设备确定出所述图像采集装置与所述显示屏幕的相对位置关系，也即所述图像采集装置对应的参考系与所述电子设备的显示屏幕对应的参考系的参数转换关系后，所述电子设备能够依据参照系的参数转换关系将所述图像采集装置采集到的图像对应到所述电子设备的显示屏幕上，以使所述显示屏幕的虚拟世界与电子设备使用者生活的真实世界结合在一起，进而提升用户体验。
本发明实施例所述的标定图像采集装置和显示屏幕相对位置关系的方法，能够在电子设备的显示屏幕上显示一图案，通过图像采集装置获取一包含有镜子对应的图像以及所述镜子通过物理成像方式所呈现的所述图案的虚像图像的采集图像；进而依据所述采集图像确定出所述图像采集装置与所述显示屏幕的相对位置关系，以最终将所述图像采集装置所采集的操作体的空间操作对应到所述显示屏幕上响应，实现图像采集装置对应的真实世界与所述电子设备的显示屏幕显示的虚拟世界结合，提升用户体验。
另外，本发明实施例所述的标定图像采集装置和显示屏幕相对位置关系的方法简单、便于用户实现，因此，无需将与所述电子设备连接的图像采集装置，或者所述电子设备中的所述图像采集装置固定于所述电子设备中，因此，与现有固定所述图像采集装置的方式相比，本发明实施例使用自由度更高，更能满足用户的不同需求。
而且，由于无需将所述图像采集装置固定，所以用户能够根据实际需求任意对所述图像采集装置进行调整，甚至可以更换参数配置更高的图像采集装置，因此，满足了用户多元化的需求。
实施例二
图3为本发明实施例标定图像采集装置和显示屏幕相对位置关系的方法的实现流程示意图二；所述方法应用于一电子设备；所述电子设备连接或包括有图像采集装置；所述图像采集装置支持3D图像采集；如图3所示，所述方法包括：
步骤301：在电子设备的显示屏幕上显示一图案；
本实施例中，所述电子设备可以具体为电脑、电视机等支持3D显示的电子设备。
本实施例中，当所述电子设备包括有所述图像采集装置时，所述图像采集装置能够相对于所述电子设备转动，或移动。
本实施例中，所述图案为二维图像，也即所述图案与所述显示屏幕在同一平面。
步骤302：通过图像采集装置获得一采集图像，其中，所述采集图像中包括镜子对应的图像以及所述镜子通过物理成像方式所呈现的所述图案的虚像图像；
本实施例中，由于所述图像采集装置的图像采集方向与电子设备的显示屏幕处于同一朝向，此时，如图2所示，在所述电子设备的显示屏幕21前方放置一镜子22时，所述镜子22能够反射所述显示屏幕21中的所述图案23，进而，使得所述图像采集装置24能够采集到所述镜子对应的图像，以及所述镜子通过物理成像方式所呈现的所述图案的虚像图像，如此，为标定图像采集装置和显示屏幕相对位置关系奠定了基础。
这里，值得注意的是，图2给出的应用场景仅是用于解释本发明实施例，并非用于限制本发明实施例，在实际应用中，所述镜子放置的位置不受限制，只要能够反射出所述显示屏幕呈现的图案、以及镜子即可。
本实施例中，由于所述图像采集装置支持3D图像采集，因此，所述图像采集装置采集到所述采集图像均为一三维图像；进一步地，所述图像采集装置可以具体为3D摄像头。
步骤303：获取所述采集图像中所述镜子对应的图像在第一参考系下的第一组坐标信息；所述第一参考系为所述图像采集装置对应的参考系；
步骤304：获取所述采集图像中的所述镜子通过物理成像方式所呈现的所述图案的虚像图像在所述第一参考系下的第二组坐标信息；
步骤305：依据所述第一组坐标信息和所述第二组坐标信息确定所述图像采集装置与所述显示屏幕的相对位置关系；
步骤306：基于所述相对位置关系将所述图像采集装置所采集的操作体的空间操作对应到所述显示屏幕上响应。
本实施例中，当所述电子设备确定出所述图像采集装置与所述显示屏幕的相对位置关系，也即所述图像采集装置对应的参考系与所述电子设备的显示屏幕对应的参考系的参数转换关系后，所述电子设备能够依据参照系的参数转换关系将所述图像采集装置采集到的图像对应到所述电子设备的显示屏幕上，以使所述显示屏幕的虚拟世界与电子设备使用者生活的真实世界结合在一起，进而提升用户体验。
本实施例中，由于所述图像采集装置支持3D图像采集，因此，通过所述图像采集装置获取到的所述镜子对应的图像为一三维图像，也即所述第一组坐标信息中的每一坐标均为一三维坐标；因此，当所述电子设备获取到所述第一组坐标信息后，能够根据所述第一组坐标信息确定出在所述第一参考系下的所述镜子所在的平面。
同理，通过所述图像采集装置获取的所述图案对应的所述虚拟图像也为一三维图像，也即所述第二组坐标信息中的每一坐标也为一三维坐标；因此，当所述电子设备获取到所述第二组坐标信息后，能够依据所述第二组坐标信息确定出在所述第一参考系下的所述虚拟图像所在平面。
进而，当所述电子设备确定出在所述第一参考系下的所述镜子所在的平面、以及虚拟图像所在的平面后，能够依据镜面反射原理确定出所述第一参考系下的所述图案所在平面，也即所述第一参考系下的所述显示屏幕所在平面，又由于所述第一参考系为所述图像采集装置对应的参考系，因此，通过上述方式能够确定出所述显示屏幕在所述图像采集装置对应的所述第一参考系下的坐标，进而确定出所述图像采集装置与所述显示屏幕的相对位置关系，使得所述电子设备能够基于所述相对位置关系将所述图像采集装置所采集的操作体的空间操作对应到所述显示屏幕上响应，实现图像采集装置对应的真实世界与所述电子设备的显示屏幕显示的虚拟世界结合。
本发明实施例所述的标定图像采集装置和显示屏幕相对位置关系的方法，能够在电子设备的显示屏幕上显示一图案，通过图像采集装置获取一包含有镜子对应的图像以及所述镜子通过物理成像方式所呈现的所述图案的虚像图像的采集图像；进而依据所述采集图像确定出所述图像采集装置与所述显示屏幕的相对位置关系，以最终将所述图像采集装置所采集的操作体的空间操作对应到所述显示屏幕上响应，实现图像采集装置对应的真实世界与所述电子设备的显示屏幕显示的虚拟世界结合，提升用户体验。
另外，本发明实施例所述的标定图像采集装置和显示屏幕相对位置关系的方法简单、便于用户实现，因此，无需将与所述电子设备连接的图像采集装置，或者所述电子设备中的所述图像采集装置固定于所述电子设备中，因此，与现有固定所述图像采集装置的方式相比，本发明实施例使用自由度更高，更能满足用户的不同需求。
而且，由于无需将所述图像采集装置固定，所以用户能够根据实际需求任意对所述图像采集装置进行调整，甚至可以更换参数配置更高的图像采集装置，因此，满足了用户多元化的需求。
实施例三
图4为本发明实施例标定图像采集装置和显示屏幕相对位置关系的方法的实现流程示意图三；所述方法应用于一电子设备；所述电子设备连接或包括有图像采集装置；所述图像采集装置支持3D图像采集；如图4所示，所述方法包括：
步骤401：在电子设备的显示屏幕上显示一图案；
本实施例中，所述电子设备可以具体为电脑、电视机等支持3D显示的电子设备。
本实施例中，当所述电子设备包括有所述图像采集装置时，所述图像采集装置能够相对于所述电子设备转动，或移动。
本实施例中，所述图案为二维图像，也即所述图案与所述显示屏幕在同一平面。
步骤402：通过图像采集装置获得一采集图像，其中，所述采集图像中包括镜子对应的图像以及所述镜子通过物理成像方式所呈现的所述图案的虚像图像；
本实施例中，由于所述图像采集装置的图像采集方向与电子设备的显示屏幕处于同一朝向，此时，如图2所示，在所述电子设备的显示屏幕21前方放置一镜子22时，所述镜子22能够反射所述显示屏幕21中的所述图案23，进而，使得所述图像采集装置24能够采集到所述镜子对应的图像，以及所述镜子通过物理成像方式所呈现的所述图案的虚像图像，如此，为标定图像采集装置和显示屏幕相对位置关系奠定了基础。
这里，值得注意的是，图2给出的应用场景仅是用于解释本发明实施例，并非用于限制本发明实施例，在实际应用中，所述镜子放置的位置不受限制，只要能够反射出所述显示屏幕呈现的图案、以及镜子即可。
本实施例中，由于所述图像采集装置支持3D图像采集，因此，所述图像采集装置采集到所述采集图像均为一三维图像；进一步地，所述图像采集装置可以具体为3D摄像头。
步骤403：获取所述采集图像中的所述镜子对应的图像中的至少三个特征点；
步骤404：依据所述镜子对应的图像中的至少三个特征点确定出第一参考系下的第一组坐标信息；所述第一参考系为所述图像采集装置对应的参考系；
本实施例中，所述依据所述镜子对应的图像中的至少三个特征点确定出第一参考系下的第一组坐标信息，包括：
判断所述镜子对应的图像中的至少三个特征点是否满足第一预设规则；所述第一预设规则用于表征在所述第一参考系下依据所述镜子对应的图像中的至少三个特征点能够唯一确定出一所述镜子所在平面；
当获取到的判断结果表征所述镜子对应的图像中的至少三个特征点满足所述第一预设规则时，依据所述镜子对应的图像中的至少三个特征点确定出第一参考系下的第一组坐标信息。
本实施例中，确定所述第一组坐标信息的目的是为了在所述第一参考系下确定出所述镜子对应的图像所在的平面；因此，当所述电子设备获取到所述镜子对应的图像中的至少三个特征点后，需要判断获取到的所述镜子对应的图像中的至少三个特征点是否能够唯一确定出所述镜子对应的一平面，进而将能够唯一确定出所述镜子对应的平面的至少三个特征点组合成第一组坐标信息。
在一具体实施例中，通过所述镜子对应的平面的至少三个特征点确定出的所述镜子对应的一平面为与所述显示屏幕存在第一位置关系的平面，例如与所述显示平面相对应的一平面。
在一具体实施例中，利用角点和直线检测算法，能够检测到镜子平面的四条边及四个顶点，进而得到所述镜子对应的四个顶点的三维坐标，进而平面拟合出所述镜子所在的平面在所述第一参考系下的位置。
步骤405：获取所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点；
在一具体实施例中，利用特征点检测算法，能够采集到所述图案对应的虚拟图像中的至少三个特定点的三维坐标，进而利用平面拟合算法能够拟合出所述图案对应的虚拟图像所在的平面在所述第一参考系下的位置。
步骤406：依据所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点确定出所述第一参考系下的第二组坐标信息；
本实施例中，所述依据所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点确定出所述第一参考系下的第二组坐标信息，包括：
判断所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点是否满足第二预设规则；所述第二预设规则用于表征在所述第一参考系下通过所述虚像图像中的至少三个特征点能够唯一确定出所述虚拟图像所在的平面；
当获取到的判断结果表征所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点满足所述第二预设规则时，依据所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点确定出所述第一参考系下的第二组坐标信息。
本实施例中，确定所述第二组坐标信息的目的是为了在所述第一参考系下确定出所述图案通过物理成像方式所呈现虚拟图像所在平面，进而根据镜面反射原理在所述第一参考系下确定出所述显示屏幕所在平面；因此，当所述电子设备获取到所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点后，需要判断获取到的虚像图像中的至少三个特征点是否能够唯一确定出一平面，进而将能够唯一确定出一平面的所述虚拟图像中的至少三个特征点组合成第二组坐标信息。
步骤407：依据所述第一组坐标信息和所述第二组坐标信息确定所述图像采集装置与所述显示屏幕的相对位置关系；
步骤408：基于所述相对位置关系将所述图像采集装置所采集的操作体的空间操作对应到所述显示屏幕上响应。
本实施例中，当所述电子设备确定出所述图像采集装置与所述显示屏幕的相对位置关系，也即所述图像采集装置对应的参考系与所述电子设备的显示屏幕对应的参考系的参数转换关系后，所述电子设备能够依据参照系的参数转换关系将所述图像采集装置采集到的图像对应到所述电子设备的显示屏幕上，以使所述显示屏幕的虚拟世界与电子设备使用者生活的真实世界结合在一起，进而提升用户体验。
本实施例中，由于所述图像采集装置支持3D图像采集，因此，通过所述图像采集装置获取到的所述镜子对应的图像为一三维图像，也即所述第一组坐标信息中的每一坐标均为一三维坐标；因此，当所述电子设备获取到所述第一组坐标信息后，能够根据所述第一组坐标信息确定出在所述第一参考系下的所述镜子所在的平面。
同理，通过所述图像采集装置获取的所述图案对应的所述虚拟图像也为一三维图像，也即所述第二组坐标信息中的每一坐标也为一三维坐标；因此，当所述电子设备获取到所述第二组坐标信息后，能够依据所述第二组坐标信息确定出在所述第一参考系下的所述虚拟图像所在平面。
进而，当所述电子设备确定出在所述第一参考系下的所述镜子所在的平面、以及虚拟图像所在的平面后，能够依据镜面反射原理确定出所述第一参考系下的所述图案所在平面，也即所述第一参考系下的所述显示屏幕所在平面，又由于所述第一参考系为所述图像采集装置对应的参考系，因此，通过上述方式能够确定出所述显示屏幕在所述图像采集装置对应的所述第一参考系下的坐标，进而确定出所述图像采集装置与所述显示屏幕的相对位置关系，使得所述电子设备能够基于所述相对位置关系将所述图像采集装置所采集的操作体的空间操作对应到所述显示屏幕上响应，实现图像采集装置对应的真实世界与所述电子设备的显示屏幕显示的虚拟世界结合。
本发明实施例所述的标定图像采集装置和显示屏幕相对位置关系的方法，能够在电子设备的显示屏幕上显示一图案，通过图像采集装置获取一包含有镜子对应的图像以及所述镜子通过物理成像方式所呈现的所述图案的虚像图像的采集图像；进而依据所述采集图像确定出所述图像采集装置与所述显示屏幕的相对位置关系，以最终将所述图像采集装置所采集的操作体的空间操作对应到所述显示屏幕上响应，实现图像采集装置对应的真实世界与所述电子设备的显示屏幕显示的虚拟世界结合，提升用户体验。
另外，本发明实施例所述的标定图像采集装置和显示屏幕相对位置关系的方法简单、便于用户实现，因此，无需将与所述电子设备连接的图像采集装置，或者所述电子设备中的所述图像采集装置固定于所述电子设备中，因此，与现有固定所述图像采集装置的方式相比，本发明实施例使用自由度更高，更能满足用户的不同需求。
而且，由于无需将所述图像采集装置固定，所以用户能够根据实际需求任意对所述图像采集装置进行调整，甚至可以更换参数配置更高的图像采集装置，因此，满足了用户多元化的需求。
实施例四
图5为本发明实施例电子设备的结构示意图一；如图5所示，所述电子设备包括：
显示单元51，用于在电子设备的显示屏幕上显示一图案；
图像获取单元52，用于通过图像采集装置获得一采集图像，其中，所述采集图像中包括镜子对应的图像以及所述镜子通过物理成像方式所呈现的所述图案的虚像图像；
分析单元53，用于分析所述采集图像，确定所述图像采集装置与所述显示屏幕的相对位置关系；
响应单元54，用于基于所述相对位置关系将所述图像采集装置所采集的操作体的空间操作对应到所述显示屏幕上响应。
本领域技术人员应当理解，本发明实施例的电子设备中各处理单元的功能，可参照前述标定图像采集装置和显示屏幕相对位置关系的方法的相关描述而理解，本发明实施例的电子设备中各处理单元，可通过实现本发明实施例所述的功能的模拟电路而实现，也可以通过执行本发明实施例所述的功能的软件在智能终端上的运行而实现。
实施例五
图6为本发明实施例电子设备的结构示意图二；如图6所示，所述电子设备包括：
显示单元51，用于在电子设备的显示屏幕上显示一图案；
图像获取单元52，用于通过图像采集装置获得一采集图像，其中，所述采集图像中包括镜子对应的图像以及所述镜子通过物理成像方式所呈现的所述图案的虚像图像；
分析单元53，用于分析所述采集图像，确定所述图像采集装置与所述显示屏幕的相对位置关系；
响应单元54，用于基于所述相对位置关系将所述图像采集装置所采集的操作体的空间操作对应到所述显示屏幕上响应。
上述方案中，所述分析单元53，包括：
第一获取子单元531，用于获取所述采集图像中所述镜子对应的图像在第一参考系下的第一组坐标信息；所述第一参考系为所述图像采集装置对应的参考系；
第二获取子单元532，用于获取所述采集图像中的所述镜子通过物理成像方式所呈现的所述图案的虚像图像在所述第一参考系下的第二组坐标信息。
上述方案中，所述分析单元，还包括：
确定子单元533，用于依据所述第一组坐标信息和所述第二组坐标信息确定所述图像采集装置与所述显示屏幕的相对位置关系。
本领域技术人员应当理解，本发明实施例的电子设备中各处理单元的功能，可参照前述标定图像采集装置和显示屏幕相对位置关系的方法的相关描述而理解，本发明实施例的电子设备中各处理单元，可通过实现本发明实施例所述的功能的模拟电路而实现，也可以通过执行本发明实施例所述的功能的软件在智能终端上的运行而实现。
实施例六
基于实施例五所述的电子设备，本实施例中，所述第一获取子单元，还用于获取所述采集图像中的所述镜子对应的图像中的至少三个特征点；
还用于依据所述镜子对应的图像中的至少三个特征点确定出第一参考系下的第一组坐标信息。
本实施例中，所述第一获取子单元，还用于判断所述镜子对应的图像中的至少三个特征点是否满足第一预设规则；所述第一预设规则用于表征在所述第一参考系下依据所述镜子对应的图像中的至少三个特征点能够唯一确定出一所述镜子所在平面；
还用于当获取到的判断结果表征所述镜子对应的图像中的至少三个特征点满足所述第一预设规则时，依据所述镜子对应的图像中的至少三个特征点确定出第一参考系下的第一组坐标信息。
本实施例中，所述第二获取子单元，还用于获取所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点；
还用于依据所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点确定出所述第一参考系下的第二组坐标信息。
本实施例中，所述第二获取子单元，还用于判断所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点是否满足第二预设规则；所述第二预设规则用于表征在所述第一参考系下通过所述虚像图像中的至少三个特征点能够唯一确定出所述虚拟图像所在的平面；
还用于当获取到的判断结果表征所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点满足所述第二预设规则时，依据所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点确定出所述第一参考系下的第二组坐标信息。
本领域技术人员应当理解，本发明实施例的电子设备中各处理单元的功能，可参照前述标定图像采集装置和显示屏幕相对位置关系的方法的相关描述而理解，本发明实施例的电子设备中各处理单元，可通过实现本发明实施例所述的功能的模拟电路而实现，也可以通过执行本发明实施例所述的功能的软件在智能终端上的运行而实现。
在本申请所提供的几个实施例中，应该理解到，所揭露的设备和方法，可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，如：多个单元或组件可以结合，或可以集成到另一个***，或一些特征可以忽略，或不执行。另外，所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口，设备或单元的间接耦合或通信连接，可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的，作为单元显示的部件可以是、或也可以不是物理单元，即可以位于一个地方，也可以分布到多个网络单元上；可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外，在本发明各实施例中的各功能单元可以全部集成在一个处理单元中，也可以是各单元分别单独作为一个单元，也可以两个或两个以上单元集成在一个单元中；上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。
本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于一计算机可读取存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储介质包括：移动存储设备、只读存储器(ROM，Read Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
或者，本发明上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各个实施例所述方法的全部或部分。而前述的存储介质包括：移动存储设备、只读存储器(ROM，Read Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。
Claims (14)
1.一种标定图像采集装置和显示屏幕相对位置关系的方法，所述方法包括：
在电子设备的显示屏幕上显示一图案；
通过图像采集装置获得一采集图像，其中，所述采集图像中包括镜子对应的图像以及所述镜子通过物理成像方式所呈现的所述图案的虚像图像；
分析所述采集图像，确定所述图像采集装置与所述显示屏幕的相对位置关系；所述相对位置关系是所述图像采集装置对应的参考系与所述电子设备的显示屏幕对应的参考系的参数转换关系；
基于所述相对位置关系将所述图像采集装置所采集的操作体的空间操作对应到所述显示屏幕上响应。
2.根据权利要求1所述的方法，其特征在于，所述分析所述采集图像，包括：
获取所述采集图像中所述镜子对应的图像在第一参考系下的第一组坐标信息；所述第一参考系为所述图像采集装置对应的参考系；
获取所述采集图像中的所述镜子通过物理成像方式所呈现的所述图案的虚像图像在所述第一参考系下的第二组坐标信息。
3.根据权利要求2所述的方法，其特征在于，所述获取所述采集图像中所述镜子对应的图像在第一参考系下的第一组坐标信息，包括：
获取所述采集图像中的所述镜子对应的图像中的至少三个特征点；
依据所述镜子对应的图像中的至少三个特征点确定出第一参考系下的第一组坐标信息。
4.根据权利要求3所述的方法，其特征在于，所述依据所述镜子对应的图像中的至少三个特征点确定出第一参考系下的第一组坐标信息，包括：
判断所述镜子对应的图像中的至少三个特征点是否满足第一预设规则；所述第一预设规则用于表征在所述第一参考系下依据所述镜子对应的图像中的至少三个特征点能够唯一确定出一所述镜子所在平面；
当获取到的判断结果表征所述镜子对应的图像中的至少三个特征点满足所述第一预设规则时，依据所述镜子对应的图像中的至少三个特征点确定出第一参考系下的第一组坐标信息。
5.根据权利要求2所述的方法，其特征在于，所述获取所述采集图像中的所述镜子通过物理成像方式所呈现的所述图案的虚像图像在所述第一参考系下的第二组坐标信息，包括：
获取所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点；
依据所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点确定出所述第一参考系下的第二组坐标信息。
6.根据权利要求5所述的方法，其特征在于，所述依据所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点确定出所述第一参考系下的第二组坐标信息，包括：
判断所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点是否满足第二预设规则；所述第二预设规则用于表征在所述第一参考系下通过所述虚像图像中的至少三个特征点能够唯一确定出所述虚像图像所在的平面；
当获取到的判断结果表征所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点满足所述第二预设规则时，依据所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点确定出所述第一参考系下的第二组坐标信息。
7.根据权利要求2所述的方法，其特征在于，所述确定所述图像采集装置与所述显示屏幕的相对位置关系，包括：
依据所述第一组坐标信息和所述第二组坐标信息确定所述图像采集装置与所述显示屏幕的相对位置关系。
8.一种电子设备，包括：
显示单元，用于在电子设备的显示屏幕上显示一图案；
图像获取单元，用于通过图像采集装置获得一采集图像，其中，所述采集图像中包括镜子对应的图像以及所述镜子通过物理成像方式所呈现的所述图案的虚像图像；
分析单元，用于分析所述采集图像，确定所述图像采集装置与所述显示屏幕的相对位置关系；所述相对位置关系是所述图像采集装置对应的参考系与所述电子设备的显示屏幕对应的参考系的参数转换关系；
响应单元，用于基于所述相对位置关系将所述图像采集装置所采集的操作体的空间操作对应到所述显示屏幕上响应。
9.根据权利要求8所述的电子设备，其特征在于，所述分析单元，包括：
第一获取子单元，用于获取所述采集图像中所述镜子对应的图像在第一参考系下的第一组坐标信息；所述第一参考系为所述图像采集装置对应的参考系；
第二获取子单元，用于获取所述采集图像中的所述镜子通过物理成像方式所呈现的所述图案的虚像图像在所述第一参考系下的第二组坐标信息。
10.根据权利要求9所述的电子设备，其特征在于，所述第一获取子单元，还用于获取所述采集图像中的所述镜子对应的图像中的至少三个特征点；
还用于依据所述镜子对应的图像中的至少三个特征点确定出第一参考系下的第一组坐标信息。
11.根据权利要求10所述的电子设备，其特征在于，所述第一获取子单元，还用于判断所述镜子对应的图像中的至少三个特征点是否满足第一预设规则；所述第一预设规则用于表征在所述第一参考系下依据所述镜子对应的图像中的至少三个特征点能够唯一确定出一所述镜子所在平面；
还用于当获取到的判断结果表征所述镜子对应的图像中的至少三个特征点满足所述第一预设规则时，依据所述镜子对应的图像中的至少三个特征点确定出第一参考系下的第一组坐标信息。
12.根据权利要求9所述的电子设备，其特征在于，所述第二获取子单元，还用于获取所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点；
还用于依据所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点确定出所述第一参考系下的第二组坐标信息。
13.根据权利要求12所述的电子设备，其特征在于，所述第二获取子单元，还用于判断所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点是否满足第二预设规则；所述第二预设规则用于表征在所述第一参考系下通过所述虚像图像中的至少三个特征点能够唯一确定出所述虚像图像所在的平面；
还用于当获取到的判断结果表征所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点满足所述第二预设规则时，依据所述镜子通过物理成像方式所呈现的所述图案的虚像图像中的至少三个特征点确定出所述第一参考系下的第二组坐标信息。
14.根据权利要求9所述的电子设备，其特征在于，所述分析单元，还包括：
确定子单元，用于依据所述第一组坐标信息和所述第二组坐标信息确定所述图像采集装置与所述显示屏幕的相对位置关系。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510145995.5A CN104766315B (zh) | 2015-03-30 | 2015-03-30 | 标定图像采集装置和显示屏幕相对位置关系的方法、设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510145995.5A CN104766315B (zh) | 2015-03-30 | 2015-03-30 | 标定图像采集装置和显示屏幕相对位置关系的方法、设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN104766315A CN104766315A (zh) | 2015-07-08 |
| CN104766315B true CN104766315B (zh) | 2019-03-29 |
Family
ID=53648124
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201510145995.5A Active CN104766315B (zh) | 2015-03-30 | 2015-03-30 | 标定图像采集装置和显示屏幕相对位置关系的方法、设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104766315B (zh) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106250791A (zh) | 2015-06-30 | 2016-12-21 | 北京智谷睿拓技术服务有限公司 | 显示控制方法和装置 |
| CN106384065B (zh) | 2015-06-30 | 2019-08-06 | 北京智谷睿拓技术服务有限公司 | 显示控制方法和装置 |
| CN110506252B (zh) * | 2017-11-27 | 2021-01-29 | 华为技术有限公司 | 基于图样中标志图形点坐标的转换关系定位终端屏幕 |
| CN113656132A (zh) * | 2021-08-17 | 2021-11-16 | 维沃移动通信（杭州）有限公司 | 显示方法和装置 |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104111036A (zh) * | 2013-04-18 | 2014-10-22 | 中国科学院沈阳自动化研究所 | 一种基于双目视觉的镜面物体测量装置及方法 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20020036617A1 (en) * | 1998-08-21 | 2002-03-28 | Timothy R. Pryor | Novel man machine interfaces and applications |
| CN101072366B (zh) * | 2007-05-24 | 2010-08-11 | 上海大学 | 基于光场和双目视觉技术的自由立体显示***和方法 |
| CN102298467A (zh) * | 2010-06-24 | 2011-12-28 | 北京威亚视讯科技有限公司 | 显示屏幕自动标定的方法及*** |
-
2015
- 2015-03-30 CN CN201510145995.5A patent/CN104766315B/zh active Active
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104111036A (zh) * | 2013-04-18 | 2014-10-22 | 中国科学院沈阳自动化研究所 | 一种基于双目视觉的镜面物体测量装置及方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN104766315A (zh) | 2015-07-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11747893B2 (en) | Visual communications methods, systems and software | |
| CN104766315B (zh) | 标定图像采集装置和显示屏幕相对位置关系的方法、设备 | |
| JP5843340B2 (ja) | ３次元環境共有システム及び３次元環境共有方法 | |
| EP3144879A1 (en) | A method and an apparatus for generating data representative of a light field | |
| EP2767092A1 (en) | Apparatus, method and program for 3d data analysis and fine particle analysis system | |
| JP2006244329A (ja) | 携帯端末および情報処理装置、システム | |
| RU2612572C2 (ru) | Система обработки изображений и способ | |
| CN105516579B (zh) | 一种图像处理方法、装置和电子设备 | |
| CN104735348A (zh) | 双摄像头拍照方法和*** | |
| CN103959770A (zh) | 图像处理设备、图像处理方法和程序 | |
| EP3792711A1 (en) | Optical tag based information apparatus interaction method and system | |
| US10268216B2 (en) | Method and system for providing position or movement information for controlling at least one function of an environment | |
| JP2015050693A (ja) | カメラ設置シミュレータ及びそのコンピュータプログラム | |
| CN110689580A (zh) | 多相机标定方法及装置 | |
| US9189890B2 (en) | Orientating an oblique plane in a 3D representation | |
| JP2012194145A (ja) | 情報表示装置、情報表示方法、及びプログラム | |
| CN109803126A (zh) | 用于多屏显示的控制方法、控制端及多屏显示*** | |
| CN108711186A (zh) | 目标物体制图的方法与装置、身份识别装置和电子设备 | |
| CN107422842A (zh) | 一种信息处理方法及装置 | |
| EP3188124A1 (en) | A method and an apparatus for generating data representative of a pixel beam | |
| CN104076910A (zh) | 一种信息处理的方法及电子设备 | |
| EP3966790A1 (en) | Novel systems and methods for collecting, locating and visualizing sensor signals in extended reality | |
| EP3312804B1 (en) | Image processing system, method and program | |
| KR20160117956A (ko) | 단말기를 이용한 피부진단 측정시스템 | |
| CN109636895B (zh) | 一种全息显示方法和电子沙盘装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| EXSB | Decision made by sipo to initiate substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |