CN104156069B - 对象拾取方法、对象拾取装置及用户设备 - Google Patents
对象拾取方法、对象拾取装置及用户设备 Download PDFInfo
- Publication number
- CN104156069B CN104156069B CN201410401461.XA CN201410401461A CN104156069B CN 104156069 B CN104156069 B CN 104156069B CN 201410401461 A CN201410401461 A CN 201410401461A CN 104156069 B CN104156069 B CN 104156069B
- Authority
- CN
- China
- Prior art keywords
- image
- mirror
- information
- user
- eyes
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Image Analysis (AREA)
Abstract
本申请实施例公开了一种对象拾取方法和拾取装置，所述方法包括：获取包含至少一图像区域的至少一图像，其中，所述至少一图像区域与一用户通过一镜子注视的至少一目标对象对应；获取所述用户的注视点相对于所述镜子的第一位置信息；根据所述第一位置信息以及所述至少一图像的一采集位置相对于所述镜子的第二位置信息确定所述至少一图像中的所述至少一图像区域；分析所述至少一图像确定所述至少一图像区域对应的所述至少一目标对象。本申请的技术方案通过追踪用户视线经过一镜子反射后的反射方向，并获取该反射方向的图像，拾取用户通过所述镜子关注的目标对象，特别适合在用户需要使用镜子来观看对象的场合方便地拾取用户感兴趣的目标对象。
Description
技术领域
本申请涉及人机交互技术领域，尤其涉及一种对象拾取方法及对象拾取装置。
背景技术
随着技术的不断发展，为了获得感兴趣的目标对象的信息或者与所述目标对象建立连接，人们可以通过多种方式来拾取所述目标对象，例如：通过用户的动作指定所述目标对象，例如，用手指向所述目标对象；或者，通过视线追踪确定用户眼睛正在注视的目标对象；或者通过语音描述确定所述目标对象等。
发明内容
本申请实施例可能的目的是：提供一种对象拾取技术方案。
第一方面，本申请的一可能的实施方案提供了一种对象拾取方法，包括：
获取包含至少一图像区域的至少一图像，其中，所述至少一图像区域与一用户通过一镜子注视的至少一目标对象对应；
获取所述用户的注视点相对于所述镜子的第一位置信息；
根据所述第一位置信息以及所述至少一图像的一采集位置相对于所述镜子的第二位置信息确定所述至少一图像中的所述至少一图像区域；
分析所述至少一图像确定所述至少一图像区域对应的所述至少一目标对象。
第二方面，本申请的一可能的实施方案提供了一种对象拾取装置，包括：
图像获取模块，用于获取包含至少一图像区域的至少一图像，其中，所述至少一图像区域与一用户通过一镜子注视的至少一目标对象对应；
位置信息获取模块，用于获取所述用户的注视点相对于所述镜子的第一位置信息；
图像区域确定模块，用于根据所述第一位置信息以及所述至少一图像的一采集位置相对于所述镜子的第二位置信息确定所述至少一图像中的所述至少一图像区域；
图像处理模块，用于分析所述至少一图像确定所述至少一图像区域对应的所述至少一目标对象。
第三方面，本申请的一可能的实施方案提供了一种用户设备，包括上述的对象拾取装置。
本申请实施例的至少一个实施方案通过追踪用户视线经过一镜子反射后的反射方向，并获取该反射方向的至少一图像，拾取用户通过所述镜子关注的至少一目标对象，特别适合在用户需要使用镜子来观看至少一对象的场合方便地拾取用户感兴趣的目标对象。
附图说明
图1为本申请实施例的一种对象拾取方法的流程图；
图2为本申请实施例的一种对象拾取装置的结构示意框图；
图3a、3b和3c为本申请实施例三种对象拾取装置的应用场景示意图；
图4a为本申请实施例的另一种对象拾取装置的结构示意框图；
图4b为本申请实施例的一种对象拾取装置的第一信息获取单元的结构示意框图；
图4c为本申请实施例的一种对象拾取装置的位置信息获取模块的结构示意框图；
图4d为本申请实施例的一种对象拾取装置的第二信息获取单元的结构示意框图；
图5为本申请实施例的又一种对象拾取装置的结构示意框图；
图6为本申请实施例的一种用户设备的结构示意框图。
具体实施方式
下面结合附图(若干附图中相同的标号表示相同的元素)和实施例，对本申请的具体实施方式作进一步详细说明。以下实施例用于说明本申请，但不用来限制本申请的范围。
本领域技术人员可以理解，本申请中的“第一”、“第二”等术语仅用于区别不同步骤、设备或模块等，既不代表任何特定技术含义，也不表示它们之间的必然逻辑顺序。
如图1所示，本申请实施例提供了一种对象拾取方法，包括：
S110获取包含至少一图像区域的至少一图像，其中，所述至少一图像区域与一用户通过一镜子注视的至少一目标对象对应；
S120获取所述用户的注视点相对于所述镜子的第一位置信息；
S130根据所述第一位置信息以及所述至少一图像的一采集位置相对于所述镜子的第二位置信息确定所述图像中的所述至少一图像区域；
S140分析所述至少一图像确定所述至少一图像区域对应的所述至少一目标对象。
在本申请实施例中，所述镜子为具有一反射面、可供用户通过所述反射面注视一目标对象的物体，例如常用的平面、凸面或凹面等形状的反射镜、玻璃、水面等，下面主要以反射镜为例进行说明。
举例来说，本发明提供的对象拾取装置作为本实施例的执行主体，执行S110～S140。具体地，所述对象拾取装置可以以软件、硬件或软硬件结合的方式设置在用户设备中。
本申请实施例通过追踪用户视线经过一镜子反射后的反射方向，并获取该反射方向的至少一图像，拾取用户通过所述镜子关注的至少一目标对象，特别适合在用户需要使用镜子来观看至少一对象的场合方便地拾取用户感兴趣的目标对象。
通过下面的实施方式进一步说明本申请实施例方法的各步骤：
S110获取包含至少一图像区域的至少一图像。
在本申请实施例中，所述至少一图像区域为所述至少一目标对象的像在所述至少一图像上的对应区域。
在本申请实施例一种可能的实施方式中，所述步骤S110包括：
在所述镜子后侧获取所述至少一图像。
在本申请实施例一种可能的实施方式中，所述镜子可以为一单向***，其朝向所述用户和所述至少一目标对象的前侧为反射侧，而与所述前侧相反的后侧为透射侧，通过一图像采集器件在所述镜子的所述后侧朝向所述前侧获取所述至少一图像。
当然，在本申请实施例另一种可能的实施方式中，还可以通过其它方式在所述镜子侧获取所述至少一图像。例如：所述镜子上设有至少一孔洞，设置在所述镜子后侧的图像采集装置可以通过所述孔洞来获得所述至少一图像。
在又一种可能的实施方式中，当所述镜子为水等液体的反射面时，还可以在所述液体内部来获取所述至少一图像，例如，通过一水下相机或摄像机获取水面上的所述至少一目标对象的图像。当然，在本实施方式中，在确定所述至少一图像区域时，需要考虑水的折射率。
S120获取所述用户的注视点相对于所述镜子的第一位置信息。
在本申请实施例一种可能的实施方式中，所述步骤S120包括：
获取所述用户的两只眼睛相对于所述镜子的第三位置信息、以及所述两只眼睛的视线相对于所述镜子的两个视线方向；
根据所述第三位置信息以及所述两个视线方向确定所述第一位置信息。
如图3a所示，在本申请实施例中，所述注视点F为所述两个眼睛的视线E1和视线E2的交点。
在一种可能的实施方式中，所述至少一图像还包含所述用户的所述两只眼睛对应的两个眼睛图像区域；
获取所述第三位置信息包括：至少根据所述至少一图像获取所述第三位置信息。
在本实施方式中，通过所述眼睛对应的眼睛图像区域在所述至少一图像上的位置和大小可以得到所述眼睛相对于所述至少一图像的图像采集位置的位置信息，再根据所述图像采集位置与所述镜子之间的第二位置信息，可以得到所述第三位置信息。
在一种情况下，所述图像采集位置与镜子之间的距离相对于所述镜子到所述眼睛和到所述至少一目标对象的距离基本可以忽略，此时，可以将所述眼睛相对于所述至少一图像的图像采集位置的位置信息作为所述第三位置信息。
在本实施方式中，所述获取所述两个视线方向包括：根据所述至少一图像获取所述两个视线方向。
例如，可以根据所述至少一图像中眼睛的朝向以及瞳孔在所述眼睛中的位置来确定所述视线方向。
当然，本领域的技术人员可以知道，在其它可能的实施方式中，除了通过所述至少一图像获取所述第三位置信息和所述视线方向外，还可以根据其它方式来获取所述第三位置信息和所述视线方向。例如：在一种可能的实施方式中，还可以通过一设置在所述镜子侧的一位置传感器来获得所述位置信息。或者，还可以通过设置在用户侧的位置传感器来确定所述第三位置信息。又例如，可以通过其它视线追踪装置来获得所述视线方向。
在本申请实施例另一可能的实施方式中，获取所述第一位置信息包括：
获取所述用户的一眼睛相对于所述镜子的第四位置信息、以及所述眼睛的视线相对于所述镜子的视线方向；
确定所述眼睛的注视深度；
根据所述第四位置信息、所述视线方向以及所述注视深度确定所述第一位置信息。
在本实施方式中，不是通过两眼视线的交点来获取所述第一位置信息，而是通过一眼睛的视线方向和注视深度来获取所述第一位置信息。
在一种可能的实施方式中，所述至少一图像还包含所述用户的所述眼睛对应的一眼睛图像区域；
获取所述第四位置信息包括：至少根据所述至少一图像获取所述第四位置信息；和/或
获取所述视线方向包括：根据所述至少一图像获取所述视线方向。
在本申请实施例中，获取所述第四位置信息和所述视线方向的方式与上述获取所述第三位置信息和所述两个视线方向的方式基本相同，这里不再赘述。
在本实施方式中，获取所述眼睛的注视深度可以通过检测用户眼睛光学***在观看所述至少一目标对象时的光学参数来确定所述注视深度。例如，在一种可能的实施方式中，可以通过对用户的眼底进行拍摄，通过获取一眼底清晰图像时拍摄装置的参数来确定用户注视点的深度。
S130根据所述第一位置信息以及所述至少一图像的一采集位置相对于所述镜子的第二位置信息确定所述至少一图像中的所述至少一图像区域。
在本申请实施例中，根据所述第一位置信息和所述第二位置信息通过几何计算就可以得到所述至少一目标对象相对于所述采集位置的第五位置信息，根据该第五位置信息就可以得到所述至少一目标对象在所述至少一图像中的位置，进而确定所述至少一图像区域。
S140分析所述至少一图像确定所述至少一图像区域对应的所述至少一目标对象。
本申请实施例中，在确定了所述至少一图像区域之后，通过图像识别等分析处理，可以确定所述至少一目标对象。
在本申请实施例一种可能的实施方式中，在确定了所述至少一目标对象之后，所述方法还包括：
获取所述至少一目标对象的至少一相关信息。
在本申请实施例中，所述至少一相关信息包括以下的至少一种：
属性信息、链接信息和通信信息。
当然，本领域技术人员可以知道，除了上面所述的三种相关信息外，其它可能的相关信息也可能被使用，这里不再一一列举。
在一种可能的应用场景中，所述镜子为一交通工具的后视镜，例如汽车两侧的后视镜，通过上述实施方式确定了所述用户通过所述后视镜注视的后方的目标对象后，例如，可以获取所述目标对象的属性信息，例如：所述目标对象为另一汽车，所述属性信息可以为所述另一汽车的品牌、车型、价格等，或者还可以为所述另一汽车的车牌号等信息。
在另一种可能的应用场景中，所述镜子例如可以为一大巴车内的后视镜，司机可以通过上述的实施方式确定一乘客，然后获取所述乘客的通信信息，与所述乘客进行通信。
可以看出，本申请实施例的实施方案在用户不方便回头，需要通过一镜子来注视对象的场合，可以方便的帮助用户拾取感兴趣的目标对象。
本领域技术人员可以理解，在本申请具体实施方式的上述方法中，各步骤的序号大小并不意味着执行顺序的先后，各步骤的执行顺序应以其功能和内在逻辑确定，而不应对本申请具体实施方式的实施过程构成任何限定。
如图2所示，本申请实施例一种可能的实施方式提供了一种对象拾取装置200，包括：
图像获取模块210，用于获取包含至少一图像区域的至少一图像，其中，所述至少一图像区域与一用户通过一镜子注视的至少一目标对象对应；
位置信息获取模块220，用于获取所述用户的注视点相对于所述镜子的第一位置信息；
图像区域确定模块230，用于根据所述第一位置信息以及所述至少一图像的一采集位置相对于所述镜子的第二位置信息确定所述至少一图像中的所述至少一图像区域；
图像处理模块240，用于分析所述至少一图像确定所述至少一图像区域对应的所述至少一目标对象。
本申请实施例通过追踪用户视线经过一镜子反射后的反射方向，并获取该反射方向的至少一图像，拾取用户通过所述镜子关注的至少一目标对象，特别适合在用户需要使用镜子来观看至少一对象的场合方便地拾取用户感兴趣的目标对象。
通过下面的实施方式进一步说明本申请实施例装置的各模块。
在本申请实施例中，所述至少一图像区域为所述至少一目标对象的像在所述至少一图像上的对应区域。
在本申请实施例一种可能的实施方式中，所述图像获取模块210设置在所述镜子后侧。
在本申请实施例一种可能的实施方式中，所述镜子可以为一单向***，其朝向所述用户和所述至少一目标对象的前侧为反射侧，而与所述前侧相反的后侧为透射侧，通过所述图像获取模块210在所述镜子的所述后侧朝向所述前侧获取所述至少一图像。
当然，在本申请实施例另一种可能的实施方式中，还可以通过其它方式在所述镜子侧获取所述至少一图像。例如：所述镜子上设有至少一孔洞，设置在所述镜子后侧的图像采集装置可以通过所述孔洞来获得所述至少一图像。
在又一种可能的实施方式中，当所述镜子为水等液体的反射面时，还可以在所述液体内部来获取所述至少一图像，例如，通过一水下相机或摄像机获取水面上的所述至少一目标对象的图像。当然，在本实施方式中，在确定所述至少一图像区域时，需要考虑水的折射率。
如图4a所示，本申请实施例一种可能的实施方式中，所述位置信息获取模块220包括：
第一信息获取单元221，用于获取所述用户的两只眼睛相对于所述镜子的第三位置信息、以及所述两只眼睛的视线相对于所述镜子的两个视线方向；
第一位置信息确定单元222，用于根据所述第三位置信息以及所述两个视线方向确定所述第一位置信息。
如图4b所示，在本申请实施例一种可能的实施方式中，所述至少一图像还包含所述用户的所述两只眼睛对应的两个眼睛图像区域；
所述第一信息获取单元221包括：
第一信息获取子单元2211，用于至少根据所述至少一图像获取所述第三位置信息；和
第一视线方向获取子单元2212，用于根据所述至少一图像获取所述两个视线方向。
在本实施方式中，所述第一信息获取子单元2211可以通过所述眼睛对应的眼睛图像区域在所述至少一图像上的位置和大小得到所述眼睛相对于所述图像获取模块210的位置信息，再根据所述图像采集位置与所述镜子之间的第二位置信息，可以得到所述第三位置信息。
在一种情况下，所述图像获取模块210与镜子之间的距离相对于所述镜子到所述眼睛和到所述至少一目标对象的距离基本可以忽略，此时，可以将所述眼睛相对于所述图像获取模块210的位置信息作为所述第三位置信息。
在本实施方式中，所述第一视线方向获取子单元2212，例如，可以根据所述至少一图像中眼睛的朝向以及瞳孔在所述眼睛中的位置来确定所述视线方向。
当然，本领域技术人员可以知道，所述第一信息获取单元221还可以为其它可能的结构，例如，可能包括一位置传感器，用来获取所述第三位置信息。又，例如，还可能包括一视线追踪装置，用来获取所述视线方向。
如图3a所示，在本申请实施例一种可能的实施方式中，所述镜子310为单向透射镜，其朝向所述用户的所述眼睛320和所述至少一目标对象330的一侧为反射侧311，而与所述反射侧相反的一侧为透射侧312；
所述图像获取模块210设置在所述镜子310的透射侧312。
所述用户通过所述反射侧311的反射可以看到所述至少一目标对象330，所述图像获取模块210可以透过所述镜子310透射侧312的透射，采集到包含所述至少一图像区域的所述至少一图像。
所述用户的两只眼睛320分别对应的两个视线E1、E2经过所述镜子310的反射后在一交点F处相交。本领域技术人员可以知道，交点F的位置对应于所述至少一目标对象330的位置。
在本申请实施例中，所述图像获取模块210可以为一广角图像采集装置，采集到的所述至少一图像中包含所述眼睛320和所述至少一目标对象分别对应的所述眼睛图像区域以及所述至少一图像区域。
当然，在本申请实施例其它可能的实施方式中，所述镜子可以不需要是单向透射镜，所述镜子上例如可以有至少一孔洞，所述图像获取模块210例如可以透过所述孔洞来获取所述至少一图像。
如图4c所示，所述位置信息获取模块220包括：
第二信息获取单元223，用于获取所述用户的一眼睛相对于所述镜子的第四位置信息、以及所述眼睛的视线相对于所述镜子的视线方向；
注视深度确定单元224，用于确定所述眼睛的注视深度；
第二位置信息确定单元225，用于根据所述第四位置信息、所述视线方向以及所述注视深度确定所述第一位置信息。
如图4d所示，在一种可能的实施方式中，所述至少一图像还包含所述用户的所述眼睛对应的一眼睛图像区域；
所述第二信息获取单元223包括：
第二信息获取子单元2231，用于至少根据所述至少一图像获取所述第四位置信息；
第二视线方向获取子单元2232，用于根据所述至少一图像获取所述视线方向。
其中，所述第二信息获取子单元2231获取所述第四位置信息的方式与所述第一信息获取子单元2211获取所述第三位置信息的方式基本相同；所述第二视线方向获取子单元2232获取所述视线方向与所述第一视线方向获取子单元2212获取所述两个视线方向的方式基本相同，这里不再赘述。
在本实施方式中，所述注视深度确定单元224可以通过检测用户眼睛光学***在观看所述至少一目标对象时的光学参数来确定所述注视深度。例如，在一种可能的实施方式中，所述注视深度确定单元224可以通过对用户的眼底进行拍摄，通过获取一眼底清晰图像时拍摄装置的参数来确定用户注视点的深度。
如图3b所示，在本申请实施例中所述图像获取模块210包括沿着所述镜子310分开布置的多个图像获取单元211，用于获取包含所述眼睛图像区域和所述至少一图像区域的所述至少一图像。
本实施方式中，通过所述第二信息获取单元223获取了所述第四位置和所述视线方向之后，可以得到所述眼睛320的视线E在所述镜子310上的反射点O、所述视线E的入射角以及从眼睛到所述反射点O的距离AO，因此可以得到所述视线E经过所述镜子310反射后的反射方向。
在本实施方式中，通过所述注视深度确定单元224获得了所述眼睛320的注视深度AB。
所述第二位置信息确定单元225由注视深度AB减去距离AO就可以得到反射后视线E的长度OF，因此可以确定所述眼睛的注视点F相对于所述镜子310的第一位置信息。
在本申请实施例中，所述图像区域确定模块230根据所述第一位置信息和所述第二位置信息通过几何计算就可以得到所述至少一目标对象相对于所述采集位置的第五位置信息，根据该第五位置信息就可以得到所述至少一目标对象在所述至少一图像中的位置，进而确定所述至少一图像区域。
如图3c所示，在另一种可能的实施方式中，所述镜子为水340的表面341，所述图像获取模块210位于所述水340的内部，此时所述图像区域确定模块230在确定所述至少一图像区域时，还需要考虑到水的折射率。
本申请实施例中，在确定了所述至少一图像区域之后，所述图像处理模块240通过图像识别等分析处理，可以确定所述至少一目标对象。
如图4a所示，在一种可能的实施方式中，所述装置200还包括：
相关信息获取模块250，用于获取所述至少一目标对象的至少一相关信息。
在一种可能的实施方式中，所述相关信息获取模块250进一步用于，获取以下信息中的至少一种：
所述至少一目标对象的属性信息、链接信息和通信信息。
在不同的应用场景获取对应的相关信息的描述参见上述方法实施例中对应的描述，这里不再赘述。
图5为本申请实施例提供的又一种对象拾取装置500的结构示意图，本申请具体实施例并不对对象拾取装置500的具体实现做限定。如图5所示，该对象拾取装置500可以包括：
处理器(processor)510、通信接口(Communications Interface)520、存储器(memory)530、以及通信总线540。其中：
处理器510、通信接口520、以及存储器530通过通信总线540完成相互间的通信。
通信接口520，用于与比如客户端等的网元通信。
处理器510，用于执行程序532，具体可以执行上述方法实施例中的相关步骤。
具体地，程序532可以包括程序代码，所述程序代码包括计算机操作指令。
处理器510可能是一个中央处理器CPU，或者是特定集成电路ASIC(ApplicationSpecific Integrated Circuit)，或者是被配置成实施本申请实施例的一个或多个集成电路。
存储器530，用于存放程序532。存储器530可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。程序532具体可以用于使得所述对象拾取装置500执行以下步骤：
获取包含至少一图像区域的至少一图像，其中，所述至少一图像区域与一用户通过一镜子注视的至少一目标对象对应；
获取所述用户的注视点相对于所述镜子的第一位置信息；
根据所述第一位置信息以及所述至少一图像的一采集位置相对于所述镜子的第二位置信息确定所述至少一图像中的所述至少一图像区域；
分析所述至少一图像确定所述至少一图像区域对应的所述至少一目标对象。
程序532中各步骤的具体实现可以参见上述实施例中的相应步骤和单元中对应的描述，在此不赘述。所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的设备和模块的具体工作过程，可以参考前述方法实施例中的对应过程描述，在此不再赘述。
如图6所示，本申请实施例一种可能的实施方式还提供了一种用户设备600，包括上面所述的对象拾取装置610。
在一种可能的实施方式中，所述用户设备600可以为汽车、摩托车、船艇、飞行器等交通工具，在其它可能的实施方式中，所述用户设备600还可以为用户的便携设备，例如具有镜面的手机、平板电脑等。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及方法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上实施方式仅用于说明本申请，而并非对本申请的限制，有关技术领域的普通技术人员，在不脱离本申请的精神和范围的情况下，还可以做出各种变化和变型，因此所有等同的技术方案也属于本申请的范畴，本申请的专利保护范围应由权利要求限定。
Claims (17)
1.一种对象拾取方法，其特征在于，包括：
获取包含至少一图像区域的至少一图像，其中，所述至少一图像区域与一用户通过一镜子注视的至少一目标对象对应；
获取所述用户的注视点相对于所述镜子的第一位置信息；
根据所述第一位置信息以及所述至少一图像的一采集位置相对于所述镜子的第二位置信息确定所述至少一图像中的所述至少一图像区域；
分析所述至少一图像确定所述至少一图像区域对应的所述至少一目标对象。
2.如权利要求1所述的方法，其特征在于，获取所述第一位置信息包括：
获取所述用户的两只眼睛相对于所述镜子的第三位置信息、以及所述两只眼睛的视线相对于所述镜子的两个视线方向；
根据所述第三位置信息以及所述两个视线方向确定所述第一位置信息。
3.如权利要求2所述的方法，其特征在于，所述至少一图像还包含所述用户的所述两只眼睛对应的两个眼睛图像区域；
获取所述第三位置信息包括：至少根据所述至少一图像获取所述第三位置信息；和/或
获取所述两个视线方向包括：根据所述至少一图像获取所述两个视线方向。
4.如权利要求1所述的方法，其特征在于，获取所述第一位置信息包括：
获取所述用户的一眼睛相对于所述镜子的第四位置信息、以及所述眼睛的视线相对于所述镜子的视线方向；
确定所述眼睛的注视深度；
根据所述第四位置信息、所述视线方向以及所述注视深度确定所述第一位置信息。
5.如权利要求4所述的方法，其特征在于，所述至少一图像还包含所述用户的所述眼睛对应的一眼睛图像区域；
获取所述第四位置信息包括：至少根据所述至少一图像获取所述第四位置信息；和/或
获取所述视线方向包括：根据所述至少一图像获取所述视线方向。
6.如权利要求1所述的方法，其特征在于，所述获取所述至少一图像包括：
在所述镜子后侧获取所述至少一图像。
7.如权利要求1所述的方法，其特征在于，所述方法还包括：
获取所述至少一目标对象的至少一相关信息。
8.如权利要求7所述的方法，其特征在于，所述至少一相关信息包括以下的至少一种：
属性信息、链接信息和通信信息。
9.一种对象拾取装置，其特征在于，包括：
图像获取模块，用于获取包含至少一图像区域的至少一图像，其中，所述至少一图像区域与一用户通过一镜子注视的至少一目标对象对应；
位置信息获取模块，用于获取所述用户的注视点相对于所述镜子的第一位置信息；
图像区域确定模块，用于根据所述第一位置信息以及所述至少一图像的一采集位置相对于所述镜子的第二位置信息确定所述至少一图像中的所述至少一图像区域；
图像处理模块，用于分析所述至少一图像确定所述至少一图像区域对应的所述至少一目标对象。
10.如权利要求9所述的装置，其特征在于，所述位置信息获取模块包括：
第一信息获取单元，用于获取所述用户的两只眼睛相对于所述镜子的第三位置信息、以及所述两只眼睛的视线相对于所述镜子的两个视线方向；
第一位置信息确定单元，用于根据所述第三位置信息以及所述两个视线方向确定所述第一位置信息。
11.如权利要求10所述的装置，其特征在于，所述至少一图像还包含所述用户的所述两只眼睛对应的两个眼睛图像区域；
所述第一信息获取单元包括：
第一信息获取子单元，用于至少根据所述至少一图像获取所述第三位置信息；和/或
第一视线方向获取子单元，用于根据所述至少一图像获取所述两个视线方向。
12.如权利要求9所述的装置，其特征在于，所述位置信息获取模块包括：
第二信息获取单元，用于获取所述用户的一眼睛相对于所述镜子的第四位置信息、以及所述眼睛的视线相对于所述镜子的视线方向；
注视深度确定单元，用于确定所述眼睛的注视深度；
第二位置信息确定单元，用于根据所述第四位置信息、所述视线方向以及所述注视深度确定所述第一位置信息。
13.如权利要求12所述的装置，其特征在于，所述至少一图像还包含所述用户的所述眼睛对应的一眼睛图像区域；
所述第二信息获取单元包括：
第二信息获取子单元，用于至少根据所述至少一图像获取所述第四位置信息；和/或
第二视线方向获取子单元，用于根据所述至少一图像获取所述视线方向。
14.如权利要求9所述的装置，其特征在于，所述图像获取模块设置在所述镜子后侧。
15.如权利要求9所述的装置，其特征在于，所述装置还包括：
相关信息获取模块，用于获取所述至少一目标对象的至少一相关信息。
16.如权利要求15所述的装置，其特征在于，所述相关信息获取模块进一步用于，获取以下信息中的至少一种：
所述至少一目标对象的属性信息、链接信息和通信信息。
17.一种用户设备，其特征在于，包括权利要求9-16中任一项所述的对象拾取装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410401461.XA CN104156069B (zh) | 2014-08-15 | 2014-08-15 | 对象拾取方法、对象拾取装置及用户设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410401461.XA CN104156069B (zh) | 2014-08-15 | 2014-08-15 | 对象拾取方法、对象拾取装置及用户设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN104156069A CN104156069A (zh) | 2014-11-19 |
| CN104156069B true CN104156069B (zh) | 2017-04-12 |
Family
ID=51881588
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201410401461.XA Active CN104156069B (zh) | 2014-08-15 | 2014-08-15 | 对象拾取方法、对象拾取装置及用户设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104156069B (zh) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106296796B (zh) * | 2015-06-04 | 2019-08-13 | 北京智谷睿拓技术服务有限公司 | 信息处理方法、信息处理装置及用户设备 |
| CN106293031B (zh) * | 2015-06-04 | 2019-05-21 | 北京智谷睿拓技术服务有限公司 | 信息处理方法、信息处理装置及用户设备 |
| CN106294911B (zh) * | 2015-06-04 | 2019-09-10 | 北京智谷睿拓技术服务有限公司 | 信息处理方法、信息处理装置及用户设备 |
| WO2018227597A1 (en) | 2017-06-16 | 2018-12-20 | Boe Technology Group Co., Ltd. | Vision-based interactive control apparatus and method of controlling rear-view mirror for vehicle |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103557859A (zh) * | 2013-10-10 | 2014-02-05 | 北京智谷睿拓技术服务有限公司 | 图像采集定位方法及图像采集定位*** |
| CN103605199A (zh) * | 2013-08-30 | 2014-02-26 | 北京智谷睿拓技术服务有限公司 | 成像装置及方法 |
| CN103604412A (zh) * | 2013-10-30 | 2014-02-26 | 北京智谷睿拓技术服务有限公司 | 定位方法及定位装置 |
| CN103630116A (zh) * | 2013-10-10 | 2014-03-12 | 北京智谷睿拓技术服务有限公司 | 图像采集定位方法及图像采集定位装置 |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH09218376A (ja) * | 1996-02-09 | 1997-08-19 | Sharp Corp | 立体表示装置 |
| JP4604190B2 (ja) * | 2004-02-17 | 2010-12-22 | 国立大学法人静岡大学 | 距離イメージセンサを用いた視線検出装置 |
-
2014
- 2014-08-15 CN CN201410401461.XA patent/CN104156069B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103605199A (zh) * | 2013-08-30 | 2014-02-26 | 北京智谷睿拓技术服务有限公司 | 成像装置及方法 |
| CN103557859A (zh) * | 2013-10-10 | 2014-02-05 | 北京智谷睿拓技术服务有限公司 | 图像采集定位方法及图像采集定位*** |
| CN103630116A (zh) * | 2013-10-10 | 2014-03-12 | 北京智谷睿拓技术服务有限公司 | 图像采集定位方法及图像采集定位装置 |
| CN103604412A (zh) * | 2013-10-30 | 2014-02-26 | 北京智谷睿拓技术服务有限公司 | 定位方法及定位装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN104156069A (zh) | 2014-11-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10685496B2 (en) | Saving augmented realities | |
| JP6095763B2 (ja) | ジェスチャ登録装置、ジェスチャ登録プログラムおよびジェスチャ登録方法 | |
| CN104182043B (zh) | 对象拾取方法、对象拾取装置及用户设备 | |
| CN104765445B (zh) | 显示器上的眼睛聚散检测 | |
| US9451062B2 (en) | Mobile device edge view display insert | |
| CN104156069B (zh) | 对象拾取方法、对象拾取装置及用户设备 | |
| US20200159314A1 (en) | Method for displaying user interface of head-mounted display device | |
| US9696798B2 (en) | Eye gaze direction indicator | |
| US20130321255A1 (en) | Navigating content in an hmd using a physical object | |
| US20150160461A1 (en) | Eye Reflection Image Analysis | |
| US10394321B2 (en) | Information acquiring method, information acquiring apparatus, and user equipment | |
| FR2997046A1 (fr) | Systeme d'assistance de conduite et son procede de gestion | |
| EP3413165B1 (en) | Wearable system gesture control method and wearable system | |
| US10803988B2 (en) | Color analysis and control using a transparent display screen on a mobile device with non-transparent, bendable display screen or multiple display screen with 3D sensor for telemedicine diagnosis and treatment | |
| Borghi et al. | Hands on the wheel: a dataset for driver hand detection and tracking | |
| FR3058534A1 (fr) | Dispositif individuel d'immersion visuelle pour personne en mouvement avec gestion des obstacles | |
| WO2014128751A1 (ja) | ヘッドマウントディスプレイ装置、ヘッドマウントディスプレイ用プログラム、およびヘッドマウントディスプレイ方法 | |
| CN105522971A (zh) | 车辆外部图像输出控制装置及方法 | |
| CN104952104A (zh) | 一种三维人体姿态估计方法和装置 | |
| CN116137902A (zh) | 用于红外光检测的计算机视觉相机 | |
| FR3030798A1 (fr) | Procede de gestion d'un dispositif d'entree et ainsi que dispositif d'entree applique a un vehicule automobile pour la mise en oeuvre du procede | |
| KR101395388B1 (ko) | 증강 현실 표현 장치 및 방법 | |
| US20160189341A1 (en) | Systems and methods for magnifying the appearance of an image on a mobile device screen using eyewear | |
| CN104199556A (zh) | 一种信息处理方法及装置 | |
| CN109191587A (zh) | 颜色识别方法、装置、电子设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |