CN116938618A - 确定被控制设备的方法、确定目标用户的方法及电子设备 - Google Patents
确定被控制设备的方法、确定目标用户的方法及电子设备 Download PDFInfo
- Publication number
- CN116938618A CN116938618A CN202210319671.9A CN202210319671A CN116938618A CN 116938618 A CN116938618 A CN 116938618A CN 202210319671 A CN202210319671 A CN 202210319671A CN 116938618 A CN116938618 A CN 116938618A
- Authority
- CN
- China
- Prior art keywords
- electronic device
- information
- user
- target
- electronic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 141
- 230000008569 process Effects 0.000 claims abstract description 8
- 230000000694 effects Effects 0.000 claims description 30
- 238000004590 computer program Methods 0.000 claims description 10
- 230000009471 action Effects 0.000 claims description 8
- 230000005540 biological transmission Effects 0.000 claims description 5
- 230000007613 environmental effect Effects 0.000 claims description 5
- 238000010276 construction Methods 0.000 claims 1
- 239000000523 sample Substances 0.000 claims 1
- 238000013507 mapping Methods 0.000 abstract description 21
- 230000000007 visual effect Effects 0.000 abstract description 14
- 230000006870 function Effects 0.000 description 35
- 238000012545 processing Methods 0.000 description 23
- 238000004891 communication Methods 0.000 description 22
- 238000010586 diagram Methods 0.000 description 13
- 239000008267 milk Substances 0.000 description 11
- 210000004080 milk Anatomy 0.000 description 11
- 235000013336 milk Nutrition 0.000 description 11
- 210000005252 bulbus oculi Anatomy 0.000 description 10
- 238000004422 calculation algorithm Methods 0.000 description 8
- 238000013461 design Methods 0.000 description 8
- 238000010295 mobile communication Methods 0.000 description 6
- 230000008859 change Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 210000001508 eye Anatomy 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000003044 adaptive effect Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 2
- 230000003416 augmentation Effects 0.000 description 2
- 230000004424 eye movement Effects 0.000 description 2
- 230000004927 fusion Effects 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000010420 art technique Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000010438 heat treatment Methods 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000010408 sweeping Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000002618 waking effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
- H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
- G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C23/00—Non-electrical signal transmission systems, e.g. optical systems
- G08C23/04—Non-electrical signal transmission systems, e.g. optical systems using light waves, e.g. infrared
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C2201/00—Transmission systems of control signals via wireless link
- G08C2201/30—User interface
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
- H04L2012/284—Home automation networks characterised by the type of medium used
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Automation & Control Theory (AREA)
- Human Computer Interaction (AREA)
- Selective Calling Equipment (AREA)
Abstract
本申请实施例公开了一种确定被控制设备的方法、确定目标用户的方法及电子设备,涉及终端技术领域,以解决目前的方案需要预先配置映射关系,并根据实际应用中是否新增或删除设备,设备的特征、位置是否变化等调整维护映射关系,映射关系的维护不方便的问题。该方法包括:N个第一电子设备确定用户的目光注视方向;向位于用户的目光注视方向的至少一个第二电子设备发送第一信息;若目标第二电子设备收到M个第一电子设备发送的第一信息,则目标第二电子设备将自身确定为被控制设备。本申请实施例公开的方案可应用在视觉控制的过程中。
Description
技术领域
本申请实施例涉及终端技术领域,尤其涉及一种确定被控制设备的方法、确定目标用户的方法及电子设备。
背景技术
智能终端设备日益多样化,已不断渗透到现代人生活的不同场景,逐渐改变着人们的生活方式和生活习惯。例如,在家居领域,存在越来越多的智能终端设备,如智能冰箱、空调等。用户控制智能终端设备的方式包括语音控制、手势控制、视觉控制等。视觉控制作为一种重要的控制方式,主要适用于用户无法腾出双手、用户与智能终端设备的距离较远、家中有人休息无法大声说话等场景。实现视觉控制要求控制设备能够根据用户的视线确定用户想要控制的设备(被控制设备)。
现有技术中提供了一些确定被控制设备的方案。在一种方案中,控制设备预先存储有映射关系。如表1所示,该映射关系为已有设备的图像与标识的对应关系。摄像设备抓取用户注视方向的设备图像,将图像发送给控制设备。进而,控制设备将摄像设备抓取的图像与预存储的图像进行匹配,将相似度满足一定条件的预存储图像所对应的设备确定为被控制设备。
表1
设备标识 | 已有设备图像 |
D1 | 图像1 |
D2 | 图像2 |
… | …… |
在另一种方案中,控制设备预先存储有映射关系。如表2所示,该映射关系为已有设备的特征与标识的对应关系。摄像设备抓取用户注视方向的设备图像,将图像发送给控制设备。控制设备根据该图像分析设备的特征,并将分析得到的特征与预存储的设备特征进行匹配,将匹配成功的设备特征对应的设备确定为被控制设备。
表2
设备标识 | 已有设备特征 |
D1 | C11,C12,。。。。 |
D2 | C21,C22,。。。。 |
…… | …… |
在其他方案中,控制设备预先存储有映射关系。如表3所示,该映射关系为已有设备的空间位置与设备标识之间的对应关系。摄像设备抓取用户注视点的位置并发送给控制设备,控制设备将用户注视点的位置与预存储的设备的空间位置进行匹配,当用户注视点位于某个设备的空间位置范围内时,将该设备确定为被控制设备。
表3
设备标识 | 已有设备空间位置 |
D1 | 位置点11,位置点12,。。。。 |
D2 | 位置点21,位置点22,。。。。 |
…… | …… |
现有技术中的这些方案需要预先配置映射关系,并根据实际应用中是否新增或删除设备,设备的特征、位置是否变化等调整维护映射关系,映射关系的维护不方便。
发明内容
为了解决上述的技术问题,本申请实施例提供了一种确定被控制设备的方法、确定目标用户的方法及电子设备。本申请实施例提供的技术方案,无需预先配置和维护映射关系,能够支持设备的实时变化。
为了实现上述的技术目的,本申请实施例提供了如下技术方案:
第一方面,提供一种确定被控制设备的方法,该方法包括:第一电子设备确定用户的目光注视方向;该第一电子设备向位于用户的目光注视方向的至少一个第二电子设备发送第一信息。其中,第一信息中携带第一电子设备的标识,用于指示用户想要控制第二电子设备;第一电子设备的数量为N,所述N为大于等于2的正整数。
示例性的,所述第一信息承载于红外信号中,也即第一电子设备通过向第二电子设备发送红外信号来承载第一信息。
这样,第一电子设备在确定了用户的目光注视方向后,直接向位于该方向的第二电子设备发送第一信息,进而确定被控制设备,无需像现有技术提供的方案中预先配置映射关系,这样无论是新增还是删除第二电子设备或者第二电子设备的位置发生变化,都无需维护映射关系,也即无需在映射关系中调整第二电子设备的相关信息(如第二电子设备的位置坐标、第二电子设备对应的图片等),能够支持第二电子设备的动态变化。
在第一方面的一种可能的实现方式中,所述第一电子设备向位于用户的目光注视方向的至少一个第二电子设备发送第一信息,包括:第一电子设备根据第一电子设备的位置、用户的位置、用户的目光注视方向构建平面;其中,构建得到的该平面包括该第一电子设备的位置、用户的位置以及用户的目光注视方向所对应的射线。之后,第一电子设备基于构建得到的上述平面在特定角度范围内发送第一信息。其中,所述特定角度范围表示所述第一电子设备发送所述第一信息的方向对应的射线与以第一电子设备为起点经过所述用户的位置的射线的夹角的范围。
可选的,所述特定角度范围根据所述第一电子设备的极限转动角度范围确定;不同的第一电子设备对应的所述极限转动角度范围相同或不同。例如:第一电子设备A的极限转动角度范围为60度,第二电子设备B的极限转动角度范围为50度。
这样,提供了一种第一电子设备如何向位于用户的目光注视方向的第二电子设备发送第一信息的实现方案。在该方案中,第一电子设备先确定一个平面,然后在该平面内的特定角度范围内以“扫描”的方式向位于用户的目光注视方向的多个第二电子设备发送第一信息。
在第一方面的一种可能的实现方式中,第一电子设备基于构建得到的平面在特定角度范围内发送第一信息,包括:第一电子设备基于构建得到的平面在特定角度范围内的C个角度对应的方向上发送第一信息;其中,C为大于等于1的正整数。
这样,在发送第一信息时,选定特定角度范围内的一些角度,在这些角度对应的方向上发送第一信息,也即用离散扫描方式发送第一信息,缩短第一信息的接收时间,降低发送第一信息的功耗。
在第一方面的一种可能的实现方式中,第一电子设备向位于用户的目光注视方向的至少一个第二电子设备发送第一信息,包括:第一电子设备根据第一电子设备的位置、用户的位置、用户的目光注视方向对应的射线以及第一电子设备的极限转动范围确定一个以第一电子设备的位置为起点经过用户的位置的射线为起始射线,以第一电子设备为起点将所述起始射线沿着所述用户的目光注视方向旋转特定角度的角平面。其中,所述特定角度根据所述第一电子设备的极限转动范围确定;所述第一电子设备在所述角平面内发送所述第一信息。
这样,提供了另一种第一电子设备如何向位于用户的目光注视方向的第二电子设备发送第一信息的实现方案。在该方案中,第一电子设备确定出一个角平面,在该角平面内以“扫描”的方式发送第一信息。
在第一方面的一种可能的实现方式中,第一电子设备在角平面内发送所述第一信息,包括:第一电子设备在角平面内的C个角度对应的方向上发送所述第一信息;其中,C为大于等于1的正整数。
这样,与前文类似,在发送第一信息时,选定特定角度范围内的一些角度,在这些角度对应的方向上发送第一信息,也即用离散扫描方式发送第一信息,能够缩短第一信息的接收时间,降低发送第一信息的功耗。
在第一方面的一种可能的实现方式中,所述C个角度包括位于第一角度范围内的x个角度和位于第二角度范围内的y个角度;其中,所述第二角度范围与所述第一角度范围不重叠,所述第二角度范围中的角度的最小取值大于所述第一角度范围中的角度的最大取值;所述y 的取值大于所述x的取值。
这样,在采用离散扫描方式发送第一信息时,考虑到视觉控制通常应用于第二电子设备距离用户较远的场景,也即用户想要控制的第二电子设备通常距离用户较远。因此,在发送第一信息时,基于“近距离稀疏,远距离密集”的原则,在距离用户较远的方向选取的用于发送第一信息的角度的数量要多于在距离用户较近的方向选取的用于发送第一信息的角度的数量。
在第一方面的一种可能的实现方式中,所述第一信息中还携带以下一项或多项:控制信息、所述第一电子设备发送所述第一信息的时间、所述用户的用户特征信息。
其中,控制信息可以用于表示控制第二电子设备执行哪些操作,其可以携带在第一信息中,也可以在第一电子设备发送第一信息后,再发送另一条信息,控制信息携带在该另一条信息中。用户特征信息可以标识当前用户,不同用户的用户特征信息不同,这样当有多个用户注视同一第二电子设备时,第三电子设备可以根据不同用户的用户特征信息识别出这些用户并决策出最终可以控制该第二电子设备的用户。第一电子设备发送第一信息的时间可用于当有多个目标第二电子设备时,第三电子设备根据该时间确定目标第二电子设备。
当然,除了上述列举的几项,第一信息中还可以携带其他内容。
第二方面,提供一种确定被控制设备的方法,该方法包括:若目标第二电子设备收到M 个第一电子设备发送的第一信息,则目标第二电子设备将自身确定为被控制设备。其中,所述第一信息中携带所述第一电子设备的标识,用于指示用户想要控制所述第二电子设备;M 为大于等于2小于等于N的正整数。
这样,当位于用户的目光注视方向的某个第二电子设备收到至少两个第一电子设备发送的第一信息时,则其为被控制设备,可以接受用户的视觉控制。该方法中,通过第二电子设备本身是否收到多个第一电子设备的第一信息来确定被控制设备,其实现过程不依赖于映射关系,能够支持第二电子设备的动态变化。
在第二方面的一种可能的实现方式中,在目标第二电子设备将自身确定为被控制设备之后,所述方法还包括:目标第二电子设备向第三电子设备发送第二信息;其中,该第二信息中携带目标第二电子设备的标识,用于通知第三电子设备所述目标第二电子设备为被控制设备。
这样,第三电子设备在收到目标第二电子设备发送的第二信息后,可以记录该目标第二电子设备为被控制设备。还可以进一步通知第一电子设备停止发送第一信息,减少发送第一信息的功耗。
在第二方面的一种可能的实现方式中,所述第二信息中还携带以下一项或多项:目标第二电子设备的当前状态、发送第一信息的第一电子设备的标识、第一信息的发送时间、第一信息的接收时间、用户的用户特征信息。
在第二方面的一种可能的实现方式中,若目标第二电子设备的数量为多个,则在任意目标第二电子设备将自身确定为被控制设备之前,所述方法还包括:每个目标第二电子设备向第三电子设备发送第二信息;其中,该第二信息中携带对应的目标第二电子设备的标识;所述多个目标第二电子设备中的第四电子设备接收所述第三电子设备发送的第三信息,所述第三信息用于指示将第四电子设备确定为被控制设备。
这样,如果目标第二电子设备的数量为多个,那么这些目标第二电子设备在收到M个第一电子设备发送的第一信息时,不立刻将自身确定为被控制设备,而是向第三电子设备发送第二信息,由第三电子设备从这些目标第二电子设备中决策出其中一个设备作为用户想要控制的电子设备。
第三方面,提供一种确定被控制设备的方法,该方法包括:第三电子设备接收多个目标第二电子设备发送的第二信息,其中所述第二信息中携带对应的所述目标第二电子设备的标识。第三电子设备根据预设规则从所述多个目标第二电子设备中确定第四电子设备。第三电子设备向所述第四电子设备发送第三信息,其中,所述第三信息用于指示所述第四电子设备为被控制设备。
这样,当存在多个目标第二电子设备时,第三电子设备按照一定的规则从中决策出第四电子设备,作为被控制设备。可以应用在用户视线方向存在多个第二电子设备的场景。
在第三方面的一种可能的实现方式中,第三电子设备根据预设规则从多个目标第二电子设备中确定第四电子设备,包括:第三电子设备采集环境信息;其中,所述环境信息包括以下至少一项:当前时间、环境音量、当前光线强度;第三电子设备获取用户在预设时间段内控制过的第二电子设备的标识,以及多个目标第二电子设备的标识和状态信息;第三电子设备根据环境信息、用户在预设时间段内控制过的第二电子设备的标识以及多个目标第二电子设备的标识和状态信息确定多个目标第二电子设备的优先级;第三电子设备将优先级最高的目标第二电子设备确定为第四电子设备。
这样,当用户视线方向存在多个第二电子设备时,第三电子设备通过采集环境信息进行场景融合感知选取被控制设备。
在第三方面的一种可能的实现方式中,所述第二信息还携带第一电子设备发送第一信息的发送时间;所述第三电子设备根据预设规则从多个目标第二电子设备中确定第四电子设备,包括:第三电子设备将携带的第一信息的发送时间最早的第二信息对应的目标第二电子设备确定为第四电子设备。
在第三方面的一种可能的实现方式中,第二信息中还携带目标第二电子设备接收第一信息的接收时间。第三电子设备根据预设规则从多个目标第二电子设备中确定第四电子设备,包括:第三电子设备将携带的接收第一信息的接收时间最早的第二信息对应的目标第二电子设备确定为第四电子设备。
通过上述两种实现方式,当用户视线方向存在多个第二电子设备时,按照视线遮挡关系,用户最先看到的是最近的第二电子设备,且第一消息由近及远发送,因此第三电子设备将其中携带的第一信息发送时间最早的设备或者第一信息接收时间最早对应的第二电子设备确定为目标设备。
第四方面,提供一种确定目标用户的方法,该方法包括:第三电子设备接收同一个目标第二电子设备发送的多个第二信息,其中多个第二信息中携带的用户特征信息不同;第三电子设备按照预设规则确定多个所述用户特征信息分别对应的用户的优先级;所述第三电子设备根据所述多个用户的优先级确定目标用户。
这样,在多个用户注视同一第二电子设备的场景下,第三电子设备按照一定的规则决策出最终用于控制该第二电子设备的用户。
在第四方面的一种可能的实现方式中,所述预设规则为用户自定义的优先级顺序;或者,所述预设规则为根据不同用户使用所述目标第二电子设备的历史使用频率确定各个用户的优先级;或者,所述预设规则为根据不同用户使用所述目标第二电子设备的行动便利程度确定各个用户的优先级;或者,所述预设规则为根据不同用户在不同维度对应的优先级顺序以及每个维度的权重确定各个用户的优先级;其中,多个维度包括以下维度中的至少两个:用户使用所述目标第二电子设备的历史使用频率、用户在该目标第二电子设备所位于的区域的活动频率、用户使用该目标第二电子设备的行动便利度、自定义的用户权限。
这样,提供了用于决策最终控制第二电子设备的用户的规则的各种可能的实现方式。
第五方面,提供一种***,所述***包括第一电子设备和第二电子设备。其中,所述第一电子设备的数量为N个,N为大于等于2的正整数。第一电子设备用于确定用户的目光注视方向,向位于用户的目光注视方向的至少一个第二电子设备发送第一信息。第二电子设备,用于接收第一电子设备发送的第一信息,当目标第二电子设备接收到M个第一电子设备发送的第一信息时,将自身确定为被控制设备。其中,所述第一信息中携带对应的第一电子设备的标识,用于指示用户想要控制所述第二电子设备。
这样,第一电子设备在确定了用户的目光注视方向后,直接向位于该方向的第二电子设备发送第一信息,如果某个第二电子设备收到多个第一电子设备发送的第一信息,则该第二电子设备将其本身确定为被控制设备。这样,无需像现有技术提供的方案中预先配置映射关系,无论是新增还是删除第二电子设备或者第二电子设备的位置发生变化,都无需维护映射关系,也即无需在映射关系中调整第二电子设备的相关信息(如第二电子设备的位置坐标、第二电子设备对应的图片等),能够支持第二电子设备的动态变化。
在第五方面的一种可能的实现方式中,上述***还包括第三电子设备;目标第二电子设备还用于向第三电子设备发送第二信息;其中,该第二信息中携带目标第二电子设备的标识,用于通知第三电子设备该目标第二电子设备为被控制设备。
这样,第三电子设备在收到目标第二电子设备发送的第二信息后,可以记录该目标第二电子设备为被控制设备。还可以进一步通知第一电子设备停止发送第一信息,减少发送第一信息的功耗。
在第五方面的一种可能的实现方式中,若目标第二电子设备的数量为多个,则每个目标第二电子设备还用于在将自身确定为被控制设备之前,向第三电子设备发送第二信息;其中,所述第二信息中携带对应的所述目标第二电子设备的标识。第三电子设备,还用于根据预设规则从多个目标第二电子设备中确定第四电子设备,向所述第四电子设备发送第三信息,所述第三信息用于指示将第四电子设备确定为被控制设备。
这样,当存在多个目标第二电子设备时,第三电子设备按照一定的规则从中决策出第四电子设备,作为被控制设备。可以应用在用户视线方向存在多个第二电子设备的场景。
在第五方面的一种可能的实现方式中,所述目标第二电子设备还用于向第三电子设备发送多个第二信息,该多个第二信息中携带的用户特征信息不同;第三电子设备还用于按照预设规则确定多个用户特征信息分别对应的用户的优先级,根据这些用户的优先级确定目标用户。该目标用户即为用于控制该目标第二电子设备的用户。
这样,当存在多个用户注视同一目标第二电子设备的场景,第三电子设备可以按照一定的规则决策出用于控制该目标第二电子设备的用户。
第六方面,提供一种电子设备,所述电子设备包括:处理器和存储器,所述存储器与所述处理器耦合,所述存储器用于存储计算机可读指令,当所述处理器从所述存储器中读取所述计算机可读指令,使得所述电子设备执行第一方面以及第一方面任意一种可能的实现方式中所述的方法。
第六方面以及第六方面中任意一种实现方式所对应的技术效果,可参见上述第一方面及第一方面中任意一种实现方式所对应的技术效果,此处不再赘述。
第七方面,提供一种电子设备,所述电子设备包括:处理器和存储器,所述存储器与所述处理器耦合,所述存储器用于存储计算机可读指令,当所述处理器从所述存储器中读取所述计算机可读指令,使得所述电子设备执行第二方面以及第二方面任意一种可能的实现方式中所述的方法。
第七方面以及第七方面中任意一种实现方式所对应的技术效果,可参见上述第二方面及第二方面中任意一种实现方式所对应的技术效果,此处不再赘述。
第八方面,提供一种电子设备,所述电子设备包括:处理器和存储器,所述存储器与所述处理器耦合,所述存储器用于存储计算机可读指令,当所述处理器从所述存储器中读取所述计算机可读指令,使得所述电子设备执行第三方面以及第三方面任意一种可能的实现方式中所述的方法。
第八方面以及第八方面中任意一种实现方式所对应的技术效果,可参见上述第三方面及第三方面中任意一种实现方式所对应的技术效果,此处不再赘述。
第九方面,提供一种电子设备,所述电子设备包括:处理器和存储器,所述存储器与所述处理器耦合,所述存储器用于存储计算机可读指令,当所述处理器从所述存储器中读取所述计算机可读指令,使得所述电子设备执行第四方面以及第四方面任意一种可能的实现方式中所述的方法。
第九方面以及第九方面中任意一种实现方式所对应的技术效果,可参见上述第四方面及第四方面中任意一种实现方式所对应的技术效果,此处不再赘述。
第十方面,本申请实施例提供一种电子设备,该电子设备具有实现如上述第一方面及其中任一种可能的实现方式中所述的确定被控制设备的方法的功能。该功能可以通过硬件实现,也可以通过硬件执行相应地软件实现。该硬件或软件包括一个或多个与上述功能相对应的模块。
第十方面以及第十方面中任意一种实现方式所对应的技术效果,可参见上述第一方面及第一方面中任意一种实现方式所对应的技术效果,此处不再赘述。
第十一方面,本申请实施例提供一种电子设备,该电子设备具有实现如上述第二方面及其中任一种可能的实现方式中所述的确定被控制设备的方法的功能。该功能可以通过硬件实现,也可以通过硬件执行相应地软件实现。该硬件或软件包括一个或多个与上述功能相对应的模块。
第十一方面以及第十一方面中任意一种实现方式所对应的技术效果,可参见上述第二方面及第二方面中任意一种实现方式所对应的技术效果,此处不再赘述。
第十二方面,本申请实施例提供一种电子设备,该电子设备具有实现如上述第三方面及其中任一种可能的实现方式中所述的确定被控制设备的方法的功能。该功能可以通过硬件实现,也可以通过硬件执行相应地软件实现。该硬件或软件包括一个或多个与上述功能相对应的模块。
第十二方面以及第十二方面中任意一种实现方式所对应的技术效果,可参见上述第三方面及第三方面中任意一种实现方式所对应的技术效果,此处不再赘述。
第十三方面,本申请实施例提供一种电子设备,该电子设备具有实现如上述第四方面及其中任一种可能的实现方式中所述的确定目标用户的方法的功能。该功能可以通过硬件实现,也可以通过硬件执行相应地软件实现。该硬件或软件包括一个或多个与上述功能相对应的模块。
第十三方面以及第十三方面中任意一种实现方式所对应的技术效果,可参见上述第四方面及第四方面中任意一种实现方式所对应的技术效果,此处不再赘述。
第十四方面,提供一种计算机可读存储介质,所述计算机可读存储介质包括计算机程序,当所述计算机程序在电子设备上运行时,使得所述电子设备执行第一方面以及第一方面任意一种可能的实现方式、第二方面以及第二方面的任意一种可能的实现方式、第三方面以及第三方面的任意一种可能的实现方式、第四方面以及第四方面的任意一种可能的实现方式中所述的方法。
第十四方面以及第十四方面中任意一种实现方式所对应的技术效果,可参见上述第一方面及第一方面中任意一种实现方式、第二方面以及第二方面的任意一种可能的实现方式、第三方面以及第三方面的任意一种可能的实现方式、第四方面以及第四方面的任意一种可能的实现方式所对应的技术效果,此处不再赘述。
第十五方面,提供一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面以及第一方面任意一种可能的实现方式、第二方面以及第二方面的任意一种可能的实现方式、第三方面以及第三方面的任意一种可能的实现方式、第四方面以及第四方面的任意一种可能的实现方式中所述的方法。
第十五方面以及第十五方面中任意一种实现方式所对应的技术效果,可参见上述第一方面及第一方面中任意一种实现方式、第二方面以及第二方面的任意一种可能的实现方式、第三方面以及第三方面的任意一种可能的实现方式、第四方面以及第四方面的任意一种可能的实现方式所对应的技术效果,此处不再赘述。
第十六方面,本申请实施例提供一种电路***,电路***包括处理电路,处理电路被配置为执行第一方面或第一方面中任意一种实施方式的方法;或者所述处理电路被配置为执行第二方面或第二方面中任意一种实施方式的方法;或者,所述处理电路被配置为执行第三方面或第三方面中任意一种实施方式的方法;或者,所述处理电路被配置为执行第四方面或第四方面中任意一种实施方式的方法。
第十六方面以及第十六方面中任意一种实现方式所对应的技术效果,可参见上述第一方面及第一方面中任意一种实现方式、第二方面以及第二方面的任意一种可能的实现方式、第三方面以及第三方面的任意一种可能的实现方式、第四方面以及第四方面的任意一种可能的实现方式所对应的技术效果,此处不再赘述。
第十七方面,本申请实施例提供一种芯片***,包括至少一个处理器和至少一个接口电路,至少一个接口电路用于执行收发功能,并将指令发送给至少一个处理器,当至少一个处理器执行指令时,至少一个处理器执行第一方面以及第一方面中任意一种实施方式的方法,或者执行第二方面以及第二方面中的任意一种实施方式的方法,或者执行第三方面以及第三方面中任意一种实施方式的方法,或者执行第四方面以及第四方面中任意一种实施方式的方法。
第十七方面以及第十七方面中任意一种实现方式所对应的技术效果,可参见上述第一方面及第一方面中任意一种实现方式、第二方面以及第二方面的任意一种可能的实现方式、第三方面以及第三方面的任意一种可能的实现方式、第四方面以及第四方面的任意一种可能的实现方式所对应的技术效果,此处不再赘述。
附图说明
图1为本申请实施例提供的方法所应用的***的结构示意图;
图2为本申请实施例提供的一种确定被控制设备的方法的流程示意图;
图3为本申请实施例提供的一种第一电子设备构建得到平面S1、S2的示意图;
图4为本申请实施例提供的一种第一电子设备和第二电子设备发送第一信息的角度范围的示意图;
图5为本申请实施例提供的采用Sigmoid函数选取用于发送第一信息的角度的示意图;
图6为本申请实施例提供的用户的目光注视方向存在多个第二电子设备的场景示意图;
图7为本申请实施例提供的另一种确定被控制设备的方法的流程示意图;
图8为本申请实施例提供的又一种确定被控制设备的方法的流程示意图;
图9为本申请实施例提供的一种确定目标用户的方法的流程示意图;
图10为本申请实施例提供的一种电子设备的结构示意图;
图11为本申请实施例提供的另一种电子设备的结构示意图;
图12为本申请实施例提供的又一种电子设备的结构示意图;
图13为本申请实施例提供的再一种电子设备的结构示意图。
具体实施方式
下面结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述。其中,在本申请实施例的描述中,以下实施例中所使用的术语只是为了描述特定实施例的目的,而并非旨在作为对本申请的限制。如在本申请的说明书和所附权利要求书中所使用的那样,单数表达形式“一个”、“一种”、“所述”、“上述”、“该”和“这一”旨在包括例如“一个或多个”这种表达形式,除非其上下文中明确地有相反指示。还应当理解,在本申请以下各实施例中,“至少一个”、“一个或多个”是指一个或两个以上(包含两个)。
在本说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此,在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例,而是意味着“一个或多个但不是所有的实施例”,除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”,除非是以其他方式另外特别强调。术语“连接”包括直接连接和间接连接,除非另外说明。“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。
在本申请实施例中,“示例性地”或者“例如”等词用于表示作例子、例证或说明。本申请实施例中被描述为“示例性地”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性地”或者“例如”等词旨在以具体方式呈现相关概念。
本申请实施例提供的方法可应用于如图1所示的***中,该***包括N个第一电子设备、至少一个第二电子设备和第三电子设备。第一电子设备100、第二电子设备200与第三电子设备300之间通过同轴电缆、双绞线、光纤、微波、无线等多种有线或无线方式建立通信连接。
可选的,第一电子设备100、第二电子设备200与第三电子设备300之间可以通过无线通信技术建立无线通信连接。其中,无线通信技术包括但不限于以下的至少一种:蓝牙(bluetooth,BT)(例如,传统蓝牙或者低功耗(bluetooth low energy,BLE)蓝牙),无线局域网(wireless local area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),紫蜂 (Zigbee),调频(frequency modulation,FM),红外(infrared,IR)、蜂窝网络、因特网等。本申请实施例不对第一电子设备100、第二电子设备200与第三电子设备300之间的连接方式做具体限定。
可选的,第一电子设备100可以为具备图像采集功能和定向收发功能的电子设备,如具备收发红外线功能的智能摄像设备。第一电子设备的数量为N个,N为大于等于2的正整数。
可选的,第二电子设备200包括但不限于智能家居设备,例如:智能空调、智能窗帘、智能电灯、智能音箱、智慧屏等。第二电子设备200可以安装操作***。第二电子设备200安装的操作***包括但不限于或者其它操作***。第二电子设备200也可以不安装有操作***。本申请对第二电子设备200的具体类型、有无安装操作***、在有安装操作***下操作***的类型均不作限制。
可选的,第三电子设备300可以为具有计算处理功能的设备。该第三电子设备为整个***中的中枢控制设备,能够对***中的设备进行集中控制。示例性的,第三电子设备可以存储各个第二电子设备的状态,接收并识别用户的控制指令,并将控制指令发送给相应的第二电子设备使得第二电子设备根据该控制指令执行相应的操作。具体的,该第三电子设备300 作为中枢控制设备可以为独立的电子设备,示例性的,第三电子设备100可以是手机(mobile phone)、平板电脑(Pad)、个人计算机(personal computer,PC)、笔记本电脑、带收发功能的电脑等终端设备,也可以为服务器等。该第三电子设备300功能也可以由某个第一电子设备或第二电子设备实现。也即某个第一电子设备或第二电子设备与该第三电子设备集成设置。例如,智能音箱既可以作为一个第二电子设备,具备音箱的功能,也可以作为中枢控制设备,具备中枢控制设备的功能。
本申请实施例提供了一种确定被控制设备的方法,该方法不需要控制设备预设置和维护映射关系。该方法中N个第一电子设备先确定用户的目光注视方向,然后向位于该目光注视方向的第二电子设备分别发送指令。该指令用于表示用户当前想要控制该第二电子设备。当某个第二电子设备收到M个第一电子设备发送的上述指令时,将该第二电子设备确定为被控制设备。其中,N的取值大于等于2,M的取值大于等于2小于等于N。
如图2所示,本申请实施例提供的确定被控制设备的方法包括以下步骤:
S201、第一电子设备确定用户的目光注视方向。
其中,第一电子设备的数量为N个,N为大于等于2的正整数,也即第一电子设备的数量为至少两个。
在一种可能的实现方式中,第一电子设备可以采集包含人脸的图像,根据该图像确定用户注视方向。
在另一种可能的实现方式中,由其他设备确定用户的目光注视方向,并将该用户的目光注视方向的方向信息发送给第一电子设备。用于表示用户的目光注视方向的方向信息例如为:用户的目光注视方向与预设平面(示例性的,该预设平面可以为地面)的夹角为45度的方向,
需要说明的是,根据采集的包含人脸的图像确定用户注视方向的具体实现可以为现有技术,例如一种实现方案为:采用人眼定位算法从采集的图像中识别出当前用户的眼球信息,基于该用户的眼球所在位置,确定该用户的眼球相对正常注视方向的眼球偏移角度;基于该眼球偏移角度,确定该用户的目光方位。其中,人眼定位算法可参考现有技术,此处不再赘述。此外,根据包含人脸的图像确定用户注视方向也可以通过其他现有技术实现,此处不再赘述。
S202、第一电子设备向位于所述用户的目光注视方向的至少一个第二电子设备发送第一信息。
其中,第一信息用于指示用户想要“控制”第二电子设备。该第一信息为通用指令,任意第二电子设备均可识别该指令。该第一信息包含发送该第一信息的第一电子设备的信息,不指定被控制的第二电子设备的类型。其中,第一电子设备的信息可以为第一电子设备的标识。可选的,第一信息中还可以携带控制信息,该控制信息可以为开启、关闭、提高亮度、减少亮度等。该控制信息可以为根据采集的用户眼球信息得到,例如,眼球向上表示开启,眼球向下表示关闭,眼球向左表示提高亮度,眼球向右表示减少亮度等。当然,该控制信息也可以是在确定了被控制的目标第二电子设备后,单独由第一电子设备或第三电子设备向该目标第二电子设备发送。可选的,第一信息还可以携带以下一项或多项:第一电子设备发送该第一信息的时间、用户的用户特征信息(如当前进行视觉控制的用户的标识)等。
可选的,第一电子设备可以发送红外信号,该红外信号可以携带该第一信息。
示例性的,第一信息包含LeaderCode|SendDev|ControlCode|CheckCode |TimeStamp|StopCode这些字段。其中,LeaderCode起始码,用于表示第一信息内容的开始。SendDev表示发送该第一信息的第一电子设备的信息,如发送该第一信息的第一电子设备的标识。ControlCode,表示控制信息,例如该字段的取值为1表示控制第二电子设备处于开启状态,该字段的取值为0表示控制第二电子设备处于关闭状态。CheckCode为校验码,用于防止该第一信息被恶意篡改。TimeStamp为时间戳,其取值用于表示该第一信息的发送时间。 StopCode为结束码,表示该第一信息内容的结束。
在一种可能的实现方式中,第一电子设备根据第一电子设备的位置、用户的位置、用户的目光注视方向构建平面,该平面能够包含第一电子设备的位置、用户的位置,还能包含用户的目光注视方向所对应的射线,该平面可以理解为站在第一电子设备角度所能得到的用户的目光注视平面。示例性的,以第一电子设备的数量N的取值为2为例,图3示出了两个第一电子设备分别确定得到的平面S1、S2的示意图。然后,第一电子设备基于所构建的平面在特定角度范围内发送第一信息。其中,特定角度范围表示第一电子设备发送第一信息的方向对应的射线L1与以第一电子设备为起点经过用户所在位置的射线L2的夹角的范围,该特定角度范围根据第一电子设备的极限转动角度范围确定。不同的第一电子设备对应的极限转动角度范围可能相同也可能不同。如图4所示,第一电子设备A在S1平面内的[0,α]的角度范围内发送唤醒指令,第一电子设备B在S2平面内的[0,β]的角度范围内发送第一信息。其中, 0表示与以第一电子设备为起点经过用户所在位置的射线L2的夹角为0,α表示第一电子设备A向用户的目光注视方向转动的极限转动角度范围,同理,β表示第一电子设备B向用户的目光注视方向转动的极限转动角度范围。示例性的,第一电子设备A为摄像设备A,摄像设备A的极限转动角度范围为60度,则摄像设备A在0度到60度的角度范围内发送第一信息。第一电子设备B为摄像设备B,摄像设备B的极限转动角度范围为30度,则摄像设备B在0度到30度的范围内发送第一信息。
在另一种可能的实现方式中,第一电子设备根据第一电子设备的位置、用户的位置、用户的目光注视方向对应的射线以及第一电子设备的极限转动范围确定一个以所述第一电子设备的位置为起点经过所述用户的位置的射线为起始射线,以第一电子设备为起点将所述起始射线沿着所述用户的目光注视方向旋转特定角度的角平面,在该角平面内以“扫描”的方式发送第一信息即可。其中,所述特定角度根据所述第一电子设备的极限转动范围确定。
可选的,考虑到连续发送指令的连续扫描时间长,扫描功耗较高,本申请实施例提供一种离散扫描指令的发送方式,该离散扫描指令的发送方式是指在特定角度范围内的一些离散的角度方向发送第一信息,能够尽量缩短第一信息被第二电子设备接收的时间,并且降低扫描发送第一信息的功耗。
相应的,与前面两种发送第一信息的实现方式对应,所述第一电子设备基于构建得到的所述平面在所述特定角度范围内的C个角度对应的方向上发送所述第一信息;其中,C为大于等于1的正整数。或者,所述第一电子设备在所述角平面内的C个角度对应的方向上发送所述第一信息;其中,C为大于等于1的正整数。
在一种可能的实现方式中,限定第一电子设备在预设时间段内发送第一信息的次数为固定次数,则C的取值为该固定次数的取值。例如:限定第一电子设备在1s内发送第一信息的次数为11次,则可以在特定角度范围内随机选取11个角度方向发送第一信息,也可以在特定角度内平均每隔一定角度发送第一信息。
可选的,考虑到视觉控制通常用于被控制设备距离用户较远无法触及的场景(即目标被控制设备大概率在距离用户较远的地方),在选取用于发送第一信息的角度方向时,尽量在距离用户较远的角度方向多发送第一信息,也即按照“近距离稀疏,远距离密集”的原则发送第一信息。相应的,所述C个角度包括位于第一角度范围内的x个角度和位于第二角度范围内的y个角度;其中,所述第二角度范围与所述第一角度范围不重叠,所述第二角度范围中的角度的最小取值大于所述第一角度范围中的角度的最大取值;所述y的取值大于所述x的取值。例如:特定角度范围为0~30度,则在0~15度选取5个角度,在15~30选取10个角度,
示例性的,依据Sigmoid函数选取角度,在这些角度离散发送第一信息。
如图5所示,采用Sigmoid函数对选取角度进行提取,在扫描角度区间[0,α]中选取若干个角度进行发送,实现近距离稀疏,远距离密集。
其中,选取的角度根据以下公式(1)和(2)得到:
Δθ1=α×S(t) 公式(2)
其中,S(t)为根据t的不同取值得到的比例,t为时间,t的取值可以预先设置,图5和公式(1)中以t的取值为0、0.1、0.2、0.3、0.4、0.5、0.6、0.7、0.8、0.9,1为例进行说明。α表示角度范围的最大取值。Δθ1表示在S(t)取不同值时选取的用于发射第一信息的角度的取值。
在该步骤中,N个第一电子设备可以位于不同角度,从不同角度采集图像确定得到用户的目光注视方向,并向位于该方向上的第二电子设备发送第一信息。
S203、若目标第二电子设备收到M个第一电子设备发送的第一信息,则所述目标第二电子设备将自身确定为被控制设备。
其中,M为大于等于2小于等于N的正整数,其取值可以预先设定。在该步骤中,当某个第二电子设备同时或者在特定的时间间隔(该特定时间间隔通常较短,如0.05s)内收到至少两个第一电子设备发送的第一信息,则该第二电子设备为用户想要控制的设备。
可选的,如果第一信息中未携带控制信息,则目标第二电子设备在收到M个第一电子设备发送的第一信息后,可进一步等待接收控制信息。示例性的,如果目标第二电子设备在收到M个第一电子设备发送的第一信息之前处于关闭状态,则其进入开启状态,并等待进一步接收控制信息。如果目标第二电子设备在收到M个第一电子设备发送的第一信息之前已经处于开启状态,则其保持开启状态,并等待进一步接收控制信息。
可选的,如果第一信息中携带控制信息,则目标第二电子设备根据控制信息执行相应的操作。示例性的,如果目标第二电子设备在收到M个第一电子设备发送的第一信息之前处于关闭状态,则其进入开启状态并根据控制信息执行相应的操作。如果目标第二电子设备在收到M个第一电子设备发送的第一信息之前已经处于开启状态,则其根据控制信息执行相应的操作。
其中,如前文所述,该控制信息可以为开启、关闭、提高亮度、减少亮度等。该控制信息可以为根据采集的用户眼球信息得到。
可选的,在目标第二电子设备将自身确定为被控制设备后,用户还可以通过语音、手势等其他方式控制目标第二电子设备。在确定被控制设备后,用户控制该被控制设备的具体实现可参考现有技术,此处不再赘述。
可选的,如果目标第二电子设备收到M个第一电子设备发送的第一信息后,目标第二电子设备可以向第三电子设备发送第二信息,该第二信息中携带目标第二电子设备的标识,用于通知第三电子设备该目标第二电子设备为被控制设备,以便于第三电子设备记录。可选的,所述第二信息中还携带以下一项或多项:所述目标第二电子设备的当前状态、发送所述第一信息的第一电子设备的标识、所述第一信息的发送时间、所述第一信息的接收时间、用户的用户特征信息。
示例性的,第二信息可以为:
DeviceID|DeviceType|DeviceStatus|DeviceProfile|CheckCode
其中,DeviceID表示目标第二电子设备的标识,DeviceType表示目标第二电子设备的类型(比如空调、窗帘等),DeviceStatus表示目标第二电子设备的状态,比如开启、关闭等, DeviceProfile表示目标第二电子设备的详细信息,比如目标第二电子设备为空调,则该详细信息为空调的厂商、型号、当前温度等,CheckCode为校验码,用于防止该第二信息被篡改。
第三电子设备一旦收到目标第二电子设备发送的第二信息,则第三电子设备向N个第一电子设备发送消息,通知N个第一电子设备暂停发送第一信息。
本申请实施例提供的上述方法,通过N个第一电子设备向用户的目光注视方向的多个第二电子设备发送第一信息,当某个第二电子设备收到M个第一信息时,则将该第二电子设备确定为用户此次要通过视觉控制的设备。可见,无需控制设备预配置和维护映射关系,这样不论是否新增或删除设备或者设备的空间位置等信息发生变化都无需更新映射关系,因此其实现较为方便。
此外,现有的对于映射关系为已有设备的图像与标识,通过抓取用户注视方向的设备图像与该映射关系进行匹配进而确定被控制设备的方案还存在如下问题:抓取的图像中存在相同外观的不同设备(如电视机旁左右放置2个音箱),则无法确定用户想要视觉控制的是哪个设备。而本申请无需涉及设备的外观特征,通过定向发送第一信息的方式唤醒设备,能够解决相同外观设备场景问题。
有些场景下,用户的目光注视方向可能存在多个第二电子设备,则这多个第二电子设备可能都会收到M个第一电子设备发送的第一信息,也即目标第二电子设备的数量可能为多个。如图6所示,用户的目光注视方向存在台灯、风扇、音箱三个第二电子设备。在该场景下,目标第二电子设备收到M个第一信息后,向第三电子设备发送第二信息,由第三电子设备进一步确定最终的被控制设备。因此,如图7所示,所述方法还包括以下步骤:
S301、目标第二电子设备向第三电子设备发送第二信息。
其中,所述第二信息用于通知第三电子设备该目标第二电子设备已接收到M个第一电子设备发送的第一信息。
S302、若存在至少两个目标第二电子设备,则所述第三电子设备按照预设规则确定第四电子设备。
其中,第四电子设备为目标第二电子设备中的特定一个。
可选的,所述第二信息中携带发送第一信息的第一电子设备的标识以及对应的第一信息的发送时间和/或接收时间。
示例性的,第二信息可以为:
DeviceID|DeviceType|DeviceStatus|DeviceProfile|TimeStamp|CheckCode
其中,TimeStamp中包含发送第一信息的第一电子设备的标识以及对应的第一信息的发送时间和/或接收时间。示例性的,以第一电子设备的数量N的取值为2为例,TimeStamp可以为(TA=10:11:05,TB=10:11:06)表示第一电子设备A发送第一信息的时间为10:11:05,第一电子设备B发送第一信息的时间为10:11:06。其他字段的含义可参考前文所述。
在一些实施例中,预设规则为:第三电子设备根据不同目标第二电子设备发送的第二信息中携带的时间,将携带的发送时间最早的第二信息对应的目标第二电子设备确定为被控制设备。具体的,所述第二信息还携带第一电子设备发送第一信息的发送时间;所述第三电子设备根据预设规则从所述多个目标第二电子设备中确定第四电子设备,包括:所述第三电子设备将携带的第一信息的发送时间最早的第二信息对应的目标第二电子设备确定为第四电子设备。或者,所述第二信息中还携带目标第二电子设备接收第一信息的接收时间;所述第三电子设备根据预设规则从所述多个目标第二电子设备中确定第四电子设备,包括:所述第三电子设备将携带的接收第一信息的接收时间最早的第二信息对应的目标第二电子设备确定为第四电子设备。示例性的,目标第二电子设备1发送的第二信息中携带了如下两个发送时间: T1,A=10:11:01,T1,B=10:11:03,其中,T1,A为第一电子设备A发送第一信息的时间,T1,B为第一电子设备B发送第一信息的时间。目标第二电子设备2发送的第二信息中携带了如下两个发送时间:T2,A=10:10:59,T2,B=10:11:03。那么,第三电子设备将这四个时间进行比较,确定携带的发送时间最早(T2,A=10:10:59)的第二信息,将发送该第二信息的目标第二电子设备(目标第二电子设备2)确定为第四电子设备以也即最终的被控制设备。
在另一些实施例中,如图8所示,预设规则具体可以实现为:
S401、第三电子设备采集环境信息。
其中,该环境信息包括但不限于:当前时间、环境音量、当前光线强度、当前温度、当前风速等。
S402、第三电子设备还获取用户在预设时间段内控制过的第二电子设备的标识,以及多个目标第二电子设备的标识和状态信息。
其中,预设时间段可以为最近一天、三天、1小时、15分钟等。
需要说明的是,本申请实施例不限定S401和S402的执行顺序可以先后执行也可以同时执行。
S403、第三电子设备根据所述环境信息、所述用户在预设时间段内控制过的第二电子设备的标识以及所述多个目标第二电子设备的标识和状态信息确定所述多个目标第二电子设备的优先级。
可选的,第三电子设备根据所述环境信息、所述用户在预设时间段内控制过的第二电子设备的标识以及所述多个目标第二电子设备的标识和状态信息采用预设算法确定多个目标第二电子设备的优先级。其中,所述预设算法为环境感知算法,该算法的具体实现可参考现有技术,此处不再赘述。
其中,在确定目标第二电子设备的优先级时考虑环境信息,与当前环境匹配度高的目标第二电子设备的优先级也较高。
此外,考虑到用户如果在短期内控制过某个第二电子设备,则当前再次控制该第二电子设备的概率较小,则降低该第二电子设备的优先级。
S404、第三电子设备将优先级最高的目标第二电子设备确定为第四电子设备。
示例性的,用户的目光注视方向有智能电风扇,智能音响,智能台灯三种第二电子设备。第三电子设备采集当前环境信息以及上述三种第二电子设备的信息:晚上12点;智能台灯已经开启;当前温度较低且智能电风扇打开;智能音箱已经关闭。第三电子设备经场景感知算法预测用户可能要入睡,不宜吵闹,且温度不宜过低,则判定三种第二电子设备的控制优先级由高到低为:智能电风扇,智能台灯,智能音响。那么,将优先级最高的智能电风扇作为最终的被控制设备。
考虑到用户短期内想控制不同设备,因此,第三电子设备记录有用户每次控制的第二电子设备的标识和时间,如果短期内(如10分钟之内),用户再次注视同样的方向,则降低上次注视该方向时控制的第二电子设备的优先级,重新选取优先级最高的第二电子设备作为被控制设备。
S303、所述第三电子设备向所述第四电子设备发送第三信息。
其中,所述第三信息用于指示所述第四电子设备为被控制设备,第四电子设备根据该第三信息可以进一步接收控制信息以根据该控制信息执行相应的操作,或者第四电子设备在收到该第三信息后直接根据之前收到的第一信息中携带的控制信息执行相应的操作。
本申请实施例提出一种用户视觉路线上存在多设备场景下选取被控制设备的方法。对于视线方向有多个设备的场景,第三电子设备通过选取最早接收到的第二信息对应的第二电子设备作为被控制设备,并通知第一电子设备无需进一步发送第一信息,能够减少无用信息发送。或者,第三电子设备通过场景融合感知从多个第二电子设备中选取最终的被控制设备。相对于目前的通过眼动跟踪眼镜、眼动仪等精确确定用户眼球信息进而确定被控制设备相比,本申请的方法对第三电子设备的精度要求有所降低。
有些场景下,多个用户可能同时注视同一个第二电子设备。本申请实施例还提供了一种在该场景下第三电子设备选择合适的用户作为控制者的实现方法,以提高用户的视觉控制使用体验。
为了能够实现该方法,第一电子设备需要预先获取用户信息。其中,用户信息包括用户生物识别特征信息(如人脸信息)和对应的特征信息等。可选的,用户可使用手机上的应用 (如智能家居应用)录入人脸信息和特征信息(该特征信息可以是身份信息、年龄信息等),进而该应用将用户录入的用户信息发送给第一电子设备,第一电子设备存储这些信息。示例性的,用户录入用户A的人脸以及其身份:爷爷;用户录入用户B的人脸及其身份:奶奶等等。
如图9所示,该方法可实现为:
S501、第一电子设备确定用户的目光注视方向。
其中,该步骤的具体实现可参考前述S201,此处不再赘述。
S502、第一电子设备向位于所述用户的目光注视方向的至少一个第二电子设备发送第一信息。
其中,所述第一信息中除了携带第一电子设备的标识外,还可以携带所述第一用户的用户信息。
可选的,第一电子设备采集包含用户的图像,根据该图像中的人脸信息与预存储的人脸信息进行匹配确定当前用户的特征信息。当第一电子设备向用户的目光注视方向上的第二电子设备发送第一信息时,在该第一信息中除了携带第一电子设备的标识外,还可以携带识别出的用户特征信息。
S503、目标第二电子设备在收到M个第一电子设备发送的第一信息后向第三电子设备发送第二信息。
其中,该第二信息中除了携带该目标第二电子设备的标识外,还要携带用户特征信息。
S504、第三电子设备根据所述第二信息确定存在多个用户注视所述目标第二电子设备。
其中,如果第三电子设备收到同一个目标第二电子设备发送的多个第二信息,且这多个第二信息中携带的用户特征信息不同,则可认为当前场景为多个用户注视同一第二电子设备的场景。
S505、第三电子设备按照预设规则确定所述多个用户的优先级。
可选的,所述预设规则为用户自定义的优先级顺序,比如,用户事先设定的对该目标第二电子设备的控制优先级顺序如下:爷爷、奶奶、妈妈、孩子、陌生人。其中,对于不同的第二电子设备,其对应的控制优先级顺序可以不同。例如:对于智能空调,用户自定义的控制优先级顺序为:奶奶、爷爷、儿子、妈妈。对于智能窗帘,用户自定义的控制优先级顺序可以为:妈妈、爸爸、爷爷、奶奶、儿子。
可选的,所述预设规则为根据不同用户使用该目标第二电子设备的历史使用频率确定各个用户的优先级,比如使用频率越高的用户的优先级越高。
可选的,所述预设规则为根据设备所在区域类型,确定各个用户控制各个第二电子设备的优先级。例如:目标第二电子设备位于厨房,则妈妈的优先级高于其他用户的优先级。目标第二电子设备位于儿童房,则孩子的优先级高于其他用户的优先级。
可选的,所述预设规则为根据用户使用该目标第二电子设备的行动便利程度确定各个用户的优先级。示例性的,目标第二电子设备为空调、暖气、扫地机器人等,老人使用这些设备时行动不便,则老人的视觉控制的优先级高。
可选的,所述预设规则为第三电子设备根据不同用户在不同维度对应的优先级顺序以及每个维度的权重确定各个用户控制该目标第二电子设备的优先级。
示例性的,多个维度包括以下维度中的一个或多个:用户使用该目标第二电子设备的历史使用频率、用户在该目标第二电子设备所位于的区域的活动频率、用户使用该目标第二电子设备的行动便利度、自定义的用户权限。
以目标第二电子设备为冰箱为例,在用户使用该目标第二电子设备的历史使用频率这一维度,不同用户的优先级由高到低的顺序为:妈妈、爸爸、奶奶、爷爷、孩子。
在用户在该目标第二电子设备所位于的区域的活动频率这一维度,由于冰箱位于厨房,不同用户的优先级由高到低的顺序为:妈妈、奶奶、爸爸、爷爷、孩子。
在用户使用该目标第二电子设备的行动便利度这一维度,不同用户的优先级由高到低的顺序为:孩子、爷爷、奶奶、妈妈、爸爸。
在自定义的用户权限这一维度,不同用户的优先级由高到低的顺序为:妈妈、爸爸、爷爷、奶奶、孩子。
假如上述每个维度按照优先级高低的得分依次是:5、4、3、2、1。上述几个维度的权重依次是:0.3、0.2、0.2、0.3。当前识别到的同时控制该目标第二电子设备的用户为妈妈和奶奶,则可以计算得到妈妈对应的分数为:5*0.3+5*0.2+2*0.2+5*0.3=4.4,奶奶对应的分数为: 3*0.3+4*0.2+3*0.2+2*0.3=2.9。由于妈妈对应分数(4.4)大于奶奶对应的分数(2.9),则决策出优先控制该空调的用户为妈妈。
S506、第三电子设备根据所述多个用户的优先级确定目标用户。
之后,在确定出目标用户后,目标第二电子设备可以根据目标用户的控制命令执行相应的操作。例如:采集目标用户的视觉信息,如向上看,表示开启,向下看表示关闭等。又如:采集目标用户的语音或获取用户的手势以执行与该语音或手势对应的操作,其具体实现可参考现有技术,此处不再赘述。
现有技术通常针对单人场景,通过头戴式眼镜、跟踪摄像头等设备来实现视觉控制,无法解决多人同时进行视觉控制的冲突场景。本申请通过身份识别、多维度决策等方式,能够给出一种多用户同时视觉控制同一设备时决策出优先控制该设备的用户,为多用户视觉控制提供了解决方案。
以上结合图1-图9详细说明了本申请实施例提供的确定被控制设备的方法。以下结合图 10、图11、图12、图13详细说明本申请实施例提供的电子设备。
在一种可能的设计中,图10为本申请实施例提供的电子设备的结构示意图。如图10所示,电子设备600作为第一电子设备可以包括:处理单元601以及收发单元602。电子设备 600可用于实现上述方法实施例中涉及的第一电子设备的功能。
可选地,处理单元601,用于支持电子设备600执行图2中的S201,图9中的S501。
可选地,收发单元602,用于支持电子设备600执行图2中的S202、图9中的S502。
其中,收发单元602可以包括接收单元和发送单元,可以由收发器或收发器相关电路组件实现,可以为收发器或收发模块。电子设备600中的各个单元的操作和/或功能分别为了实现上述方法实施例中所述的确定被控制设备的方法的相应流程,上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能单元的功能描述,为了简洁,在此不再赘述。
可选地,图10所示的电子设备600还可以包括存储单元(图10中未示出),该存储单元中存储有程序或指令。当处理单元601以及收发单元602执行该程序或指令时,使得图10所示的电子设备600可以执行上述方法实施例中所述的确定被控制设备的方法。
可选的,图10所示的电子设备600还可以包括图像采集单元(图10中未示出),该图像采集单元可用于采集图像以对该图像进行分析,得到用户的目光注视方向。
图10所示的电子设备600的技术效果可以参考上述方法实施例中所述的确定被控制设备的方法的技术效果,此处不再赘述。
在一种可能的设计中,图11为本申请实施例提供的电子设备700的结构示意图。如图 11所示,电子设备700作为第一电子设备可以包括:处理器701、天线1、天线2、移动通信模块702和无线通信模块703。可选的,电子设备700作为第一电子设备还包括摄像头704、外部存储器接口705和内部存储器706。
其中,处理器701可以包括一个或多个处理单元,例如:处理器701可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit, NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器701中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器701 中的存储器为高速缓冲存储器。该存储器可以保存处理器701刚用过或循环使用的指令或数据。如果处理器701需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器701的等待时间,因而提高了***的效率。
在一些实施例中,处理器701可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface, MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
MIPI接口可以被用于连接处理器701与摄像头704等***器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(display serialinterface,DSI)等。在一些实施例中,处理器701和摄像头704通过CSI接口通信,实现第一电子设备700的拍摄功能。
USB接口是符合USB标准规范的接口,具体可以是Mini USB接口,Micro USB接口,USB Type C接口等。USB接口可以用于连接充电器为第一电子设备700充电,也可以用于第一电子设备700与***设备之间传输数据等。
可以理解的是,本申请实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对第一电子设备700的结构限定。在本申请另一些实施例中,第一电子设备700也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
第一电子设备700的无线通信功能可以通过天线1,天线2,移动通信模块702,无线通信模块703,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。第一电子设备700中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线 1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块702可以提供应用在第一电子设备700上的包括2G/3G/4G/5G等无线通信的解决方案。
无线通信模块703可以提供应用在第一电子设备700上的包括无线局域网(wireless local area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星***(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块703可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块703经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器701。无线通信模块703还可以从处理器701接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,第一电子设备700的天线1和移动通信模块702耦合,天线2和无线通信模块703耦合,使得第一电子设备700可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯***(global system for mobilecommunications, GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(code division multiple access,CDMA),宽带码分多址(wideband codedivision multiple access,WCDMA),时分码分多址(time-division code divisionmultiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位***(global positioning system,GPS),全球导航卫星***(global navigation satellite system,GLONASS),北斗卫星导航***(beidou navigation satellite system,BDS),准天顶卫星***(quasi-zenithsatellite system,QZSS)和/或星基增强***(satellite based augmentation systems,SBAS)。
摄像头704用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体 (complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,第一电子设备700可以包括1个或多个摄像头704。
外部存储器接口705可以用于连接外部存储卡,例如Micro SD卡,实现扩展第一电子设备700的存储能力。外部存储卡通过外部存储器接口705与处理器701通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器706可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。内部存储器706可以包括存储程序区和存储数据区。其中,存储程序区可存储操作***,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储第一电子设备700使用过程中所创建的数据(比如图像数据,电话本等)等。此外,内部存储器 706可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。处理器701通过运行存储在内部存储器706的指令,和/或存储在设置于处理器中的存储器的指令,执行第一电子设备700 的各种功能应用以及数据处理。
可以理解的是,本申请实施例示意的结构并不构成对第一电子设备700的具体限定。在本申请另一些实施例中,第一电子设备700可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
在一种可能的设计中,图12为本申请实施例提供的电子设备的结构示意图。如图12所示,电子设备800作为第二电子设备可以包括:处理单元801以及收发单元802。电子设备 800可用于实现上述方法实施例中涉及的第二电子设备的功能。
可选地,处理单元801,用于支持电子设备800执行图2中的S203。
可选地,收发单元802,用于支持电子设备800执行图2中的S202、图7中的S301、S303、图9中的S502、S503。
其中,收发单元802可以包括接收单元和发送单元,可以由收发器或收发器相关电路组件实现,可以为收发器或收发模块。电子设备800中的各个单元的操作和/或功能分别为了实现上述方法实施例中所述的确定被控制设备的方法的相应流程,上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能单元的功能描述,为了简洁,在此不再赘述。
可选地,图12所示的电子设备800还可以包括存储单元(图12中未示出),该存储单元中存储有程序或指令。当处理单元801以及收发单元802执行该程序或指令时,使得图12所示的电子设备800可以执行上述方法实施例中所述的确定被控制设备的方法。
图12所示的电子设备800的技术效果可以参考上述方法实施例中所述的确定被控制设备的方法的技术效果,此处不再赘述。
在一种可能的设计中,本申请实施例还提供一种第二电子设备,该第二电子设备的结构可以参考图11所示的第一电子设备的结构,需要说明的是,第二电子设备可以不包括摄像头,第二电子设备可以包括比图11所示的结构更多或者更少的单元。
在一种可能的设计中,图13为本申请实施例提供的电子设备的结构示意图。如图13所示,电子设备900作为第三电子设备可以包括:处理单元901以及收发单元902。电子设备900可用于实现上述方法实施例中涉及的第三电子设备的功能。
可选地,处理单元901,用于支持电子设备900执行图7中的S302,图8中的S401至S404以及图9中的S504、S505、S506。
可选地,收发单元902,用于支持电子设备900执行图7中的S301、S303、图9中的S503。
其中,收发单元902可以包括接收单元和发送单元,可以由收发器或收发器相关电路组件实现,可以为收发器或收发模块。电子设备900中的各个单元的操作和/或功能分别为了实现上述方法实施例中所述的确定被控制设备的方法的相应流程,上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能单元的功能描述,为了简洁,在此不再赘述。
可选地,图13所示的电子设备900还可以包括存储单元(图13中未示出),该存储单元中存储有程序或指令。当处理单元901以及收发单元902执行该程序或指令时,使得图13所示的电子设备900可以执行上述方法实施例中所述的确定被控制设备的方法和确定目标用户的方法。
图13所示的电子设备900的技术效果可以参考上述方法实施例中所述的确定被控制设备的方法和确定目标用户的方法的技术效果,此处不再赘述。
在一种可能的设计中,本申请实施例还提供一种第三电子设备,该第三电子设备的结构可以参考图11所示的第一电子设备的结构,需要说明的是,第三电子设备可以不包括摄像头,第三电子设备可以包括比图11所示的结构更多或者更少的单元。
除了以电子设备600、700、800、900的形式以外,本申请提供的技术方案也可以为电子设备中的功能单元或者芯片,或者与电子设备匹配使用的装置。
本申请实施例还提供一种芯片***,包括:处理器,所述处理器与存储器耦合,所述存储器用于存储程序或指令,当所述程序或指令被所述处理器执行时,使得该芯片***实现上述任一方法实施例中的方法。
可选地,该芯片***中的处理器可以为一个或多个。该处理器可以通过硬件实现也可以通过软件实现。当通过硬件实现时,该处理器可以是逻辑电路、集成电路等。当通过软件实现时,该处理器可以是一个通用处理器,通过读取存储器中存储的软件代码来实现。
可选地,该芯片***中的存储器也可以为一个或多个。该存储器可以与处理器集成在一起,也可以和处理器分离设置,本申请实施例并不限定。示例性地,存储器可以是非瞬时性处理器,例如只读存储器ROM,其可以与处理器集成在同一块芯片上,也可以分别设置在不同的芯片上,本申请实施例对存储器的类型,以及存储器与处理器的设置方式不作具体限定。
示例性地,该芯片***可以是现场可编程门阵列(field programmable gatearray,FPGA),可以是专用集成芯片(AP设备plication specific integrated circuit,ASIC),还可以是***芯片 (system on chip,SoC),还可以是中央处理器(centralprocessor unit,CPU),还可以是网络处理器(network processor,NP),还可以是数字信号处理电路(digital signal processor,DSP),还可以是微控制器(micro controllerunit,MCU),还可以是可编程控制器(programmable logic device,PLD)或其他集成芯片。
应理解,上述方法实施例中的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。结合本申请实施例所公开的方法步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。
本申请实施例还提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机程序,当该计算机程序在计算机上上运行时,使得计算机执行上述相关步骤,以实现上述实施例中的车载应用自适应配置方法。
本申请实施例还提供一种计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行上述相关步骤,以实现上述实施例中的车载应用自适应配置方法。
另外,本申请实施例还提供一种装置。该装置具体可以是组件或模块,该装置可包括相连的一个或多个处理器和存储器。其中,存储器用于存储计算机程序。当该计算机程序被一个或多个处理器执行时,使得装置执行上述各方法实施例中的车载应用自适应配置方法。
其中,本申请实施例提供的装置、计算机可读存储介质、计算机程序产品或芯片均用于执行上文所提供的对应的方法。因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
结合本申请实施例公开内容所描述的方法或者算法的步骤可以硬件的方式来实现,也可以是由处理器执行软件指令的方式来实现。软件指令可以由相应地软件模块组成,软件模块可以被存放于随机存取存储器(random access memory,RAM)、闪存、只读存储器(read only memory,ROM)、可擦除可编程只读存储器(erasable programmable ROM,EPROM)、电可擦可编程只读存储器(electrically EPROM,EEPROM)、寄存器、硬盘、移动硬盘、只读光盘(CD-ROM)或者本领域熟知的任何其它形式的存储介质中。一种示例性的存储介质耦合至处理器,从而使处理器能够从该存储介质读取信息,且可向该存储介质写入信息。当然,存储介质也可以是处理器的组成部分。处理器和存储介质可以位于专用集成电路(AP设备 plication specific integrated circuit,ASIC)中。
通过以上的实施方式的描述,本领域技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明。实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成;即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。上述描述的***,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的。例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式;例如多个单元或组件可以结合或者可以集成到另一个***,或一些特征可以忽略,或不执行。另外,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,模块或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
计算机可读存储介质包括但不限于以下的任意一种:U盘、移动硬盘、只读存储器(read-only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何在本申请揭露的技术范围内的变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。
Claims (24)
1.一种确定被控制设备的方法,其特征在于,所述方法包括:
第一电子设备确定用户的目光注视方向;
所述第一电子设备向位于所述用户的目光注视方向的至少一个第二电子设备发送第一信息;
其中,所述第一信息中携带所述第一电子设备的标识,用于指示用户想要控制所述第二电子设备;所述第一电子设备的数量为N,所述N为大于等于2的正整数。
2.根据权利要求1所述的确定被控制设备的方法,其特征在于,所述第一电子设备向位于所述用户的目光注视方向的至少一个第二电子设备发送第一信息,包括:
所述第一电子设备根据所述第一电子设备的位置、所述用户的位置、所述用户的目光注视方向构建平面;其中,构建得到的所述平面包括所述第一电子设备的位置、所述用户的位置以及所述用户的目光注视方向所对应的射线;
所述第一电子设备基于构建得到的所述平面在特定角度范围内发送所述第一信息;其中,所述特定角度范围表示所述第一电子设备发送所述第一信息的方向对应的射线与以第一电子设备为起点经过所述用户的位置的射线的夹角的范围。
3.根据权利要求2所述的确定被控制设备的方法,其特征在于,所述特定角度范围根据所述第一电子设备的极限转动角度范围确定;不同的第一电子设备对应的所述极限转动角度范围相同或不同。
4.根据权利要求2或3所述的确定被控制设备的方法,其特征在于,所述第一电子设备基于构建得到的所述平面在特定角度范围内发送所述第一信息,包括:
所述第一电子设备基于构建得到的所述平面在所述特定角度范围内的C个角度对应的方向上发送所述第一信息;其中,C为大于等于1的正整数。
5.根据权利要求1所述的确定被控制设备的方法,其特征在于,所述第一电子设备向位于所述用户的目光注视方向的至少一个第二电子设备发送第一信息,包括:
所述第一电子设备根据所述第一电子设备的位置、用户的位置、所述用户的目光注视方向对应的射线以及所述第一电子设备的极限转动范围确定一个以所述第一电子设备的位置为起点经过所述用户的位置的射线为起始射线,以第一电子设备为起点将所述起始射线沿着所述用户的目光注视方向旋转特定角度的角平面;其中,所述特定角度根据所述第一电子设备的极限转动范围确定;
所述第一电子设备在所述角平面内发送所述第一信息。
6.根据权利要求5所述的确定被控制设备的方法,其特征在于,所述第一电子设备在所述角平面内发送所述第一信息,包括:
所述第一电子设备在所述角平面内的C个角度对应的方向上发送所述第一信息;其中,C为大于等于1的正整数。
7.根据权利要求4或6所述的确定被控制设备的方法,其特征在于,所述C个角度包括位于第一角度范围内的x个角度和位于第二角度范围内的y个角度;其中,所述第二角度范围与所述第一角度范围不重叠,所述第二角度范围中的角度的最小取值大于所述第一角度范围中的角度的最大取值;所述y的取值大于所述x的取值。
8.根据权利要求1至7任一项所述的确定被控制设备的方法,其特征在于,所述第一信息中还携带以下一项或多项:控制信息、所述第一电子设备发送所述第一信息的时间、所述用户的用户特征信息。
9.根据权利要求1至8任一项所述的确定被控制设备的方法,其特征在于,所述第一信息承载于红外信号中。
10.一种确定被控制设备的方法,其特征在于,所述方法包括:
若目标第二电子设备收到M个第一电子设备发送的第一信息,则所述目标第二电子设备将自身确定为被控制设备;
其中,所述第一信息中携带所述第一电子设备的标识,用于指示用户想要控制所述第二电子设备;M为大于等于2小于等于N的正整数。
11.根据权利要求10所述的确定被控制设备的方法,其特征在于,在所述目标第二电子设备将自身确定为被控制设备之后,所述方法还包括:
所述目标第二电子设备向第三电子设备发送第二信息;其中,所述第二信息中携带所述目标第二电子设备的标识,用于通知所述第三电子设备所述目标第二电子设备为被控制设备。
12.根据权利要求11所述的确定被控制设备的方法,其特征在于,所述第二信息中还携带以下一项或多项:所述目标第二电子设备的当前状态、发送所述第一信息的第一电子设备的标识、所述第一信息的发送时间、所述第一信息的接收时间、用户的用户特征信息。
13.根据权利要求10所述的确定被控制设备的方法,其特征在于,若所述目标第二电子设备的数量为多个,则在任意所述目标第二电子设备将自身确定为被控制设备之前,所述方法还包括:
每个所述目标第二电子设备向第三电子设备发送第二信息;其中,所述第二信息中携带对应的所述目标第二电子设备的标识;
所述多个目标第二电子设备中的第四电子设备接收所述第三电子设备发送的第三信息,所述第三信息用于指示将所述第四电子设备确定为被控制设备。
14.一种确定被控制设备的方法,其特征在于,所述方法包括:
第三电子设备接收多个目标第二电子设备发送的第二信息,其中所述第二信息中携带对应的所述目标第二电子设备的标识;
所述第三电子设备根据预设规则从所述多个目标第二电子设备中确定第四电子设备;
所述第三电子设备向所述第四电子设备发送第三信息,其中,所述第三信息用于指示所述第四电子设备为被控制设备。
15.根据权利要求14所述的确定被控制设备的方法,其特征在于,所述第三电子设备根据预设规则从所述多个目标第二电子设备中确定第四电子设备,包括:
所述第三电子设备采集环境信息;其中,所述环境信息包括以下至少一项:当前时间、环境音量、当前光线强度、当前风速、当前温度;
所述第三电子设备获取用户在预设时间段内控制过的第二电子设备的标识,以及所述多个目标第二电子设备的标识和状态信息;
所述第三电子设备根据所述环境信息、所述用户在预设时间段内控制过的第二电子设备的标识以及所述多个目标第二电子设备的标识和状态信息确定所述多个目标第二电子设备的优先级;
所述第三电子设备将优先级最高的目标第二电子设备确定为第四电子设备。
16.根据权利要求14所述的确定被控制设备的方法,其特征在于,所述第二信息还携带第一电子设备发送第一信息的发送时间;所述第三电子设备根据预设规则从所述多个目标第二电子设备中确定第四电子设备,包括:
所述第三电子设备将携带的第一信息的发送时间最早的第二信息对应的目标第二电子设备确定为第四电子设备;
或者,所述第二信息中还携带目标第二电子设备接收第一信息的接收时间;所述第三电子设备根据预设规则从所述多个目标第二电子设备中确定第四电子设备,包括:
所述第三电子设备将携带的接收第一信息的接收时间最早的第二信息对应的目标第二电子设备确定为第四电子设备。
17.一种确定目标用户的方法,其特征在于,
第三电子设备接收同一个目标第二电子设备发送的多个第二信息,其中多个第二信息中携带的用户特征信息不同;
所述第三电子设备按照预设规则确定多个所述用户特征信息分别对应的用户的优先级;
所述第三电子设备根据所述多个用户的优先级确定目标用户。
18.根据权利要求17所述的方法,其特征在于,
所述预设规则为用户自定义的优先级顺序;
或者,
所述预设规则为根据不同用户使用所述目标第二电子设备的历史使用频率确定各个用户的优先级;
或者,
所述预设规则为根据目标第二电子设备所在区域类型,确定各个用户控制目标第二电子设备的优先级;
或者,
所述预设规则为根据不同用户使用所述目标第二电子设备的行动便利程度确定各个用户的优先级;
或者,
所述预设规则为根据不同用户在不同维度对应的优先级顺序以及每个维度的权重确定各个用户的优先级;其中,多个维度包括以下维度中的至少两个:用户使用所述目标第二电子设备的历史使用频率、用户在该目标第二电子设备所位于的区域的活动频率、用户使用该目标第二电子设备的行动便利度、自定义的用户权限。
19.一种电子设备,其特征在于,所述电子设备包括:处理器和存储器,所述存储器与所述处理器耦合,所述存储器用于存储计算机可读指令,当所述处理器从所述存储器中读取所述计算机可读指令,使得所述电子设备执行如权利要求1至9中任意一项所述的方法。
20.一种电子设备,其特征在于,所述电子设备包括:处理器和存储器,所述存储器与所述处理器耦合,所述存储器用于存储计算机可读指令,当所述处理器从所述存储器中读取所述计算机可读指令,使得所述电子设备执行如权利要求10至13中任意一项所述的方法。
21.一种电子设备,其特征在于,所述电子设备包括:处理器和存储器,所述存储器与所述处理器耦合,所述存储器用于存储计算机可读指令,当所述处理器从所述存储器中读取所述计算机可读指令,使得所述电子设备执行如权利要求14至16中任意一项所述的方法。
22.一种电子设备,其特征在于,所述电子设备包括:处理器和存储器,所述存储器与所述处理器耦合,所述存储器用于存储计算机可读指令,当所述处理器从所述存储器中读取所述计算机可读指令,使得所述电子设备执行如权利要求17至18中任意一项所述的方法。
23.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质包括计算机程序,当所述计算机程序在电子设备上运行时,使得所述电子设备执行如权利要求1至9任一项,或者10至13任一项,或者14至16中任意一项所述的方法。
24.一种计算机程序产品,其特征在于,当所述计算机程序产品在计算机上运行时,使得所述计算机执行如权利要求1-9中任意一项或者10至13中任一项,或者14至16中任一项所述的方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210319671.9A CN116938618A (zh) | 2022-03-29 | 2022-03-29 | 确定被控制设备的方法、确定目标用户的方法及电子设备 |
PCT/CN2023/084170 WO2023185762A1 (zh) | 2022-03-29 | 2023-03-27 | 确定被控制设备的方法、确定目标用户的方法及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210319671.9A CN116938618A (zh) | 2022-03-29 | 2022-03-29 | 确定被控制设备的方法、确定目标用户的方法及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116938618A true CN116938618A (zh) | 2023-10-24 |
Family
ID=88199167
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210319671.9A Pending CN116938618A (zh) | 2022-03-29 | 2022-03-29 | 确定被控制设备的方法、确定目标用户的方法及电子设备 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN116938618A (zh) |
WO (1) | WO2023185762A1 (zh) |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4837762B2 (ja) * | 2009-06-18 | 2011-12-14 | 本田技研工業株式会社 | 車載機器操作装置 |
US10120438B2 (en) * | 2011-05-25 | 2018-11-06 | Sony Interactive Entertainment Inc. | Eye gaze to alter device behavior |
CN105138123B (zh) * | 2015-08-24 | 2018-10-26 | 小米科技有限责任公司 | 设备控制方法及装置 |
CN105183169B (zh) * | 2015-09-22 | 2018-09-25 | 小米科技有限责任公司 | 视线方向识别方法及装置 |
CN108681399B (zh) * | 2018-05-11 | 2020-07-10 | 北京七鑫易维信息技术有限公司 | 一种设备控制方法、装置、控制设备及存储介质 |
CN113486691A (zh) * | 2020-05-27 | 2021-10-08 | 海信集团有限公司 | 一种智能设备及其控制方法 |
-
2022
- 2022-03-29 CN CN202210319671.9A patent/CN116938618A/zh active Pending
-
2023
- 2023-03-27 WO PCT/CN2023/084170 patent/WO2023185762A1/zh unknown
Also Published As
Publication number | Publication date |
---|---|
WO2023185762A1 (zh) | 2023-10-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110364151B (zh) | 一种语音唤醒的方法和电子设备 | |
CN110320811B (zh) | 一种智能家居设备的接入方法及一种电子设备 | |
US11132840B2 (en) | Method and device for obtaining real time status and controlling of transmitting devices | |
WO2021197098A1 (zh) | 一种无线连接方法、装置和终端设备 | |
EP3016442A2 (en) | Method for scanning neighboring devices and electronic device thereof | |
CN111522250B (zh) | 智能家居***及其控制方法与装置 | |
EP2958316A1 (en) | Electronic device using composition information of picture and shooting method using the same | |
WO2021043045A1 (zh) | 一种网络配置信息的配置方法及设备 | |
US20150244853A1 (en) | Method for communicating with neighbor device, electronic device, and storage medium | |
CN111010693B (zh) | 一种提供无线保真网络接入服务的方法及电子设备 | |
US11929872B2 (en) | Method for configuring home devices in batches and device | |
CN114125789B (zh) | 通信方法、终端设备及存储介质 | |
CN104469673A (zh) | 一种终端定位方法及装置 | |
CN113965715B (zh) | 一种设备协同控制方法和装置 | |
CN112400346A (zh) | 采集其它设备的位置信息的服务器设备和方法 | |
AU2014315883A1 (en) | Method of controlling short-range wireless communication and apparatus supporting the same | |
US20150347853A1 (en) | Method for providing service and electronic device thereof | |
CN116546132B (zh) | 网络识别方法、装置、移动终端及计算机可读存储介质 | |
CN116938618A (zh) | 确定被控制设备的方法、确定目标用户的方法及电子设备 | |
US20240053460A1 (en) | Device location determining method, apparatus, and system | |
CN117412238A (zh) | 一种设备定位方法及可移动的电子设备 | |
KR20150029185A (ko) | 애플리케이션 제공 방법 및 장치 | |
CN114513771A (zh) | IoT设备的控制方法、装置、控制***及终端设备 | |
CN116744226B (zh) | 电子围栏数据采集方法和电子设备 | |
WO2024104173A1 (zh) | 无线通信方法、存储介质及终端设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |