CN107797661A - 一种设备控制装置、方法及移动终端 - Google Patents

一种设备控制装置、方法及移动终端 Download PDF

Info

Publication number
CN107797661A
CN107797661A CN201710826901.XA CN201710826901A CN107797661A CN 107797661 A CN107797661 A CN 107797661A CN 201710826901 A CN201710826901 A CN 201710826901A CN 107797661 A CN107797661 A CN 107797661A
Authority
CN
China
Prior art keywords
unit
virtual
control command
control
scene
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710826901.XA
Other languages
English (en)
Inventor
彭磊
宋德超
贾巨涛
冼海鹰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gree Electric Appliances Inc of Zhuhai
Original Assignee
Gree Electric Appliances Inc of Zhuhai
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Gree Electric Appliances Inc of Zhuhai filed Critical Gree Electric Appliances Inc of Zhuhai
Priority to CN201710826901.XA priority Critical patent/CN107797661A/zh
Publication of CN107797661A publication Critical patent/CN107797661A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明提供一种设备控制装置、方法及移动终端。其中,装置包括:包括AR眼镜单元、AR虚拟面板单元、和控制单元;AR眼镜单元,用于呈现虚拟场景与现实场景叠加后的合成场景;AR虚拟面板单元,用于呈现包括了第一控制命令的虚拟面板,所述第一控制命令用于控制所述设备;控制单元,用于根据用户对虚拟面板单元上的第一控制命令的选择执行相应的控制。本发明提供的方案能够使得设备的控制更加便利、直观、生动,能够较大的提升用户的体验。

Description

一种设备控制装置、方法及移动终端
技术领域
本发明涉及设备控制领域,尤其涉及根据AR技术控制设备的方法、装置及移动终端。
背景技术
AR(Augmented Reality,增强现实技术)是一种将真实世界信息和虚拟世界信息“无缝”集成的新技术,是把原本在现实世界的一定时间空间范围内很难体验到的实体信息(视觉信息、声音、味道、触觉等),通过电脑等科学技术,模拟仿真后再叠加,将虚拟的信息应用到真实世界,真实的环境和虚拟的物体实时地叠加到了同一个画面或空间同时存在,被人类感官所感知,从而达到超越现实的感官体验。
现有技术中,AR技术一般用于游戏或者娱乐视频的播放,在其他领域还未得到有效的应用。
发明内容
本发明的主要目的在于克服上述现有技术的缺陷,尤其涉及根据AR技术控制设备的方法、装置及移动终端。本发明的技术方案要解决的技术问题是,将AR技术用于设备的控制,能够使得设备控制更加直观、生动、便利。
本发明一个方面提供了一种设备控制装置,包括AR眼镜单元、AR虚拟面板单元和控制单元;AR眼镜单元,用于呈现虚拟场景与现实场景叠加后的合成场景;AR虚拟面板单元,用于呈现包括了第一控制命令的虚拟面板,所述第一控制命令用于控制所述设备;控制单元,用于根据用户对虚拟面板单元上的第一控制命令的选择执行相应的控制。
可选地,还包括第一虚拟场景生成单元,用于生成与执行的第一控制命令相对应的虚拟场景。
可选地,还包括AR眼镜定位单元,用于确定光标移动至的所述合成场景中的位置。
可选地,还包括检测模块,用于检测用户头部的转动,所述光标根据用户头部的转动而移动。
可选地,还包括第二命令识别单元和第二虚拟场景生成单元,所述第二命令识别单元用于识别用户的第二控制命令,所述第二虚拟场景生成单元用于根据所述第二控制命令,生成光标所在位置的对应部件的虚拟场景。
可选地,还包括第一语音单元,用于识别用户语音中的第一控制命令,所述控制单元,还用于根据所述第一语音单元识别的所述第一控制命令的选择执行相应的控制。
可选地,所述第二命令识别单元包括第二语音单元,所述第二语音单元用于识别用户语音中的第二控制命令。
可选地,还包括同步定位与建图单元,用于确定所述设备的空间位置;和/或根据用户拍摄角度和/或光照情况动态更新虚拟设备的状态。
可选地,所述AR眼镜单元包括移动终端和/或AR眼镜。
发明又一方面提供了一种移动终端,包括上述任一所述的设备控制装置。
发明再一方面提供了一种设备控制方法,包括以下步骤:采用AR眼镜或移动终端呈现虚拟场景与现实场景叠加后的合成场景;识别用户语音中的第一控制命令和/或用户对虚拟面板单元上的第一控制命令的选择确定第一控制命令,所述第一控制命令用于控制所述设备;根据所述确定的第一控制命令执行相应的控制。
可选地,还包括第一虚拟场景生成步骤,用于生成与执行的第一控制命令相对应的虚拟场景。
可选地,还包括AR眼镜定位步骤,用于确定光标移动至的所述合成场景中的位置。
可选地,还包括检测步骤,用于检测用户头部的转动,所述光标根据用户头部的转动而移动。
可选地,其特征在于,还包括第二命令识别步骤和第二虚拟场景生成步骤,所述第二命令识别步骤用于识别用户的第二控制命令,所述第二虚拟场景生成步骤用于根据所述第二控制命令,生成光标所在位置的对应部件的虚拟场景。
可选地,所述第二命令识别步骤包括语音识别。
可选地,还包括同步定位与建图步骤,用于确定所述设备的空间位置;和/或根据用户拍摄角度和/或光照情况动态更新虚拟设备的状态。
本发明提供的方案能够使得设备的控制更加直观、生动、便利,能够较大的提升用户的体验。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本发明的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是本发明提供的设备控制装置的一实施例的结构示意图;
图2是本发明提供的设备控制装置的一实施例的结构示意图;
图3是本发明提供的设备控制装置的一实施例的结构示意图;
图4是本发明提供的设备控制装置的一实施例的结构示意图;
图5是本发明提供的设备控制装置的一实施例的结构示意图;
图6是本发明提供的移动终端的一实施例的结构示意图;
图7是本发明提供的设备控制方法的一实施例的方法示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明具体实施例及相应的附图对本发明技术方案进行清楚、完整地描述。显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、***、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
图1是本发明提供的设备控制装置的一实施例的结构示意图。本发明一具体实施方式如图1所示,提供了一种设备控制装置11,包括AR眼镜单元111、AR虚拟面板单元112和控制单元113。
AR眼镜单元,用于呈现虚拟场景与现实场景叠加后的合成场景。AR眼镜单元,能够通过全景的方式呈现现实和虚拟叠加的效果。可以是AR眼镜,也可以是移动终端。例如,用户触发移动终端的AR眼镜功能,手机屏幕适配人眼的距离,手机界面会分成左右两块,用于对应显示人的左右眼。
AR虚拟面板单元,用于呈现包括了第一控制命令的虚拟面板,所述第一控制命令用于控制所述设备。所述虚拟场景包括虚拟面板。
AR虚拟面板单元,虚拟面板集成了至少一个第一控制命令。例如,当设备为空调时,第一控制命令可以包括开启空调、制冷模式、制热模式、温度设定等控制命令的至少一个。
控制单元,用于根据用户对虚拟面板单元上的第一控制命令的选择执行相应的控制。
其中,控制单元获取用户对虚拟面板单元上的第一控制命令的选择,例如,用户选择了开启空调。根据选择的第一控制命令执行相应的控制。
图2是本发明提供的设备控制装置的一实施例的结构示意图。本发明一具体实施方式,结合其他实施方式的各个方面。如图2所示,提供了一种设备控制装置21,包括AR眼镜单元211、AR虚拟面板单元212、控制单元213和第一虚拟场景生成单元214。
AR眼镜单元,用于呈现虚拟场景与现实场景叠加后的合成场景。AR眼镜单元,能够通过全景的方式呈现现实和虚拟叠加的效果。可以是AR眼镜,也可以是移动终端。例如,用户触发移动终端的AR眼镜功能,手机屏幕适配人眼的距离,手机界面会分成左右两块,用于对应显示人的左右眼。
AR虚拟面板单元,用于呈现包括了第一控制命令的虚拟面板,所述第一控制命令用于控制所述设备。所述虚拟场景包括虚拟面板。
AR虚拟面板单元,虚拟面板集成了至少一个第一控制命令。例如,当设备为空调时,第一控制命令可以包括开启空调、制冷模式、制热模式、温度设定等控制命令的至少一个。
控制单元,用于根据用户对虚拟面板单元上的第一控制命令的选择执行相应的控制。
其中,控制单元获取用户对虚拟面板单元上的第一控制命令的选择,例如,用户选择了开启空调。根据选择的第一控制命令执行相应的控制。
第一虚拟场景生成单元,用于生成与执行的第一控制命令相对应的虚拟场景。
例如,第一控制命令为开启空调,现实场景中空调挡风板开启,同时第一虚拟场景生成单元可以生成虚拟的空调挡风板开启的场景。又例如,当第一控制命令为制冷模式,第一虚拟场景生成单元可以在导风板的位置生成冷色调(例如蓝色)的“冷气”场景。再例如,当第一控制命令为制热模式,第一虚拟场景生成单元可以在导风板的位置生成暖色调(例如桔色)的“暖气”场景。第一虚拟场景生成单元生成的虚拟场景通过AR眼镜单元与真实场景叠加呈现。
图3是本发明提供的设备控制装置的一实施例的结构示意图。本发明一具体实施方式,结合其他实施方式的各个方面。如图3所示,提供了一种设备控制装置31,包括AR眼镜单元311、AR虚拟面板单元312、控制单元313和AR眼镜定位单元315。
AR眼镜单元,用于呈现虚拟场景与现实场景叠加后的合成场景。AR眼镜单元,能够通过全景的方式呈现现实和虚拟叠加的效果。可以是AR眼镜,也可以是移动终端。例如,用户触发移动终端的AR眼镜功能,手机屏幕适配人眼的距离,手机界面会分成左右两块,用于对应显示人的左右眼。
AR虚拟面板单元,用于呈现包括了第一控制命令的虚拟面板,所述第一控制命令用于控制所述设备。所述虚拟场景包括虚拟面板。
AR虚拟面板单元,虚拟面板集成了至少一个第一控制命令。例如,当设备为空调时,第一控制命令可以包括开启空调、制冷模式、制热模式、温度设定等控制命令的至少一个。
控制单元,用于根据用户对虚拟面板单元上的第一控制命令的选择执行相应的控制。
其中,控制单元获取用户对虚拟面板单元上的第一控制命令的选择,例如,用户选择了开启空调。根据选择的第一控制命令执行相应的控制。
AR眼镜定位单元,用于确定光标移动至的所述合成场景中的位置。在AR眼镜提供的合成场景中包括一光标,根据用户的动作该光标可以在合成场景中移动,以实现与合成场景的互动,例如查看合成场景中的某一部件的情况或者与虚拟面板互动。
可选地,还可以包括检测模块316,用于检测用户头部的转动,所述光标根据用户头部的转动而移动。
图4是本发明提供的设备控制装置的一实施例的结构示意图。本发明一具体实施方式,结合其他实施方式的各个方面。如图4所示,提供了一种设备控制装置41,包括AR眼镜单元411、AR虚拟面板单元412、控制单元413、第二命令识别单元417和第二虚拟场景生成单元418。
AR眼镜单元,用于呈现虚拟场景与现实场景叠加后的合成场景。AR眼镜单元,能够通过全景的方式呈现现实和虚拟叠加的效果。可以是AR眼镜,也可以是移动终端。例如,用户触发移动终端的AR眼镜功能,手机屏幕适配人眼的距离,手机界面会分成左右两块,用于对应显示人的左右眼。
AR虚拟面板单元,用于呈现包括了第一控制命令的虚拟面板,所述第一控制命令用于控制所述设备。所述虚拟场景包括虚拟面板。
AR虚拟面板单元,虚拟面板集成了至少一个第一控制命令。例如,当设备为空调时,第一控制命令可以包括开启空调、制冷模式、制热模式、温度设定等控制命令的至少一个。
控制单元,用于根据用户对虚拟面板单元上的第一控制命令的选择执行相应的控制。
其中,控制单元获取用户对虚拟面板单元上的第一控制命令的选择,例如,用户选择了开启空调。根据选择的第一控制命令执行相应的控制。
第二命令识别单元用于识别用户的第二控制命令,第二虚拟场景生成单元用于根据所述第二控制命令,生成光标所在位置的对应部件的虚拟场景。例如,当合成场景的光标移动到空调“过滤网”上时,根据用户输入的第二命令“查看内部”,则可以生成第二虚拟场景,即空调过滤网的情况,例如过滤网的清洁程度和/或提示用户还有多久需要清洗过滤网。
可选地,本发明实施方式提供的设备控制装置,还包括第一语音单元,用于识别用户语音中的第一控制命令,所述控制单元,还用于根据所述第一语音单元识别的所述第一控制命令的选择执行相应的控制。
可选地,所述第二命令识别单元包括第二语音单元,所述第二语音单元用于识别用户语音中的第二控制命令。
图5是本发明提供的设备控制装置的一实施例的结构示意图。本发明一具体实施方式,结合其他实施方式的各个方面。如图5所示,提供了一种设备控制装置51,包括AR眼镜单元511、AR虚拟面板单元512、控制单元513和步定位与建图单元519。
AR眼镜单元,用于呈现虚拟场景与现实场景叠加后的合成场景。AR眼镜单元,能够通过全景的方式呈现现实和虚拟叠加的效果。可以是AR眼镜,也可以是移动终端。例如,用户触发移动终端的AR眼镜功能,手机屏幕适配人眼的距离,手机界面会分成左右两块,用于对应显示人的左右眼。
AR虚拟面板单元,用于呈现包括了第一控制命令的虚拟面板,所述第一控制命令用于控制所述设备。所述虚拟场景包括虚拟面板。
AR虚拟面板单元,虚拟面板集成了至少一个第一控制命令。例如,当设备为空调时,第一控制命令可以包括开启空调、制冷模式、制热模式、温度设定等控制命令的至少一个。
控制单元,用于根据用户对虚拟面板单元上的第一控制命令的选择执行相应的控制。
其中,控制单元获取用户对虚拟面板单元上的第一控制命令的选择,例如,用户选择了开启空调。根据选择的第一控制命令执行相应的控制。
同步定位与建图(SLAM)单元,用于确定所述设备的空间位置;和/或根据用户拍摄角度和/或光照情况动态更新虚拟设备的状态。通过同步定位与建图(SLAM)单元,用户可以将虚拟场景至于任何虚拟位置中,例如将虚拟面板呈现在设备一侧,或者将虚拟设备至于现实设备旁边进行对比或者与现实设备重合。根据用户拍摄角度和/或光照情况动态更新虚拟设备的状态,使得虚拟设备的呈现更逼真。
图6是本发明提供的移动终端的一实施例的结构示意图。本发明一具体实施方式,结合其他实施方式的各个方面,如图6所示,提供了一移动终端,包括本发明各个实施方式提供的设备控制装置。
可选地,可以通过移动终端的APP,启动设备控制装置的工作。例如,在APP中包括“AR控制”选项,用户选择该选项后,控制界面打开,摄像开启并通知用户进行设备扫描来激活AR功能。
当用户扫描实体家电或家电的照片/图片后,即可实现对相应设备的控制。
图7是本发明提供的设备控制方法的一实施例的方法示意图。本发明一具体实施方式,结合其他实施方式的各个方面,如图7所示,提供了一种设备控制方法,包括步骤S710、S730和S750。
步骤S710,采用AR眼镜或移动终端呈现虚拟场景与现实场景叠加后的合成场景。
采用AR眼镜或移动终端呈现虚拟场景与现实场景叠加后的合成场景。AR眼镜或移动终端能够通过全景的方式呈现现实和虚拟叠加的效果。例如,用户触发移动终端的AR眼镜功能,手机屏幕适配人眼的距离,手机界面会分成左右两块,用于对应显示人的左右眼。
步骤S730,识别用户语音中的第一控制命令和/或用户对虚拟面板单元上的第一控制命令的选择确定第一控制命令,所述第一控制命令用于控制所述设备。
虚拟面板集成了至少一个第一控制命令。例如,当设备为空调时,第一控制命令可以包括开启空调、制冷模式、制热模式、温度设定等控制命令的至少一个。
根据识别的用户语音信息和/或户对虚拟面板单元上的第一控制命令的选择能够确定第一命令。
步骤S750,根据所述确定的第一控制命令执行相应的控制。
其中,控制单元获取用户对虚拟面板单元上的第一控制命令的选择,例如,用户选择了开启空调。根据选择的第一控制命令执行相应的控制。
可选地,还包括第一虚拟场景生成步骤,用于生成与执行的第一控制命令相对应的虚拟场景。
例如,第一控制命令为开启空调,现实场景中空调挡风板开启,同时第一虚拟场景生成单元可以生成虚拟的空调挡风板开启的场景。又例如,当第一控制命令为制冷模式,第一虚拟场景生成单元可以在导风板的位置生成冷色调(例如蓝色)的“冷气”场景。再例如,当第一控制命令为制热模式,第一虚拟场景生成单元可以在导风板的位置生成暖色调(例如桔色)的“暖气”场景。第一虚拟场景生成单元生成的虚拟场景通过AR眼镜单元与真实场景叠加呈现。
可选地,还包括AR眼镜定位步骤,用于确定光标移动至的所述合成场景中的位置。
AR眼镜定位步骤,用于确定光标移动至的所述合成场景中的位置。在AR眼镜提供的合成场景中包括一光标,根据用户的动作该光标可以在合成场景中移动,以实现与合成场景的互动,例如查看合成场景中的某一部件的情况或者与虚拟面板互动。
可选地,还可以包括检测步骤,用于检测用户头部的转动,所述光标根据用户头部的转动而移动。
可选地,还包括第二命令识别步骤和第二虚拟场景生成步骤。第二命令识别步骤用于识别用户的第二控制命令,第二虚拟场景生成步骤用于根据所述第二控制命令,生成光标所在位置的对应部件的虚拟场景。
例如,当合成场景的光标移动到空调“过滤网”上时,根据用户输入的第二命令“查看内部”,则可以生成第二虚拟场景,即空调过滤网的情况,例如过滤网的清洁程度和/或提示用户还有多久需要清洗过滤网。
可选地,第二命令识别步骤包括语音识别。
可选地,设备控制方法还可以包括同步定位与建图(SLAM)步骤,用于确定所述设备的空间位置;和/或根据用户拍摄角度和/或光照情况动态更新虚拟设备的状态。通过同步定位与建图(SLAM)步骤,用户可以将虚拟场景至于任何虚拟位置中,例如将虚拟面板呈现在设备一侧,或者将虚拟设备至于现实设备旁边进行对比或者与现实设备重合。根据用户拍摄角度和/或光照情况动态更新虚拟设备的状态,使得虚拟设备的呈现更逼真。
综上,本发明提供的方案能够使得设备的控制更加便利、直观、生动,能够较大的提升用户的体验。
本文中所描述的功能可在硬件、由处理器执行的软件、固件或其任何组合中实施。如果在由处理器执行的软件中实施,那么可将功能作为一或多个指令或代码存储于计算机可读介质上或经由计算机可读介质予以传输。其它实例及实施方案在本发明及所附权利要求书的范围及精神内。举例来说,归因于软件的性质,上文所描述的功能可使用由处理器、硬件、固件、硬连线或这些中的任何者的组合执行的软件实施。此外,各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个***,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为控制装置的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本发明的实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的权利要求范围之内。

Claims (17)

1.一种设备控制装置,其特征在于,包括AR眼镜单元、AR虚拟面板单元和控制单元;
AR眼镜单元,用于呈现虚拟场景与现实场景叠加后的合成场景;
AR虚拟面板单元,用于呈现包括了第一控制命令的虚拟面板,所述第一控制命令用于控制所述设备;
控制单元,用于根据用户对虚拟面板单元上的第一控制命令的选择执行相应的控制。
2.根据权利要求1所述的装置,其特征在于,还包括第一虚拟场景生成单元,用于生成与执行的第一控制命令相对应的虚拟场景。
3.根据权利要求1或2所述的装置,其特征在于,还包括AR眼镜定位单元,用于确定光标移动至的所述合成场景中的位置。
4.根据权利要求3所述的装置,其特征在于,还包括检测模块,用于检测用户头部的转动,所述光标根据用户头部的转动而移动。
5.根据权利要求3或4所述的装置,其特征在于,还包括第二命令识别单元和第二虚拟场景生成单元,所述第二命令识别单元用于识别用户的第二控制命令,所述第二虚拟场景生成单元用于根据所述第二控制命令,生成光标所在位置的对应部件的虚拟场景。
6.根据权利要求1-5任一所述的装置,其特征在于,还包括第一语音单元,用于识别用户语音中的第一控制命令,所述控制单元,还用于根据所述第一语音单元识别的所述第一控制命令的选择执行相应的控制。
7.根据权利要求5所述的装置,其特征在于,所述第二命令识别单元包括第二语音单元,所述第二语音单元用于识别用户语音中的第二控制命令。
8.根据权利要求1-7任一所述的装置,其特征在于,还包括同步定位与建图单元,用于确定所述设备的空间位置;和/或
根据用户拍摄角度和/或光照情况动态更新虚拟设备的状态。
9.根据权利要求1-8任一所述的装置,其特征在于,所述AR眼镜单元包括移动终端和/或AR眼镜。
10.一种移动终端,其特征在于,包括权利要求1-8任一所述的设备控制装置。
11.一种设备控制方法,其特征在于,包括以下步骤:
采用AR眼镜或移动终端呈现虚拟场景与现实场景叠加后的合成场景;
识别用户语音中的第一控制命令和/或用户对虚拟面板单元上的第一控制命令的选择确定第一控制命令,所述第一控制命令用于控制所述设备;
根据所述确定的第一控制命令执行相应的控制。
12.根据权利要求11所述的方法,其特征在于,还包括第一虚拟场景生成步骤,用于生成与执行的第一控制命令相对应的虚拟场景。
13.根据权利要求11或12所述的方法,其特征在于,还包括AR眼镜定位步骤,用于确定光标移动至的所述合成场景中的位置。
14.根据权利要求13所述的方法,其特征在于,还包括检测步骤,用于检测用户头部的转动,所述光标根据用户头部的转动而移动。
15.根据权利要求13或14所述的方法,其特征在于,还包括第二命令识别步骤和第二虚拟场景生成步骤,所述第二命令识别步骤用于识别用户的第二控制命令,所述第二虚拟场景生成步骤用于根据所述第二控制命令,生成光标所在位置的对应部件的虚拟场景。
16.根据权利要求15所述的方法,其特征在于,所述第二命令识别步骤包括语音识别。
17.根据权利要求11-16任一所述的方法,其特征在于,还包括同步定位与建图步骤,用于确定所述设备的空间位置;和/或
根据用户拍摄角度和/或光照情况动态更新虚拟设备的状态。
CN201710826901.XA 2017-09-14 2017-09-14 一种设备控制装置、方法及移动终端 Pending CN107797661A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710826901.XA CN107797661A (zh) 2017-09-14 2017-09-14 一种设备控制装置、方法及移动终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710826901.XA CN107797661A (zh) 2017-09-14 2017-09-14 一种设备控制装置、方法及移动终端

Publications (1)

Publication Number Publication Date
CN107797661A true CN107797661A (zh) 2018-03-13

Family

ID=61532218

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710826901.XA Pending CN107797661A (zh) 2017-09-14 2017-09-14 一种设备控制装置、方法及移动终端

Country Status (1)

Country Link
CN (1) CN107797661A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109114769A (zh) * 2018-09-12 2019-01-01 珠海格力电器股份有限公司 空调出风模式控制方法、***以及装置
CN109324748A (zh) * 2018-09-05 2019-02-12 联想(北京)有限公司 一种设备控制的方法、电子设备及存储介质
WO2019184359A1 (zh) * 2018-03-29 2019-10-03 京东方科技集团股份有限公司 服务器、增强现实装置、***、共享方法及存储介质
CN111193858A (zh) * 2018-11-14 2020-05-22 深圳晨芯时代科技有限公司 一种增强现实拍摄及显示的方法和***
CN111219855A (zh) * 2020-01-13 2020-06-02 青岛海尔空调器有限总公司 用于空调控制的方法及装置、设备、***

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105393192A (zh) * 2013-06-28 2016-03-09 微软技术许可有限责任公司 用于近眼显示器的网状分层菜单显示配置
CN105760106A (zh) * 2016-03-08 2016-07-13 网易(杭州)网络有限公司 一种智能家居设备交互方法和装置
CN105892651A (zh) * 2016-03-28 2016-08-24 联想(北京)有限公司 一种虚拟对象的显示方法和电子设备
CN106094540A (zh) * 2016-06-14 2016-11-09 珠海格力电器股份有限公司 电器设备控制方法、装置及***
CN106371572A (zh) * 2015-11-30 2017-02-01 北京智谷睿拓技术服务有限公司 信息处理方法、信息处理装置及用户设备
CN106713082A (zh) * 2016-11-16 2017-05-24 惠州Tcl移动通信有限公司 一种用于智能家居管理的虚拟现实方法
CN106896732A (zh) * 2015-12-18 2017-06-27 美的集团股份有限公司 家用电器的展示方法和装置
CN106951153A (zh) * 2017-02-21 2017-07-14 联想(北京)有限公司 一种显示方法及电子设备

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105393192A (zh) * 2013-06-28 2016-03-09 微软技术许可有限责任公司 用于近眼显示器的网状分层菜单显示配置
CN106371572A (zh) * 2015-11-30 2017-02-01 北京智谷睿拓技术服务有限公司 信息处理方法、信息处理装置及用户设备
CN106896732A (zh) * 2015-12-18 2017-06-27 美的集团股份有限公司 家用电器的展示方法和装置
CN105760106A (zh) * 2016-03-08 2016-07-13 网易(杭州)网络有限公司 一种智能家居设备交互方法和装置
CN105892651A (zh) * 2016-03-28 2016-08-24 联想(北京)有限公司 一种虚拟对象的显示方法和电子设备
CN106094540A (zh) * 2016-06-14 2016-11-09 珠海格力电器股份有限公司 电器设备控制方法、装置及***
CN106713082A (zh) * 2016-11-16 2017-05-24 惠州Tcl移动通信有限公司 一种用于智能家居管理的虚拟现实方法
CN106951153A (zh) * 2017-02-21 2017-07-14 联想(北京)有限公司 一种显示方法及电子设备

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019184359A1 (zh) * 2018-03-29 2019-10-03 京东方科技集团股份有限公司 服务器、增强现实装置、***、共享方法及存储介质
US10823959B2 (en) 2018-03-29 2020-11-03 Boe Technology Group Co., Ltd. Method for sharing augmented reality apparatus
CN109324748A (zh) * 2018-09-05 2019-02-12 联想(北京)有限公司 一种设备控制的方法、电子设备及存储介质
CN109324748B (zh) * 2018-09-05 2021-12-24 联想(北京)有限公司 一种设备控制的方法、电子设备及存储介质
CN109114769A (zh) * 2018-09-12 2019-01-01 珠海格力电器股份有限公司 空调出风模式控制方法、***以及装置
WO2020052166A1 (zh) * 2018-09-12 2020-03-19 珠海格力电器股份有限公司 空调出风模式控制方法、***以及装置
EP3779303A4 (en) * 2018-09-12 2021-06-30 Gree Electric Appliances, Inc. of Zhuhai METHOD, SYSTEM AND DEVICE FOR CONTROLLING THE AIR OUTLET MODE OF AN AIR CONDITIONING SYSTEM
CN111193858A (zh) * 2018-11-14 2020-05-22 深圳晨芯时代科技有限公司 一种增强现实拍摄及显示的方法和***
CN111219855A (zh) * 2020-01-13 2020-06-02 青岛海尔空调器有限总公司 用于空调控制的方法及装置、设备、***

Similar Documents

Publication Publication Date Title
CN107797661A (zh) 一种设备控制装置、方法及移动终端
CN108305325A (zh) 虚拟对象的显示方法及装置
JP5575645B2 (ja) 高度なカメラをベースとした入力
US20180173404A1 (en) Providing a user experience with virtual reality content and user-selected, real world objects
CN106570822A (zh) 一种人脸贴图方法及装置
US20220044490A1 (en) Virtual reality presentation of layers of clothing on avatars
CN107728482A (zh) 控制***、控制处理方法及装置
CN107818490A (zh) 设备选用指导方法、装置、计算机可读存储介质及终端
EP3779647A1 (en) Display method and virtual reality device
CN108563327B (zh) 增强现实方法、装置、存储介质及电子设备
CN108090968B (zh) 增强现实ar的实现方法、装置和计算机可读存储介质
US20220261088A1 (en) Artificial reality platforms and controls
US11978145B2 (en) Expression generation for animation object
CN107817701A (zh) 设备控制方法、装置、计算机可读存储介质及终端
CN106569671A (zh) 基于ar技术的消费品使用说明信息显示方法及装置
US20210150774A1 (en) Method, device, and system for delivering recommendations
CN106527711A (zh) 一种虚拟现实设备的控制方法及虚拟现实设备
US20210375067A1 (en) Virtual reality presentation of clothing fitted on avatars
WO2021065928A1 (ja) コンテンツ配信システム、コンテンツ配信方法、及びコンテンツ配信プログラム
CN117918025A (zh) 虚拟或增强现实场景中的动态通知呈现
CN106502401A (zh) 一种图像控制方法及装置
CN106485609A (zh) 基于增强现实技术的点单方法、***及设备
CN112152894B (zh) 基于虚拟现实的家电控制方法及虚拟现实***
EP3625673A1 (en) Methods and systems for viewing and editing ar/vr computer-based designs allowing impaired vision simulation
CN112364478A (zh) 基于虚拟现实的测试方法及相关装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180313