CN110096154A - 用于处理信息的方法及装置 - Google Patents
用于处理信息的方法及装置 Download PDFInfo
- Publication number
- CN110096154A CN110096154A CN201910378951.5A CN201910378951A CN110096154A CN 110096154 A CN110096154 A CN 110096154A CN 201910378951 A CN201910378951 A CN 201910378951A CN 110096154 A CN110096154 A CN 110096154A
- Authority
- CN
- China
- Prior art keywords
- gesture operation
- information
- image
- operation image
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01H—MEASUREMENT OF MECHANICAL VIBRATIONS OR ULTRASONIC, SONIC OR INFRASONIC WAVES
- G01H17/00—Measuring mechanical vibrations or ultrasonic, sonic or infrasonic waves, not provided for in the preceding groups
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本公开的实施例公开了用于处理信息的方法及装置。该方法的一具体实施方式包括:响应于检测到待处理音频信息中环境噪音大于设定噪音阈值,展示用于指示使用手势操作的第一提示信息;获取对应上述第一提示信息的图像,并从上述图像中获取用于指示对应操作指令的目标手势操作图像;确定上述目标手势操作图像对应的操作指令,并根据上述操作指令进行信息处理。该实施方式提高了信息交互的准确性和有效性。
Description
技术领域
本公开的实施例涉及数据处理技术领域,具体涉及用于处理信息的方法及装置。
背景技术
随着科技的发展,智能机器人可以通过语音信号与用户进行信息交互。智能机器人可以从获取到与语音信号对应的操作指令,并执行操作指令,以完成对应语音信息的数据处理,提高了用户进行数据处理的便捷性。
发明内容
本公开的实施例提出了用于处理信息的方法及装置。
第一方面,本公开的实施例提供了一种用于处理信息的方法,该方法包括:响应于检测到待处理音频信息中环境噪音大于设定噪音阈值,展示用于指示使用手势操作的第一提示信息;获取对应上述第一提示信息的图像,并从上述图像中获取用于指示对应操作指令的目标手势操作图像;确定上述目标手势操作图像对应的操作指令,并根据上述操作指令进行信息处理。
在一些实施例中,上述方法还包括:响应于接收到待处理音频信息,获取对应上述待处理音频信息的方向信息,上述方向信息用于表征上述待处理音频信息的声源所在的方向。
在一些实施例中,上述获取对应上述第一提示信息的图像,并从上述图像中获取用于指示对应操作指令的目标手势操作图像,包括:获取对应上述第一提示信息的视频;通过手势操作图像集合从上述视频中获取目标手势操作图像,其中,上述手势操作图像集合包含的手势操作图像与操作指令对应。
在一些实施例中,上述通过手势操作图像集合从上述视频中获取目标手势操作图像,包括:将上述手势操作图像集合中的手势操作图像与视频包含的图像帧进行对比,从上述视频中获取包含的目标图像帧;从上述手势操作图像集合中匹配出对应上述目标图像帧的目标手势操作图像。
在一些实施例中,上述方法还包括:响应于检测到待处理音频信息中环境噪音不大于上述设定噪音阈值,展示用于指示使用语音操作的第二提示信息。
第二方面,本公开的实施例提供了一种用于处理信息的装置,该装置包括:第一提示信息展示单元,响应于检测到待处理音频信息中环境噪音大于设定噪音阈值,被配置成展示用于指示使用手势操作的第一提示信息;图像获取单元,被配置成获取对应上述第一提示信息的图像,并从上述图像中获取用于指示对应操作指令的目标手势操作图像;信息处理单元,被配置成确定上述目标手势操作图像对应的操作指令,并根据上述操作指令进行信息处理。
在一些实施例中,上述装置还包括:方向信息获取单元,响应于接收到待处理音频信息,被配置成获取对应上述待处理音频信息的方向信息,上述方向信息用于表征上述待处理音频信息的声源所在的方向。
在一些实施例中,上述图像获取单元包括:视频获取子单元,被配置成获取对应上述第一提示信息的视频;目标手势操作图像获取子单元,被配置成通过手势操作图像集合从上述视频中获取目标手势操作图像,其中,上述手势操作图像集合包含的手势操作图像与操作指令对应。
在一些实施例中,上述目标手势操作图像获取子单元包括:目标图像帧获取模块,被配置成将上述手势操作图像集合中的手势操作图像与视频包含的图像帧进行对比,从上述视频中获取包含的目标图像帧;目标手势操作图像获取模块,被配置成从上述手势操作图像集合中匹配出对应上述目标图像帧的目标手势操作图像。
在一些实施例中,上述装置还包括:第二提示信息展示单元,响应于检测到待处理音频信息中环境噪音不大于上述设定噪音阈值,被配置成展示用于指示使用语音操作的第二提示信息。
第三方面,本公开的实施例提供了一种电子设备,包括:一个或多个处理器;存储器,其上存储有一个或多个程序,当上述一个或多个程序被上述一个或多个处理器执行时,使得上述一个或多个处理器执行上述第一方面的用于处理信息的方法。
第四方面,本公开的实施例提供了一种计算机可读介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现上述第一方面的用于处理信息的方法。
本公开的实施例提供的用于处理信息的方法及装置,首先在接收到的待处理音频信息中环境噪音大于设定噪音阈值时,展示用于指示使用手势操作的第一提示信息;然后,获取对应上述第一提示信息的图像,并从上述图像中获取用于指示对应操作指令的目标手势操作图像;最后,确定上述目标手势操作图像对应的操作指令,并根据上述操作指令进行信息处理。本申请技术方案能够在环境噪音大于设定噪音阈值时,通过手势操作图像获取对应的操作指令,提高了信息交互的准确性和有效性。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本公开的其它特征、目的和优点将会变得更明显:
图1是本公开的一个实施例可以应用于其中的示例性***架构图;
图2是根据本公开的用于处理信息的方法的一个实施例的流程图;
图3是根据本公开的用于处理信息的方法的一个应用场景的示意图;
图4是根据本公开的用于处理信息的方法的又一个实施例的流程图;
图5是根据本公开的用于处理信息的装置的一个实施例的结构示意图;
图6是适于用来实现本公开的实施例的电子设备结构示意图。
具体实施方式
下面结合附图和实施例对本公开作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关发明,而非对该发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与有关发明相关的部分。
需要说明的是,在不冲突的情况下,本公开中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本公开。
图1示出了可以应用本公开的实施例的用于处理信息的方法或用于处理信息的装置的示例性***架构100。
如图1所示,***架构100可以包括终端设备101、网络102和服务器103。网络102用以在终端设备101和服务器103之间提供通信链路的介质。网络102可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
终端设备101上可以安装有麦克风、摄像头、信息显示装置、扬声器、触控显示屏、语音识别应用、手势识别应用、信息查询应用等。
终端设备101可以是硬件,也可以是软件。当终端设备101为硬件时,可以是具有显示屏并且支持处理信息的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机、台式计算机、机器人等等。当终端设备101为软件时,可以安装在上述所列举的电子设备中。其可以实现成多个软件或软件模块(例如用来提供分布式服务),也可以实现成单个软件或软件模块,在此不做具体限定。
服务器103可以是提供各种服务的服务器,例如对终端设备101发来的音频信号或手势信号提供支持的服务器。服务器可以对接收到的待处理音频信息等数据进行分析等处理,并将处理结果反馈给终端设备。
需要说明的是,本公开的实施例所提供的用于处理信息的方法一般由终端设备101执行,相应地,用于处理信息的装置一般设置于终端设备101中。
需要说明的是,服务器可以是硬件,也可以是软件。当服务器为硬件时,可以实现成多个服务器组成的分布式服务器集群,也可以实现成单个服务器。当服务器为软件时,可以实现成多个软件或软件模块(例如用来提供分布式服务),也可以实现成单个软件或软件模块,在此不做具体限定。
应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
继续参考图2,示出了根据本公开的用于处理信息的方法的一个实施例的流程200。该用于处理信息的方法包括以下步骤:
步骤201,响应于检测到待处理音频信息中环境噪音大于设定噪音阈值,展示用于指示使用手势操作的第一提示信息。
在本实施例中,用于处理信息的方法的执行主体(例如图1所示的终端设备101和/或服务器103)可以通过有线连接方式或者无线连接方式获取待处理音频信息。其中,待处理音频信息可以是用户通过语音的方式向执行主体发送的语音信息,还可以是从其他装置(例如可以是电视机、广播、存储器等)获取到的音频信息。需要指出的是,上述无线连接方式可以包括但不限于3G/4G连接、WiFi连接、蓝牙连接、WiMAX连接、Zigbee连接、UWB(ultrawideband)连接、以及其他现在已知或将来开发的无线连接方式。
现有技术中,智能机器人在与用户的信息交互过程中,容易受到各种干扰。智能机器人获取的音频信息通常包含有各种环境噪音,导致智能机器人无法准确获取到有效的语音信息,进而无法执行进行相应的操作,降低了与用户的信息交互效率。
本申请的执行主体在接收到待处理音频信息后,可以首先检测待处理音频信息中的环境噪音。当检测到环境噪音大于设定的噪音阈值时,可以认为此时的待处理音频信息含有过量的环境噪音,无法获得准确有效的音频信息。例如,当获取到待处理音频信息,执行主体可以通过多种方式从待处理音频信息中检测出语音信号,并将待处理音频信息中的非语音信号作为环境噪音。之后,执行主体可以对环境噪音进行检测,当环境噪音大于设定噪音阈值(例如可以是50分贝)时,说明无法获取准确的语音信息。此时,执行主体可以展示第一提示信息。其中,第一提示信息可以用于指示使用手势操作的。第一提示信息可以通过音频的方式播放给用户,也可以通过文字、图像等方式显示给用户,具体视实际需要而定。
在本实施例的一些可选的实现方式中,上述方法还可以包括:响应于接收到的待处理音频信息,获取对应上述待处理音频信息的方向信息。
实际中,用户可以同多个方向向执行主体发送待处理音频信息,只要执行主体能够接收到待处理音频信息,就可以执行对应的数据处理。但是,如果待处理音频信息中环境噪音大于设定噪音阈值,则需要获取手势操作图像来进行数据处理。此时,执行主体需要获取待处理音频信息的方向信息,以确定用户(或发出待处理音频信息的主体)所在的方向。之后,执行主体可以获取到该方向的图像。其中,上述方向信息可以用于表征上述待处理音频信息的声源所在的方向。
步骤202,获取对应上述第一提示信息的图像,并从上述图像中获取用于指示对应操作指令的手势操作图像。
显示第一提示信息之后,执行主体可以通过摄像头等方式获取图像。由于第一提示信息指示用户使用手势操作,因此,执行主体此时获取到的图像可以包括用于指示对应操作指令的目标手势操作图像。之后,执行主体可以通过多种方式从图像中获取出目标手势操作图像。
在本实施例的一些可选的实现方式中,上述获取对应上述第一提示信息的图像,并从上述图像中获取用于指示对应操作指令的目标手势操作图像,可以包括以下步骤:
第一步,获取对应上述第一提示信息的视频。
为了保证获取足够全面的信息,执行主体可以根据上述方向信息来控制摄像头等装置进行视频采集,以获取对应第一提示信息的视频。此时,视频中包含了手势操作图像在内的、用户的全部动作信息。
第二步,通过手势操作图像集合从上述视频中获取目标手势操作图像。
执行主体可以预先获取到手势操作图像集合。手势操作图像可以是预先设置好的手势动作图像。当执行主体通过手势操作图像集合对视频中的图像进行识别时,可以从视频中获取对应的目标手势操作图像。其中,上述手势操作图像集合包含的手势操作图像可以与操作指令对应。
在本实施例的一些可选的实现方式中,上述通过手势操作图像集合从上述视频中获取目标手势操作图像,可以包括以下步骤:
第一步,将上述手势操作图像集合中的手势操作图像与视频包含的图像帧进行对比,从上述视频中获取包含的目标图像帧。
执行主体可以通过手势操作图像集合中的手势操作图像,对视频包含的每一帧图像进行对比,进而可以获取到视频中包含手势操作的目标图像帧。
第二步,从上述手势操作图像集合中匹配出对应上述目标图像帧的目标手势操作图像。
实际中,用户做出的手势通常与标准的手势存在区别。为此,在得到目标图像帧后,执行主体还需要将目标图像帧和手势操作图像集合中的手势操作图像进行匹配,匹配出对应目标图像帧的目标手势操作图像。
步骤203,确定上述目标手势操作图像对应的操作指令,并根据上述操作指令进行信息处理。
由上述描述可知,手势操作图像集合包含的手势操作图像可以与操作指令对应。找到目标手势操作图像后,执行主体可以查找到对应目标手势操作图像的操作指令,并根据该操作指令进行相应的信息处理。
继续参见图3,图3是根据本实施例的用于处理信息的方法的应用场景的一个示意图。在图3的应用场景中,用户可以向执行主体(例如可以是终端设备101)发出语音信息:“查询今天去XX最晚的航班”。执行主体获取到待处理音频信息(包含上述语音信息及环境噪音)后,检测到环境噪音大于设定噪音阈值;然后,执行主体可以向用户发出(例如可以是通过语音、屏幕显示等方式)第一提示信息,告知用户使用手势操作;之后,执行主体从用户发出的手势图像中获取到目标手势操作图像;最后,执行主体查询对应目标手势操作图像的操作指令:“航班查询:【时间=今天;出发地:本地;目的地:XX;班次:最后一班】”,并执行该操作指令,以进行信息处理,得到结果信息可以是:“今天飞往XX的最后航班时间为22:30”,并展示结果信息。
本公开的上述实施例提供的方法首先在接收到的待处理音频信息中环境噪音大于设定噪音阈值时,展示用于指示使用手势操作的第一提示信息;然后,获取对应上述第一提示信息的图像,并从上述图像中获取用于指示对应操作指令的目标手势操作图像;最后,确定上述目标手势操作图像对应的操作指令,并根据上述操作指令进行信息处理。本申请技术方案能够在环境噪音大于设定噪音阈值时,通过手势操作图像获取对应的操作指令,提高了处理信息的准确性和有效性。
进一步参考图4,其示出了用于处理信息的方法的又一个实施例的流程400。该用于处理信息的方法的流程400,包括以下步骤:
步骤401,响应于检测到待处理音频信息中环境噪音大于设定噪音阈值,展示用于指示使用手势操作的第一提示信息。
在本实施例中,用于处理信息的方法的执行主体(例如图1所示的终端设备101和/或服务器103)可以通过有线连接方式或者无线连接方式获取待处理音频信息。步骤401的内容与步骤201的内容相同,此处不再一一赘述。
步骤402,获取对应上述第一提示信息的图像,并从上述图像中获取用于指示对应操作指令的手势操作图像。
步骤402的内容与步骤202的内容相同,此处不再一一赘述。
步骤403,确定上述目标手势操作图像对应的操作指令,并根据上述操作指令进行信息处理。
步骤403的内容与步骤203的内容相同,此处不再一一赘述。
步骤404,响应于检测到待处理音频信息中环境噪音不大于上述设定噪音阈值,展示用于指示使用语音操作的第二提示信息。
通常,对用户来说,语音操作具有比手势操作更好的便捷性。当执行主体检测到待处理音频信息中环境噪音不大于上述设定噪音阈值时,说明执行主体可以从接收到的待处理音频信息中获取准确有效的信息。此时,执行主体可以展示第二提示信息,以告知用户进行语音操作。其中,第二提示信息用于指示使用语音操作。
进一步参考图5,作为对上述各图所示方法的实现,本公开提供了一种用于处理信息的装置的一个实施例,该装置实施例与图2所示的方法实施例相对应,该装置具体可以应用于各种电子设备中。
如图5所示,本实施例的用于处理信息的装置500可以包括:第一提示信息展示单元501、图像获取单元502和信息处理单元503。其中,第一提示信息展示单元501,响应于检测到待处理音频信息中环境噪音大于设定噪音阈值,被配置成展示用于指示使用手势操作的第一提示信息;图像获取单元502被配置成获取对应上述第一提示信息的图像,并从上述图像中获取用于指示对应操作指令的目标手势操作图像;信息处理单元503被配置成确定上述目标手势操作图像对应的操作指令,并根据上述操作指令进行信息处理。
在本实施例的一些可选的实现方式中,上述用于处理信息的装置500还可以包括:方向信息获取单元(图中未示出),响应于接收到待处理音频信息,被配置成获取对应上述待处理音频信息的方向信息,上述方向信息用于表征上述待处理音频信息的声源所在的方向。
在本实施例的一些可选的实现方式中,上述图像获取单元502可以包括:视频获取子单元(图中未示出)和目标手势操作图像获取子单元(图中未示出)。其中,视频获取子单元被配置成获取对应上述第一提示信息的视频;目标手势操作图像获取子单元被配置成通过手势操作图像集合从上述视频中获取目标手势操作图像,其中,上述手势操作图像集合包含的手势操作图像与操作指令对应。
在本实施例的一些可选的实现方式中,上述目标手势操作图像获取子单元包括:目标图像帧获取模块(图中未示出)和目标手势操作图像获取模块(图中未示出)。其中,目标图像帧获取模块被配置成将上述手势操作图像集合中的手势操作图像与视频包含的图像帧进行对比,从上述视频中获取包含的目标图像帧;目标手势操作图像获取模块被配置成从上述手势操作图像集合中匹配出对应上述目标图像帧的目标手势操作图像。
在本实施例的一些可选的实现方式中,上述用于处理信息的装置500还可以包括:第二提示信息展示单元(图中未示出),响应于检测到待处理音频信息中环境噪音不大于上述设定噪音阈值,被配置成展示用于指示使用语音操作的第二提示信息。
本实施例还提供了一种电子设备,包括:一个或多个处理器;存储器,其上存储有一个或多个程序,当上述一个或多个程序被上述一个或多个处理器执行时,使得上述一个或多个处理器执行上述的用于处理信息的方法。
本实施例还提供了一种计算机可读介质,其上存储有计算机程序,该程序被处理器执行时实现上述的用于处理信息的方法。
下面参考图6,其示出了适于用来实现本公开的实施例的电子设备(例如,图1中的服务器103)的计算机***600的结构示意图。图6示出的电子设备仅仅是一个示例,不应对本公开的实施例的功能和使用范围带来任何限制。
如图6所示,电子设备600可以包括处理装置(例如中央处理器、图形处理器等)601,其可以根据存储在只读存储器(ROM)602中的程序或者从存储装置608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中,还存储有电子设备600操作所需的各种程序和数据。处理装置601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
通常,以下装置可以连接至I/O接口605:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置606;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置607;包括例如磁带、硬盘等的存储装置608;以及通信装置609。通信装置609可以允许电子设备600与其他设备进行无线或有线通信以交换数据。虽然图6示出了具有各种装置的电子设备600,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。图6中示出的每个方框可以代表一个装置,也可以根据需要代表多个装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置609从网络上被下载和安装,或者从存储装置608被安装,或者从ROM 602被安装。在该计算机程序被处理装置601执行时,执行本公开的实施例的方法中限定的上述功能。
需要说明的是,本公开的实施例上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的***、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开的实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行***、装置或者器件使用或者与其结合使用。而在本公开的实施例中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:响应于检测到待处理音频信息中环境噪音大于设定噪音阈值,展示用于指示使用手势操作的第一提示信息;获取对应上述第一提示信息的图像,并从上述图像中获取用于指示对应操作指令的目标手势操作图像;确定上述目标手势操作图像对应的操作指令,并根据上述操作指令进行信息处理。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的实施例的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开的各种实施例的***、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的***来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开的实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中,例如,可以描述为:一种处理器包括第一提示信息展示单元、图像获取单元和信息处理单元。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定,例如,信息处理单元还可以被描述为“通过手势操作图像进行信息处理的单元”。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
Claims (12)
1.一种用于处理信息的方法,包括:
响应于检测到待处理音频信息中环境噪音大于设定噪音阈值,展示用于指示使用手势操作的第一提示信息;
获取对应所述第一提示信息的图像,并从所述图像中获取用于指示对应操作指令的目标手势操作图像;
确定所述目标手势操作图像对应的操作指令,并根据所述操作指令进行信息处理。
2.根据权利要求1所述的方法,其中,所述方法还包括:
响应于接收到待处理音频信息,获取对应所述待处理音频信息的方向信息,所述方向信息用于表征所述待处理音频信息的声源所在的方向。
3.根据权利要求1所述的方法,其中,所述获取对应所述第一提示信息的图像,并从所述图像中获取用于指示对应操作指令的目标手势操作图像,包括:
获取对应所述第一提示信息的视频;
通过手势操作图像集合从所述视频中获取目标手势操作图像,其中,所述手势操作图像集合包含的手势操作图像与操作指令对应。
4.根据权利要求3所述的方法,其中,所述通过手势操作图像集合从所述视频中获取目标手势操作图像,包括:
将所述手势操作图像集合中的手势操作图像与视频包含的图像帧进行对比,从所述视频中获取包含的目标图像帧;
从所述手势操作图像集合中匹配出对应所述目标图像帧的目标手势操作图像。
5.根据权利要求1至4任意一项所述的方法,其中,所述方法还包括:
响应于检测到待处理音频信息中环境噪音不大于所述设定噪音阈值,展示用于指示使用语音操作的第二提示信息。
6.一种用于处理信息的装置,包括:
第一提示信息展示单元,响应于检测到待处理音频信息中环境噪音大于设定噪音阈值,被配置成展示用于指示使用手势操作的第一提示信息;
图像获取单元,被配置成获取对应所述第一提示信息的图像,并从所述图像中获取用于指示对应操作指令的目标手势操作图像;
信息处理单元,被配置成确定所述目标手势操作图像对应的操作指令,并根据所述操作指令进行信息处理。
7.根据权利要求6所述的装置,其中,所述装置还包括:
方向信息获取单元,响应于接收到待处理音频信息,被配置成获取对应所述待处理音频信息的方向信息,所述方向信息用于表征所述待处理音频信息的声源所在的方向。
8.根据权利要求6所述的装置,其中,所述图像获取单元包括:
视频获取子单元,被配置成获取对应所述第一提示信息的视频;
目标手势操作图像获取子单元,被配置成通过手势操作图像集合从所述视频中获取目标手势操作图像,其中,所述手势操作图像集合包含的手势操作图像与操作指令对应。
9.根据权利要求8所述的装置,其中,所述目标手势操作图像获取子单元包括:
目标图像帧获取模块,被配置成将所述手势操作图像集合中的手势操作图像与视频包含的图像帧进行对比,从所述视频中获取包含的目标图像帧;
目标手势操作图像获取模块,被配置成从所述手势操作图像集合中匹配出对应所述目标图像帧的目标手势操作图像。
10.根据权利要求6至9任意一项所述的装置,其中,所述装置还包括:
第二提示信息展示单元,响应于检测到待处理音频信息中环境噪音不大于所述设定噪音阈值,被配置成展示用于指示使用语音操作的第二提示信息。
11.一种电子设备,包括:
一个或多个处理器;
存储器,其上存储有一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器执行权利要求1至5中任一所述的方法。
12.一种计算机可读介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1至5中任一所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910378951.5A CN110096154A (zh) | 2019-05-08 | 2019-05-08 | 用于处理信息的方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910378951.5A CN110096154A (zh) | 2019-05-08 | 2019-05-08 | 用于处理信息的方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110096154A true CN110096154A (zh) | 2019-08-06 |
Family
ID=67447351
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910378951.5A Pending CN110096154A (zh) | 2019-05-08 | 2019-05-08 | 用于处理信息的方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110096154A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113671846A (zh) * | 2021-08-06 | 2021-11-19 | 深圳市欧瑞博科技股份有限公司 | 智能设备控制方法、装置、可穿戴设备及存储介质 |
CN114578955A (zh) * | 2020-11-30 | 2022-06-03 | 阿里巴巴(中国)有限公司 | 手势控制方法、装置、电子设备及计算机存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150331490A1 (en) * | 2013-02-13 | 2015-11-19 | Sony Corporation | Voice recognition device, voice recognition method, and program |
CN105468145A (zh) * | 2015-11-18 | 2016-04-06 | 北京航空航天大学 | 一种基于手势和语音识别的机器人人机交互方法和装置 |
CN206179323U (zh) * | 2016-09-30 | 2017-05-17 | 广州音书科技有限公司 | 用于语音识别和手语识别的智能眼镜 |
TW201804459A (zh) * | 2016-07-29 | 2018-02-01 | 富邦綜合證券股份有限公司 | 切換輸入模式的方法、行動通訊裝置及電腦可讀取媒體 |
CN107799125A (zh) * | 2017-11-09 | 2018-03-13 | 维沃移动通信有限公司 | 一种语音识别方法、移动终端及计算机可读存储介质 |
-
2019
- 2019-05-08 CN CN201910378951.5A patent/CN110096154A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150331490A1 (en) * | 2013-02-13 | 2015-11-19 | Sony Corporation | Voice recognition device, voice recognition method, and program |
CN105468145A (zh) * | 2015-11-18 | 2016-04-06 | 北京航空航天大学 | 一种基于手势和语音识别的机器人人机交互方法和装置 |
TW201804459A (zh) * | 2016-07-29 | 2018-02-01 | 富邦綜合證券股份有限公司 | 切換輸入模式的方法、行動通訊裝置及電腦可讀取媒體 |
CN206179323U (zh) * | 2016-09-30 | 2017-05-17 | 广州音书科技有限公司 | 用于语音识别和手语识别的智能眼镜 |
CN107799125A (zh) * | 2017-11-09 | 2018-03-13 | 维沃移动通信有限公司 | 一种语音识别方法、移动终端及计算机可读存储介质 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114578955A (zh) * | 2020-11-30 | 2022-06-03 | 阿里巴巴(中国)有限公司 | 手势控制方法、装置、电子设备及计算机存储介质 |
CN113671846A (zh) * | 2021-08-06 | 2021-11-19 | 深圳市欧瑞博科技股份有限公司 | 智能设备控制方法、装置、可穿戴设备及存储介质 |
CN113671846B (zh) * | 2021-08-06 | 2024-03-12 | 深圳市欧瑞博科技股份有限公司 | 智能设备控制方法、装置、可穿戴设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109599113A (zh) | 用于处理信息的方法和装置 | |
CN109993150B (zh) | 用于识别年龄的方法和装置 | |
CN110162670A (zh) | 用于生成表情包的方法和装置 | |
KR20180096183A (ko) | 다국어 처리를 수행하는 인공 지능 시스템의 제어 방법 | |
CN107005739A (zh) | 用于基于语音的设备的外部视觉交互 | |
CN108322855A (zh) | 用于获取音频信息的方法及装置 | |
CN104049745A (zh) | 输入控制方法和支持该输入控制方法的电子装置 | |
EP4117313A1 (en) | Audio processing method and apparatus, readable medium, and electronic device | |
CN108536509B (zh) | 一种应用分身方法及移动终端 | |
CN110059623B (zh) | 用于生成信息的方法和装置 | |
CN108364648A (zh) | 用于获取音频信息的方法及装置 | |
EP2945156A1 (en) | Audio signal recognition method and electronic device supporting the same | |
CN109918530A (zh) | 用于推送图像的方法和装置 | |
CN110110666A (zh) | 目标检测方法和装置 | |
CN110111241A (zh) | 用于生成动态图像的方法和装置 | |
CN109241721A (zh) | 用于推送信息的方法和装置 | |
CN110096154A (zh) | 用于处理信息的方法及装置 | |
US9429447B2 (en) | Method of utilizing image based on location information of the image in electronic device and the electronic device thereof | |
CN109669710B (zh) | 便签处理方法及终端 | |
CN109949793A (zh) | 用于输出信息的方法和装置 | |
CN110160548A (zh) | 用于生成行驶路线的方法、***和装置 | |
CN109829431A (zh) | 用于生成信息的方法和装置 | |
CN112309387A (zh) | 用于处理信息的方法和装置 | |
CN111400552A (zh) | 便签创建方法及电子设备 | |
CN109995543A (zh) | 用于添加群成员的方法和设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |