具体实施方式
下面结合附图对本发明作进一步地详细描述。
本发明实施例为在移动通信终端上增加视觉捕捉技术,通过捕捉使用者眼睛的焦点获取视觉焦点的焦点消息,然后移动通信终端根据所述焦点信息来执行使用者的目标控制。
图1是本发明实施例一的移动通信终端的交互方法的示意流程图。该流程图包括以下步骤:
步骤11、获取视觉焦点的焦点信息;
步骤12、根据所述焦点信息执行目标动作。
本发明实施例中,所述焦点信息中包括使用者视觉注视的接收界面中目标的位置,也就是使用者的视觉焦点关注的目标的位置。例如,使用者希望使用移动通信终端中的短消息功能,这时,使用者的视觉焦点关注在接收界面上的短消息功能项。根据步骤11获取到的视觉焦点的焦点信息为包括短消息功能项的位置的信息。然后,根据步骤12,根据上述焦点信息执行进入到短消息功能中。
图2是本发明实施例二的移动通信终端的交互方法的示意流程图。如图2所示,包括以下:
步骤S201、获取视觉焦点的焦点信息。
此处,使用者的眼睛注视接收界面中的可操控的内容。
步骤S202、根据所述焦点信息判断所述视觉焦点是否位于可控区域,如果判断的结果为没有位于可控区域,则转入到步骤S204;如果判断的结果为位于可控区域,则执行步骤S203。可控区域是指移动通信终端中预先设置的可以接收视觉控制的区域。例如,在待机情况下,界面中某项具体功能区域可以是可控区域,但是电量显示信息就设置为不可控区域。
步骤S204、重新捕捉视觉焦点,直到获取到视觉焦点在可控区域的焦点信息。
步骤S203、判断所述焦点信息是否满足预设置的处理条件。如果所述焦点信息不满足预先设置的处理条件,则执行步骤S205、对所述焦点信息不处理;如果满足,则执行步骤S206。所述焦点信息中还会包含用户视觉注视接收界面的目标的时间长度值,所述处理条件包括,所述焦点信息中的时间长度值是否是在预先设置的该时间长度值的范围内等。此处,所述处理条件可以根据需要来进行相应的预设置。
步骤S206、对所述焦点信息按照正常交互模式进行处理,生成控制消息。在本发明实施例中,所述正常交互模式(又称为手动交互模式)指现有技术中使用者对移动通信终端键盘/触摸屏的手动操作,正常交互模式处理为现有技术中移动通信终端对手动操作产生的信息的处理。
步骤207、根据所述控制信息执行目标动作。
在本发明实施例中,对于移动通信终端,用手机来进行示例。根据上述移动通信终端的交互方法,对于手机中的不同类型业务输入,使用者用眼睛进行操控执行目标动作举例如下:
一、人眼控制实现手机的功能与内容的选择/取消。
在开机状态下,使用者注视手机接收界面上的相关功能或者内容选择项达到一定时间,获取到视觉焦点的焦点信息,手机对该焦点信息进行处理后转化为控制信息,该控制信息使得手机按照使用者的要求执行转入某一具体功能或者内容的动作;功能或者内容的取消同样是使用者注视手机显示界面上的取消功能达到一定时间。
二、人眼控制实现信息的输入。
使用者控制手机进入输入功能状态,在输入功能状态下手机接收界面上可以有键盘类的虚拟输入界面,使用者采用注视选取来完成输入。使用者完成一次输入的过程包括如下:使用者注视接收界面中的虚拟输入界面中需要输入的字符;捕捉使用者视觉焦点的焦点信息;将所述焦点信息送去处理,根据所述焦点信息执行输入。除了上述的这种类似于功能选取方式的视觉选取虚拟键盘输入外,还可以应用专门针对视觉捕捉的视觉输入法。
这种使用视觉捕捉技术实现使用者与手机的交互的方法,可以使得用户非近距离控制手机,减少对人脑的辐射;同时增加了用户操控的方便性;也可以方便残疾人对手机的功能与输入进行操控。
在本发明实施例中,利用视觉捕捉技术获取视觉焦点的焦点信息,根据所述焦点信息执行目标动作从而实现手机交互的这种模式被称为视觉捕捉交互模式。本发明实施例除了支持视觉捕捉交互模式外,还可以支持其他手机交互模式,并且支持在不同交互模式下的切换功能。这种可相互切换交互模式的功能可以增加用户操作的灵活性,增添用户的乐趣感。本发明实施例交互模式切换的方式可以有以下两种:
一、动态选取功能菜单中的具体交互模式
例如,手机默认一种交互模式,并且支持专门的功能菜单中包含不同的交互模式以供选取。从视觉捕捉交互模式切换到其他交互模式的过程如下:使用者注视接收界面中交互模式切换功能项,这时接收界面中出现多个交互模式以供选择,使用者注视其中的一个交互模式;使用视觉捕捉技术捕获该视觉焦点的焦点信息;对所述焦点信息进行处理,生成控制信息,所述控制信息为交互模式切换信息;根据所述交互模式切换信息控制手机执行从当前交互模式切换进入使用者视觉注视选取的具体交互模式。
这种模式切换可以是从视觉捕捉交互模式切换到其他交互模式,也可以是从其他交互模式切换到视觉捕捉交互模式。从当前为其他的交互模式切换到视觉捕捉交互模式与上述过程类似。
二、预先组合设置各个具体功能项的交互模式
手机可以在任意一种交互模式下自行组合设置具体功能项使用的交互模式使用,其过程如下:使用者注视着接收界面中的具体功能项,捕获该视觉焦点的焦点信息,对所述焦点信息进行处理,其处理过程中根据所述焦点信息查询预先所设置的所述具体功能项使用的交互模式,生成控制信息;根据所述控制信息执行转入具体功能,并执行从当前交互模式切换到预先设置的所述具体功能项使用的交互模式。
例如,当前手机处于手动交互模式,设置进入电话本与选取娱乐内容通过视觉捕捉交互模式,读取短消息通过手动交互模式,其它功能使用其它交互模式。当使用者选择读取短消息时,不切换交互模式,而使用者选择进入电话本时,在执行按照使用者的操控转入到电话本功能的同时会根据预先的设置进行交互模式切换,执行从当前交互模式切换到手动交互模式。
在本发明实施例中,还可以通过视觉捕捉技术实现移动通信终端拍照时眼球控制摄像头自动对焦。图3是图解根据本发明实施例的视觉控制摄像头进行自动对焦的方法的示意流程图。本发明实施例实现眼球控制移动通信终端的摄像头自动对焦的方法的过程为:在移动通信终端的显示屏上出现待拍摄影像时,使用者注视所述显示屏的拍摄界面上希望对焦的物体的影像部分;获取视觉焦点的焦点信息,所述焦点信息包括视觉焦点的具***置的信息;然后对所述焦点信息进行处理,处理过程中,可以根据已经预先设置好的把拍摄界面分为固定的N个区域,对于每个不同的区域会生成相应的自动对焦的控制信息;根据这一控制信息对移动通信终端的摄像头进行自动对焦。上述把拍摄界面分为固定的N个区域是为了配合现有的拍照技术中的照相聚焦,从而在使用上与现有的拍照技术相一致或兼容。
本发明实施例还提供了一种移动通信终端的交互装置。图4是本发明实施例三的移动通信终端的交互装置的示意框图。如图4所示,所述装置包括:视觉捕捉单元10,用于获取视觉焦点的焦点信息;信息处理单元20,用于根据所述焦点信息控制执行目标动作。
使用者注视着移动通信终端的接收界面中的目标,视觉捕捉单元10捕捉使用者注视的目标这一视觉焦点,然后分析获得焦点信息。所述焦点信息中包括视觉注视的接收界面中目标的位置这一信息。
在本发明实施例中,以手机为例,所述装置实现手机交互的工作过程举例如下:当一手机使用者希望编辑短消息时,使用者注视菜单栏中的具体功能项,视觉捕捉单元10获取该视觉焦点的焦点信息,传送给信息处理单元20,所述信息处理单元20对所述焦点信息进行处理,生成控制信息,使得手机执行进入所注视的具体功能,然后手机进入到短消息编辑状态。本发明实施例中,使用者也可以使用所述装置实现具体的字符/文字输入。
图5是根据本发明实施例的图4中信息处理单元20的示意框图。如图5所示,所述信息处理单元20包括:接收单元210,用于接收所述焦点信息;分析单元230,用于对所述焦点信息进行处理,生成控制信息;执行单元250,用于根据所述控制信息执行目标动作。
如图5所示,所述信息处理单元20还包括:焦点位置判断单元270,根据所述焦点信息判断所述视觉焦点是否位于可控区域,并生成判断结果,当判断结果为没有位于可控区域时,将所述判断结果传送给视觉捕捉单元10,所述视觉捕捉单元10需要重新捕捉视觉焦点获取焦点信息,当判断结果为位于可控区域时,将所述判断结果传送给所述分析单元230。在本发明实施例中,可控区域是指移动通信终端中预先设置的可以接收视觉控制的区域。例如,在待机情况下,界面中某项具体功能区域可以是可控区域,但是电量显示信息就设置为不可控区域。
如图5所示,所述分析单元230中包括:处理判断单元231,用于判断所述焦点信息是否满足处理条件,并产生判断的结果;信息生成单元232,用于当所述判断结果为满足处理条件时,对所述焦点信息按照正常交互模式一样进行分析处理进行处理,生成所述控制信息。此处,所述处理条件可以根据需要来进行相应的预设置。在本发明实施例中,所述正常交互模式(又称为手动交互模式)指现有技术中使用者对移动通信终端键盘/触摸屏的手动操作,正常交互模式处理为现有技术中移动通信终端对手动操作产生的信息的处理。
最后,所述执行单元250根据所述控制信息执行目标动作。
在本发明实施例中,所述装置除了支持视觉捕捉交互模式外,还可以支持其他交互模式,并且支持在不同交互模式下的切换功能。支持这种可相互切换交互模式的功能可以增加用户操作的灵活性,增添用户的乐趣感。图6是根据本发明实施例的实现交互模式切换的装置的示意框图。本发明实施例交互模式切换的方式包括以下两种:
一、动态选取功能菜单中的具体交互模式
如图6所示,本发明实施例的装置中的执行单元250还包括交互模式切换单元251,用于当所述分析单元生成的控制信息为交互模式切换信息时,根据所述交互模式切换信息控制执行从当前交互模式切换到另一交互模式。这种模式切换可以是从视觉捕捉交互模式切换到其他交互模式,也可以是从其他交互模式切换到视觉捕捉交互模式。所述装置在任一当前交互模式下支持专门的功能菜单中包含不同的交互模式选取,例如,当前交互模式为视觉捕捉交互模式,使用者注视接收界面中的交互模式切换功能项,这时接收界面上会显示不同的交互模式以供选取,使用者注视着其中的手动交互模式,视觉捕捉单元10获取到该视觉焦点的焦点信息后传给信息处理单元20,信息处理单元20的分析单元230对所述焦点信息进行分析处理后生成控制信息,所述控制信息为交互模式切换信息;所述执行单元250中的交互模式切换单元251根据所述交互模式切换信息执行从当前视觉捕捉模式切换到手动交互模式。
二、预先组合设置各个具体功能项的交互模式
如图6所示,本发明实施例的装置中还包括交互模式设置单元30,用于预先设置移动通信终端的具体功能项使用的交互模式。使用者可以在任意一种交互模式下自行组合设置一类功能或者内容的交互操作模式。例如,使用者注视着接收界面中的具体功能项,该具体功能项为通过交互模式设置单元30预先设置的某功能项使用某交互模式中的一种。视频捕捉单元10获取上述视觉焦点的焦点信息,信息处理单元20中的分析单元230对所述焦点信息进行处理的过程中,根据所述焦点信息查询预先设置的具体功能项使用的交互模式,最后生成相应的控制信息。执行单元250根据所述控制信息执行转入具体功能,并且其中的交互模式切换单元251根据所述控制信息执行从当前交互模式切换到预先设置的具体功能项使用的交互模式。
在本发明实施例中,所述装置还可以在移动通信终端上实现眼球控制摄像头进行自动对焦,其过程如下:在移动通信终端的显示屏上出现待拍摄影像时,使用者注视所述显示屏的拍摄界面上希望对焦的物体的影像部分;视觉捕捉单元10获取视觉焦点的焦点信息,所述焦点信息包括视觉焦点的具***置的信息;信息处理单元20对所述焦点信息进行处理,处理过程中,信息处理单元20根据已经预先设置好的把拍摄界面分为固定的N个区域,对于每个不同的区域会生成相应的自动对焦的控制信息;执行单元250根据这一控制信息对移动通信终端的摄像头进行自动对焦。
本发明实施例还提供了一种移动通信终端,其包括:
移动通信终端的交互装置,所述装置进一步包括:
视觉捕捉单元,用于捕捉视觉焦点信息;
信息处理单元,用于根据所述焦点信息控制执行目标动作。
其中,所述信息处理单元中包括:接收单元,用于接收所述焦点信息;分析单元,用于对所述焦点信息进行处理,生成控制信息;执行单元,用于根据所述控制信息执行目标动作。所述执行单元包括:交互模式切换单元,用于当所述分析单元生成的控制信息为交互模式切换信息时,根据所述交互模式切换信息执行从当前交互模式切换到另一交互模式。
最后,本领域普通技术人员可以理解实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,所述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,包括如下步骤:
获取视觉焦点的焦点信息;
根据所述焦点信息控制执行目标动作。
所述根据焦点信息控制执行目标动作,进一步包括:
对所述焦点信息进行处理,生成控制消息;
根据所述控制消息执行目标动作。
所述的存储介质可以为,如:ROM/RAM、磁碟、光盘等。
当然,以上所述是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也视为本发明的保护范围。