CN106527729A - 非接触式输入方法和装置 - Google Patents

非接触式输入方法和装置 Download PDF

Info

Publication number
CN106527729A
CN106527729A CN201611034173.0A CN201611034173A CN106527729A CN 106527729 A CN106527729 A CN 106527729A CN 201611034173 A CN201611034173 A CN 201611034173A CN 106527729 A CN106527729 A CN 106527729A
Authority
CN
China
Prior art keywords
content
contactless
user
input mode
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611034173.0A
Other languages
English (en)
Inventor
胡雨隆
刘聪
王智国
胡国平
胡郁
翟吉博
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
iFlytek Co Ltd
Original Assignee
iFlytek Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by iFlytek Co Ltd filed Critical iFlytek Co Ltd
Priority to CN201611034173.0A priority Critical patent/CN106527729A/zh
Publication of CN106527729A publication Critical patent/CN106527729A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/012Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请提出一种非接触式输入方法和装置,该方法包括:在多种非接触式输入方式中,确定至少一种非接触式输入方式作为第一非接触式输入方式;根据所述第一非接触式输入方式,接收用户以所述第一非接触式输入方式输入的内容;对所述内容进行处理。该方法能够使得人机交互更加自然便捷和方式多样,给用户一种人人交互的感觉,大大提高了用户体验。

Description

非接触式输入方法和装置
技术领域
本申请涉及电子信息技术领域,尤其涉及一种非接触式输入方法和装置。
背景技术
随着人工智能相关技术的日益成熟,越来越多的智能设备出现在人们面前,人们也越来越习惯于与机器进行交互,以实现用户的不同需求,如智能穿戴设备、虚拟现实设备等。因此,人机交互的自然、便捷成为人们关注的主要问题,输入方法作为人机交互的入口,直接关系到人机交互的体验效果。
相关技术中的输入方法在输入内容时,一般都是基于键盘、鼠标、触摸屏等硬件进行输入,输入时通过用户点击、移动鼠标、手指接触触摸屏等方式,用户需要与输入设备进行接触,这种方式无法很好满足人机自然便捷交互的需求;另外,即使相关技术中可以采用非接触式的语音输入,但输入方式太单一。
发明内容
本申请旨在至少在一定程度上解决相关技术中的技术问题之一。
为此,本申请的一个目的在于提出一种非接触式输入方法,该方法可以使得人机交互更加自然便捷和方式多样,给用户一种人人交互的感觉,大大提高了用户体验。
本申请的另一个目的在于提出一种非接触式输入装置。
为达到上述目的,本申请第一方面实施例提出的非接触式输入方法,包括:在多种非接触式输入方式中,确定至少一种非接触式输入方式作为第一非接触式输入方式;根据所述第一非接触式输入方式,接收用户以所述第一非接触式输入方式输入的内容;对所述内容进行处理。
本申请第一方面实施例提出的非接触式输入方法,通过采用非接触式输入方式进行内容输入,可以在人机交互时更加自然便捷,通过在多种非接触式输入方式中确定至少一种非接触式输入方式,可以使得非接触式输入方式是可选择的,而不是固定单一的,可以实现输入方式的多样性,提高灵活性;从而可以实现人机交互更加自然便捷和方式多样,给用户一种人人交互的感觉,大大提高了用户体验。
为达到上述目的,本申请第二方面实施例提出的非接触式输入装置,包括:确定模块,用于在多种非接触式输入方式中,确定至少一种非接触式输入方式作为第一非接触式输入方式;输入模块,用于根据所述第一非接触式输入方式,接收用户以所述第一非接触式输入方式输入的内容;处理模块,用于对所述内容进行处理。
本申请第二方面实施例提出的非接触式输入装置,通过采用非接触式输入方式进行内容输入,可以在人机交互时更加自然便捷,通过在多种非接触式输入方式中确定至少一种非接触式输入方式,可以使得非接触式输入方式是可选择的,而不是固定单一的,可以实现输入方式的多样性,提高灵活性;从而可以实现人机交互更加自然便捷和方式多样,给用户一种人人交互的感觉,大大提高了用户体验。
本申请附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本申请的实践了解到。
附图说明
本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1是本申请一个实施例提出的非接触式输入方法的流程示意图;
图2是本申请另一个实施例提出的非接触式输入方法的流程示意图;
图3是本申请实施例中启动空中手写输入方式的手势示意图;
图4是本申请实施例中停止空中手写输入方式的手势示意图;
图5是本申请实施例中单击操作的手势示意图;
图6是本申请一个实施例提出的非接触式输入装置的结构示意图;
图7是本申请另一个实施例提出的非接触式输入装置的结构示意图。
具体实施方式
下面详细描述本申请的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的模块或具有相同或类似功能的模块。下面通过参考附图描述的实施例是示例性的,仅用于解释本申请,而不能理解为对本申请的限制。相反,本申请的实施例包括落入所附加权利要求书的精神和内涵范围内的所有变化、修改和等同物。
图1是本申请一个实施例提出的非接触式输入方法的流程示意图。
如图1所示,本实施例的方法包括:
S11:在多种非接触式输入方式中,确定至少一种非接触式输入方式作为第一非接触式输入方式。
所述第一非接触式输入方式是后续用户输入内容所采用的输入方式。
所述多种非接触式输入方式例如包括:语音输入方式、空中手写输入方式、手势输入方式、拍照输入方式等中的至少两种。
一些示例中,与用户交互的机器可以根据用户的选择,确定第一非接触式输入方式。比如,可以接收用户输入的输入方式启动命令,该输入方式启动命令中包含第一非接触式输入方式的信息,从而可以根据输入方式启动命令确定第一非接触式输入方式。
一些示例中,与用户交互的机器可以自动确定第一非接触式输入方式,比如,机器可以将自身支持的多种非接触式输入方式全部作为第一非接触式输入方式。此时,在后续流程中,将能够检测到的内容作为用户输入的内容。
在接收用户输入的输入方式启动命令时,用户可以在获知的多种非接触式输入方式中选择至少一种作为第一非接触式输入方式。具体在使用时,用户可以通过机器制造商提供的说明书等资料获知机器支持的多种非接触式输入方式,从而在机器支持的多种非接触式输入方式中选择至少一种作为第一非接触式输入方式。或者,用户也可以不参考资料而在自身所知的非接触式输入方式中任选至少一种作为第一非接触式输入方式,在后续流程中,如果机器支持用户选择的非接触式输入方式则进行相应响应,否则如果机器不支持,则不进行响应,进一步的,在不响应时可以提醒用户机器不支持、选择其他非接触式输入方式等。
在接收用户输入的输入方式启动命令时,该输入方式启动命令可以由用户通过非接触式输入方式或接触式输入方式输入,比如,用户可以采用语音方式输入所述启动命令,或者,用户可以点击机器上的物理按键或虚拟按钮等输入所述启动命令。
进一步的,用户以非接触式输入方式输入所述启动命令时,假设输入所述启动命令的非接触式输入方式称为第二非接触式输入方式,则第二非接触式输入方式可以与第一非接触式输入方式一致或者不一致。比如,用户选择的第一非接触式输入方式为语音,即后续用户以语音方式输入内容,此时,用户也可以以语音方式输入所述启动命令,如所述启动命令为用户说出的“启动语音”;或者,用户选择的第一非接触式输入方式为拍照,即后续用户以拍照方式输入内容,此时用户还可以以语音方式输入所述启动命令,如所述启动命令为用户说出的“启动拍照”。
一些示例中,第一非接触式输入方式可以包括如下项中的至少一项:语音输入方式、空中手写输入方式、手势输入方式、拍照输入方式。第二非接触式输入方式可以包括如下项中的至少一项:语音输入方式、手势输入方式。
S12:根据所述第一非接触式输入方式,接收用户以所述第一非接触式输入方式输入的内容。
在确定第一非接触式输入方式后,机器可以进行相应输入方式需要的处理。比如,第一非接触式输入方式为语音,则如果之前未启动麦克风,则此时开启麦克风,由麦克风采集用户输入的语音数据,并记录采集的语音数据以进行后续处理,以及无效其他输入方式采集的数据,比如不启动摄像头,或者忽略摄像头采集的图像,或者对摄像头采集的图像不进行进一步处理等。
S13:对所述内容进行处理。
一些示例中,可以将所述内容显示在交互屏幕上。
交互屏幕上显示的内容可以包括:文本数据、图像数据、视频数据、应用程序等。
需要说明的是,由于有些接收的内容不能直接进行显示,比如用户以语音方式输入内容时,接收的内容为语音数据,此时,需要将不能直接显示的内容进行转换,转换为可显示的内容后进行显示,比如采用语音识别技术,将语音数据识别为文本数据,进而显示文本数据。
所述交互屏幕可以为通常的电子设备,如各种电子显示屏、电子触摸屏等;或者,交互屏幕也可以为新技术新能源下的显示屏,如空气屏等。
一些示例中,可以响应所述内容。比如,如果所述内容是打开某个浏览器时,则打开所述内容指示的浏览器;或者,如果所述内容是单击命令时,则响应用户的单击命令等。
本实施例中,通过采用非接触式输入方式进行内容输入,可以在人机交互时更加自然便捷,通过在多种非接触式输入方式中确定至少一种非接触式输入方式,可以使得非接触式输入方式是可选择的,而不是固定单一的,可以实现输入方式的多样性,提高灵活性;从而可以实现人机交互更加自然便捷和方式多样,给用户一种人人交互的感觉,大大提高了用户体验。
图2是本申请另一个实施例提出的非接触式输入方法的流程示意图。
本实施例以显示内容为例。
如图2所示,本实施例的方法包括:
S21:接收用户以第二非接触式输入方式输入的输入方式启动命令,并根据所述启动命令确定第一非接触式输入方式。
S22:根据所述第一非接触式输入方式,接收用户以所述第一非接触式输入方式输入的内容。
S23:将所述内容显示在交互屏幕上。
下面分别针对第一非接触式输入方式为语音输入方式、空中手写输入方式、手势输入方式、拍照输入方式进行相应描述。
示例一:语音输入方式。
该方式下,用户通过机器设置的麦克风,说出需要输入的内容。
具体输入时,用户可以先说出输入方式启动命令,如说出“启动语音”;然后用户以语音输入内容;***在采集到语音数据后,可以采用近场或远场语音识别技术,将其识别为文本数据并显示在交互屏幕上,如显示用户说出的语音数据对应的文本内容“今天合肥的天气晴,温度20摄氏度”。
示例二:空中手写输入方式。
该方式下,用户通过机器设置的摄像头,隔空写出输入的内容。
具体输入时,用户可以先产生输入方式启动命令,如用手势产生输入方式启动命令,具体如图3所示,用户可以先握拳再伸出食指,则表明启动空中手写输入方式。然后用户开始在空中写出需要输入的内容,输入过程中,机器的***记录用户手部移动轨迹,进行中值滤波后,得到用户手部移动轨迹点集合后,对所述轨迹点进行拼接,根据拼接后的轨迹进行手写体识别,得到用户输入内容,当***接收到用户停止输入手势后,将用户输入内容显示出来;所述停止输入手势如用户将手展开为手掌状,如图4为在空中手写模式中停止输入手势示意图;当然也可以预先确定其它手势,具体本申请不作限定。
需要说明的是,用户在空中手写模式时,输入文本内容时,可以采用单字输入、叠写输入、连写输入、行输入等方式,具体本申请不作限定;所述单字输入即用户每次只输入一个字,输入完成后,用户停止输入,***直接将输入的单字显示出来;所述叠写输入,即用户在同一个区域连续输入多个字;所述连写输入指用户在不同区域连续输入多个字;所述行输入指用户按照从左到右的顺序依次输入每个字;
示例三:手势输入方式。
与手写输入类似,但输入时,不局限于对手部移动轨迹进行追踪,还可以为手臂或身体其它部位移动的轨迹,或者双手或多手组合操作等;由于手势输入没有手写输入文本内容方便,因此,手势输入一般用于输入一些控制命令,如单击、移动光标、抓取显示内容、确定、取消等,以手部手势为例,如图5为单击操作用户手部动作示意图,即用户的手先展开,再握拳;以手臂手势为例,如用户的双手手臂交叉时,可以表示取消;
具体输入时,根据预先确定的手势动作,通过摄像头跟踪用户身体相应部位的动作轨迹后,进行手势识别,根据识别结果***给出相应响应,所述手势识别方法可以参见已有或将来出现的技术,在此不再详述。
示例四:拍照输入方式。
用户通过***外置摄像头,对准待拍照内容,进行拍照后,对拍照内容进行图像识别,得到相应输入内容;
具体拍照输入时,需要用户先开启相应拍照模式,开启时,可以使用语音输入相应开启命令,如“开启拍照”,当然,也可以做出开启拍照的手势;开启拍照模式后,***提示用户调整摄像头拍照角度与拍照距离,如在交互屏幕上显示调整摄像头的球形操作杆,用户可以通过手势抓住相应操作杆,所述手势如握拳,然后通过上下左右移动操作杆来控制摄像头朝向,通过前后移动调整焦距,调整结束后,用户可以通过语音或手势确定调整结束;用户可以将待拍照物品对准调整后的摄像头,通过语音或手势给出拍照命令,如语音输入“放置完毕,拍照”;最后***启动拍照,将拍照物品的识别结果输入***中;
需要说明的是,***可以同时开启多种输入方式输入内容,也可以每次只接收一种输入方式输入内容,如用户用语音输入“我今天要去北京,帮我订一张去北京的火车票”,同时用户作为双手交叉的手势,***接收到相应手势对应命令后,则直接取消订票;从而保证人机交互时的自然、便捷,使人机交互更接近人人交互。
S24:根据用户的非接触式操作对显示的内容进行编辑,以及显示编辑后的内容。
所述显示的内容可以为文本数据、图像数据、视频数据、应用程序等。
对显示的内容进行编辑例如包括:对文本数据的修改、对图像数据的增加删除、对交互屏上多种应用程序进行相应操作等。
编辑方式可以分为:删除、***和修改,其中,修改可以分为删除和***,依照删除和***的流程进行。
具体包括:
如果编辑方式包括删除,则根据用户的非接触式操作确定待删除内容以及接收删除命令,并在接收到删除命令后删除所述待删除内容;或者,
如果编辑方式包括***,则根据用户的非接触式操作确定待***位置和待***内容,并在所述待***位置***所述待***内容;或者,
如果编辑方式包括修改,则根据用户的非接触式操作确定待修改内容以及接收删除命令,并在接收到删除命令后,将所述待修改内容作为待删除内容,删除所述待删除内容,以及,根据用户的非接触式操作获取修改后内容,并将所述修改后内容作为待***内容,在所述待修改内容所在位置***所述待***内容。
进一步的,在编辑之前可以先接收用户以非接触式输入方式输入的编辑启动命令,以便根据编辑启动命令启动编辑。编辑启动命令可以通过语音和/或手势进行输入。
在删除或者修改中的删除步骤时,用户可以通过语音和/或手势选择待删除内容,以及用户可以通过语音和/或手势输入删除命令。在***或者修改中的***步骤时,用户可以通过语音和/或手势选择待***位置,以及用户可以通过语音、空中手写、手势和拍照等至少一项输入方式输入待***内容。
下面以对文本数据的编辑为例,对编辑过程进行描述。
对文本数据的编辑主要包括文本数据的删除操作、***操作及修改操作,交互屏上显示待编辑的文本数据,用户在不接触交互屏幕的情况下进行编辑,具体如下所述:
示例一:对文本数据进行删除操作
首先用户通过语音或手势开启删除操作,如用户语音输入“我要删除文本片段”;然后用户通过手势和/语音选择要删除的文本区域;最后使用语音或手势进行删除确认,如用户输入语音命令“删除”,删除选择的文本区域。具体过程如下所述:
(1)手势删除文本区域
通过手势删除文本区域时,主要通过对用户的手势动作进行识别后,执行相应删除操作;具体过程如下所述:
首先用户举起手,以启动手势选择文本区域,此时,交互屏幕上会出现一个图标,以标注光标位置,所述图标如手形的图标或其它形状图标,具体本申请不作限定,如一条竖线图标;该图标与用户手部区域的移动轨迹一致,用户根据该图标的位置,使用手势将光标移动到待删除文本区域前面;然后开始选择待删除文本,具体选择时,用户可以通过握拳的动作启动文本选中模式后,移动握拳到待删除文本区域的尾部,依次选中所有待删除文本区域;此时可以通过删除手势将选中的文本区域删除,所述删除手势如将握拳的手掌展开,完成文本删除过程;
需要说明的是,使用手势删除文本区域的过程中,可以使用语音结合手势的方法完成删除过程,如在选中文本数据时,可以使用语音命令将光标转成选中模式,如语音命令为“选择文本”,则光标变成选中模式后,使用手势将光标移动到待删除文本数据的尾部;语音直接删除选中文本,如语音命令为“删除”;则可以直接将选中文本删除;也可以在使用手势选中所有待删除文本数据后,直接使用语音命令,删除文本数据;
(2)语音删除文本区域
通过语音删除文本区域主要根据用户语音数据进行语义理解后,执行相应删除操作,具体过程如下所述:
首先接收用户删除语音数据,如“删掉合肥的天气”,“删掉从天气到温度之间的文本”等,所述删除语音数据主要用于描述待删除文本数据内容;如果交互屏上只有一个用户描述的文本数据,则可以直接通过语义理解结果将所述文本数据删掉;如果交互屏上有多处用户描述的文本数据,则***会将所有被描述的文本数据显示给用户,如使用粗体展示、使用其实颜色字体显示、或者使用选中模式显示等;用户需要再次对需要删除的文本数据进行选择,如共显示出5个被描述的文本数据,则用户可以直接说出每个被描述文本数据的标号,删除相应文本数据,如“第二个”,***则直接将第二个被描述文本数据删除;
需要说明的是,在使用语音删除文本数据的过程中,也可以结合手势操作,如交互屏将多个用户描述的文本数据显示出来时,用户可以直接使用手势选择要删除的那个文本数据,删除文本数据;
示例二:对文本数据进行***操作
首先用户通过语音或手势开启***文本模式,如用户语音输入“我要***文本片段”;然后用户通过手势和/语音选择要***文本的位置;最后使用语音或隔空手写输入待***的文本,具体***过程如下所述:
(1)手势***文本数据
首先通过手势开启***文本模式;然后使用手势移动光标选择要***文本的位置,如用户将手掌展开后开始移动,开启移动光标模式,将光标移动到需要***文本的位置;使用手势开启隔空手写模式,如用户将手伸出食指握拳,开启隔空手写模式,用户输入待***文本数据,输入结束后使用手势停止输入,如用户将手掌展开,***显示***的文本数据。
需要说明的是,在使用手势***文本数据的过程中,还可以结合语音实现***操作,如用户直接使用语音将光标移动待***的位置后,使用隔空手写输入待***文本数据;也可以在用户用手势将光标移动到需要***文本的位置后,直接使用语音输入需要***的文本内容。
(2)使用语音***文本数据
首先通过语音开启***文本模式,如“我想***文本”;然后***接收用户***语音数据,所述语音数据用于选择***文本位置及相应***内容,如“在天气前面***今天”,如果当前交互屏上只有一个“天气”,则可以直接在“天气”前面***“今天”;如果当前交互屏上有多个“天气”,则需要用户再次选择***位置,***将多个待***位置显示给用户,用户通过语音选择需要***的位置,如当前交互屏上有5个“天气”,用户直接说出“第二个”,则可以确定第二个“天气”前面为***位置,***直接将“今天”***到相应位置上。
需要说明的是,在使用语音***文本时,也可以结合手势操作实现文本***,如在***显示多个***位置时,用户直接使用手势将光标移动到相应***位置后,使用语音或手势确定该***位置,***自动将待***文本***到该位置,并显示***后的文本数据;
示例三:对文本数据进行修改操作
首先用户通过语音或手势开启修改文本模式,如用户语音输入“我想修改文本”;然后用户通过手势和/语音选择需要修改的文本;最后使用语音或隔空手写对选中文本进行修改,具体修改过程如下所述:
(1)手势修改文本数据
首先用户通过手势开启修改文本模式;然后使用手势将光标移动到待修改文本前面,选中需要修改的文本删除后,所述删除方法与上述使用手势删除文本方法相同;最后在删除位置使用隔空手写的方法***修改后的文本,具体过程与使用手势***文本数据过程相同;
需要说明的是,使用手势修改文本数据时,也可以结合语音对文本数据进行修改,具体结合方法与上述删除文本或***文本时结合方法相同,如使用手势选中需要删除的文本后,使用语音删除相应文本;或者使用语音***修改后的文本等;
(2)语音修改文本数据
首先用户使用语音开启修改模式;然后使用语音选择需要修改的文本及修改后的文本,如“将合肥修改为南京”;如果当前交互屏上只有一个待修改文本时,则可以直接完成文本的修改;如果当前交互屏上有多个用户描述的待修改文本时,***自动将所有待修改文本显示出来,用户可以使用语音选择需要修改的文本;
需要说明的是,使用语音修改文本时,也可以结合手势进行修改,如***中有多个用户描述的待修改文本时,直接使用手势选择需要修改的待修改文本即可。
进一步地,本申请还可以对交互屏上显示的图像数据、视频数据、应用程序进行多模式编辑,具体编辑方法与对文本数据的编辑方法类似,即编辑的过程中可以使用语音、手势、及隔空手写等多种编辑方法实现,如需要删除交互屏上其中一个图像时,用户可以使用手势移动光标到待删除图像前面,并选中该图像,使用语音直接删除。
本实施例中,通过采用非接触式输入方式进行内容输入,可以在人机交互时更加自然便捷,通过在多种非接触式输入方式中确定至少一种非接触式输入方式,可以使得非接触式输入方式是可选择的,而不是固定单一的,可以实现输入方式的多样性,提高灵活性;从而可以实现人机交互更加自然便捷和方式多样,给用户一种人人交互的感觉,大大提高了用户体验。通过启动和编辑也通过非接触式操作实现,可以在人机交互时实现基本全程的非接触式交互,进一步提高用户体验。
图6是本申请一个实施例提出的非接触式输入装置的结构示意图。
如图6所示,本实施例的装置60包括:确定模块61、输入模块62和处理模块63。
确定模块61,用于在多种非接触式输入方式中,确定至少一种非接触式输入方式作为第一非接触式输入方式;
输入模块62,用于根据所述第一非接触式输入方式,接收用户以所述第一非接触式输入方式输入的内容;
处理模块63,用于对所述内容进行处理。
一些实施例中,所述确定模块61具体用于:
接收用户以第二非接触式输入方式输入的输入方式启动命令,并根据所述启动命令确定第一非接触式输入方式,所述启动命令中包含用户在多种非接触式输入方式中选择的至少一种输入方式的信息。
一些实施例中,所述第一非接触式输入方式包括如下项中的至少一项:
语音输入方式、空中手写输入方式、手势输入方式、拍照输入方式。
一些实施例中,所述第二非接触式输入方式包括如下项中的至少一项:
语音输入方式、手势输入方式。
一些实施例中,所述处理模块63具体用于:
将所述内容显示在交互屏幕上;
参见图7,所述装置60还包括:
编辑模块64,用于根据用户的非接触式操作对显示的内容进行编辑,以及显示编辑后的内容。
一些实施例中,所述编辑模块64用于根据用户的非接触式操作对显示的内容进行编辑,包括:
如果编辑方式包括删除,则根据用户的非接触式操作确定待删除内容以及接收删除命令,并在接收到删除命令后删除所述待删除内容;或者,
如果编辑方式包括***,则根据用户的非接触式操作确定待***位置和待***内容,并在所述待***位置***所述待***内容;或者,
如果编辑方式包括修改,则根据用户的非接触式操作确定待修改内容以及接收删除命令,并在接收到删除命令后,将所述待修改内容作为待删除内容,删除所述待删除内容,以及,根据用户的非接触式操作获取修改后内容,并将所述修改后内容作为待***内容,在所述待修改内容所在位置***所述待***内容。
一些实施例中,所述待删除内容的位置、所述删除命令和所述待***位置中的至少一项是用户采用如下项中的至少一项输入的:
语音输入方式、手势输入方式。
一些实施例中,所述待***内容是用户采用如下项中的至少一项输入的:
语音输入方式、空中手写输入方式、手势输入方式、拍照输入方式。
可以理解的是,本实施例的装置与上述方法实施例对应,具体内容可以参见方法实施例的相关描述,在此不再详细说明。
本实施例中,通过采用非接触式输入方式进行内容输入,可以在人机交互时更加自然便捷,通过在多种非接触式输入方式中确定至少一种非接触式输入方式,可以使得非接触式输入方式是可选择的,而不是固定单一的,可以实现输入方式的多样性,提高灵活性;从而可以实现人机交互更加自然便捷和方式多样,给用户一种人人交互的感觉,大大提高了用户体验。
可以理解的是,上述各实施例中相同或相似部分可以相互参考,在一些实施例中未详细说明的内容可以参见其他实施例中相同或相似的内容。
需要说明的是,在本申请的描述中,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性。此外,在本申请的描述中,除非另有说明,“多个”的含义是指至少两个。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行命令的代码的模块、片段或部分,并且本申请的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本申请的实施例所属技术领域的技术人员所理解。
应当理解,本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的命令执行***执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来命令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本申请各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管上面已经示出和描述了本申请的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本申请的限制,本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (16)

1.一种非接触式输入方法,其特征在于,包括:
在多种非接触式输入方式中,确定至少一种非接触式输入方式作为第一非接触式输入方式;
根据所述第一非接触式输入方式,接收用户以所述第一非接触式输入方式输入的内容;
对所述内容进行处理。
2.根据权利要求1所述的方法,其特征在于,所述在多种非接触式输入方式中,确定至少一种非接触式输入方式作为第一非接触式输入方式,包括:
接收用户以第二非接触式输入方式输入的输入方式启动命令,并根据所述启动命令确定第一非接触式输入方式,所述启动命令中包含用户在多种非接触式输入方式中选择的至少一种输入方式的信息。
3.根据权利要求1所述的方法,其特征在于,所述第一非接触式输入方式包括如下项中的至少一项:
语音输入方式、空中手写输入方式、手势输入方式、拍照输入方式。
4.根据权利要求2所述的方法,其特征在于,所述第二非接触式输入方式包括如下项中的至少一项:
语音输入方式、手势输入方式。
5.根据权利要求1所述的方法,其特征在于,如果所述处理包括:将所述内容显示在交互屏幕上,所述方法还包括:
根据用户的非接触式操作对显示的内容进行编辑,以及显示编辑后的内容。
6.根据权利要求5所述的方法,其特征在于,所述根据用户的非接触式操作对显示的内容进行编辑,包括:
如果编辑方式包括删除,则根据用户的非接触式操作确定待删除内容以及接收删除命令,并在接收到删除命令后删除所述待删除内容;或者,
如果编辑方式包括***,则根据用户的非接触式操作确定待***位置和待***内容,并在所述待***位置***所述待***内容;或者,
如果编辑方式包括修改,则根据用户的非接触式操作确定待修改内容以及接收删除命令,并在接收到删除命令后,将所述待修改内容作为待删除内容,删除所述待删除内容,以及,根据用户的非接触式操作获取修改后内容,并将所述修改后内容作为待***内容,在所述待修改内容所在位置***所述待***内容。
7.根据权利要求6所述的方法,其特征在于,所述待删除内容的位置、所述删除命令和所述待***位置中的至少一项是用户采用如下项中的至少一项输入的:
语音输入方式、手势输入方式。
8.根据权利要求6所述的方法,其特征在于,所述待***内容是用户采用如下项中的至少一项输入的:
语音输入方式、空中手写输入方式、手势输入方式、拍照输入方式。
9.一种非接触式输入装置,其特征在于,包括:
确定模块,用于在多种非接触式输入方式中,确定至少一种非接触式输入方式作为第一非接触式输入方式;
输入模块,用于根据所述第一非接触式输入方式,接收用户以所述第一非接触式输入方式输入的内容;
处理模块,用于对所述内容进行处理。
10.根据权利要求9所述的装置,其特征在于,所述确定模块具体用于:
接收用户以第二非接触式输入方式输入的输入方式启动命令,并根据所述启动命令确定第一非接触式输入方式,所述启动命令中包含用户在多种非接触式输入方式中选择的至少一种输入方式的信息。
11.根据权利要求8所述的装置,其特征在于,所述第一非接触式输入方式包括如下项中的至少一项:
语音输入方式、空中手写输入方式、手势输入方式、拍照输入方式。
12.根据权利要求9所述的装置,其特征在于,所述第二非接触式输入方式包括如下项中的至少一项:
语音输入方式、手势输入方式。
13.根据权利要求8所述的装置,其特征在于,所述处理模块具体用于:
将所述内容显示在交互屏幕上;
所述装置还包括:
编辑模块,用于根据用户的非接触式操作对显示的内容进行编辑,以及显示编辑后的内容。
14.根据权利要求13所述的装置,其特征在于,所述编辑模块用于根据用户的非接触式操作对显示的内容进行编辑,包括:
如果编辑方式包括删除,则根据用户的非接触式操作确定待删除内容以及接收删除命令,并在接收到删除命令后删除所述待删除内容;或者,
如果编辑方式包括***,则根据用户的非接触式操作确定待***位置和待***内容,并在所述待***位置***所述待***内容;或者,
如果编辑方式包括修改,则根据用户的非接触式操作确定待修改内容以及接收删除命令,并在接收到删除命令后,将所述待修改内容作为待删除内容,删除所述待删除内容,以及,根据用户的非接触式操作获取修改后内容,并将所述修改后内容作为待***内容,在所述待修改内容所在位置***所述待***内容。
15.根据权利要求14所述的装置,其特征在于,所述待删除内容的位置、所述删除命令和所述待***位置中的至少一项是用户采用如下项中的至少一项输入的:
语音输入方式、手势输入方式。
16.根据权利要求14所述的装置,其特征在于,所述待***内容是用户采用如下项中的至少一项输入的:
语音输入方式、空中手写输入方式、手势输入方式、拍照输入方式。
CN201611034173.0A 2016-11-17 2016-11-17 非接触式输入方法和装置 Pending CN106527729A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611034173.0A CN106527729A (zh) 2016-11-17 2016-11-17 非接触式输入方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611034173.0A CN106527729A (zh) 2016-11-17 2016-11-17 非接触式输入方法和装置

Publications (1)

Publication Number Publication Date
CN106527729A true CN106527729A (zh) 2017-03-22

Family

ID=58357811

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611034173.0A Pending CN106527729A (zh) 2016-11-17 2016-11-17 非接触式输入方法和装置

Country Status (1)

Country Link
CN (1) CN106527729A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107045419A (zh) * 2017-05-04 2017-08-15 奇酷互联网络科技(深圳)有限公司 一种输入用电子设备
CN107436749A (zh) * 2017-08-03 2017-12-05 安徽智恒信科技有限公司 基于三维虚拟现实场景的文字输入方法及***
CN108509029A (zh) * 2018-03-09 2018-09-07 苏州佳世达电通有限公司 非接触式输入方法及非接触式输入***
CN109119079A (zh) * 2018-07-25 2019-01-01 天津字节跳动科技有限公司 语音输入处理方法和装置
CN109143875A (zh) * 2018-06-29 2019-01-04 广州市得腾技术服务有限责任公司 一种手势控制智能家居方法及其***
CN110427139A (zh) * 2018-11-23 2019-11-08 网易(杭州)网络有限公司 文本处理方法及装置、计算机存储介质、电子设备

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1449558A (zh) * 2000-09-20 2003-10-15 国际商业机器公司 用于上下文语音识别的眼睛凝视
CN102629166A (zh) * 2012-02-29 2012-08-08 中兴通讯股份有限公司 一种操控电脑的装置及通过装置操控电脑的方法
CN102866827A (zh) * 2012-08-21 2013-01-09 刘炳林 一种人机交互设备的文档编辑方法和装置
CN103226388A (zh) * 2013-04-07 2013-07-31 华南理工大学 一种基于Kinect的手写方法
US20130304479A1 (en) * 2012-05-08 2013-11-14 Google Inc. Sustained Eye Gaze for Determining Intent to Interact
CN103577072A (zh) * 2012-07-26 2014-02-12 中兴通讯股份有限公司 一种终端语音辅助编辑的方法及装置
CN103885743A (zh) * 2012-12-24 2014-06-25 大陆汽车投资(上海)有限公司 结合注视跟踪技术的语音文本输入方法和***
CN104793724A (zh) * 2014-01-16 2015-07-22 北京三星通信技术研究有限公司 空中书写处理方法及装置
CN105468145A (zh) * 2015-11-18 2016-04-06 北京航空航天大学 一种基于手势和语音识别的机器人人机交互方法和装置
CN105573489A (zh) * 2014-11-03 2016-05-11 三星电子株式会社 控制外部对象的电子设备和方法
CN105653093A (zh) * 2015-12-29 2016-06-08 广州三星通信技术研究有限公司 在便携式终端中调节屏幕亮度的方法和设备
WO2016151396A1 (en) * 2015-03-20 2016-09-29 The Eye Tribe Method for refining control by combining eye tracking and voice recognition

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1449558A (zh) * 2000-09-20 2003-10-15 国际商业机器公司 用于上下文语音识别的眼睛凝视
CN102629166A (zh) * 2012-02-29 2012-08-08 中兴通讯股份有限公司 一种操控电脑的装置及通过装置操控电脑的方法
US20130304479A1 (en) * 2012-05-08 2013-11-14 Google Inc. Sustained Eye Gaze for Determining Intent to Interact
CN103577072A (zh) * 2012-07-26 2014-02-12 中兴通讯股份有限公司 一种终端语音辅助编辑的方法及装置
CN102866827A (zh) * 2012-08-21 2013-01-09 刘炳林 一种人机交互设备的文档编辑方法和装置
CN103885743A (zh) * 2012-12-24 2014-06-25 大陆汽车投资(上海)有限公司 结合注视跟踪技术的语音文本输入方法和***
CN103226388A (zh) * 2013-04-07 2013-07-31 华南理工大学 一种基于Kinect的手写方法
CN104793724A (zh) * 2014-01-16 2015-07-22 北京三星通信技术研究有限公司 空中书写处理方法及装置
CN105573489A (zh) * 2014-11-03 2016-05-11 三星电子株式会社 控制外部对象的电子设备和方法
WO2016151396A1 (en) * 2015-03-20 2016-09-29 The Eye Tribe Method for refining control by combining eye tracking and voice recognition
CN105468145A (zh) * 2015-11-18 2016-04-06 北京航空航天大学 一种基于手势和语音识别的机器人人机交互方法和装置
CN105653093A (zh) * 2015-12-29 2016-06-08 广州三星通信技术研究有限公司 在便携式终端中调节屏幕亮度的方法和设备

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107045419A (zh) * 2017-05-04 2017-08-15 奇酷互联网络科技(深圳)有限公司 一种输入用电子设备
CN107436749A (zh) * 2017-08-03 2017-12-05 安徽智恒信科技有限公司 基于三维虚拟现实场景的文字输入方法及***
CN108509029A (zh) * 2018-03-09 2018-09-07 苏州佳世达电通有限公司 非接触式输入方法及非接触式输入***
CN108509029B (zh) * 2018-03-09 2021-07-02 苏州佳世达电通有限公司 非接触式输入方法及非接触式输入***
CN109143875A (zh) * 2018-06-29 2019-01-04 广州市得腾技术服务有限责任公司 一种手势控制智能家居方法及其***
CN109143875B (zh) * 2018-06-29 2021-06-15 广州市得腾技术服务有限责任公司 一种手势控制智能家居方法及其***
CN109119079A (zh) * 2018-07-25 2019-01-01 天津字节跳动科技有限公司 语音输入处理方法和装置
CN109119079B (zh) * 2018-07-25 2022-04-01 天津字节跳动科技有限公司 语音输入处理方法和装置
CN110427139A (zh) * 2018-11-23 2019-11-08 网易(杭州)网络有限公司 文本处理方法及装置、计算机存储介质、电子设备
CN110427139B (zh) * 2018-11-23 2022-03-04 网易(杭州)网络有限公司 文本处理方法及装置、计算机存储介质、电子设备

Similar Documents

Publication Publication Date Title
CN106527729A (zh) 非接触式输入方法和装置
JP6802876B2 (ja) リアルタイム手書き認識の管理
AU2020267498B2 (en) Handwriting entry on an electronic device
US10379719B2 (en) Emoji recording and sending
TWI653545B (zh) 用於即時手寫辨識之方法、系統及非暫時性電腦可讀媒體
Wang et al. Gesturar: An authoring system for creating freehand interactive augmented reality applications
CN108897420B (zh) 用于响应于手势在显示状态之间过渡的设备、方法和图形用户界面
TWI564786B (zh) 管理即時手寫辨識
CN107102723B (zh) 用于基于手势的移动交互的方法、装置、设备和非暂时性计算机可读介质
EP4150437A2 (en) Interacting with handwritten content on an electronic device
US20110022992A1 (en) Method for modifying a representation based upon a user instruction
CN109886180A (zh) 用于交叠手写文本输入的用户界面
CN106687889A (zh) 显示器便捷式文本输入和编辑
CN108536293B (zh) 人机交互***、方法、计算机可读存储介质及交互装置
CN106796810A (zh) 在用户界面上从视频选择帧
CN107390881A (zh) 一种手势控制方法
CN108073267A (zh) 基于运动轨迹的三维控制方法及装置
CN106200900A (zh) 基于识别区域在视频中触发虚拟现实交互的方法及***
JPH09237151A (ja) グラフィカルユーザインタフェース
Yi et al. Generating 3D architectural models based on hand motion and gesture
JPH06242882A (ja) 情報処理装置
Song et al. HotGestures: Complementing command selection and use with delimiter-free gesture-based shortcuts in virtual reality
Chaudhry et al. Music Recommendation System through Hand Gestures and Facial Emotions
US20240061546A1 (en) Implementing contactless interactions with displayed digital content
EP4047552A1 (en) Information processing device, information processing method, and program

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination