CN102609086A - 适用于视线输入的汉字输入方法 - Google Patents

适用于视线输入的汉字输入方法 Download PDF

Info

Publication number
CN102609086A
CN102609086A CN2011104557913A CN201110455791A CN102609086A CN 102609086 A CN102609086 A CN 102609086A CN 2011104557913 A CN2011104557913 A CN 2011104557913A CN 201110455791 A CN201110455791 A CN 201110455791A CN 102609086 A CN102609086 A CN 102609086A
Authority
CN
China
Prior art keywords
input
character
user
character code
attentively
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011104557913A
Other languages
English (en)
Other versions
CN102609086B (zh
Inventor
赵歆波
马钟
满毅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Northwestern Polytechnical University
Original Assignee
Northwestern Polytechnical University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Northwestern Polytechnical University filed Critical Northwestern Polytechnical University
Priority to CN201110455791.3A priority Critical patent/CN102609086B/zh
Publication of CN102609086A publication Critical patent/CN102609086A/zh
Application granted granted Critical
Publication of CN102609086B publication Critical patent/CN102609086B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Input From Keyboards Or The Like (AREA)

Abstract

本发明公开了一种适用于视线输入的汉字输入方法,采用笔画输入作为输入方式,根据用户当前注视的字码,生成一个候选字区和待输入的下一个字码区,若用户期望输入的字符已出现在候选字区域,则用户注视该字,经过设定时间以后输入该字符,本次输入结束;否则,用户注视下一个需要输入的字码,并且以用户当前所注视的字码为中心,左右两侧分别弹出可能的下一个输入字码和候选字;直至用户完成输入。本发明提高了基于视线的文字输入方式的易用性和输入效率。

Description

适用于视线输入的汉字输入方法
技术领域
本发明属于视线跟踪应用与文字输入领域,涉及对视线应用分析,以及文字输入的解决方案。
背景技术
基于视觉的人机交互是当前图像处理领域的热点问题,其基本原理为根据眼睛的特征和位置以及其他一些脸部线索来决定用户注视的方向,把它作为一种可选的或互补的计算机输入通道,为人机交互提供一种新的方式。随着视线追踪技术日臻成熟,目前眼动测量达到的时间与空间精度为以视线追踪技术取代传统的指点设备,成为一种全新的输入通道提供了可能。
现有的基于视线跟踪的文字输入类似于使用计算机屏幕上的虚拟键盘进行输入,其界面大体相同,不同的是指示和触发选择的动作由人眼注视信息,而不是鼠标或其它输入设备来执行。
尽管视线跟踪技术已经相对成熟,并且达到了相当高的精度(约0.5-1°),但受限于视线输入方式的特性,现有视线输入方法的输入速度极慢,这在很大程度上阻碍了视线输入的实际应用。
利用视线进行输入主要存在三个问题:一是人的视线存在无意识的眼跳,即当用户注视某个点时,其注视点并非稳定的落在该处,而是在以改点为中心的一个小范围内随机的跳动。这是由人眼的生理机制所决定的。二是用连续的过程输入离散的字符。视线输入方式是一个连续的过程,不像传统的用手敲击键盘,得到是一系列离散的输入,视线的输入是一条轨迹,我们难以从该轨迹中判断用户的实际意图是要输入哪几个字符。如:采用拼音输入法输入汉字“我”,传统的键盘输入方式要求用户依次敲击按键“w”,“o”即可完成输入,但当采用视线输入方式时,用户依次注视计算机屏幕上的虚拟键盘的“w”和“o”字符,其注视点必然会经过“w”和“o”中间的字符,造成输入信息的歧义。第三个问题是输入的起止问题,即同样,视线的输入是一个连续过程,如何判断用户何时开始输入,何时结束输入,以及是否是无意义的输入,如用户在对着屏幕发呆等。
针对第一个问题,可采用使用较大尺寸的字符区域来解决。针对第二个问题,IBMAlmaden Research Center的Shumin Zhai和Per Ola Kristensson提出了一种滑动的输入方式——ShapeWriter。ShapeWriter通过用连续的滑过要输入的字符解决了用连续的过程输入离散字符的问题,然而ShapeWriter只适用于英文输入,并且其依然没有解决输入的起止判断问题。
发明内容
为了克服现有技术的不足,本发明提供一种适用于视线输入的汉字输入方法,能够解决输入的起止问题,准确快速的进行文字输入。
本发明解决其技术问题所采用的技术方案包括以下步骤:
(1)采用笔画输入作为基本的输入方式。由于笔画输入法所包含的总的字码只有五个,分别为横(一),竖(丨),撇(丿),点(丶),折(乛)。相对其他常用的输入方式(拼音、五笔),字码总数少,因此每个字符区域可设置的相对较大。将这些字码在屏幕上沿垂直方向一字排开,作为本输入法的初始布局。
(2)当用户注视本输入法初始布局的任一个字码时,即开始输入过程。此时,根据用户当前注视的字码,生成一个候选字区和待输入的下一个字码区,分别沿垂直方向排列在当前输入字码的两侧。
(3)若用户期望输入的字符已出现在候选字区域,则用户注视该字,经过设定时间以后,认为该字符即为用户期望输入的字符,于是输入该字符,本次输入结束。否则,转入下一步。判断用户当前所注视的字符是否为用户实际期望输入的字符的时间段长度可调,根据用户使用本输入法的熟练程度,可在0.5~3秒之间进行调整。
(4)若用户期望输入的字符尚未出现在候选字区域,则用户视线向另一侧移动,注视下一个需要输入的字码,即继续输入下一个笔画,并且以用户当前所注视的字码为中心,左右两侧分别弹出可能的下一个输入字码和候选字。
(5)重复步骤(3)~步骤(4),直至用户完成输入。
所述的步骤(4)中,当用户视线向另一侧移动,注视下一个需要输入的字码时,初始位置的字码消隐,以避免干扰当前字码的输入。
本发明的有益效果是:
通过采用动态虚拟键盘,候选字和下一个输入字码分别放置于当前输入字码两侧的键盘布局方式,本发明很好的解决了基于视线的文字输入方式中存在的连续的输入路径导致的输入歧义,以及每个字输入过程中开始和结束时机判断的问题,提高了基于视线的文字输入方式的易用性和输入效率,给电脑用户提过了一种全新的文字输入方式,无需用手,只需用眼睛盯着屏幕看即可完成文字输入。这使得不便用手操作电脑的用户也可顺利地进行文字的输入。
下面结合附图和实施例对本发明进一步说明。
附图说明
图1,本发明的技术流程。
图2,本发明初始的虚拟键盘布局方式。
图3,当用户注视一个字码时,虚拟键盘的布局方式。其中,1为候选字区,2为当前字码输入区,3为下一个字码输入区,4为用户当前注视的位置。
图4,当用户注视第二个字码时,虚拟键盘的布局方式。5为上一个字码输入区中的字码,为避免干扰当前字码的输入,应降低这一区域对用户的视觉吸引力,将其颜色变淡或使其消失不见。
图5,为选择用户期望输入的字时虚拟键盘的外观。
图6,实际输入应用中,虚拟键盘的初始状态在计算机屏幕上的显示。6为计算机屏幕。7为文字输入区域,可为一般的文字处理软件。
图7,实际输入应用中,输入汉字“我”的第一个字码“撇(丿)”时计算机屏幕显示的内容。
图8,实际输入应用中,选择候选字“我”时计算机屏幕显示的内容。
图9,实际输入应用中,完成汉字“我”的输入后,计算机屏幕显示的内容。
图10,实际输入应用中,输入汉字“在”的第一个字码“横(一)”时计算机屏幕显示的内容。
图11,实际输入应用中,输入汉字“在”的第二个字码“撇(丿)”时计算机屏幕显示的内容。
图12,实际输入应用中,选择候选字“在”时计算机屏幕显示的内容。
图13,实际输入应用中,完成汉字“在”的输入后,计算机屏幕显示的内容。
图14,实际输入应用中,输入汉字“输”的第一个字码“横(一)”时计算机屏幕显示的内容。
图15,实际输入应用中,输入汉字“输”的第二个字码“折(乛)”时计算机屏幕显示的内容。
图16,实际输入应用中,输入汉字“输”的第三个字码“竖(丨)”时计算机屏幕显示的内容。
图17,实际输入应用中,选择候选字“输”时计算机屏幕显示的内容。
图18,实际输入应用中,完成汉字“输”的输入后,计算机屏幕显示的内容。
图19,在输入汉字“输”的过程中,注视点的位置及其移动轨迹。其中,圆圈表示曾经注视过的输入字码,其旁边的数字表示注视的顺序。
具体实施方式
为便于采用视线进行输入,提高文字输入效率,并对用户更加方便易用,本发明针对目前现有技术中存在的问题,提出了一种适合视线的汉字输入的方法。
本发明的整个实施流程如图1所示。具体方法如下:
(1)针对人的视线存在无意识的眼跳的问题,可采用使用较大尺寸的字符区域来解决。然而,屏幕上可供显示的区域是有限的,因此为了在有限的面积上显示较大的字符尺寸,本发明采用了笔画输入法进行输入。其键盘布局如图2所示。笔画输入法其总的所需字码个数少(共五个,分别为横(一),竖(丨),撇(丿),点(丶),折(乛)),并且具有不错的输入速度,以及较低的重码率,而且该输入法简单易用,无需学习,这些特点使其非常适合作为基于视线跟踪的输入方式。
(2)针对视线的输入是一个连续过程的特点,提出了一种动态虚拟键盘布局,候选字和下一个输入字码分别放置于当前输入字符两侧的输入方式。该虚拟键盘初始布局如图2所示,在计算机屏幕上沿垂直方向一字排开。当用户注视其中一个字码时,如图3所示,在该字符一侧弹出可能的下一个输入字码,在另一侧弹出候选字。此时,若用户期望输入的字符已出现在候选字区域,则注视该字即可完成输入,若用户期望输入的字符尚未出现在候选字区域,则用户视线向另一侧移动,注视下一个需要输入的字码,即继续输入下一个笔画。此时,初始位置的虚拟键盘消隐,以避免干扰当前字码的输入。并且以用户当前所注视的字码为中心,左右两侧分别弹出可能的下一个输入字码和候选字。如图4所示。若用户期望输入的字符已出现在候选字区,则注视该字完成输入。若用户期望输入的字符仍未出现,则继续注视另一侧下一个字码。该输入方式重复上述过程,直至用户完成输入。通过采用动态虚拟键盘,候选字和下一个输入字码分别放置于当前输入字码两侧的键盘布局方式,本发明很好的解决了基于视线的文字输入方式中存在的连续的输入路径导致的输入歧义,以及每个字输入过程中开始和结束时机判断的问题。
本输入法同硬件无关,可以利用任何眼动仪在电脑上进行文字输入。本示例将采用瑞典的Tobii公司生产的Tobii x120桌面式眼动仪以获取用户的注视点在电脑屏幕上的位置,以及一台普通的计算机作为实验平台进行文字输入的描述。
实施示例一:
本示例演示输入一个字码即可完成输入的汉字“我”。具体步骤如下:
1)启动电脑,打开一个文字处理软件,启动本输入法。此时,计算机屏幕上显示的内容如图6所示。
2)用户注视汉字“我”的第一个字码“撇(丿)”。此时,计算机屏幕上显示的内容如图7所示。
3)由于“我”字较为常用,此时候“我”字已出现在选字区。注视以选择该字。此时,计算机屏幕上显示的内容如图8所示。
4)完成“我”字输入。此时虚拟键盘恢复初始状态,计算机屏幕上显示的内容如图9所示。
实施示例二:
本示例演示在完成上个汉字“我”的输入后,继续输入需要输入两个字码以完成输入的汉字“在”。具体步骤如下:
1)用户注视汉字“在”的第一个字码“横(一)”,此时,计算机屏幕上显示的内容如图10所示。
2)由于“在”字尚未出现在候选字区,用户可继续向右注视“在”字的第二个字码“撇(丿)”。此时,计算机屏幕上显示的内容如图11所示。
3)在完成两个笔画的选择后,“在”字已出现在候选字区,用户此时可注视该字以完成该字的输入。此时,计算机屏幕上显示的内容如图12所示。
4)完成“在”字输入。此时虚拟键盘恢复初始状态,计算机屏幕上显示的内容如图13所示。
实施示例三:
本示例演示需要输入三个字码以完成输入的汉字“输”。具体步骤如下:
1)用户注视汉字“输”的第一个字码“横(一)”,此时,计算机屏幕上显示的内容如图14所示。
2)由于“输”字尚未出现在候选字区,用户可继续向右注视“输”字的第二个字码“折(乛)”。此时,计算机屏幕上显示的内容如图15所示。
3)“输”字仍未出现在候选字区,用户继续向右注视“输”字的第三个字码“竖(丨)”。此时,计算机屏幕上显示的内容如图16所示。
4)在完成三个笔画的选择后,“输”字已出现在候选字区,用户此时可注视该字以完成该字的输入。此时,计算机屏幕上显示的内容如图17所示。
5)完成“输”字输入。此时虚拟键盘恢复初始状态,计算机屏幕上显示的内容如图18所示。
6)图19显示了完成“输”字输入中用户注视点的移动轨迹和顺序。其中圆圈表示用户的注视过的输入字码,圆圈旁的数字表示注视的顺序。从该示例可以看出,用户只需短短一瞥,即可完成一个汉字的输入。

Claims (3)

1.一种适用于视线输入的汉字输入方法,其特征在于包括下述步骤:
(1)采用笔画输入作为输入方式,将字码在屏幕上沿垂直方向一字排开,所述的字码为横、竖、撇、点、折;
(2)当用户注视任一个字码时,根据用户当前注视的字码,生成一个候选字区和待输入的下一个字码区,分别沿垂直方向排列在当前输入字码的两侧;
(3)若用户期望输入的字符已出现在候选字区域,则用户注视该字,经过设定时间以后,输入该字符,本次输入结束;否则,转入下一步;
(4)若用户期望输入的字符尚未出现在候选字区域,则用户视线向另一侧移动,注视下一个需要输入的字码,并且以用户当前所注视的字码为中心,左右两侧分别弹出可能的下一个输入字码和候选字;
(5)重复步骤(3)~步骤(4),直至用户完成输入。
2.根据权利要求1所述的适用于视线输入的汉字输入方法,其特征在于:所述的设定时间为0.5~3秒。
3.根据权利要求1所述的适用于视线输入的汉字输入方法,其特征在于:所述的步骤(4)中,当用户视线向另一侧移动,注视下一个需要输入的字码时,初始位置的字码消隐。
CN201110455791.3A 2011-12-26 2011-12-26 适用于视线输入的汉字输入方法 Expired - Fee Related CN102609086B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110455791.3A CN102609086B (zh) 2011-12-26 2011-12-26 适用于视线输入的汉字输入方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110455791.3A CN102609086B (zh) 2011-12-26 2011-12-26 适用于视线输入的汉字输入方法

Publications (2)

Publication Number Publication Date
CN102609086A true CN102609086A (zh) 2012-07-25
CN102609086B CN102609086B (zh) 2014-09-10

Family

ID=46526526

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110455791.3A Expired - Fee Related CN102609086B (zh) 2011-12-26 2011-12-26 适用于视线输入的汉字输入方法

Country Status (1)

Country Link
CN (1) CN102609086B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103631364A (zh) * 2012-08-20 2014-03-12 联想(北京)有限公司 一种控制方法及电子设备
CN105005728A (zh) * 2015-07-29 2015-10-28 南京大学 基于眼动输入带振动反馈的密码输入装置
TWI631484B (zh) * 2017-03-07 2018-08-01 緯創資通股份有限公司 基於方向的文字輸入方法及其系統與電腦可讀取記錄媒體
CN111145858A (zh) * 2019-11-29 2020-05-12 淮阴工学院 一种基于人脸识别的医药品自助售货***及方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5649061A (en) * 1995-05-11 1997-07-15 The United States Of America As Represented By The Secretary Of The Army Device and method for estimating a mental decision
CN101201696A (zh) * 2007-11-29 2008-06-18 浙江大学 基于p300脑电电位的中文输入bci***
CN101515199A (zh) * 2009-03-24 2009-08-26 北京理工大学 一种基于视线跟踪和p300脑电电位的字符输入装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5649061A (en) * 1995-05-11 1997-07-15 The United States Of America As Represented By The Secretary Of The Army Device and method for estimating a mental decision
CN101201696A (zh) * 2007-11-29 2008-06-18 浙江大学 基于p300脑电电位的中文输入bci***
CN101515199A (zh) * 2009-03-24 2009-08-26 北京理工大学 一种基于视线跟踪和p300脑电电位的字符输入装置

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103631364A (zh) * 2012-08-20 2014-03-12 联想(北京)有限公司 一种控制方法及电子设备
CN103631364B (zh) * 2012-08-20 2017-06-27 联想(北京)有限公司 一种控制方法及电子设备
CN105005728A (zh) * 2015-07-29 2015-10-28 南京大学 基于眼动输入带振动反馈的密码输入装置
TWI631484B (zh) * 2017-03-07 2018-08-01 緯創資通股份有限公司 基於方向的文字輸入方法及其系統與電腦可讀取記錄媒體
CN111145858A (zh) * 2019-11-29 2020-05-12 淮阴工学院 一种基于人脸识别的医药品自助售货***及方法
CN111145858B (zh) * 2019-11-29 2024-01-23 淮阴工学院 一种基于人脸识别的医药品自助售货***及方法

Also Published As

Publication number Publication date
CN102609086B (zh) 2014-09-10

Similar Documents

Publication Publication Date Title
Hansen et al. Command without a click: Dwell time typing by mouse and gaze selections
Grubert et al. Text entry in immersive head-mounted display-based virtual reality using standard keyboards
Rajanna et al. Gaze typing in virtual reality: impact of keyboard design, selection method, and motion
Kristensson et al. The potential of dwell-free eye-typing for fast assistive gaze communication
Majaranta et al. Text entry by gaze: Utilizing eye-tracking
KR20180083252A (ko) 실제 객체 및 가상 객체와 상호작용하기 위한 생체기계적 기반의 안구 신호를 위한 시스템 및 방법
Møllenbach et al. Single gaze gestures
JP2002324064A (ja) 漢字等の表意ベース言語のテキスト入力を加速するためのシステムおよび方法
CN102609086B (zh) 适用于视线输入的汉字输入方法
CN111586459B (zh) 一种控制视频播放的方法、装置、电子设备及存储介质
Jantunen Signs and transitions: Do they differ phonetically and does it matter?
CN104281399B (zh) 依据手势翻译对应目标文字的***及其方法
CN104066012A (zh) 一种智能电视输入汉字的方法及装置
CN102339128A (zh) 一种用脑电波输入汉字的虚拟键盘设计方案
EP1756700B1 (de) Verfahren, system und vorrichtung zur körpergesteuerten übertragung von selektierbaren datenelementen an ein endgerät
Ma et al. Trigger motion and interface optimization of an eye-controlled human-computer interaction system based on voluntary eye blinks
Miniotas et al. Symbol Creator: An Alternative Eye-based Text Entry Technique with Low Demand for Screen Space.
Dickie et al. LookPoint: an evaluation of eye input for hands-free switching of input devices between multiple computers
CN102707793A (zh) 眼控鼠标
HOLT et al. Which fragments of a sign enable its recognition?
Špakov et al. Scrollable Keyboards for Casual Eye Typing.
US20220129069A1 (en) Information processing apparatus, information processing method, and program
CN114675798A (zh) 一种电子设备的翻译显示方法
Tula et al. Meta-keys: extending the functionality of gaze-based interaction.
Diaz Tula et al. Facilitating gaze interaction using the gap and overlap effects

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20140910

Termination date: 20141226

EXPY Termination of patent right or utility model