JP5774235B2 - ユーザインタフェース装置、ユーザインタフェース方法、プログラム及びコンピュータ可読情報記憶媒体 - Google Patents
ユーザインタフェース装置、ユーザインタフェース方法、プログラム及びコンピュータ可読情報記憶媒体 Download PDFInfo
- Publication number
- JP5774235B2 JP5774235B2 JP2014539805A JP2014539805A JP5774235B2 JP 5774235 B2 JP5774235 B2 JP 5774235B2 JP 2014539805 A JP2014539805 A JP 2014539805A JP 2014539805 A JP2014539805 A JP 2014539805A JP 5774235 B2 JP5774235 B2 JP 5774235B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- character
- user interface
- represented
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
- G06F3/005—Input arrangements through a video camera
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- User Interface Of Digital Computer (AREA)
- Position Input By Displaying (AREA)
Description
Claims (10)
- 表示画面を見ているユーザの画像を取得する撮像手段と、
取得される前記画像に表された、前記ユーザが前記表示画面に表される選択要素を選択する位置である選択位置とは異なる、前記ユーザの体の基準部位の位置を認識する認識手段と、
前記画像における前記基準部位が表された位置に基づいて、前記選択要素の表示位置を決定する表示位置決定手段と、
決定された前記表示位置に前記選択要素を表示する表示手段と、を含み、
前記表示位置決定手段は、前記基準部位が表された位置から所与の距離だけ離間した位置に配置される所定形状の線に沿った位置を、前記選択要素の表示位置として決定し、
前記線よりも前記基準部位が表された位置側の領域を、前記ユーザが前記選択位置により空中に文字を書くジェスチャを行う領域とし、前記ジェスチャにより前記ユーザが書いた文字が認識される、
ことを特徴とするユーザインタフェース装置。 - 請求項1に記載のユーザインタフェース装置において、
前記基準部位は前記ユーザの手又は腕の関節であり、
前記選択位置は前記ユーザの手又は腕のうち、前記基準部位よりも手先側の一部である、
ことを特徴とするユーザインタフェース装置。 - 請求項2に記載のユーザインタフェース装置において、
前記基準部位は前記ユーザの肩である、
ことを特徴とするユーザインタフェース装置。 - 請求項1乃至3のいずれかに記載のユーザインタフェース装置において、
前記基準部位が表された位置から見て前記線よりも外の領域に特定機能に係るボタン画像を表示する、
ことを特徴とするユーザインタフェース装置。 - 請求項1乃至4のいずれかに記載のユーザインタフェース装置において、
前記選択位置と前記基準部位が表された位置との距離を算出する距離算出手段をさらに含み、
前記所与の距離は、算出された前記距離に基づいて決定される、
ことを特徴とするユーザインタフェース装置。 - 請求項1乃至5のいずれかに記載のユーザインタフェース装置において、
前記線は円弧又は楕円弧状である、
ことを特徴とするユーザインタフェース装置。 - 請求項1乃至6のいずれかに記載のユーザインタフェース装置において、
前記表示位置決定手段は、複数の前記選択要素の表示位置を決定し、前記各選択要素の位置は、その優先順位と、前記選択位置の位置と、に基づいて決定される、
ことを特徴とするユーザインタフェース装置。 - 表示画面を見ているユーザの画像を取得するステップと、
取得される前記画像に表された、前記ユーザが前記表示画面に表される選択要素を選択する位置である選択位置とは異なる、前記ユーザの体の基準部位の位置を認識するステップと、
前記画像における前記基準部位が表された位置に基づいて、前記選択要素の表示位置を決定するステップと、
決定された前記表示位置に前記選択要素を表示するステップと、を含み、
前記決定するステップは、前記基準部位が表された位置から所与の距離だけ離間した位置に配置される所定形状の線に沿った位置を、前記選択要素の表示位置として決定し、
前記線よりも前記基準部位が表された位置側の領域を、前記ユーザが前記選択位置により空中に文字を書くジェスチャを行う領域とし、前記ジェスチャにより前記ユーザが書いた文字が認識される、
ことを特徴とするユーザインタフェース方法。 - 表示画面を見ているユーザの画像を取得する撮像手段、
取得される前記画像に表された、前記ユーザが前記表示画面に表される選択要素を選択する位置である選択位置とは異なる、前記ユーザの体の基準部位の位置を認識する認識手段、
前記画像における前記基準部位が表された位置に基づいて、前記選択要素の表示位置を決定する表示位置決定手段、及び
決定された前記表示位置に前記選択要素を表示する表示手段
としてコンピュータを機能させるためのプログラムであって、
前記表示位置決定手段は、前記基準部位が表された位置から所与の距離だけ離間した位置に配置される所定形状の線に沿った位置を、前記選択要素の表示位置として決定し、
前記線よりも前記基準部位が表された位置側の領域を、前記ユーザが前記選択位置により空中に文字を書くジェスチャを行う領域とし、前記ジェスチャにより前記ユーザが書いた文字が認識される、プログラム。 - 請求項9に記載のプログラムを格納したコンピュータ可読情報記憶媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201261709215P | 2012-10-03 | 2012-10-03 | |
US61/709,215 | 2012-10-03 | ||
PCT/JP2013/076903 WO2014054718A1 (ja) | 2012-10-03 | 2013-10-03 | ユーザインタフェース装置、ユーザインタフェース方法、プログラム及びコンピュータ可読情報記憶媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP5774235B2 true JP5774235B2 (ja) | 2015-09-09 |
JPWO2014054718A1 JPWO2014054718A1 (ja) | 2016-08-25 |
Family
ID=50435038
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014539805A Active JP5774235B2 (ja) | 2012-10-03 | 2013-10-03 | ユーザインタフェース装置、ユーザインタフェース方法、プログラム及びコンピュータ可読情報記憶媒体 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9880630B2 (ja) |
JP (1) | JP5774235B2 (ja) |
WO (1) | WO2014054718A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9874857B1 (en) * | 2015-06-25 | 2018-01-23 | Fissix, Llc | Simulated mirrored display apparatus and method |
USD918255S1 (en) | 2017-05-12 | 2021-05-04 | Bissantz & Company Beteiligungsgesellschaft Mbh | Display screen having a graphical user interface for business models |
US11314924B2 (en) * | 2020-06-04 | 2022-04-26 | Adobe Inc. | Constructing a path for character glyphs |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS584424A (ja) | 1981-07-01 | 1983-01-11 | Toshiba Corp | 日本語入力装置 |
JP3974359B2 (ja) | 2000-10-31 | 2007-09-12 | 株式会社東芝 | オンライン文字認識装置及び方法並びにコンピュータ読み取り可能な記憶媒体及びオンライン文字認識プログラム |
US8904312B2 (en) * | 2006-11-09 | 2014-12-02 | Navisense | Method and device for touchless signing and recognition |
US8060841B2 (en) | 2007-03-19 | 2011-11-15 | Navisense | Method and device for touchless media searching |
US8726194B2 (en) * | 2007-07-27 | 2014-05-13 | Qualcomm Incorporated | Item selection using enhanced control |
JP4221445B1 (ja) | 2008-06-11 | 2009-02-12 | 株式会社ベイビッグ | テレビ電話端末、テレビ電話端末制御方法及びプログラム |
US8402391B1 (en) * | 2008-09-25 | 2013-03-19 | Apple, Inc. | Collaboration system |
TW201015382A (en) | 2008-10-09 | 2010-04-16 | Univ Nat Chiao Tung | Virtual input system and method |
US8773355B2 (en) * | 2009-03-16 | 2014-07-08 | Microsoft Corporation | Adaptive cursor sizing |
US8549432B2 (en) * | 2009-05-29 | 2013-10-01 | Apple Inc. | Radial menus |
JP5487208B2 (ja) | 2009-08-27 | 2014-05-07 | 株式会社東芝 | 情報検索装置 |
JP5547466B2 (ja) * | 2009-12-15 | 2014-07-16 | 京セラ株式会社 | 携帯電子機器及び携帯電子機器の制御方法 |
US8310461B2 (en) * | 2010-05-13 | 2012-11-13 | Nuance Communications Inc. | Method and apparatus for on-top writing |
JP2011253292A (ja) | 2010-06-01 | 2011-12-15 | Sony Corp | 情報処理装置および方法、並びにプログラム |
JP2011258130A (ja) * | 2010-06-11 | 2011-12-22 | Namco Bandai Games Inc | プログラム、情報記憶媒体及び画像生成システム |
US20120038652A1 (en) | 2010-08-12 | 2012-02-16 | Palm, Inc. | Accepting motion-based character input on mobile computing devices |
US8311973B1 (en) | 2011-09-24 | 2012-11-13 | Zadeh Lotfi A | Methods and systems for applications for Z-numbers |
-
2013
- 2013-10-03 WO PCT/JP2013/076903 patent/WO2014054718A1/ja active Application Filing
- 2013-10-03 JP JP2014539805A patent/JP5774235B2/ja active Active
- 2013-10-03 US US14/433,381 patent/US9880630B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20150261300A1 (en) | 2015-09-17 |
JPWO2014054718A1 (ja) | 2016-08-25 |
WO2014054718A1 (ja) | 2014-04-10 |
US9880630B2 (en) | 2018-01-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5897725B2 (ja) | ユーザインタフェース装置、ユーザインタフェース方法、プログラム及びコンピュータ可読情報記憶媒体 | |
JP5208267B2 (ja) | 入力装置 | |
JP5802667B2 (ja) | ジェスチャ入力装置およびジェスチャ入力方法 | |
JP5604279B2 (ja) | ジェスチャー認識装置、方法、プログラム、および該プログラムを格納したコンピュータ可読媒体 | |
US20110254765A1 (en) | Remote text input using handwriting | |
CN109074224A (zh) | 用于在字符串中***字符的方法以及相应的数字设备 | |
JP6355823B2 (ja) | 入力表示制御装置、入力表示制御方法及び入力表示システム | |
JP5897726B2 (ja) | ユーザインタフェース装置、ユーザインタフェース方法、プログラム及びコンピュータ可読情報記憶媒体 | |
JPWO2014041607A1 (ja) | 情報処理装置、情報処理方法およびプログラム | |
JP2014229091A (ja) | 文字入力用のプログラム | |
JP5774235B2 (ja) | ユーザインタフェース装置、ユーザインタフェース方法、プログラム及びコンピュータ可読情報記憶媒体 | |
Plouffe et al. | Natural human-computer interaction using static and dynamic hand gestures | |
JP6055065B1 (ja) | 文字認識プログラム、文字認識装置 | |
TWI303783B (en) | Method and device for recognition of a handwritten pattern, and computer program product | |
CN111782041A (zh) | 打字方法及装置、设备、存储介质 | |
KR101775080B1 (ko) | Nui/nux에 기반하여 드로잉 영상을 처리하는 장치 및 방법 | |
KR101911676B1 (ko) | 지시체의 움직임을 고려한 프리젠테이션 영상 처리장치 및 방법 | |
JP2021009552A (ja) | 情報処理装置、情報処理方法およびプログラム | |
US20210264681A1 (en) | Input display control device, input display control method, and input display system | |
Kurosu | Human-Computer Interaction. Interaction Technologies: 20th International Conference, HCI International 2018, Las Vegas, NV, USA, July 15–20, 2018, Proceedings, Part III | |
JP6562542B2 (ja) | 文字列入力装置 | |
CN118230339A (zh) | 一种文本识别方法、装置及电子设备 | |
JP2021149296A (ja) | 現実物体に対するクラスタリングの可視化システム、可視化制御装置、可視化方法および可視化制御用プログラム | |
JP2009199255A (ja) | 入力支援装置及び方法 | |
KR20030090381A (ko) | 문자 인식방법 및 문자 인식장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20150610 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150623 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150630 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5774235 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |