JP2012168595A - 統合入力インターフェース - Google Patents
統合入力インターフェース Download PDFInfo
- Publication number
- JP2012168595A JP2012168595A JP2011026685A JP2011026685A JP2012168595A JP 2012168595 A JP2012168595 A JP 2012168595A JP 2011026685 A JP2011026685 A JP 2011026685A JP 2011026685 A JP2011026685 A JP 2011026685A JP 2012168595 A JP2012168595 A JP 2012168595A
- Authority
- JP
- Japan
- Prior art keywords
- finger
- command
- likelihood
- pressed
- input interface
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 claims abstract description 22
- 210000003811 finger Anatomy 0.000 claims description 304
- 238000003825 pressing Methods 0.000 claims description 40
- 238000012790 confirmation Methods 0.000 claims description 28
- 210000003813 thumb Anatomy 0.000 claims description 25
- 238000013459 approach Methods 0.000 claims description 13
- 210000004932 little finger Anatomy 0.000 claims description 12
- 238000012545 processing Methods 0.000 claims description 7
- 239000011521 glass Substances 0.000 claims description 5
- 230000000881 depressing effect Effects 0.000 abstract 3
- 230000010365 information processing Effects 0.000 description 27
- 238000005286 illumination Methods 0.000 description 20
- 238000009792 diffusion process Methods 0.000 description 6
- 241000699666 Mus <mouse, genus> Species 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 210000004936 left thumb Anatomy 0.000 description 4
- 238000003860 storage Methods 0.000 description 4
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 3
- 210000004935 right thumb Anatomy 0.000 description 3
- 230000003247 decreasing effect Effects 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 210000004247 hand Anatomy 0.000 description 2
- 241000699670 Mus sp. Species 0.000 description 1
- 210000001015 abdomen Anatomy 0.000 description 1
- 230000017531 blood circulation Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 239000013013 elastic material Substances 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000004898 kneading Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000010008 shearing Methods 0.000 description 1
Landscapes
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
【解決手段】情報処理装置10は、入力デバイス20とコンピューター30とディスプレイ40とを備えている。入力デバイス20は、内蔵された撮影装置をドーム型の操作カバー25が覆うように設けられている。コンピューター30は、撮影装置によって撮影された手全体のカラー画像に基づいて操作カバー25を押圧した押圧指を認識し、その押圧指に基づいて確定コマンドを生成する一方、そのカラー画像に基づいて操作カバー25に接近してくる接近中の指を認識し、その指に基づいて予定コマンドを生成し、各コマンドに対応した処理を実行する。
【選択図】図1
Description
カラー画像を撮影可能な撮影手段と、
前記撮影手段を覆うように設けられ、オペレーターの手全体を接触可能な外表面を有する光透過性の操作カバーと、
前記撮影手段によって撮影された手全体のカラー画像に基づいて前記外表面を押圧した押圧指を認識し、該押圧指に基づいて確定コマンドを生成する一方、前記撮影手段によって撮影された手全体のカラー画像に基づいて前記外表面に接近してくる接近中の指を認識し、該接近中の指を押圧予定指とみなし、該押圧予定指に基づいて予告コマンドを生成するコマンド生成手段と、
前記コマンド生成手段が前記確定コマンドを生成したときには該確定コマンドに対応した処理を実行し、前記コマンド生成手段が前記予告コマンドを生成したときには前記確定コマンドに対応した処理が実行されることを予告する予告処理を実行する処理実行手段と、
を備えたものである。
Claims (9)
- カラー画像を撮影可能な撮影手段と、
前記撮影手段を覆うように設けられ、オペレーターの手全体を接触可能な外表面を有する光透過性の操作カバーと、
前記撮影手段によって撮影された手全体のカラー画像に基づいて前記外表面を押圧した押圧指を認識し、該押圧指に基づいて確定コマンドを生成する一方、前記撮影手段によって撮影された手全体のカラー画像に基づいて前記外表面に接近してくる接近中の指を認識し、該接近中の指を押圧予定指とみなし、該押圧予定指に基づいて予告コマンドを生成するコマンド生成手段と、
前記コマンド生成手段が前記確定コマンドを生成したときには該確定コマンドに対応した処理を実行し、前記コマンド生成手段が前記予告コマンドを生成したときには前記確定コマンドに対応した処理が実行されることを予告する予告処理を実行する処理実行手段と、
を備えた統合入力インターフェース。 - 前記コマンド生成手段は、指の明度、彩度及び稜線の明確さの少なくとも1つのパラメータと前記外表面から指までの距離との予め定められた関係と、前記カラー画像を取り込むインターバル時間とを利用して、前記押圧指及び前記押圧予定指を認識する、
請求項1に記載の統合入力インターフェース。 - 前記コマンド生成手段は、前記外表面のうち前記押圧指によって押圧された位置を算出し、前記押圧指と前記位置とに基づいて確定コマンドを生成する一方、前記外表面のうち前記押圧予定指によって押圧されると推定される推定位置を求め、前記押圧予定指と前記推定位置とに基づいて予告コマンドを生成する、
請求項1又は2に記載の統合入力インターフェース。 - 前記コマンド生成手段は、前記接近中の指が複数存在していた場合、各接近中の指と前記外表面との距離を求め、該距離が最短の指を前記押圧予定指とみなすか、又は、各接近中の指の接近速度に基づいて接触予定時間を算出し、該接触予定時間が最短の指を前記押圧予定指とみなす、
請求項1〜3のいずれか1項に記載の統合入力インターフェース。 - 前記コマンド生成手段は、前記接近中の指と前記外表面との距離が同等のものが複数存在していた場合、各接近中の指の接近速度を求め、該接近速度が最速の指を前記押圧予定指とみなす、
請求項4に記載の統合入力インターフェース。 - 請求項1〜5のいずれか1項に記載の統合入力インターフェースであって、
少なくとも文字を出力可能な出力手段を備え、
前記処理実行手段は、前記操作カバー上に仮想キーボードを設定し、前記コマンド生成手段によって前記確定コマンドが生成されると、該確定コマンドに含まれる指及び押圧位置に対応する前記仮想キーボード上の文字を所定の態様で前記出力手段に出力し、前記コマンド生成手段によって前記予告コマンドが生成されると、該予告コマンドに含まれる押圧予定指及び推定位置に対応する前記仮想キーボード上の文字を前記所定の態様とは異なる態様で前記出力手段に出力する、
統合入力インターフェース。 - 前記コマンド生成手段は、前記撮影手段によって撮影された人間の手全体のカラー画像の画素データを、色相が肌基準色に近いほど、また、明度及び彩度が大きいほど、大きくなるように定められた尤度に変換し、該尤度に基づいて作成される尤度画像から各指を認識する、
請求項1〜6のいずれか1項に記載の統合入力インターフェース。 - 前記コマンド生成手段は、前記尤度画像から各指を認識するにあたり、前記尤度画像において掌上の所定の点を中心とする複数の同心円を描いたときの各円周上の尤度のピーク画素を探索し、前記所定の点から半径外方向に沿って並んでいる尤度のピーク画素群を結んだ4本の指中心線を作成し、該4本の指中心線のうち両側2本の指中心線に基づいて親指付け根候補位置を2箇所算出し、該2箇所の親指付け根候補位置を中心とする複数の同心円を描いたときの各円周上の尤度のピーク画素を探索し、該探索した尤度のピーク画素を結んだ指中心線を親指と認識し、該認識した親指に基づいて前記4本の指中心線を人差し指、中指、薬指、小指に割り当てる、
請求項7に記載の統合入力インターフェース。 - 前記操作カバーは、ドーム型であって、内表面が滑らかな面であり外表面が磨りガラスのように細かい凹凸を持つ面である、
請求項1〜8のいずれか1項に記載の統合入力インターフェース。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011026685A JP5737748B2 (ja) | 2011-02-10 | 2011-02-10 | 統合入力インターフェース |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011026685A JP5737748B2 (ja) | 2011-02-10 | 2011-02-10 | 統合入力インターフェース |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012168595A true JP2012168595A (ja) | 2012-09-06 |
JP5737748B2 JP5737748B2 (ja) | 2015-06-17 |
Family
ID=46972728
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011026685A Active JP5737748B2 (ja) | 2011-02-10 | 2011-02-10 | 統合入力インターフェース |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5737748B2 (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014112397A1 (en) | 2013-01-21 | 2014-07-24 | Toyota Jidosha Kabushiki Kaisha | User interface apparatus and input acquiring method |
WO2014128788A1 (ja) * | 2013-02-19 | 2014-08-28 | 株式会社ブリリアントサービス | 形状認識装置、形状認識プログラム、および形状認識方法 |
JP2015191435A (ja) * | 2014-03-28 | 2015-11-02 | 株式会社ユピテル | 電子情報システム及びそのプログラム |
JP2018163668A (ja) * | 2018-05-14 | 2018-10-18 | 株式会社ユピテル | 電子情報システム及びそのプログラム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007200353A (ja) * | 2007-04-09 | 2007-08-09 | Sony Corp | 情報処理装置及び情報処理方法 |
WO2008078603A1 (ja) * | 2006-12-22 | 2008-07-03 | Panasonic Corporation | ユーザインターフェイス装置 |
JP2011018129A (ja) * | 2009-07-07 | 2011-01-27 | Ritsumeikan | ヒューマンインターフェイス装置 |
-
2011
- 2011-02-10 JP JP2011026685A patent/JP5737748B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008078603A1 (ja) * | 2006-12-22 | 2008-07-03 | Panasonic Corporation | ユーザインターフェイス装置 |
JP2007200353A (ja) * | 2007-04-09 | 2007-08-09 | Sony Corp | 情報処理装置及び情報処理方法 |
JP2011018129A (ja) * | 2009-07-07 | 2011-01-27 | Ritsumeikan | ヒューマンインターフェイス装置 |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014112397A1 (en) | 2013-01-21 | 2014-07-24 | Toyota Jidosha Kabushiki Kaisha | User interface apparatus and input acquiring method |
CN104936824A (zh) * | 2013-01-21 | 2015-09-23 | 丰田自动车株式会社 | 用户接口设备和输入获取方法 |
US9770986B2 (en) | 2013-01-21 | 2017-09-26 | Toyota Jidosha Kabushiki Kaisha | User interface apparatus and input acquiring method |
DE112014000496B4 (de) | 2013-01-21 | 2022-09-29 | Toyota Jidosha Kabushiki Kaisha | Benutzerschnittstellenvorrichtung, Eingabeerfassungsverfahren und Fahrzeugeingabevorrichtung |
WO2014128788A1 (ja) * | 2013-02-19 | 2014-08-28 | 株式会社ブリリアントサービス | 形状認識装置、形状認識プログラム、および形状認識方法 |
JPWO2014128788A1 (ja) * | 2013-02-19 | 2017-02-02 | 株式会社ブリリアントサービス | 形状認識装置、形状認識プログラム、および形状認識方法 |
US9778464B2 (en) | 2013-02-19 | 2017-10-03 | Mirama Service Inc. | Shape recognition device, shape recognition program, and shape recognition method |
JP2015191435A (ja) * | 2014-03-28 | 2015-11-02 | 株式会社ユピテル | 電子情報システム及びそのプログラム |
JP2018163668A (ja) * | 2018-05-14 | 2018-10-18 | 株式会社ユピテル | 電子情報システム及びそのプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP5737748B2 (ja) | 2015-06-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10754435B2 (en) | Information processing apparatus and method, and program | |
US8923562B2 (en) | Three-dimensional interactive device and operation method thereof | |
US8290210B2 (en) | Method and system for gesture recognition | |
JP5904440B2 (ja) | 操作入力装置、操作入力方法およびプログラム | |
US20120169671A1 (en) | Multi-touch input apparatus and its interface method using data fusion of a single touch sensor pad and an imaging sensor | |
KR101411569B1 (ko) | 가상 키보드를 이용한 정보 처리 장치 및 방법 | |
JP6747446B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
WO2012120958A1 (ja) | 投影装置 | |
CN102033702A (zh) | 影像显示装置及其显示控制方法 | |
GB2470654A (en) | Data input on a virtual device using a set of objects. | |
JP2004078977A (ja) | インターフェイス装置 | |
JP5737748B2 (ja) | 統合入力インターフェース | |
JP2012185630A (ja) | 投影装置 | |
JP5817149B2 (ja) | 投影装置 | |
JP6452369B2 (ja) | 情報処理装置とその制御方法、プログラム、記憶媒体 | |
JP2016184362A (ja) | 入力装置、入力操作検出方法及び入力操作検出用コンピュータプログラム | |
Brock et al. | Kin'touch: understanding how visually impaired people explore tactile maps | |
US20120206584A1 (en) | Integrated input interface | |
JP2020135096A (ja) | 表示方法、表示装置、及び、インタラクティブプロジェクター | |
US20130050078A1 (en) | Pressure and position sensing pointing devices and methods | |
JP2024015400A (ja) | 入力装置、入力方法、及びプログラム | |
CN116301551A (zh) | 触控识别方法、触控识别装置、电子设备及介质 | |
KR101085536B1 (ko) | 제스처 인식을 이용한 인터페이스 구성방법 | |
JP2013134549A (ja) | データ入力装置およびデータ入力方法 | |
JP2009205498A (ja) | 情報提示装置、情報提示方法、情報提示プログラムおよびそのプログラムを記録した記録媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140114 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140822 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140916 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150407 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150416 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5737748 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |