JP2010067062A - 入力システム及び入力方法 - Google Patents
入力システム及び入力方法 Download PDFInfo
- Publication number
- JP2010067062A JP2010067062A JP2008233603A JP2008233603A JP2010067062A JP 2010067062 A JP2010067062 A JP 2010067062A JP 2008233603 A JP2008233603 A JP 2008233603A JP 2008233603 A JP2008233603 A JP 2008233603A JP 2010067062 A JP2010067062 A JP 2010067062A
- Authority
- JP
- Japan
- Prior art keywords
- region
- input
- unit
- image
- detected
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
【解決手段】 入力装置10は、仮想的な入力デバイスとする物体20を撮像するカメラ11と、撮像された画像から、当該画像における物体20が位置する物体領域を認識する物体領域認識部12と、物体20の特徴を示す情報を取得する特徴情報取得部14と、撮像された画像における物体領域内の、取得された情報に係る特徴と異なる特徴を有する操作領域を検出する操作領域検出部15と、検出された操作領域に基づいて、ユーザの入力操作を検出する入力検出部16と、検出されたユーザの入力操作を示す情報を出力する出力部17と、を備える。
【選択図】 図2
Description
部分を検出して、当該部分を追従対象となる画像における物体20の物体領域とする。この検出は、具体的には例えば、パターンマッチング(テンプレートマッチング)の手法等が用いられて行われる。領域追従部13は、追従した形状を示す情報を操作領域検出部15及び映像投影部18に出力する。
上記の式において、R1x,R2x,R3x,R1y,R2y,R3y,R1z,R2z,R3zは回転パラメータであり、ΔX,ΔY,ΔZは平行移動パラメータである。変換行例Mは、物体20の物体領域の座標(x,y,z)に合わせて、投影すべき画像の座標(X,Y,Z)をそれぞれの軸に対して回転移動及び平行移動させるための行列である。ここで、物体領域及び投影すべき画像は二次元であるのでz=Z=0である。映像投影部18が、これらのパラメータを、物体領域及び映像蓄積部19から取得した映像の形状とそれぞれの位置を示す情報とから算出して変換を行う。物体領域が回転している場合は、回転軸毎に回転パラメータR部分が、物体領域の回転角度θaから求めることができる。物体領域が平行移動している場合は、平行移動分ΔX,ΔY,ΔZのうちその移動軸に沿ったパラメータが設定される。
Claims (9)
- 物体を撮像する撮像手段と、
前記撮像手段によって撮像された画像から、当該画像における前記物体が位置する物体領域を認識する物体領域認識手段と、
前記物体の特徴を示す情報を取得する特徴情報取得手段と、
前記撮像手段によって撮像された画像における、前記物体領域認識手段によって認識された前記物体領域内の、前記物体特徴取得手段によって取得された情報に係る特徴と異なる特徴を有する操作領域を検出する操作領域検出手段と、
前記操作領域検出手段によって検出された前記操作領域に基づいて、ユーザの入力操作を検出する入力検出手段と、
前記入力検出手段によって検出された前記ユーザの入力操作を示す情報を出力する出力手段と、
を備える入力システム。 - 前記物体情報取得手段は、前記撮像手段によって撮像された画像における、前記物体領域認識手段によって認識された前記物体領域から前記物体の特徴を抽出することによって、当該物体の特徴を示す情報を取得することを特徴とする請求項1に記載の入力システム。
- 前記撮像手段は、複数の時刻にわたって前記物体を撮像し、
前記撮像手段によって撮像された時間変化した画像における、前記物体領域認識手段によって認識された前記領域に対応する領域を認識する領域追従手段を更に備えることを特徴とする請求項1又は2に記載の入力システム。 - 前記物体領域認識手段によって認識された前記物体領域に応じて、映像を投影する投影手段を更に備える請求項1〜3のいずれか一項に記載の入力システム。
- 前記物体領域認識手段は、前記物体に予め設けられたマーカを検出することによって前記物体領域を認識することを特徴とする請求項1〜4のいずれか一項に記載の入力システム。
- 前記物体領域認識手段は、所定の音を検出して、当該音が検出されたタイミングで前記撮像手段によって撮像された画像における前記物体領域に応じた位置を検出して、当該位置から当該物体領域を認識することを特徴とする請求項1〜5のいずれか一項に記載の入力システム。
- 前記物体領域認識手段は、前記物体領域に係る特徴を示す情報を予め記憶しておき、当該情報に基づいて当該物体領域を認識することを特徴とする請求項1〜6のいずれか一項に記載の入力システム。
- 前記操作領域検出手段は、所定の音を検出して、当該音が検出されたタイミングで前記撮像手段によって撮像された画像における前記操作領域を検出することを特徴とする請求項1〜7のいずれか一項に記載の入力システム。
- 物体を撮像する撮像ステップと、
前記撮像ステップにおいて撮像された画像から、当該画像における前記物体が位置する物体領域を認識する物体領域認識ステップと、
前記物体の特徴を示す情報を取得する特徴情報取得ステップと、
前記撮像ステップにおいて撮像された画像における、前記物体領域認識ステップにおいて認識された前記物体領域内の、前記物体特徴取得ステップにおいて取得された情報に係る特徴と異なる特徴を有する操作領域を検出する操作領域検出ステップと、
前記操作領域検出ステップにおいて検出された前記操作領域に基づいて、ユーザの入力操作を検出する入力検出ステップと、
前記入力検出ステップにおいて検出された前記ユーザの入力操作を示す情報を出力する出力ステップと、
を備える入力方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008233603A JP5205187B2 (ja) | 2008-09-11 | 2008-09-11 | 入力システム及び入力方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008233603A JP5205187B2 (ja) | 2008-09-11 | 2008-09-11 | 入力システム及び入力方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010067062A true JP2010067062A (ja) | 2010-03-25 |
JP5205187B2 JP5205187B2 (ja) | 2013-06-05 |
Family
ID=42192589
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008233603A Expired - Fee Related JP5205187B2 (ja) | 2008-09-11 | 2008-09-11 | 入力システム及び入力方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5205187B2 (ja) |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010038879A (ja) * | 2008-08-08 | 2010-02-18 | Ntt Docomo Inc | 物体形状認識システム及び物体形状認識方法 |
JP2012053532A (ja) * | 2010-08-31 | 2012-03-15 | Casio Comput Co Ltd | 情報処理装置及び方法、並びにプログラム |
JP2013114375A (ja) * | 2011-11-28 | 2013-06-10 | Seiko Epson Corp | 表示システム、及び操作入力方法 |
JP2013120502A (ja) * | 2011-12-07 | 2013-06-17 | Fujitsu Ltd | 画像処理装置、画像処理方法 |
WO2014155885A1 (ja) * | 2013-03-27 | 2014-10-02 | シャープ株式会社 | 入力装置 |
CN104272224A (zh) * | 2012-04-13 | 2015-01-07 | 浦项工科大学校产学协力团 | 用于识别来自虚拟键盘的键输入的方法及装置 |
JP2015069512A (ja) * | 2013-09-30 | 2015-04-13 | 株式会社Nttドコモ | 情報処理装置及び情報処理方法 |
CN104951145A (zh) * | 2014-03-24 | 2015-09-30 | 联想(北京)有限公司 | 信息处理方法和装置 |
US9158375B2 (en) | 2010-07-20 | 2015-10-13 | Apple Inc. | Interactive reality augmentation for natural interaction |
JP2015191480A (ja) * | 2014-03-28 | 2015-11-02 | 株式会社ソニー・コンピュータエンタテインメント | 情報処理装置、オブジェクトの操作方法、及びオブジェクトの操作プログラム |
US9201501B2 (en) | 2010-07-20 | 2015-12-01 | Apple Inc. | Adaptive projector |
JP6086461B1 (ja) * | 2016-09-09 | 2017-03-01 | 株式会社ネットアプリ | タッチパネル及びタッチパネルシステム |
JPWO2015030264A1 (ja) * | 2013-08-30 | 2017-03-02 | 国立大学法人山梨大学 | クリック動作検出装置,方法およびプログラム |
US10080963B2 (en) | 2014-03-28 | 2018-09-25 | Sony Interactive Entertainment Inc. | Object manipulation method, object manipulation program, and information processing apparatus |
JP2021501496A (ja) * | 2017-09-29 | 2021-01-14 | 株式会社ソニー・インタラクティブエンタテインメント | ロボットユーティリティ及びインターフェースデバイス |
JPWO2019176009A1 (ja) * | 2018-03-14 | 2021-02-18 | マクセル株式会社 | 携帯情報端末 |
JP2022028692A (ja) * | 2017-04-28 | 2022-02-16 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置、情報処理装置の制御方法、及びプログラム |
WO2022180894A1 (ja) * | 2021-02-24 | 2022-09-01 | 合同会社Vessk | 触覚拡張情報処理システム、ソフトウエア、方法並びに記録媒体 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1125260A (ja) * | 1997-07-08 | 1999-01-29 | Matsushita Electric Ind Co Ltd | 手の状態検出装置 |
JP2007219966A (ja) * | 2006-02-20 | 2007-08-30 | Sharp Corp | 投影入力装置、投影入力装置を備えた情報端末及び充電器 |
-
2008
- 2008-09-11 JP JP2008233603A patent/JP5205187B2/ja not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1125260A (ja) * | 1997-07-08 | 1999-01-29 | Matsushita Electric Ind Co Ltd | 手の状態検出装置 |
JP2007219966A (ja) * | 2006-02-20 | 2007-08-30 | Sharp Corp | 投影入力装置、投影入力装置を備えた情報端末及び充電器 |
Cited By (30)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010038879A (ja) * | 2008-08-08 | 2010-02-18 | Ntt Docomo Inc | 物体形状認識システム及び物体形状認識方法 |
US9158375B2 (en) | 2010-07-20 | 2015-10-13 | Apple Inc. | Interactive reality augmentation for natural interaction |
US9201501B2 (en) | 2010-07-20 | 2015-12-01 | Apple Inc. | Adaptive projector |
JP2012053532A (ja) * | 2010-08-31 | 2012-03-15 | Casio Comput Co Ltd | 情報処理装置及び方法、並びにプログラム |
CN102385459A (zh) * | 2010-08-31 | 2012-03-21 | 卡西欧计算机株式会社 | 信息处理装置及方法 |
JP2013114375A (ja) * | 2011-11-28 | 2013-06-10 | Seiko Epson Corp | 表示システム、及び操作入力方法 |
US9678663B2 (en) | 2011-11-28 | 2017-06-13 | Seiko Epson Corporation | Display system and operation input method |
JP2013120502A (ja) * | 2011-12-07 | 2013-06-17 | Fujitsu Ltd | 画像処理装置、画像処理方法 |
US9213897B2 (en) | 2011-12-07 | 2015-12-15 | Fujitsu Limited | Image processing device and method |
JP2015513163A (ja) * | 2012-04-13 | 2015-04-30 | ポハン工科大学校産学協力団Postech Academy−Industry Foundation | 仮想キーボード上のキー入力を認識する方法及びその装置 |
CN104272224A (zh) * | 2012-04-13 | 2015-01-07 | 浦项工科大学校产学协力团 | 用于识别来自虚拟键盘的键输入的方法及装置 |
US9766714B2 (en) | 2012-04-13 | 2017-09-19 | Postech Academy-Industry Foundation | Method and apparatus for recognizing key input from virtual keyboard |
WO2014155885A1 (ja) * | 2013-03-27 | 2014-10-02 | シャープ株式会社 | 入力装置 |
JPWO2015030264A1 (ja) * | 2013-08-30 | 2017-03-02 | 国立大学法人山梨大学 | クリック動作検出装置,方法およびプログラム |
JP2015069512A (ja) * | 2013-09-30 | 2015-04-13 | 株式会社Nttドコモ | 情報処理装置及び情報処理方法 |
CN104951145A (zh) * | 2014-03-24 | 2015-09-30 | 联想(北京)有限公司 | 信息处理方法和装置 |
JP2015191480A (ja) * | 2014-03-28 | 2015-11-02 | 株式会社ソニー・コンピュータエンタテインメント | 情報処理装置、オブジェクトの操作方法、及びオブジェクトの操作プログラム |
US10080963B2 (en) | 2014-03-28 | 2018-09-25 | Sony Interactive Entertainment Inc. | Object manipulation method, object manipulation program, and information processing apparatus |
JP6086461B1 (ja) * | 2016-09-09 | 2017-03-01 | 株式会社ネットアプリ | タッチパネル及びタッチパネルシステム |
JP2018041390A (ja) * | 2016-09-09 | 2018-03-15 | 株式会社ネットアプリ | タッチパネル及びタッチパネルシステム |
WO2018047803A1 (ja) * | 2016-09-09 | 2018-03-15 | 株式会社ネットアプリ | タッチパネル及びタッチパネルシステム |
US10635207B2 (en) | 2016-09-09 | 2020-04-28 | Netappli Co., Ltd. | Touch panel and touch panel system |
JP2022028692A (ja) * | 2017-04-28 | 2022-02-16 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置、情報処理装置の制御方法、及びプログラム |
US11617942B2 (en) | 2017-04-28 | 2023-04-04 | Sony Interactive Entertainment Inc. | Information processing device, control method of information processing device, and program |
US11896893B2 (en) | 2017-04-28 | 2024-02-13 | Sony Interactive Entertainment Inc. | Information processing device, control method of information processing device, and program |
JP2021501496A (ja) * | 2017-09-29 | 2021-01-14 | 株式会社ソニー・インタラクティブエンタテインメント | ロボットユーティリティ及びインターフェースデバイス |
JPWO2019176009A1 (ja) * | 2018-03-14 | 2021-02-18 | マクセル株式会社 | 携帯情報端末 |
JP7155242B2 (ja) | 2018-03-14 | 2022-10-18 | マクセル株式会社 | 携帯情報端末 |
WO2022180894A1 (ja) * | 2021-02-24 | 2022-09-01 | 合同会社Vessk | 触覚拡張情報処理システム、ソフトウエア、方法並びに記録媒体 |
JPWO2022180894A1 (ja) * | 2021-02-24 | 2022-09-01 |
Also Published As
Publication number | Publication date |
---|---|
JP5205187B2 (ja) | 2013-06-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5205187B2 (ja) | 入力システム及び入力方法 | |
US11262840B2 (en) | Gaze detection in a 3D mapping environment | |
JP2022095879A (ja) | 眼の特徴を用いる眼ポーズ識別 | |
TW202119199A (zh) | 虛擬鍵盤 | |
TWI486629B (zh) | 穿透型頭部穿戴式顯示系統與互動操作方法 | |
US9600078B2 (en) | Method and system enabling natural user interface gestures with an electronic system | |
US9778748B2 (en) | Position-of-interest detection device, position-of-interest detection method, and position-of-interest detection program | |
JP2019087279A (ja) | デジタルデバイスとの対話のための直接的なポインティング検出のためのシステムおよび方法 | |
Shen et al. | Vision-based hand interaction in augmented reality environment | |
JP4323180B2 (ja) | 自己画像表示を用いたインタフェース方法、装置、およびプログラム | |
JP2009265809A (ja) | 情報端末装置 | |
KR100692526B1 (ko) | 시스템 자동제어용 제스처 인식 장치 및 그 방법 | |
JPWO2013114806A1 (ja) | 生体認証装置及び生体認証方法 | |
JP2009003813A (ja) | 手指形状推定装置及び手指形状推定方法、並びにプログラム | |
KR101396488B1 (ko) | 신호 입력 장치 및 신호 입력 방법 | |
US20220019288A1 (en) | Information processing apparatus, information processing method, and program | |
WO2019037257A1 (zh) | 密码输入的控制设备、方法及计算机可读存储介质 | |
JP2013161406A (ja) | データ入力装置、表示装置、データ入力方法、及びデータ入力プログラム | |
JP2017191426A (ja) | 入力装置、入力制御方法、コンピュータプログラム、及び記憶媒体 | |
JP6230666B2 (ja) | データ入力装置、データ入力方法、及びデータ入力プログラム | |
JP5464661B2 (ja) | 情報端末装置 | |
JP5068711B2 (ja) | 物体形状認識システム及び物体形状認識方法 | |
JP4972013B2 (ja) | 情報提示装置、情報提示方法、情報提示プログラムおよびそのプログラムを記録した記録媒体 | |
US11054941B2 (en) | Information processing system, information processing method, and program for correcting operation direction and operation amount | |
JP5951966B2 (ja) | 画像処理装置、画像処理システム、画像処理方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110329 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120418 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120424 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120525 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130205 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130218 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 5205187 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160222 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |