JP2012048463A - 情報処理装置およびその方法 - Google Patents
情報処理装置およびその方法 Download PDFInfo
- Publication number
- JP2012048463A JP2012048463A JP2010189514A JP2010189514A JP2012048463A JP 2012048463 A JP2012048463 A JP 2012048463A JP 2010189514 A JP2010189514 A JP 2010189514A JP 2010189514 A JP2010189514 A JP 2010189514A JP 2012048463 A JP2012048463 A JP 2012048463A
- Authority
- JP
- Japan
- Prior art keywords
- trajectory
- imaging
- information processing
- image
- processing apparatus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】 撮像部が現実空間を撮像した撮像画像を入力し、撮像部の撮像範囲で撮像された操作部の軌跡を算出し、算出された撮像範囲の操作部の軌跡に基づいて、撮像範囲の操作部の軌跡に撮像部の撮像範囲外の操作部の軌跡を補完し、補完された軌跡の線を含む画像を生成し、出力する。
【選択図】 図3
Description
撮像手段が現実空間を撮像した撮像画像を入力する画像入力手段と、
前記入力された撮像画像に基づいて、前記撮像手段の撮像範囲で撮像された操作手段の軌跡を算出する軌跡算出手段と、
前記算出された撮像範囲の操作手段の軌跡に基づいて、当該軌跡に前記撮像手段の撮像範囲外の該操作手段の軌跡を補完する補完手段と、
前記補完された軌跡の線を含む画像を生成する画像生成手段と、
前記生成された画像を出力する画像出力手段と
を有することを特徴とする情報処理装置。
<構成>
図1は、本実施形態の構成例のブロック図である。 図2は、本実施形態の構成にカメラとディスプレイを用いた例の模式図である。図3は、本実施形態の構成にHMDを用いた例の模式図である。
図4は、本実施形態の処理手順のフローチャートである。
ステップS407では、生成された輪郭線を描画した仮想画像を生成する。
ステップS408では、画像出力部107が、生成した仮想画像を表示部108に出力する。
ステップS409では、画像出力部107から出力された画像を表示部108に表示する。
ステップS410では、処理を終了するかを判定する。終了しない場合、ステップS401へと進む。すなわち、終了するまで入力される撮像画像ごとに繰り返し行う。
第1の実施形態によれば、生成した仮想画像に含まれる輪郭線をそのまま表示した。第2の実施形態では、現実空間を撮像した撮像画像に輪郭線を重畳した合成画像を表示する。この場合、撮像部と表示部がHMD301に備わるものであれば、なお好適である。第1の実施形態と同じ部分については、その説明を省略する。
ステップ408では、画像出力部107が、生成した合成画像を表示部108に出力する。そして、出力された合成画像は、表示部108に表示される。
上記実施形態では、操作部は、ペン状の物体であったが、本発明における操作部は、操作者の所定部位、手、指先、腕、肘、足、腿、膝、すね等の体の部位であっても良い。このとき、イベント入力部113を実施形態から外し、常に軌跡を描いている状態としてもよい。イベント入力部113を操作部と切り離し、手などの特徴量を求め、ジェスチャーを検出し、予め定められたジェスチャーであるときに、イベントを入力してもよい。
図10は、コンピュータの構成例を示す図である。
Claims (13)
- 現実空間における操作手段の軌跡の線を含む画像を出力する情報処理装置であって、
撮像手段が現実空間を撮像した撮像画像を入力する画像入力手段と、
前記入力された撮像画像に基づいて、前記撮像手段の撮像範囲で撮像された操作手段の軌跡を算出する軌跡算出手段と、
前記算出された撮像範囲の操作手段の軌跡に基づいて、当該軌跡に前記撮像手段の撮像範囲外の該操作手段の軌跡を補完する補完手段と、
前記補完された軌跡の線を含む画像を生成する画像生成手段と、
前記生成された画像を出力する画像出力手段と
を有することを特徴とする情報処理装置。 - 前記現実空間を撮像する撮像手段
を更に有することを特徴とする請求項1に記載の情報処理装置。 - 前記現実空間における前記撮像手段の位置姿勢を計測する位置姿勢計測手段
を更に有し、
前記軌跡算出手段が、前記入力された撮像画像と前記計測された撮像手段の位置姿勢に基づいて、前記撮像手段の撮像範囲で撮像された操作手段の前記現実空間における三次元の軌跡を算出することを特徴とする請求項1又は2の何れか1項に記載の情報処理装置。 - 前記位置姿勢計測手段が、前記撮像画像から検出される特徴量に基づいて、前記撮像手段の位置姿勢を計測することを特徴とする請求項3に記載の情報処理装置。
- 前記画像生成手段が、前記入力された撮像画像に前記補完された軌跡の線を重畳描画した合成画像を生成することを特徴とする請求項1乃至4の何れか1項に記載の情報処理装置。
- 前記撮像手段は、複数のカメラを有し、
前記軌跡算出手段では、前記複数のカメラの互いの視差に基づいて、前記操作手段の現実空間における三次元の軌跡を算出することを特徴とする請求項1乃至5の何れか1項に記載の情報処理装置。 - 前記補完手段は、
前記操作手段が、前記撮像範囲外で動く前に、前記撮像範囲で動いた第1の軌跡を算出する第1の軌跡算出手段と、
前記操作手段が、前記撮像範囲外で動いた後に、前記撮像範囲で動いた第2の軌跡を算出する第2の軌跡算出手段と、
前記第1の軌跡と前記第2の軌跡に基づいて、前記操作手段が、前記撮像範囲外で動いた第3の軌跡を算出する第3の軌跡算出手段と、
前記第1の軌跡と前記第2の軌跡と前記第3の軌跡とをつなぎ合わせ第4の軌跡を、前記補完された軌跡として算出する第4の軌跡算出手段と、
を有することを特徴とする請求項1乃至6の何れか1項に記載の情報処理装置。 - 前記第3の軌跡算出手段が、前記第1の軌跡で動いた前記操作手段の方向と速度および前記第2の軌跡で動いた該操作手段の方向と速度に基づいて、前記第3の軌跡を算出することを特徴とする請求項7に記載の情報処理装置。
- 前記第3の軌跡を描く線は、前記第1の軌跡および前記第2の軌跡に基づくベジエ曲線であることを特徴とする請求項7又は8に記載の情報処理装置。
- 前記軌跡算出手段が、前記操作手段を体の部位として、当該操作手段の軌跡を算出することを特徴とする請求項1乃至9の何れか1項に記載の情報処理装置。
- 前記軌跡算出手段が、前記体の部位を用いたジェスチャーを検出している間の、前記操作手段の軌跡を算出することを特徴とする請求項10に記載の情報処理装置。
- 現実空間における操作手段の軌跡の線を含む画像を出力する情報処理装置が行う情報処理方法であって、
前記情報処理装置の画像入力手段が、撮像手段が現実空間を撮像した撮像画像を入力する画像入力工程と、
前記情報処理装置の軌跡算出手段が、前記入力された撮像画像に基づいて、前記撮像手段の撮像範囲で撮像された操作手段の軌跡を算出する軌跡算出工程と、
前記情報処理装置の補完手段が、前記算出された撮像範囲の操作手段の軌跡に基づいて、当該軌跡に前記撮像手段の撮像範囲外の該操作手段の軌跡を補完する補完工程と、
前記情報処理装置の画像生成手段が、前記補完された軌跡の線を含む画像を生成する画像生成工程と、
前記情報処理装置の画像出力手段が、前記生成された画像を出力する画像出力工程と
を有することを特徴とする情報処理方法。 - 請求項12に記載の情報処理方法の各工程をコンピュータに実行させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010189514A JP5597064B2 (ja) | 2010-08-26 | 2010-08-26 | 情報処理装置およびその方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010189514A JP5597064B2 (ja) | 2010-08-26 | 2010-08-26 | 情報処理装置およびその方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012048463A true JP2012048463A (ja) | 2012-03-08 |
JP5597064B2 JP5597064B2 (ja) | 2014-10-01 |
Family
ID=45903262
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010189514A Active JP5597064B2 (ja) | 2010-08-26 | 2010-08-26 | 情報処理装置およびその方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5597064B2 (ja) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014049941A1 (ja) * | 2012-09-28 | 2014-04-03 | パナソニック株式会社 | 固体撮像装置及び撮像装置 |
JP2014081788A (ja) * | 2012-10-16 | 2014-05-08 | Canon Inc | ハンドジェスチャ認識装置及びその制御方法 |
JP2015069480A (ja) * | 2013-09-30 | 2015-04-13 | ブラザー工業株式会社 | ヘッドマウントディスプレイ、及び、制御プログラム |
JP2015531114A (ja) * | 2012-07-26 | 2015-10-29 | クアルコム,インコーポレイテッド | 拡張の継続性の維持 |
JP2016118868A (ja) * | 2014-12-19 | 2016-06-30 | 任天堂株式会社 | 情報処理装置、情報処理プログラム、情報処理システム、および情報処理方法 |
JP2017045198A (ja) * | 2015-08-25 | 2017-03-02 | キヤノン株式会社 | 制御装置及び制御方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001128057A (ja) * | 1999-09-07 | 2001-05-11 | Fuji Xerox Co Ltd | カメラ制御用ユーザインタフェースシステム |
JP2007298299A (ja) * | 2006-04-27 | 2007-11-15 | Nintendo Co Ltd | 重力方向算出装置および重力方向算出プログラム |
JP2009064364A (ja) * | 2007-09-07 | 2009-03-26 | Copcom Co Ltd | プログラム、記憶媒体およびコンピュータ |
JP2010134880A (ja) * | 2008-12-08 | 2010-06-17 | Canon Inc | 情報処理装置及び情報処理方法 |
-
2010
- 2010-08-26 JP JP2010189514A patent/JP5597064B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001128057A (ja) * | 1999-09-07 | 2001-05-11 | Fuji Xerox Co Ltd | カメラ制御用ユーザインタフェースシステム |
JP2007298299A (ja) * | 2006-04-27 | 2007-11-15 | Nintendo Co Ltd | 重力方向算出装置および重力方向算出プログラム |
JP2009064364A (ja) * | 2007-09-07 | 2009-03-26 | Copcom Co Ltd | プログラム、記憶媒体およびコンピュータ |
JP2010134880A (ja) * | 2008-12-08 | 2010-06-17 | Canon Inc | 情報処理装置及び情報処理方法 |
Non-Patent Citations (2)
Title |
---|
CSNG200500838001; 寺前雄亮, 外2名: '"複合現実感を利用した机上コラボレーションシステムの開発"' 電子情報通信学会技術研究報告 第104巻, 第572号, 20050113, p.1-6, 社団法人電子情報通信学会 * |
JPN6014016268; 寺前雄亮, 外2名: '"複合現実感を利用した机上コラボレーションシステムの開発"' 電子情報通信学会技術研究報告 第104巻, 第572号, 20050113, p.1-6, 社団法人電子情報通信学会 * |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015531114A (ja) * | 2012-07-26 | 2015-10-29 | クアルコム,インコーポレイテッド | 拡張の継続性の維持 |
WO2014049941A1 (ja) * | 2012-09-28 | 2014-04-03 | パナソニック株式会社 | 固体撮像装置及び撮像装置 |
JP2014081788A (ja) * | 2012-10-16 | 2014-05-08 | Canon Inc | ハンドジェスチャ認識装置及びその制御方法 |
JP2015069480A (ja) * | 2013-09-30 | 2015-04-13 | ブラザー工業株式会社 | ヘッドマウントディスプレイ、及び、制御プログラム |
JP2016118868A (ja) * | 2014-12-19 | 2016-06-30 | 任天堂株式会社 | 情報処理装置、情報処理プログラム、情報処理システム、および情報処理方法 |
JP2017045198A (ja) * | 2015-08-25 | 2017-03-02 | キヤノン株式会社 | 制御装置及び制御方法 |
Also Published As
Publication number | Publication date |
---|---|
JP5597064B2 (ja) | 2014-10-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5871345B2 (ja) | 3次元ユーザインタフェース装置及び3次元操作方法 | |
JP5936155B2 (ja) | 3次元ユーザインタフェース装置及び3次元操作方法 | |
JP5818857B2 (ja) | 情報処理装置およびその制御方法 | |
JP5709440B2 (ja) | 情報処理装置、情報処理方法 | |
US8055061B2 (en) | Method and apparatus for generating three-dimensional model information | |
JP6057396B2 (ja) | 3次元ユーザインタフェース装置及び3次元操作処理方法 | |
JP5845211B2 (ja) | 画像処理装置、画像処理方法 | |
US9607439B2 (en) | Information processing apparatus and information processing method | |
JP5597064B2 (ja) | 情報処理装置およびその方法 | |
US8994729B2 (en) | Method for simulating operation of object and apparatus for the same | |
JP2011028309A5 (ja) | ||
JP2013521544A (ja) | 拡張現実のポインティング装置 | |
JP6344530B2 (ja) | 入力装置、入力方法、及びプログラム | |
JP7406875B2 (ja) | 情報処理装置およびプログラム | |
JP6775957B2 (ja) | 情報処理装置、情報処理方法、プログラム | |
JP2009169622A (ja) | 画像処理装置、画像処理方法 | |
JP2012208705A (ja) | 画像操作装置、画像操作方法およびプログラム | |
JP2009087161A (ja) | 画像処理装置、画像処理方法 | |
JP5518677B2 (ja) | 仮想情報付与装置及び仮想情報付与プログラム | |
JP5863984B2 (ja) | ユーザインタフェース装置及びユーザインタフェース方法 | |
US11275434B2 (en) | Information processing apparatus, information processing method, and storage medium | |
JP6632298B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP2018063567A (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP7209495B2 (ja) | 画像処理装置、画像処理方法 | |
JP7029253B2 (ja) | 情報処理装置及びその方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130826 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140407 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140422 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140623 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140715 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140808 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5597064 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |