JP2005165864A - コマンド入力方法、画像表示方法及び画像表示装置 - Google Patents
コマンド入力方法、画像表示方法及び画像表示装置 Download PDFInfo
- Publication number
- JP2005165864A JP2005165864A JP2003406260A JP2003406260A JP2005165864A JP 2005165864 A JP2005165864 A JP 2005165864A JP 2003406260 A JP2003406260 A JP 2003406260A JP 2003406260 A JP2003406260 A JP 2003406260A JP 2005165864 A JP2005165864 A JP 2005165864A
- Authority
- JP
- Japan
- Prior art keywords
- image
- information
- display screen
- unit
- projected
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
【解決手段】裏面側から画像が投影され、該裏面側とは反対側の表面側に投影された画像が表示される表示画面の該表面側に載置された所定形状の物体を、該裏面側から撮像素子で撮影し、得られた撮像データに基づいて、該表示画面の該裏面側に投影される画像を操作することを特徴とする。
【選択図】図3
Description
そのほか、液晶プロジェクタの表示画面に画像を投影し、その表示画面の上方に設けたカメラでその表示画面上に置かれた物体や手を認識するようにしたシステムも開示されている。
上記表示画面に投影される所定の画像を形成する投影画像形成部と、
上記表示画面の上記表面側に載置された所定形状の物体の底面及び該底面に付された識別子を、上記裏面側から撮影して撮像データを得る撮像部と、
上記撮像データに基づいて上記物体の識別情報および移動情報を取得する物体認識部と、
上記物体の識別情報および移動情報に基づいて、上記投影画像形成部が形成する上記画像を操作する操作処理部とを備えたことを特徴とする。
(第1の実施形態)
図1及び図2は、本発明の画像表示装置の第1の実施形態を示す概略図であり、図1は概略斜視図、図2は概略断面図である。
投影された画像は、スクリーン11の表面側から視認することができるので、その画像を視認した人が、そのスクリーン11の表面側に予め準備された複数の物体を載置する。
d=(r1×d1+r2×d2)/(r1+r2)で求めることができる。
(第2の実施形態)
第2の実施形態は、第1の実施形態と比べて、本体部がスクリーン(表示画面)の表面側に人手により描画された図形や線などの情報を物体の底面の情報とは別に抽出して処理する点が相違する。しかし、それ以外の点は共通するので相違する本体部について説明する。
図12(1)に示すように、スクリーン11の表面側に、底面5に付された識別コードが異なる3つの物体4a,4b,4cが載せられる。CCDカメラ14は、それらの物体の底面5を撮影し、物体領域抽出部21は撮像データに基づいてそれぞれの識別コードに係る撮像データを抽出する。物体認識部22は、パターン認識用辞書を参照して、物体4aは銅、物体4bは亜鉛、物体4cは酸素であることを認識する。操作処理部23は、投影画像形成部24に、所定のデータを送り、銅の元素記号Cu、亜鉛の元素記号Zn、酸素の元素記号O、が円内に記された画像を、スクリーン11上のそれぞれの物体4a,4b,4cの隣接位置に投影されるように形成し、プロジェクタ13からスクリーン11に投影する。
このように、人手で描画された図形などについてもスクリーンに投影される画像を操作する上で一定のルールに基づく所定の「意味」を持たせ、識別コードの補助的役割を与えることにより、操作性をさらに向上させることができる。
(第3の実施形態)
第3の実施形態は、第1の実施形態と比べて、解像度の異なる2つのCCDカメラを備え、一方のカメラは物体の位置を検出し、他方のカメラは物体の識別情報及び移動情報を検出する点が相違する。しかし、それ以外の点は共通するので相違点について説明する。
(第4の実施形態)
第4の実施形態は、スクリーン表面側に載置する物体の底面とは反対側の表面に、識別コードの意義をあらわす視認自在な記号が付されている点は相違するが、それ以外の点は、第1から第3の実施形態と共通する。したがって、相違点についてのみ説明する。
2 本体部
4,4A,4B,4a,4b,4c 物体
5 底面
5a 輪郭
6 識別コード
6a,6b,6c,6d,6e 図形
7 線
8 矩形の黒
9 円形の線図
10 平面部
11 スクリーン
11a 投影面
11b 書き込み面
12 筐体
13 プロジェクタ
14 CCDカメラ
14a,15a 視野角
15 第1のCCDカメラ
16 第2のCCDカメラ
21,21M 物体領域抽出部
22,22M 物体認識部
22a パターン照合部
22b パターン認識用辞書
22c 方向演算部
23,23M 操作処理部
24 投影画像形成部
24a アプリケーションー・プログラム
25 線図抽出部
26 線図処理部
35 斜めにカットした上面
36a,36b,36c 記号
40 円柱形
100 流れを表す記号
101 外接方形
101a 短辺
Claims (21)
- 物体の識別情報及び移動情報を取得し、取得された情報に応じて所定の装置にコマンドを入力することを特徴とするコマンド入力方法。
- 物体を撮影し、取得された該物体の識別情報及び移動情報に応じて所定の装置にコマンドを入力することを特徴とするコマンド入力方法。
- 物体を撮影し、取得された該物体の識別情報及び移動情報に応じて表示画面に表示される画像を操作することを特徴とする画像表示方法。
- 裏面側から画像が投影され、該裏面側とは反対側の表面側に投影された画像が表示される表示画面の該表面側に載置された所定形状の物体を、該裏面側から撮像素子で撮影し、得られた撮像データに基づいて、該表示画面の該裏面側に投影される画像を操作することを特徴とする画像表示方法。
- 前記物体の底面に識別子を付し、前記撮像素子により該底面を撮影して得た撮像データをパターン認識することにより該物体の識別情報を取得し、取得された該識別情報に応じて前記表示画面の該裏面側に投影される画像を操作することを特徴とする請求項4記載の画像表示方法。
- 人手により前記物体を移動させ、前記撮像素子により移動する該物体の底面を撮影して得た撮像データを認識することにより該物体の移動情報を取得し、取得された該移動情報に応じて前記表示画面の該裏面側に投影される画像を操作することを特徴とする請求項4記載の画像表示方法。
- 前記識別子の向きを変化させ、撮像素子で撮影することにより取得された前記底面の各撮像データと該識別子の識別情報とを対応させたパターン認識用辞書を用意し、前記底面を撮影して得た撮像データと該パターン認識用辞書とのパターンマッチングにより前記識別情報及び前記物体の方向に係る情報を同時に取得することを特徴とする請求項5記載の画像表示方法。
- 前記移動情報は、前記物体の底面が所定の時間毎に移動した移動距離と移動方向とを表す移動ベクトルの情報を含むことを特徴とする請求項6記載の画像表示方法。
- 前記表示画面の前記裏面側から投影される画像を所定の時間毎に一様に白くすることを特徴とする請求項4記載の画像表示方法。
- 前記撮像データに基づいて、前記表示画面の前記表面側に前記物体が載置されたことが検知されたときに、前記表示画面の前記裏面側から投影される画像を前記裏面側全体にわたり白くすることを特徴とする請求項4記載の画像表示方法。
- 前記表示画面の前記表面側に前記物体が載置された位置が検出されたときに、該物体が載置された位置を含む所定の領域に前記表示画面の前記裏面側から投影される画像を白くすることを特徴とする請求項4記載の画像表示方法。
- 前記表面側に複数の物体が載置され、該複数の物体のうちの少なくとも2つの物体間に人手により線分が描画されたときに、該線分を前記裏面側から撮像素子で撮影し、得られた撮像データに基づいて、前記表示画面の該裏面側に投影される画像を操作することを特徴とする請求項4記載の画像表示方法。
- 前記表面側に複数の物体が載置され、該複数の物体のうちの少なくとも2つの物体を囲むように人手によりループ状の線分が描画されたときに、該線分を前記裏面側から撮像素子で撮影し、得られた撮像データに基づいて、囲まれた少なくとも2つの物体が同一のグループに属するという属性情報を得、該表示画面の該裏面側に投影される画像を操作することを特徴とする請求項4記載の画像表示方法。
- 裏面側から画像が投影され、該裏面側とは反対側の表面側に投影された画像が表示される表示画面と、
前記表示画面に投影される所定の画像を形成する投影画像形成部と、
前記表示画面の前記表面側に載置された所定形状の物体の底面及び該底面に付された識別子を、前記裏面側から撮影して撮像データを得る撮像部と、
前記撮像データに基づいて前記物体の識別情報および移動情報を取得する物体認識部と、
前記物体の識別情報および移動情報に基づいて、前記投影画像形成部が形成する前記画像を操作する操作処理部とを備えたことを特徴とする画像表示装置。 - 前記物体認識部は、前記識別子の向きを変化させ、撮像素子で撮影することにより取得された前記底面の各撮像データと該識別子の識別情報とを対応させたパターン認識用辞書を有し、前記撮像部が得た撮像データと該パターン認識用辞書とのパターンマッチングにより前記識別情報及び前記物体の方向に係る情報を同時に取得することを特徴とする請求項14記載の画像表示装置。
- 前記撮像部は、前記底面及び前記識別子と共に、前記表示画面の前記表面側に人手により描画された線図を、前記裏面側から連続撮影して撮像データを得るものであって、
前記撮像部により得られた撮像データに基づいて前記線図の情報を取得する線図認識部を備え、
前記操作処理部は、前記線図認識部により取得された前記線図の情報と前記物体の識別情報および移動情報とに基づいて、前記投影画像形成部が形成する前記画像を操作することを特徴とする請求項14記載の画像表示装置。 - 前記投影画像形成部は、所定のアプリケーション・プログラムに基づいて前記画像を形成するものであり、
前記操作処理部は、前記投影画像形成部が形成する前記画像の素材データ及びアクションデータにより、前記投影画像形成部が形成する前記画像を操作することを特徴とする請求項16記載の画像表示装置。 - 前記表示画面の前記表面側に載置された前記物体の位置を検出する、前記撮像部の解像度よりも低解像度の物体検出部を備え、
前記投影画像形成部は、前記物体検出部により前記物体の位置が検出されたときに、前記表示画面の前記裏面側から所定の時間間隔で投影される白い画像を形成することを特徴とする請求項14から16のうちいずれか1項記載の画像表示装置。 - 前記表示画面に、前記投影画像形成部により形成された前記画像を前記裏面側から投影する画像投影部を備え、
前記画像投影部は、前記投影画像形成部により所定の時間間隔で形成された前記白い画像を前記物体検出部により検出された前記物体の位置を含む所定領域に投影することを特徴とする請求項18記載の画像表示装置。 - 前記パターン認識用辞書は、前記各撮像データそれぞれを直交する2方向の濃度分布に分解した前記底面の濃度が記録されたものであることを特徴とする請求項15記載の画像表示装置。
- 前記物体は、前記底面とは反対側の表面に前記識別子の意義を表す記号が付されたものであることを特徴とする請求項14記載の画像表示装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003406260A JP4340135B2 (ja) | 2003-12-04 | 2003-12-04 | 画像表示方法及び画像表示装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003406260A JP4340135B2 (ja) | 2003-12-04 | 2003-12-04 | 画像表示方法及び画像表示装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005165864A true JP2005165864A (ja) | 2005-06-23 |
JP4340135B2 JP4340135B2 (ja) | 2009-10-07 |
Family
ID=34728690
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003406260A Expired - Fee Related JP4340135B2 (ja) | 2003-12-04 | 2003-12-04 | 画像表示方法及び画像表示装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4340135B2 (ja) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006350927A (ja) * | 2005-06-20 | 2006-12-28 | Fuji Xerox Co Ltd | 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム |
JP2007072637A (ja) * | 2005-09-06 | 2007-03-22 | Hitachi Ltd | 弾力性素材を用いた入力装置 |
JP2007196601A (ja) * | 2006-01-30 | 2007-08-09 | Ricoh Co Ltd | 水平型投影装置 |
JP2008033844A (ja) * | 2006-07-31 | 2008-02-14 | Sharp Corp | 表示装置、制御方法およびプログラム |
JP2008040557A (ja) * | 2006-08-01 | 2008-02-21 | Ricoh Co Ltd | 画像表示装置、画像表示方法及び画像表示プログラム |
JP2009093184A (ja) * | 2007-10-11 | 2009-04-30 | I Chi | 書道における画像やビデオの収集方法及び装置 |
JP2011525635A (ja) * | 2008-05-02 | 2011-09-22 | マイクロソフト コーポレーション | タンジブル・ユーザ・インタフェース上への画像の投影 |
JP2012098766A (ja) * | 2010-10-29 | 2012-05-24 | Konami Digital Entertainment Co Ltd | 検出システム、それが適用された電子黒板装置、その制御方法及び、コンピュータプログラム |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5353345B2 (ja) | 2009-03-18 | 2013-11-27 | 株式会社リコー | 情報処理装置、表示処理方法およびプログラム |
-
2003
- 2003-12-04 JP JP2003406260A patent/JP4340135B2/ja not_active Expired - Fee Related
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006350927A (ja) * | 2005-06-20 | 2006-12-28 | Fuji Xerox Co Ltd | 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム |
JP4661387B2 (ja) * | 2005-06-20 | 2011-03-30 | 富士ゼロックス株式会社 | 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム |
JP2007072637A (ja) * | 2005-09-06 | 2007-03-22 | Hitachi Ltd | 弾力性素材を用いた入力装置 |
JP4635788B2 (ja) * | 2005-09-06 | 2011-02-23 | 株式会社日立製作所 | 弾力性素材を用いた入力装置 |
JP2007196601A (ja) * | 2006-01-30 | 2007-08-09 | Ricoh Co Ltd | 水平型投影装置 |
JP2008033844A (ja) * | 2006-07-31 | 2008-02-14 | Sharp Corp | 表示装置、制御方法およびプログラム |
JP2008040557A (ja) * | 2006-08-01 | 2008-02-21 | Ricoh Co Ltd | 画像表示装置、画像表示方法及び画像表示プログラム |
JP2009093184A (ja) * | 2007-10-11 | 2009-04-30 | I Chi | 書道における画像やビデオの収集方法及び装置 |
JP2011525635A (ja) * | 2008-05-02 | 2011-09-22 | マイクロソフト コーポレーション | タンジブル・ユーザ・インタフェース上への画像の投影 |
US8272743B2 (en) | 2008-05-02 | 2012-09-25 | Microsoft Corporation | Projection of images onto tangible user interfaces |
JP2012098766A (ja) * | 2010-10-29 | 2012-05-24 | Konami Digital Entertainment Co Ltd | 検出システム、それが適用された電子黒板装置、その制御方法及び、コンピュータプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP4340135B2 (ja) | 2009-10-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4991154B2 (ja) | 画像表示装置、画像表示方法及びコマンド入力方法 | |
CN107251101B (zh) | 针对使用具有参数的标记的增强现实的场景修改 | |
Lin et al. | Ubii: Physical world interaction through augmented reality | |
EP2480955B1 (en) | Remote control of computer devices | |
JP5741160B2 (ja) | 表示制御装置、表示制御方法、およびプログラム | |
TWI550437B (zh) | 能夠進行有形互動的設備、製造物品、以及用於有形互動的方法 | |
US20060092178A1 (en) | Method and system for communicating through shared media | |
US11244511B2 (en) | Augmented reality method, system and terminal device of displaying and controlling virtual content via interaction device | |
US20050166163A1 (en) | Systems and methods of interfacing with a machine | |
CN102460373A (zh) | 表面计算机用户交互 | |
JP4513830B2 (ja) | 描画装置、及び描画方法 | |
JP2003533817A (ja) | 3次元モデリングを行うことなく画像処理によってターゲットを指し示す装置及びその方法 | |
JP2015153046A (ja) | 画像処理装置、画像処理方法およびプログラム | |
US10950056B2 (en) | Apparatus and method for generating point cloud data | |
CN110442245A (zh) | 基于物理键盘的显示方法、装置、终端设备及存储介质 | |
CN108027655A (zh) | 信息处理***、信息处理设备、控制方法和程序 | |
CN111083463A (zh) | 虚拟内容的显示方法、装置、终端设备及显示*** | |
JP4340135B2 (ja) | 画像表示方法及び画像表示装置 | |
US20150371103A1 (en) | System and method for identification of printed matter in an image | |
CN109144598A (zh) | 基于手势的电子面罩人机交互方法与*** | |
Tsap | Gesture-tracking in real time with dynamic regional range computation | |
KR101983233B1 (ko) | 깊이맵을 활용한 증강현실 영상표시 시스템 및 그 방법 | |
JP2015026189A (ja) | 画像処理システム、携帯端末装置、表示装置及びコンピュータプログラム | |
CN109144235A (zh) | 基于头手协同动作的人机交互方法与*** | |
KR102103614B1 (ko) | 전방 프로젝션 환경에서 그림자를 제거하기 위한 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060824 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20081107 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20081125 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090122 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090317 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090417 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090616 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090703 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120710 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120710 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130710 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |