JP6307576B2 - 映像表示装置及びプロジェクタ - Google Patents
映像表示装置及びプロジェクタ Download PDFInfo
- Publication number
- JP6307576B2 JP6307576B2 JP2016213934A JP2016213934A JP6307576B2 JP 6307576 B2 JP6307576 B2 JP 6307576B2 JP 2016213934 A JP2016213934 A JP 2016213934A JP 2016213934 A JP2016213934 A JP 2016213934A JP 6307576 B2 JP6307576 B2 JP 6307576B2
- Authority
- JP
- Japan
- Prior art keywords
- state
- unit
- display
- user
- pointer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 claims description 114
- 238000013459 approach Methods 0.000 claims description 65
- 238000005286 illumination Methods 0.000 claims description 39
- 238000000034 method Methods 0.000 claims description 28
- 230000008569 process Effects 0.000 claims description 13
- 230000008859 change Effects 0.000 claims description 7
- 230000004044 response Effects 0.000 claims description 2
- 230000005764 inhibitory process Effects 0.000 claims 2
- 230000001678 irradiating effect Effects 0.000 claims 1
- 238000012545 processing Methods 0.000 description 21
- 238000010586 diagram Methods 0.000 description 20
- 238000000605 extraction Methods 0.000 description 7
- 239000000284 extract Substances 0.000 description 6
- 238000003384 imaging method Methods 0.000 description 6
- 238000002372 labelling Methods 0.000 description 5
- 238000012937 correction Methods 0.000 description 4
- 230000001154 acute effect Effects 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 210000001015 abdomen Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Landscapes
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Description
特許文献1には、照明手段により照らされた状態で操作者を撮像手段に撮像させる手段と、前記撮像手段により得られる操作者の画像データをもとに、前記操作者の特定部位の領域を検出する手段と、前記検出された操作者の特定部位の領域から影の部分を抽出する手段と、前記抽出された影の部分の中から、エッジが直線を成す線分を複数検出し、検出された線分同士が鋭角に交わる点を検出し、この交点を前記操作者の特定部位の領域内における指差し位置として検出する手段と、を具備する操作検出装置が記載されている。
上記の例では、特徴点601,602を、それぞれの影401,402の先端位置に設定しているが、この方法によれば特徴点の設定が容易であり、また、接触点Pの位置もその近傍に存在するので容易に決定できる。
S1001では、影領域抽出部104は、カメラ100で撮像した画像から背景を減算して差分画像を求め、輝度が閾値Lth以下の部分を影領域として抽出する。その際、抽出した影に対して互いに連結していない影の領域をそれぞれ別の影として区別する、いわゆるラベリング処理を行う。
S1003では、検出した2つの特徴点601,602間の距離dを測定する。
なお、操作状態においては以上の処理フローを繰り返して実行し、操作状態の変化に追従した操作検出を行うものとする。
S1011では、影領域抽出部104は、カメラ100で撮像した画像から背景を減算して差分画像を求め、輝度が閾値Lth以下の部分を影領域として抽出する。これは前記S1001と同様である。
なお、操作状態においては以上の処理フローを繰り返して実行し、操作状態の変化に追従した操作検出を行うものとする。
また、図12(a)の接近度と接触点の検出処理と(b)の指さし方向検出処理は、並行して行うことができる。
(a)は、指さし方向700に応じてポインタ800の表示位置を補正する場合である。ポインタ800を表示する際、接触点検出部107において検出した接触点Pと全く同じ位置に表示すると、ポインタ800が指30に隠れてユーザ3から見えにくくなる。そこで、方向検出部109で検出した指さし方向700に沿ってポインタ800を指先前方に所定量だけずらして表示する。これによりポインタ800はユーザ3から見やすくなる。
メモリ203は、半導体などで構成され、中央処理部201の演算や制御に必要な情報や、投写映像として表示する映像情報などを記憶する。
100:カメラ、
101,102:照明、
104:影領域抽出部、
105:特徴点検出部、
106:接近度検出部、
107:接触点検出部、
108:輪郭検出部、
109:方向検出部、
120:制御部、
121:表示制御部、
130:出力部、
150:検出結果データ、
151:表示制御データ、
2:操作対象装置(プロジェクタ)、
2a:短投写型プロジェクタ、
2b:ヘッドマウント型プロジェクタ、
20:小型プロジェクタ本体、
21:壁面、
22:操作面、
23:投写映像、
23a:投写光、
201:中央処理部、
202:操作解析部、
203:メモリ、
204:映像制御部、
210:映像投写部、
3:ユーザ、
30,31,32:指、
401,402,403,404,405:影、
501,502:輪郭線、
601,602:特徴点、
700,701,702,703:指さし方向、
800:ポインタ、
P:接触点。
Claims (6)
- 映像表示面に対するユーザの操作を検出可能な映像表示装置において、
前記映像表示面と少なくとも一部が重畳する操作面に異なる位置から照明光を照射する第1の照明および第2の照明と、
前記照明光が照射された前記操作面を前記ユーザの操作部とともに撮像するカメラと、
該カメラより得られる撮像画像にもとづいて、前記第1の照明により生じる前記ユーザの操作部の第1の影と、前記第2の照明により生じる前記ユーザの操作部の第2の影とを抽出し、抽出された前記第1の影の形状および前記第2の影の形状から、前記ユーザの操作部の前記操作面に対する接近度を含むユーザ操作状態を検出する操作状態検出部と、
映像表示部と、
前記操作状態検出部の検出結果にもとづいて前記映像表示部を制御する制御部と、を備え、
前記制御部は、前記操作状態検出部が検出した前記接近度に応じて、前記ユーザの操作部による操作が可能であるか不可能であるかについての操作可否制御状態と前記映像表示部によるポインタを表示するか非表示とするかについてのポインタ表示非表示状態とを変更する制御を行うものであり、
前記操作可否制御状態は、前記ユーザの操作部が前記操作面に対して離れた状態から近づく過程において、前記ユーザの操作部が前記操作面に接触する前に、前記ユーザの操作部による操作が不可能な状態から可能な状態に切り替えるものであり、
前記ポインタ表示非表示状態は、前記ユーザの操作部が前記操作面に対して離れた状態から近づく過程において、前記ユーザの操作部が前記操作面に接触する前に、前記映像表示部によるポインタ表示を、非表示の状態から表示の状態に切り替えるものであり、
前記制御部における前記操作可否制御状態と前記ポインタ表示非表示状態の制御において、前記操作可否制御状態を前記ユーザの操作部による操作が不可能な状態から可能な状態に切り替える前記接近度と、前記ポインタ表示非表示状態を、前記映像表示部によるポインタ表示を、非表示の状態から表示の状態に切り替える前記接近度とが、異なる接近度に設定されている
ことを特徴とする映像表示装置。 - 請求項1に記載の映像表示装置であって、
前記操作状態検出部が検出した前記接近度に応じたポインタの表示の制御状態には、少なくとも、
前記ユーザの操作部が前記操作面から離れた空中にあって前記操作面と接触していない状態において、前記映像表示部がポインタを非表示とする第1の制御状態と、
前記ユーザの操作部が前記操作面から離れた空中にあって前記第1の制御状態よりも前記操作面に接近している状態において、前記映像表示部がポインタを表示する第2の制御状態と、
があることを特徴とする映像表示装置。 - 請求項2に記載の映像表示装置であって、
前記映像表示部がポインタを表示しない前記第1の制御状態には、前記接近度に応じて、前記ユーザの操作部による空中操作が可能な空中操作モードと、前記ユーザの操作部による操作を不可能にする操作オフモードがあることを特徴とする映像表示装置。 - 映像投射面に対するユーザの操作を検出可能なプロジェクタにおいて、
表示映像を投射する映像投射部と、
前記表示映像が投射される前記映像投射面と少なくとも一部が重畳する操作面に異なる位置から照明光を照射する第1の照明および第2の照明と、
前記照明光が照射された前記操作面を前記ユーザの操作部とともに撮像するカメラと、
該カメラより得られる撮像画像にもとづいて、前記第1の照明により生じる前記ユーザの操作部の第1の影と、前記第2の照明により生じる前記ユーザの操作部の第2の影とを抽出し、抽出された前記第1の影の形状および前記第2の影の形状から、前記ユーザの操作部の前記操作面に対する接近度を含むユーザ操作状態を検出可能な操作状態検出部と、
前記操作状態検出部の検出結果にもとづいて前記映像投射部を制御する制御部と、を備え、
前記制御部は、前記操作状態検出部が検出した前記接近度に応じて、前記ユーザの操作部による操作が可能であるか不可能であるかについての操作可否制御状態と前記表示映像のポインタを表示するか非表示とするかについてのポインタ表示非表示状態とを変更する制御を行うものであり、
前記操作可否制御状態は、前記ユーザの操作部が前記操作面に対して離れた状態から近づく過程において、前記ユーザの操作部が前記操作面に接触する前に、前記ユーザの操作部による操作が不可能な状態から可能な状態に切り替えるものであり、
前記ポインタ表示非表示状態は、前記ユーザの操作部が前記操作面に対して離れた状態から近づく過程において、前記ユーザの操作部が前記操作面に接触する前に、前記表示映像のポインタ表示を、非表示の状態から表示の状態に切り替えるものであり、
前記制御部における前記操作可否制御状態と前記ポインタ表示非表示状態の制御において、前記操作可否制御状態を前記ユーザの操作部による操作が不可能な状態から可能な状態に切り替える前記接近度と、前記ポインタ表示非表示状態を、前記表示映像のポインタ表示を、非表示の状態から表示の状態に切り替える前記接近度とが、異なる接近度に設定されている
ことを特徴とするプロジェクタ。 - 請求項4に記載のプロジェクタであって、
前記操作状態検出部が検出した前記接近度に応じたポインタの表示の制御状態には、少なくとも、
前記ユーザの操作部が前記操作面から離れた空中にあって前記操作面と接触していない状態において、前記表示映像にポインタを非表示とする第1の制御状態と、
前記ユーザの操作部が前記操作面から離れた空中にあって前記第1の制御状態よりも前記操作面に接近している状態において、前記表示映像にポインタを表示する第2の制御状態と、
があることを特徴とするプロジェクタ。 - 請求項5に記載のプロジェクタであって、
前記表示映像にポインタを表示しない前記第1の制御状態には、前記接近度に応じて、前記ユーザの操作部による空中操作が可能な空中操作モードと、前記ユーザの操作部による操作を不可能にする操作オフモードがあることを特徴とするプロジェクタ。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016213934A JP6307576B2 (ja) | 2016-11-01 | 2016-11-01 | 映像表示装置及びプロジェクタ |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016213934A JP6307576B2 (ja) | 2016-11-01 | 2016-11-01 | 映像表示装置及びプロジェクタ |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013048306A Division JP6037901B2 (ja) | 2013-03-11 | 2013-03-11 | 操作検出装置、操作検出方法及び表示制御データ生成方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017062813A JP2017062813A (ja) | 2017-03-30 |
JP6307576B2 true JP6307576B2 (ja) | 2018-04-04 |
Family
ID=58428877
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016213934A Active JP6307576B2 (ja) | 2016-11-01 | 2016-11-01 | 映像表示装置及びプロジェクタ |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6307576B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6328304B1 (ja) * | 2017-07-25 | 2018-05-23 | 株式会社ネットアプリ | 入出力システム |
JP2021056588A (ja) | 2019-09-27 | 2021-04-08 | セイコーエプソン株式会社 | 位置検出装置、プロジェクター、及び位置検出方法 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB0204652D0 (en) * | 2002-02-28 | 2002-04-10 | Koninkl Philips Electronics Nv | A method of providing a display gor a gui |
KR101134027B1 (ko) * | 2004-06-29 | 2012-04-13 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | 디스플레이 디바이스의 오염을 방지하는 방법 및 디바이스 |
JP5090161B2 (ja) * | 2004-06-29 | 2012-12-05 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | グラフィカルユーザインタフェースの多階層表示 |
JP2009250772A (ja) * | 2008-04-04 | 2009-10-29 | Sony Corp | 位置検出システム、位置検出方法、プログラム、物体判断システム、および物体判断方法 |
JP2010244422A (ja) * | 2009-04-08 | 2010-10-28 | Toshiba Tec Corp | 情報表示装置 |
JP5114795B2 (ja) * | 2010-01-29 | 2013-01-09 | 島根県 | 画像認識装置および操作判定方法並びにプログラム |
JP2012003690A (ja) * | 2010-06-21 | 2012-01-05 | Toyota Infotechnology Center Co Ltd | ユーザインタフェース装置 |
JP5167523B2 (ja) * | 2010-09-22 | 2013-03-21 | 島根県 | 操作入力装置および操作判定方法並びにプログラム |
US20120249422A1 (en) * | 2011-03-31 | 2012-10-04 | Smart Technologies Ulc | Interactive input system and method |
US9470922B2 (en) * | 2011-05-16 | 2016-10-18 | Panasonic Intellectual Property Corporation Of America | Display device, display control method and display control program, and input device, input assistance method and program |
CA2844105A1 (en) * | 2011-08-31 | 2013-03-07 | Smart Technologies Ulc | Detecting pointing gestures in a three-dimensional graphical user interface |
-
2016
- 2016-11-01 JP JP2016213934A patent/JP6307576B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2017062813A (ja) | 2017-03-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6037901B2 (ja) | 操作検出装置、操作検出方法及び表示制御データ生成方法 | |
JP6037900B2 (ja) | 操作検出装置及び操作検出方法 | |
US10191594B2 (en) | Projection-type video display device | |
US10915186B2 (en) | Projection video display apparatus and video display method | |
WO2012124730A1 (ja) | 検出装置、入力装置、プロジェクタ、及び電子機器 | |
US6512507B1 (en) | Pointing position detection device, presentation system, and method, and computer-readable medium | |
US20140218300A1 (en) | Projection device | |
US20130127705A1 (en) | Apparatus for touching projection of 3d images on infrared screen using single-infrared camera | |
JPWO2016021022A1 (ja) | 投写型映像表示装置及びその制御方法 | |
US9690430B2 (en) | Touch detection apparatus, touch detection method and recording medium | |
JP6307576B2 (ja) | 映像表示装置及びプロジェクタ | |
US20110193969A1 (en) | Object-detecting system and method by use of non-coincident fields of light | |
TW201423526A (zh) | 光學觸控系統、觸控偵測方法、校正方法及電腦程式產品 | |
US11093085B2 (en) | Position detection method, position detection device, and interactive projector | |
JP6199472B2 (ja) | プロジェクタ及びヘッドマウント型表示装置 | |
JP2021056588A (ja) | 位置検出装置、プロジェクター、及び位置検出方法 | |
JP6314177B2 (ja) | 投射型映像表示装置 | |
CN108351684B (zh) | 操作检测装置、操作检测方法以及影像显示*** | |
US20240069647A1 (en) | Detecting method, detecting device, and recording medium | |
US20240070889A1 (en) | Detecting method, detecting device, and recording medium | |
KR20190027081A (ko) | 전자 장치, 그 제어 방법 및 컴퓨터 판독가능 기록 매체 | |
WO2018211659A1 (ja) | 操作検出装置、及びそれを備えた映像表示装置、映像表示方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170801 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170731 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20170927 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20171113 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171129 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180306 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180312 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6307576 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |