JP2014175982A - Display device - Google Patents
Display device Download PDFInfo
- Publication number
- JP2014175982A JP2014175982A JP2013048875A JP2013048875A JP2014175982A JP 2014175982 A JP2014175982 A JP 2014175982A JP 2013048875 A JP2013048875 A JP 2013048875A JP 2013048875 A JP2013048875 A JP 2013048875A JP 2014175982 A JP2014175982 A JP 2014175982A
- Authority
- JP
- Japan
- Prior art keywords
- display
- video
- viewer
- glasses
- display device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
Description
本発明は、表示装置に関し、より詳細には、３Ｄ眼鏡を使用して３Ｄ映像を視認できるようにした表示装置に関する。 The present invention relates to a display device, and more particularly to a display device that enables 3D video to be viewed using 3D glasses.
人の目の視差を利用して映像を立体化する３Ｄ（three-dimensional）映像を表示可能な表示装置が普及してきている。これに伴い、３Ｄパッケージメディアの流通も多くなり、一般家庭等においても３Ｄ映像の表示が可能な表示装置により３Ｄコンテンツを視聴する機会も増えている。このような表示装置は、通常の２Ｄ（two-dimensional）映像の表示と、３Ｄ映像の表示とを切り換えて視聴することができる。３Ｄ表示と２Ｄ表示は、通常、視聴者が表示装置を操作することで切り換えられる。また、以下のような表示を切り換える手段により３Ｄ表示と２Ｄ表示とを切り換えるものが知られている。 Display devices capable of displaying a 3D (three-dimensional) image that makes a three-dimensional image using the parallax of the human eye have become widespread. Along with this, the distribution of 3D package media has increased, and the opportunity to view 3D content on a display device capable of displaying 3D video is increasing even in ordinary homes. Such a display device can be switched between normal 2D (two-dimensional) video display and 3D video display. The 3D display and 2D display are usually switched by the viewer operating the display device. Further, there is known a device that switches between 3D display and 2D display by means of switching the display as follows.
例えば、特許文献１に記載された立体表示装置では、観察者が眼鏡を装着すると、プッシュスイッチが観察者の額で押されてオン状態になり、発光センサが発光される。そしてモニタの受光センサがこの発光を受光すると、モニタには３Ｄ映像が表示される。また、観察者が眼鏡を外すと、プッシュスイッチがＯＦＦになり２Ｄ映像となる。
For example, in the stereoscopic display device described in
また、特許文献２には、シャッターグラスに対する状態情報を受信し、その状態情報に基づいて再生モードを切り換えたり、再生モードの切り換えのためのメッセージを表示するディスプレイ装置及びシステムが開示されている。ここでは３Ｄ視聴用眼鏡の電源ＯＮ／ＯＦＦ情報、充電情報、シャッターの開閉情報などをディスプレイ装置が受信して、視聴者が３Ｄ眼鏡を装着していることを判定し、これにより２Ｄ映像と３Ｄ映像を切り換えるようにしている。
また、特許文献３には、視聴者が見易く、目の疲労が少ない画像を表示装置が表示することを目的とした画像処理装置が開示されている。この画像処理装置は、３次元の画像を２次元の画像に変換して表示装置に出力し、もしくは２次元の画像を３次元の画像に変換して表示装置に出力し、同一の次元の画像で同一の画面に表示させる。
Further,
特許文献４には、表示中のコンテンツが３次元表示対応コンテンツの場合、コンテンツの３次元映像と２次元映像の２画面表示に切り換える映像表示装置が開示されている。映像表示装置の制御部は、２画面表示キーが視聴者によって押下された場合、表示中のコンテンツの種別が３Ｄ映像であるか否かを判定し、３Ｄ映像が表示中であると判定された場合には、同一の映像について３Ｄ映像と２Ｄ映像とを共に表示する３Ｄ／２Ｄ画面表示画面を生成して表示する。
３Ｄ映像と２Ｄ映像とを切り換えることができる表示装置では、視聴者が所定の操作を行うことで表示切換を行うことができるが、視聴者自身で表示設定を切り換える操作をその都度行うことは煩雑である。また、複数の視聴者が表示装置を視聴する場合、複数の視聴者が希望する表示方式の３Ｄ映像表示または２Ｄ映像表示を選択し、選択した表示方式を表示装置に設定する必要が生じ、必ずしも複数の視聴者に対して利便性の高いものではなかった。 In a display device capable of switching between 3D video and 2D video, the viewer can perform display switching by performing a predetermined operation, but it is complicated to perform an operation of switching display settings by the viewer himself. It is. Further, when a plurality of viewers view the display device, it is necessary to select 3D video display or 2D video display of a display method desired by the plurality of viewers, and to set the selected display method in the display device. It was not convenient for multiple viewers.
また、上記特許文献１の立体表示装置は、眼鏡側の信号発生・送信手段と表示装置側の受信手段とが必要となり、また、眼鏡から送信された信号が受信できない位置で眼鏡のプッシュスイッチがＯＮ／ＯＦＦされた場合、信号が送受信できる位置で再度眼鏡を掛け替える必要があった。また、複数の視聴者が立体表示装置を視聴しているときに、各視聴者が希望する表示方式を判別することはできない。
In addition, the stereoscopic display device of
また、特許文献２のディスプレイ装置は、眼鏡側の信号発生・送信手段と表示装置側の受信手段とが必要となり、また、アクティブシャッター方式のような電源により駆動する眼鏡でなければ実施することができない。また、複数の視聴者がディスプレイ装置を視聴しているときに、各視聴者が希望する表示方式を判別することはできない。
Further, the display device of
また、特許文献３の画像処理装置は、複数の視聴者が表示装置を視聴している場合に対応することができず、また、視聴者の視聴状態に合わせた表示方式に切り替えることができない。また、特許文献４の映像表示装置は、単に３Ｄ映像と２Ｄ映像とを２画面表示する構成を有するものであり、視聴者の視聴状態や視聴人数などに応じて表示状態を切り換えることはできない。
Further, the image processing apparatus of
本発明は、上述のごとき実情に鑑みてなされたもので、視聴者の視聴状態を判別して３Ｄ映像と２Ｄ映像とを適切に切り替えて表示できるようにした表示装置を提供することを目的とする。 The present invention has been made in view of the above circumstances, and an object of the present invention is to provide a display device that can determine a viewing state of a viewer and appropriately switch between 3D video and 2D video for display. To do.
上記課題を解決するために、本発明の第１の技術手段は、表示部を備え、２Ｄ映像と３Ｄ映像とを前記表示部に表示させることができる表示装置において、該表示装置の周囲の状態を示す所定の情報を取得する周囲情報取得部と、該周囲情報取得部により取得した情報を解析し、視聴者の数、及び３Ｄ映像を視認するための３Ｄ眼鏡の装着の有無、を含む視聴者の状態を判断する視聴者判断部と、前記視聴者判断部の判断結果に応じて前記表示部の表示を制御する表示制御部と、を有し、前記表示制御部は、前記視聴者判断部によって前記３Ｄ眼鏡を装着している視聴者が存在していると判断されたとき、前記表示装置に３Ｄ映像を表示させることを特徴としたものである。 In order to solve the above-described problem, a first technical means of the present invention includes a display unit, and a display device that can display 2D video and 3D video on the display unit. A viewing information including a surrounding information obtaining unit that obtains predetermined information indicating the number of viewers, and analysis of the information obtained by the surrounding information obtaining unit, and the number of viewers and whether or not 3D glasses are worn to view 3D video A viewer determination unit that determines the state of the viewer, and a display control unit that controls display of the display unit in accordance with a determination result of the viewer determination unit, wherein the display control unit includes the viewer determination When it is determined by the unit that there is a viewer wearing the 3D glasses, 3D video is displayed on the display device.
第２の技術手段は、第１の技術手段において、前記視聴者判断部が、前記視聴者の状態として、前記３Ｄ眼鏡の装着者と非装着者が混在していることを判断した場合、前記表示制御部は、前記表示部の表示画面を二つに分割し、分割した各領域に３Ｄ映像と２Ｄ映像とをそれぞれ表示し、３Ｄの装着者と非装着者との位置関係に応じて、前記３Ｄ映像を表示させる分割領域と前記２Ｄ映像を表示させる領域とを決定することを特徴としたものである。 In a second technical means, in the first technical means, when the viewer determination unit determines that a wearer and a non-wearer of the 3D glasses are mixed as the state of the viewer, The display control unit divides the display screen of the display unit into two, displays a 3D video and a 2D video in each of the divided areas, and according to the positional relationship between the 3D wearer and the non-wearer, The division area for displaying the 3D video and the area for displaying the 2D video are determined.
第３の技術手段は、第２の技術手段において、前記表示制御部が、前記視聴者判断部が判断した３Ｄ眼鏡の装着者と非装着者との比率に応じて、前記分割した各領域の大きさの比率を変化させることを特徴としたものである。 According to a third technical means, in the second technical means, the display control unit determines whether each of the divided areas is in accordance with the ratio of the wearer and non-wearer of the 3D glasses determined by the viewer determination unit. It is characterized by changing the size ratio.
第４の技術手段は、第２または第３の技術手段において、前記視聴者判断部が、前記周囲情報取得部が取得した情報により判断する視聴者の状態を監視し、前記視聴者の状態が変化した場合、前記表示制御部は、該変化に応じて２Ｄ映像の全画面表示、３Ｄ映像の全画面表示、または２Ｄ映像と３Ｄ映像の２画面表示、を切り換えることを特徴としたものである。 According to a fourth technical means, in the second or third technical means, the viewer determination unit monitors the state of the viewer determined based on the information acquired by the surrounding information acquisition unit, and the viewer state is When changed, the display control unit switches between 2D video full-screen display, 3D video full-screen display, or 2D video and 3D video two-screen display according to the change. .
第５の技術手段は、第１の技術手段において、前記表示装置が、前記表示制御部の制御により複数の３Ｄ映像表示方式を切り換えて３Ｄ映像を表示可能であって、３Ｄ映像を視聴する３Ｄ眼鏡と、特定の前記３Ｄ映像表示方式とを対応付けて記憶する記憶部を有し、前記視聴者判断部が、前記撮像画像に３Ｄ眼鏡を装着した視聴者が含まれていることを判断した場合、前記表示制御部は、前記撮像画像に含まれている視聴者が装着している３Ｄ眼鏡に対応付けられて記憶された３Ｄ映像表示方式で前記表示部に３Ｄ映像を表示させることを特徴としたものである。 According to a fifth technical means, in the first technical means, the display device is capable of displaying a 3D video by switching a plurality of 3D video display methods under the control of the display control unit, and viewing the 3D video. A storage unit that stores the glasses and the specific 3D video display method in association with each other, and the viewer determination unit determines that a viewer wearing 3D glasses is included in the captured image; In this case, the display control unit causes the display unit to display 3D video in a 3D video display method stored in association with 3D glasses worn by a viewer included in the captured image. It is what.
本発明によれば、視聴者の視聴状態を判別して３Ｄ映像と２Ｄ映像とを適切に切り替えて表示できるようにした表示装置を提供することができる。 ADVANTAGE OF THE INVENTION According to this invention, the display apparatus which discriminate | determined the viewing condition of a viewer and can switch and display 3D image | video and 2D image | video appropriately can be provided.
図１は、本発明による表示装置の構成例を示すブロック図で、テレビジョン受信機として構成された表示装置の例を示す図である。
チューナ／復調／分離部１０２は、アンテナ１０１を介して受信した放送信号を選局して復調し、多重化されている映像データおよび音声データを分離し、映像データを映像信号処理部１０３に送るとともに、音声データを音声信号処理部１０５に送る。さらに、チューナ／復調／分離部１０２は、放送信号に含まれるＥＰＧ（Electronic Program Guide）データ等のデータを抽出し、ＥＰＧ／ＯＳＤ（On-screen display）／ＢＭＬ（Broadcast Markup Language）処理部１０４に送る。なお、チューナ／復調／分離部１０２によって抽出された放送波信号は、ＣＰＵ（Central Processing Unit）１０７による書き込み制御により必要に応じて不揮発性メモリ１１１やＲＡＭ（Random Access Memory）１０６に記録される。
FIG. 1 is a block diagram illustrating a configuration example of a display device according to the present invention, and is a diagram illustrating an example of a display device configured as a television receiver.
The tuner / demodulation /
映像信号処理部１０３は、チューナ／復調／分離部１０２で分離された映像データをデコードし、デコードした映像データに対して、例えば、動画から静止画をキャプチャする静止画処理、ノイズリダクション処理、シャープネス調整処理、コントラスト調整処理等の映像処理を適宜行って映像データを変換する。
The video
ＥＰＧ／ＯＳＤ／ＢＭＬ処理部１０４は、定期的に更新保存されたＥＰＧデータに基づき電子番組表を作成し、また、不揮発性メモリ１１１に予め保存されているＯＳＤデータを描画する。ＯＳＤデータは、例えば、予め不揮発性メモリ１１１に記憶された設定メニュー画面、音量ゲージ、現在時刻、選局チャンネル等の各種情報を描画するためのデータである。また、ＥＰＧ／ＯＳＤ／ＢＭＬ処理部１０４は、ＢＭＬ画面を表示させる処理を行うことができる。ＢＭＬ画面を表示させるために、表示装置１００は、ＢＭＬブラウザを不揮発性メモリ１１１に格納している。ＢＭＬ画像信号の生成処理では、ＢＭＬブラウザは、通信部１１２によって外部サーバからＢＭＬ文書データを取得して解析し、ＢＭＬ画面の画像を生成し、ＢＭＬ画像データとして出力する。
The EPG / OSD /
映像出力変換部１０８は、受信した映像データを表示部１１５に表示させるための駆動回路を含む部分であり、ＥＰＧ／ＯＳＤ／ＢＭＬ処理部１０４から出力された電子番組表データ、ＯＳＤデータ、またはＢＭＬ画像データを映像信号処理部１０３から出力された映像データに加算して、得られた映像データを表示部１１５に出力する。表示部１１５は、映像データを例えば液晶パネルによる画面に表示する。
The video
音声信号処理部１０５は、チューナ／復調／分離部１０２から出力された音声データをデコードしたり、内蔵音源の音声出力処理を行って音声出力変換部１０９に出力する。音声出力変換部１０９は、音声信号処理部１０５から入力された音声データをオーディオ信号に変換してスピーカ１１６に出力する。スピーカ１１６からはオーディオ信号が音声出力される。
The audio
リモコン受光部１１３は、図示しない遠隔操作装置（リモートコントローラ）からの赤外線等による制御信号を受信し、遠隔操作装置による操作を受け付ける。
通信部１１２は、無線もしくは有線による情報端末装置等の外部機器との通信、あるいは電話回線、ＬＡＮ、インターネット等のネットワーク網を介した外部機器との通信を確立する制御を行う。外部機器との無線通信には、ＷｉＦｉ（登録商標）やＢｌｕｅＴｏｏｔｈ（登録商標）の通信規格に基づく通信を可能とするように構成することができる。また、通信部１１２は、アクティブシャッター方式で３Ｄ映像表示を行う場合に、３Ｄ眼鏡と通信を行い、ＣＰＵ１０７の制御により、３Ｄ眼鏡のシャッター開閉を制御する制御信号を送信可能に構成される。
The remote control
The
カメラ部１１０は、表示部１１５の表示画面を視聴する視聴者を撮像する撮像装置であり、撮像画像の画像データを出力する。カメラ部１１０には、例えばＣＭＯＳやＣＣＤを撮像素子として使用したデジタルカメラを用いることができる。カメラ信号処理部１１４は、カメラ部１１０から出力された画像データを処理し、ＣＰＵ１０７で解析可能なデータとする。
The
ＣＰＵ１０７は、表示装置１００の各部を制御するものであり、特にカメラ信号処理部１１４が取得した画像データを解析して、表示装置１００から出力された映像及び音声を視聴する視聴者の数、及び３Ｄ映像を視認するための３Ｄ眼鏡の装着の有無、を含む視聴者の状態を判断する。また、ＣＰＵ１０７は、上記視聴者の状態の判断結果に応じて表示部１１５の表示を制御する。例えば視聴者の状態として３Ｄ眼鏡を装着している視聴者が存在していると判断されたとき、表示部１１５に３Ｄ映像を表示させる制御を行う。本実施形態において、本発明による周囲情報取得部は、カメラ部１１０及びカメラ信号処理部１１４によって実現され、本発明による視聴者判断部は、視聴者の状態を判断する処理を行うＣＰＵ１０７によって実現される。カメラ部１１０により撮像された撮像画像の情報は、表示装置の周囲の状態を示す所定の情報に該当するものである。また、本発明による表示制御部は、ＣＰＵ１０７、映像信号処理部１０３、ＥＰＧ／ＯＳＤ／ＢＭＬ処理部１０４、及び映像出力変換部１０８により実現される。
The
不揮発性メモリ１１１には、撮像画像から視聴者の数や３Ｄ眼鏡の装着状況を判断するための特徴量のデータや、３Ｄ眼鏡と３Ｄ映像表示方式との対応関係を判断するためのデータなどが保存される。この他不揮発性メモリ１１１には、取得したＥＰＧデータ、テレビ受信機としての設定データ等、及び画像処理装置の各種機能を実現するプログラムやデータが格納される。格納されたプログラムはＣＰＵ１０７により読み出され、ＲＡＭ１０６をワーク領域として使用して実行される。本発明の記憶部は不揮発性メモリ１１１によって実現されるが、記憶部としては他の記憶手段を適宜適用してもよい。
The
上記の構成の表示装置の実施形態では、３Ｄ視聴用の眼鏡をかけて視聴する眼鏡方式で３Ｄ映像の表示が行われる。眼鏡方式では、右目用の画像と左目用の画像との切り替えを視聴者が装着する３Ｄ眼鏡によって行う。
具体的には眼鏡方式には、液晶シャッター方式、２色眼鏡方式、３Ｄスコープ方式等がある。液晶シャッター方式は、左目用の画像と右目用の画像とを表示部１１５の画面上で時系列に交互に高速に表示し、その画像に同期させて、左目用の画像を表示しているときには３Ｄ眼鏡の右目用の液晶シャッターを閉じ、逆に右目用の画像が表示されているときには３Ｄ眼鏡の左目用の液晶シャッターが閉じられるように制御する。この制御によって、視聴者の左右それぞれの目には適切な画像のみが入力され、視聴者は、視認している画像を３Ｄ映像として知覚および視認することが可能となる。３Ｄ眼鏡の液晶シャッターは、３Ｄ眼鏡の左右のレンズ表面に設けられた電池等で駆動される。
In the embodiment of the display device having the above-described configuration, 3D video is displayed in a glasses system for viewing with glasses for 3D viewing. In the glasses method, switching between the right-eye image and the left-eye image is performed by 3D glasses worn by the viewer.
Specifically, the glasses method includes a liquid crystal shutter method, a two-color glasses method, a 3D scope method, and the like. In the liquid crystal shutter method, the left-eye image and the right-eye image are alternately displayed at high speed in time series on the screen of the
また、２色眼鏡方式では、左右の視角から見た画像データを所定の演算によってそれぞれ赤色および青色の画像として生成して表示部１１５に表示し、左右のレンズがそれぞれ青色・赤色の２色眼鏡を視聴者が装着して視認することにより、表示された画像データを３Ｄ映像として知覚及び視認することができるようにしている。
In the two-color glasses method, the image data viewed from the left and right viewing angles is generated as red and blue images by a predetermined calculation and displayed on the
また、３Ｄスコープ方式は、視差を有する左右の画像を並置して表示部１１５に表示し、鏡などの光学系を有するスコープを使用して右視野の画像を視聴者の右目に導き、左視野の画像を視聴者の左視野に導く。これにより、視聴者の左右の目にそれぞれ独立した映像を視認させることで、視聴者が３Ｄ映像を知覚し視認することが可能となる。
In the 3D scope method, right and left images having parallax are juxtaposed and displayed on the
本発明に係る表示装置の実施形態においては、上記のような方式のいずれかまたは複数による３Ｄ表示が可能に構成されている。
すなわち、アクティブシャッター方式により３Ｄ映像表示を行う場合には、ＣＰＵ１０７は、映像出力変換部１０８を制御して右目用の画像と左目用の画像を交互に生成させて表示部１１５に出力するとともに、３Ｄ眼鏡の液晶シャッターを開閉する制御信号を生成して通信部１１２から３Ｄ眼鏡に送信する。３Ｄ眼鏡では、表示装置１００から送信された制御信号に基づき、左右の液晶シャッターを開閉させる動作を行い、３Ｄ眼鏡を装着した視聴者に３Ｄ映像を視認させる。
In the embodiment of the display device according to the present invention, 3D display is possible by any one or a plurality of the methods described above.
That is, when performing 3D video display by the active shutter method, the
また、２色眼鏡方式により３Ｄ映像表示を行う場合、ＣＰＵ１０７は、映像出力変換部１０８を制御して、左右の視角から見た画像データを所定の演算によって生成し、表示部１１５にて表示させる。これにより２色眼鏡を装着した視聴者が３Ｄ映像を視認することができるようになる。
When performing 3D video display using the two-color glasses method, the
また、３Ｄスコープ方式により３Ｄ映像表示を行う場合、視差を有する左右の画像を並置して表示部１１５に表示し、鏡などの光学系を有するスコープを使用して右視野の画像を視聴者の右目に導き、左視野の画像を視聴者の左視野に導く。これにより、視聴者の左右の目にそれぞれ独立した映像を視認さることで、視聴者が３Ｄ映像を知覚し視認することが可能となる。
In addition, when 3D video display is performed using the 3D scope method, left and right images having parallax are juxtaposed and displayed on the
表示装置１００は、上記のような眼鏡方式にて３Ｄ表示を可能するように構成される。そして表示装置１００は、視聴者が３Ｄ眼鏡を装着しているか否かを判定し、視聴者が３Ｄ眼鏡を装着していると判定した場合、３Ｄ映像表示を行う。ここで判定時に２Ｄ映像表示を行っていた場合には、２Ｄ映像表示から３Ｄ映像表示に切り替える。
また、複数の視聴者が表示装置を視聴し、その複数視聴者のそれぞれについて３Ｄ眼鏡の装着の有無を判定し、各視聴者の装着の状態に応じて表示を切り換える等の制御を行う。
The
In addition, a plurality of viewers view the display device, determine whether or not the 3D glasses are worn for each of the plurality of viewers, and perform control such as switching the display according to the wearing state of each viewer.
視聴者が３Ｄ眼鏡を装着しているか否かの判定は、視聴者の撮像画像を解析することにより行われる。ここでは、表示装置１００は、カメラ部１１０により表示装置１００を視聴する視聴者を撮像する。そしてＣＰＵ１０７により実現される視聴者判断部により撮像した画像データを解析して、視聴者が３Ｄ眼鏡を装着しているか否かを判定し、視聴者が３Ｄ視聴用の眼鏡を装着している場合、３Ｄ映像の表示を行うとともに、複数の視聴者の状態を判定して、その状態に応じた表示制御を行う。
Whether or not the viewer is wearing 3D glasses is determined by analyzing the captured image of the viewer. Here, the
本発明に係る表示装置の実施形態においては、上記のような視聴者の状態に応じて、２Ｄ映像と３Ｄ映像とを切り換え可能とするために、２Ｄ映像と３Ｄ映像とを相互に変換する機能を備えることができる。ここでは、放送波や記録媒体を介して入力されたオリジナルの２Ｄ映像を３Ｄ映像に変換し、または、オリジナルの３Ｄ映像を２Ｄ映像に変換することができるようにする。 In the embodiment of the display device according to the present invention, a function of mutually converting 2D video and 3D video to enable switching between 2D video and 3D video according to the state of the viewer as described above. Can be provided. Here, an original 2D video input via a broadcast wave or a recording medium is converted into a 3D video, or an original 3D video can be converted into a 2D video.
２映像信号と３Ｄ映像信号との変換は、公知の手法を適宜採用することができるが、例えば２Ｄ映像を３Ｄ映像に変換する場合、２Ｄ映像全体を右目用と左目用にそれぞれ左右反対方向にずらして、視差のある画像を生成することで３Ｄ映像に変換する技術が知られている。あるいは基本となる奥行値を示す基本奥行モデルに従って、入力画像のパターンに応じて基本奥行モデルの合成比を変えて入力画像の奥行モデルを生成し、生成した奥行モデルと入力画像とから、左眼及び右眼へ提示する３Ｄ映像を生成するもの、などが知られている。 For conversion between the 2 video signal and the 3D video signal, a known method can be adopted as appropriate. For example, when converting 2D video to 3D video, the entire 2D video is used in the opposite direction for the right eye and the left eye, respectively. A technique for shifting to 3D video by generating an image with parallax is known. Or, according to the basic depth model indicating the basic depth value, the depth model of the input image is generated by changing the composition ratio of the basic depth model according to the pattern of the input image, and the left eye is generated from the generated depth model and the input image. And those that generate 3D images to be presented to the right eye.
また、３Ｄ映像を２Ｄ映像に変換する場合、３Ｄ映像に含まれる左目用の映像データおよび右目用の映像データのいずれか一方を用いて２Ｄ映像を生成する手法などが知られている。本発明に係る表示装置の実施形態では、上記のような２Ｄ／３Ｄ映像の変換技術を利用して、撮像画像を解析することにより得られた視聴者の状態に応じて、２Ｄ／３Ｄ映像を適切に表示させるようにすることができる。 Also, when converting 3D video to 2D video, a method of generating 2D video using either left-eye video data or right-eye video data included in the 3D video is known. In the embodiment of the display device according to the present invention, the 2D / 3D video is converted into the 2D / 3D video according to the state of the viewer obtained by analyzing the captured image using the 2D / 3D video conversion technology as described above. It can be displayed appropriately.
図２は、表示装置を視聴する視聴者の状態に応じた表示制御例を示す図である。カメラ部１１０により撮像された画像を解析した結果、図２（Ｂ）に示すように３Ｄ眼鏡を装着していない一人の視聴者１０が検出された場合、表示装置１００では、図２（Ａ）に示すように表示部１１５の表示画面１１５ａの全画面に２Ｄ映像を表示する。視聴者１０は３Ｄ眼鏡を装着していないため、眼鏡方式による３Ｄ映像を視聴することができず、従って、２Ｄ映像を表示することで視聴者１０がその表示映像を視認できるようにする。
FIG. 2 is a diagram illustrating a display control example according to the state of the viewer who views the display device. As a result of analyzing the image captured by the
図３は、表示装置を視聴する視聴者の状態に応じた表示制御例の他の例を示す図である。カメラ部１１０により撮像された画像を解析した結果、図３（Ｂ）に示すように３Ｄ眼鏡１２を装着している一人の視聴者１１が検出された場合、表示装置１００では、図３（Ａ）に示すように表示部１１５の表示画面１１５ａの全画面に３Ｄ映像を表示する。視聴者１１は３Ｄ眼鏡１２を装着しているため、表示装置１００では３Ｄ映像に切り替えてその３Ｄ映像を視聴者１１が視認できるようにする。
FIG. 3 is a diagram illustrating another example of the display control example according to the state of the viewer who views the display device. As a result of analyzing the image captured by the
図４は、表示装置を視聴する視聴者の状態に応じた表示制御例の更に他の例を示す図である。カメラ部１１０により撮像された画像を解析した結果、図４（Ｂ）に示すように３Ｄ眼鏡を装着していない一人の視聴者１０と、３Ｄ眼鏡１２を装着しているもう一人の視聴者１１とが検出されたものとする。この場合、表示装置１００では、図４（Ａ）に示すように、表示部１１５の表示画面１１５ａを二分割し、分割した一方の画面に２Ｄ映像を表示し、分割した他方の画面に３Ｄ映像を表示させる。このとき、撮像画像の内の視聴者１０，１１の位置に従って、３Ｄ眼鏡１２を装着している視聴者１１側の分割画面に３Ｄ映像を表示し、３Ｄ眼鏡を装着していない視聴者１０側の分割画面に２Ｄ映像を表示させる。この場合、分割前後の画面のアスペクト比を一定にするのであれば、分割した各画面には、例えば画面上下に黒オビによる非画面表示領域が発生する。以下の例でも同様とする。
FIG. 4 is a diagram illustrating still another example of the display control example according to the state of the viewer who views the display device. As a result of analyzing the image captured by the
図５は、表示装置を視聴する視聴者の状態に応じた表示制御例の更に他の例を示す図である。図４の例と同様に、カメラ部１１０により撮像された画像を解析した結果、図５（Ｂ）に示すように３Ｄ眼鏡１２を装着している一人の視聴者１１と、３Ｄ眼鏡を装着していないもう一人の視聴者１０とが検知されたものとする。表示装置１００では、図５（Ａ）に示すように、表示部１１５の表示画面１１５ａを二分割し、３Ｄ眼鏡１２を装着している視聴者１１側の分割画面に３Ｄ映像を表示し、３Ｄ眼鏡を装着していない視聴者１０側の分割画面に２Ｄ映像を表示させる。ここでは３Ｄ眼鏡１２を装着している視聴者１１と装着していない視聴者１０との位置関係が図４の例と逆になっているため、３Ｄ映像を表示させる分割画面と２Ｄ映像を表示させる分割画面の位置関係も図４の例とは逆になる。
FIG. 5 is a diagram illustrating still another example of the display control example according to the state of the viewer who views the display device. As in the example of FIG. 4, as a result of analyzing the image captured by the
図６は、表示装置を視聴する視聴者の状態に応じた表示制御例の更に他の例を示す図である。カメラ部１１０により撮像された画像を解析した結果、図６（Ｂ）に示すように３Ｄ眼鏡を装着していない一人の視聴者１０と、３Ｄ眼鏡１２を装着しているもう一人の視聴者１１とが検出されたものとする。この場合、表示装置１００では、図６（Ａ）に示すように、表示部１１５の表示画面１１５ａを二分割し、３Ｄ眼鏡を装着している視聴者１１側の分割画面に３Ｄ映像を表示し、３Ｄ眼鏡を装着していない視聴者１０側の分割画面に２Ｄ映像を表示させる。そして、この例では、視聴者ごとに異なるコンテンツ（例えば異なる放送番組）の画像を表示させることができる。
FIG. 6 is a diagram illustrating still another example of the display control example according to the state of the viewer who views the display device. As a result of analyzing the image captured by the
図７は、表示装置を視聴する視聴者の状態に応じた表示制御例の更に他の例を示す図である。カメラ部１１０により撮像された画像を解析した結果、図７（Ｂ）に示すように３Ｄ眼鏡１２を装着している一人の視聴者１１と、３Ｄ眼鏡を装着していないもう一人の視聴者１０とが検出されたものとする。この場合、表示装置１００では、図７（Ａ）に示すように、表示部１１５の表示画面１１５ａを二分割し、３Ｄ眼鏡１２を装着している視聴者１１側の分割画面に３Ｄ映像を表示し、３Ｄ眼鏡を装着していない視聴者１０側の分割画面に２Ｄ映像を表示させる。そして、この例では、視聴者ごとに異なるコンテンツ（例えば異なる放送番組）の画像を表示させることができる。ここでは３Ｄ眼鏡１２を装着している視聴者１１と装着していない視聴者１０との位置関係が図６の例と逆になっているため、３Ｄ映像を表示させる分割画面と２Ｄ映像を表示させる分割画面との位置関係も図６の例とは逆になる。
FIG. 7 is a diagram illustrating still another example of the display control example according to the state of the viewer who views the display device. As a result of analyzing the image captured by the
また、本発明による表示装置の実施形態では、カメラ部１１０により撮像された画像を解析した結果、３Ｄ眼鏡の装着者と非装着者とが検出された場合、これら３Ｄ眼鏡の装着者と非装着者との比率に応じて、表示画面１１５ａを分割した各表示領域の大きさの比率を変化させるようにしてもよい。この場合、（視聴者人数−３Ｄ眼鏡の非装着者数）：（３Ｄ眼鏡の非装着者数）の比率に応じて、分割した表示領域の大きさを変化させることができる。
Further, in the embodiment of the display device according to the present invention, when an image captured by the
分割領域の大きさの変更例として、例えば画素数が１９２０（水平）×１０８０（垂直）の表示装置を考える。このとき、例えば１人の３Ｄ眼鏡の装着者と１人の非装着者が検出された場合には、表示画面１１５ａを１：１の大きさに分割して、それぞれの分割領域に３Ｄ映像と２Ｄ映像とを表示させる。この場合、分割前と分割後の表示領域のアスペクト比を一定にする場合、分割された画面における表示領域の大きさは、９６０×５４０のサイズとなる。
As an example of changing the size of the divided region, consider a display device having, for example, 1920 (horizontal) × 1080 (vertical) pixels. At this time, for example, when one wearer of 3D glasses and one non-wearer are detected, the
また、例えば２人の３Ｄ眼鏡の装着者と１人の非装着者が検出された場合には、表示画面１１５ａを２：１の大きさに分割して、それぞれの分割領域に３Ｄ映像と２Ｄ映像とを表示させる。この場合、分割前と分割後の表示領域のアスペクト比を一定にする場合、分割された画面における表示領域の大きさは、３Ｄ映像を表示させる画面では、１２８０×７２０のサイズとなり、２Ｄ映像を表示させる画面では、６４０×３６０のサイズとなる。
For example, when two wearers of 3D glasses and one non-wearer are detected, the
また、例えば３人の３Ｄ眼鏡の装着者と１人の非装着者が検出された場合には、表示画面１１５ａを３：１の大きさに分割して、それぞれの分割領域に３Ｄ映像と２Ｄ映像とを表示させる。この場合、分割前と分割後の表示領域のアスペクト比を一定にする場合、分割された画面における表示領域の大きさは、３Ｄ映像を表示させる画面では、１４４０×８１０のサイズとなり、２Ｄ映像を表示させる画面では、４８０×２７０のサイズとなる。
このように、撮像画像から検出した３Ｄ眼鏡の装着者と非装着者との比率に応じて、表示画面１１５ａを分割した各表示領域の大きさの比率を変化させることで、視聴者の３Ｄ眼鏡の装着状態に応じた適切な画面表示を行うことができるようになる。
Further, for example, when three wearers of 3D glasses and one non-wearer are detected, the
In this way, by changing the ratio of the size of each display area obtained by dividing the
次に画像解析による視聴者の状態を判定する手法について説明する。上記のように本実施形態の表示装置１００は、カメラ部１１０で撮像した画像を解析して、視聴者の数、及び３Ｄ眼鏡の装着の有無等の視聴者の状態を判定している。画像解析による視聴者の状態を判定する技術は、公知の技術を適用することができる。
Next, a method for determining the state of the viewer by image analysis will be described. As described above, the
ここでは、表示装置１００では、カメラ部１１０が撮影した画像から、人物抽出処理を行って、その撮影範囲内に視聴者である人物が存在しているか否かを判定する。そして、撮影した画像から人物の存在が検出された場合、その人物が特定の３Ｄ眼鏡を装着しているか否かを判定する。
例えば表示装置１００は、視聴者の状態を判定するための特徴量を予め保存しておく。特徴量としては、例えば画像中に含まれる特定物体の任意の座標、あるいは座標の組み合わせで表現することのできる形状や大きさ、あるいは特定の種別や属性を表現することのできる符号等を用いることができる。
Here, the
For example, the
表示装置１００では、人物を特定するための特徴量、及び３Ｄ眼鏡を特定するための特徴量を予め不揮発性メモリ１１１等に保存しておく。３Ｄ眼鏡は、その表示装置１００で３Ｄ映像を視認するために使用されるものとする。
そして表示装置１００のＣＰＵ１０７は、カメラ部１１０により撮像した画像から特定の特徴量を抽出し、抽出した特徴量を予め保存した特徴量と比較して、視聴者の状態を判定する。判定する視聴者の状態とは、撮像した画像に人物が含まれているか否か、人物が含まれている場合にその人物の数、人物毎に特定の３Ｄ眼鏡を装着しているか否か、を含む視聴者の状態を示す情報とする。
In the
Then, the
画像中に存在する任意の特徴量を抽出する基本的な手法としては、テンプレートマッチング、投影法、固有空間法、色情報を利用した手法等様々な手法が知られている。テンプレートマッチングは、人物顔を含んだ画像中の顔が誰のものであるか判定するような場合に用いられる。判定すべきパターン、すなわち、ここでは人物顔の濃淡画像を複数記憶しておき、入力画像と各記憶パターンとの類似度を特徴量とすることで、人物を同定することができる。 As a basic method for extracting an arbitrary feature amount existing in an image, various methods such as a template matching method, a projection method, an eigenspace method, and a method using color information are known. Template matching is used when it is determined who a face in an image including a human face belongs to. It is possible to identify a person by storing a plurality of patterns to be determined, that is, here, a gray image of a person's face, and using the similarity between the input image and each storage pattern as a feature amount.
投影法は、入力画像の輝度値や微分値を水平、あるいは垂直方向に合計しヒストグラムを作成することで、目に外接する矩形の座標等を特徴量として抽出することができる。
固有空間法は、テンプレートマッチングのようにパターンは記憶するが、そのパターンを単一の画像とするのではなく複数の画像の確率分布として記憶するものである。
また、抽出したい物体の色分布をあらかじめ統計的に求めておき、入力画像中の当該分布に当てはまる色をもった画素の座標を特徴量として抽出する手法などもある。
表示装置１００のＣＰＵ１０７は、上記のような画像中の特徴量に基づき、視聴者の状態の判定し、判定した視聴者の状態に応じて上記図２〜図７に示すような３Ｄ映像と２Ｄ映像との切り換え表示制御を行う。
In the projection method, the luminance values and differential values of the input image are summed in the horizontal or vertical direction to create a histogram, so that the coordinates of the rectangle circumscribing the eye can be extracted as the feature amount.
In the eigenspace method, a pattern is stored as in template matching, but the pattern is not stored as a single image but as a probability distribution of a plurality of images.
In addition, there is a method in which the color distribution of an object to be extracted is statistically obtained in advance, and the coordinates of pixels having colors that match the distribution in the input image are extracted as feature amounts.
The
図８は、視聴者状態の判定結果に応じた表示制御処理の一例を説明するためのフローチャートである。表示装置１００では、カメラ部１１０により撮像した画像を解析し、視聴者の状態を判定する。ここではまず、３Ｄ眼鏡を装着している視聴者がいるか否かを判定する（ステップＳ１）。３Ｄ眼鏡を装着している視聴者がいなければ、２Ｄ映像を１画面で表示させる（ステップＳ８）。
FIG. 8 is a flowchart for explaining an example of the display control process according to the determination result of the viewer state. In the
また、３Ｄ眼鏡を装着している視聴者がいると判定した場合、全体の視聴者の数が複数であるかを判定する（ステップＳ２）。視聴者数が複数でない場合、３Ｄ眼鏡を装着している視聴者が一人いることが判定できるため、その視聴者が３Ｄ映像を視聴できるように３Ｄ映像を１画面で表示させる（ステップＳ７）。また、視聴者が複数いる場合、さらにその複数の視聴者のうち、３Ｄ眼鏡を装着している視聴者を判定する（ステップＳ３）。 If it is determined that there are viewers wearing 3D glasses, it is determined whether there are a plurality of viewers (step S2). If the number of viewers is not plural, it can be determined that there is one viewer wearing 3D glasses, so that the 3D video is displayed on one screen so that the viewer can view the 3D video (step S7). If there are a plurality of viewers, a viewer wearing 3D glasses is further determined from the plurality of viewers (step S3).
ここで例えば複数の視聴者として、３Ｄ眼鏡を装着している視聴者と装着していない視聴者がいて、３Ｄ眼鏡を装着している視聴者が、表示装置１００に向かって３Ｄ眼鏡を装着していない視聴者の左側にいる場合、表示部１１５の表示画面を左右に分割して２画面表示とし、表示装置１００に向かって左側の分割画面に３Ｄ映像を表示し、右側の分割画面に２Ｄ映像を表示させる（ステップＳ６）。これにより、３Ｄ眼鏡を装着した視聴者と装着していない視聴者がそれぞれ映像を視認することができ、このときに、視聴者が視認できる映像が、その視聴者に近い分割画面領域で表示される。
Here, for example, as a plurality of viewers, there are viewers wearing 3D glasses and viewers not wearing them, and viewers wearing 3D glasses wear 3D glasses toward the
また、複数の視聴者として、３Ｄ眼鏡を装着している視聴者と装着していない視聴者がいて、３Ｄ眼鏡を装着している視聴者が、表示装置に向かって３Ｄ眼鏡を装着していない視聴者の右側にいる場合、表示部１１５の表示画面を左右に分割して２画面表示とし、左側の分割画面に２Ｄ映像を表示し、右側の分割画面に３Ｄ映像を表示させる（ステップＳ４）。これにより、３Ｄ眼鏡を装着した視聴者と装着していない視聴者がそれぞれ映像を視認することができ、このときに、視聴者が視認できる映像が、その視聴者に近い分割画面領域で表示される。
Further, as a plurality of viewers, there are viewers wearing 3D glasses and viewers not wearing 3D glasses, and viewers wearing 3D glasses are not wearing 3D glasses toward the display device. When the viewer is on the right side, the display screen of the
また、複数の視聴者として、３Ｄ眼鏡を装着している視聴者と装着していない視聴者がいて、３Ｄ眼鏡を装着している視聴者が、表示装置に向かって３Ｄ眼鏡を装着していない複数の視聴者の間（中央）にいる場合には、表示部１１５の表示画面を左右に分割して２画面表示とし、左側の分割画面に３Ｄ映像を表示し、右側の分割画面に２Ｄ映像を表示させる。あるいは左右の映像をこれと逆にしてもよい。あるいは、２Ｄ映像を全画面に表示した中にピクチャインピクチャ（ＰｉｎＰ）によって３Ｄ映像を表示させるようにしてもよい（ステップＳ５）。３Ｄ映像は、３Ｄ眼鏡を装着している視聴者の位置に合わせて画面中央部に表示させるようにすることができる。
Further, as a plurality of viewers, there are viewers wearing 3D glasses and viewers not wearing 3D glasses, and viewers wearing 3D glasses are not wearing 3D glasses toward the display device. In the case of a plurality of viewers (in the center), the display screen of the
図９は、３Ｄ映像の表示方式の判別処理例を説明するためのフローチャートである。
表示装置１００は、眼鏡により視認できる３Ｄ映像の表示方式として、液晶シャッター方式、２色眼鏡方式、３Ｄスコープ方式のいずれにも対応し、いずれかの表示方式を選択可能であるもとする。また、これら３Ｄ映像の表示方式のそれぞれについて、３Ｄ映像を視認するための特定の眼鏡の形状を示す特徴量を予め登録しておき、撮像画像の中の眼鏡がいずれかの表示方式に対応した３Ｄ眼鏡であることを判定できるようにしておく。さらに、表示装置１００では、予め登録されていない眼鏡が画像中にあることを判定した場合、その眼鏡に対応した表示方式を新たに登録できるようにする。
FIG. 9 is a flowchart for explaining a determination process example of a 3D video display method.
The
ここではまず、表示装置１００は、カメラ部１１０で撮像した画像を解析し、何等かの眼鏡を装着した視聴者がいるかどうかを判定する（ステップＳ１１）。ここで眼鏡を装着した視聴者がいないと判定した場合、表示装置１００では表示部１１５に２Ｄ映像を表示させ（ステップＳ２２）、ステップＳ１１に戻って眼鏡の装着の有無を監視する。
Here, first, the
また、ステップＳ１１で眼鏡を装着した視聴者がいると判定した場合、登録されている眼鏡形状の特徴量に基づいて、その眼鏡に対応した表示方式があるかどうかを判断する（ステップＳ１２）。対応した表示方式があれば、その表示方式が液晶シャッター方式、２色眼鏡方式、または３Ｄスコープ方式のいずれであるかを判別する（ステップＳ１７）。
判定した眼鏡に対応する表示方式が液晶シャッター方式であれば、表示装置１００では、液晶シャッター方式で３Ｄ映像を表示する（ステップＳ１６）。また、判定した眼鏡に対応する表示方式が２色眼鏡方式であれば、表示装置１００では、２色眼鏡方式で３Ｄ映像を表示する（ステップＳ２０）。また、判定した眼鏡に対応する表示方式が３Ｄスコープ方式であれば、表示装置１００では、３Ｄスコープ方式で３Ｄ映像を表示する（ステップＳ２１）。これにより、視聴者は、予め登録した３Ｄ眼鏡を装着するだけで、表示装置１００がその３Ｄ眼鏡の対応方式を判別し、その３Ｄ眼鏡で視認可能な表示方式で３Ｄ映像を表示させる。
When it is determined in step S11 that there is a viewer wearing glasses, it is determined whether there is a display method corresponding to the glasses based on the registered feature value of the glasses shape (step S12). If there is a corresponding display method, it is determined whether the display method is a liquid crystal shutter method, a two-color glasses method, or a 3D scope method (step S17).
If the display method corresponding to the determined glasses is the liquid crystal shutter method, the
ステップＳ１２で画像内の眼鏡に対応する表示方式が登録されていない場合、表示装置１００では、その眼鏡に対応する表示方式を選択するためのＵＩ画面であるユーザ選択画面を表示させる（ステップＳ１３）。そしてユーザによる選択結果を判別し（ステップＳ１４）、ユーザが液晶シャッター方式を選択した場合、その眼鏡の形状を特定できる特徴量を液晶シャッター方式に対応させて登録する（ステップＳ１５）。これにより、次回同じ眼鏡を装着した視聴者を撮像画像から検出した場合には、対応方式として液晶シャッター方式を選択することができる。液晶シャッター方式に対応させて眼鏡形状を登録すると、表示装置１００は、液晶シャッター方式で３Ｄ映像を表示する（ステップＳ１６）。
If the display method corresponding to the glasses in the image is not registered in step S12, the
また、ステップＳ１４でユーザが２色眼鏡方式を選択した場合、その眼鏡の形状を特定できる特徴量を２色眼鏡方式に対応させて登録する（ステップＳ１８）。これにより、次回同じ眼鏡を装着した視聴者を撮像画像から検出した場合には、対応方式として２色眼鏡方式を選択することができる。２色眼鏡方式に対応させて眼鏡形状を登録すると、表示装置１００は、２色眼鏡方式で３Ｄ映像を表示する（ステップＳ２０）。
さらに、ステップＳ１４でユーザが３Ｄスコープ方式を選択した場合、その眼鏡の形状を特定できる特徴量を３Ｄスコープ方式に対応させて登録する（ステップＳ１９）。これにより、次回同じ眼鏡を装着した視聴者を撮像画像から検出した場合には、対応方式として３Ｄスコープ方式を選択することができる。３Ｄスコープ方式に対応させて眼鏡形状を登録すると、表示装置１００は、３Ｄスコープ方式で３Ｄ映像を表示する（ステップＳ２１）。
Further, when the user selects the two-color glasses method in step S14, a feature quantity that can specify the shape of the glasses is registered in association with the two-color glasses method (step S18). Thereby, when a viewer wearing the same glasses next time is detected from the captured image, the two-color glasses method can be selected as the corresponding method. When the glasses shape is registered in correspondence with the two-color glasses method, the
Furthermore, when the user selects the 3D scope method in step S14, a feature quantity that can specify the shape of the glasses is registered in association with the 3D scope method (step S19). As a result, when a viewer wearing the same glasses next time is detected from the captured image, the 3D scope method can be selected as the corresponding method. When the glasses shape is registered in correspondence with the 3D scope method, the
上記のように、表示装置１００は、３Ｄ映像を視聴する３Ｄ眼鏡と、特定の３Ｄ映像表示方式とを対応付けて記憶しておき、撮像画像に３Ｄ眼鏡を装着した視聴者が含まれている場合、その撮像画像に含まれている視聴者が装着している３Ｄ眼鏡に対応付けられて記憶された３Ｄ映像表示方式で表示部１１５に３Ｄ映像を表示させることができる。これにより、複数の表示方式で３Ｄ映像が表示可能な表示装置において、撮影画像から表示方式を判別し、自動的にその表示方式を設定して３Ｄ映像を表示させることができ、視聴者を煩わせることなく利便性の高い表示装置を提供することができる。
As described above, the
図１０は、本発明による表示装置の他の構成例を示すブロック図で、テレビジョン受信機として構成された表示装置の他の例を示す図である。
図１０に示す実施形態の表示装置は、視聴者の状態を判断するための表示装置周囲の所定の情報として、カメラ部により撮像された撮像画像に代えて、サーモセンサ１１７により取得された検出情報を使用する。すなわち、本実施形態の表示装置１００は、図１の実施形態のカメラ部１１０、及びカメラ信号処理部１１４に代えて、サーモセンサ１１７及びサーモセンサ信号処理部１１８が備えられる。従って、本実施形態において、本発明の周囲情報取得部は、サーモセンサ１１７及びサーモセンサ信号処理部１１８によって実現される。他の構成については図１と同様であるため、繰り返しの説明は省略する。
FIG. 10 is a block diagram showing another configuration example of the display device according to the present invention, and is a diagram showing another example of the display device configured as a television receiver.
In the display device of the embodiment shown in FIG. 10, detection information acquired by the
サーモセンサ１１７は、表示装置１００の周囲温度を検出して周囲温度の検出信号を出力する。ここではサーモセンサ１１７の温度検出範囲は、表示装置１００の表示部１１５を視認できる画面正面側の所定範囲が含まれるように設定される。サーモセンサ信号処理部１１８は、サーモセンサ１１７から出力された周囲温度の検出信号を処理し、ＣＰＵ１０７で解析可能なデータとする。
The
ＣＰＵ１０７は、サーモセンサ１１７により取得した周囲温度データを解析し、表示装置１００から出力された映像及び音声を視聴する視聴者の数、及び３Ｄ映像を視認するための３Ｄ眼鏡の装着の有無、を含む視聴者の状態を判断する。ＣＰＵ１０７は、サーモセンサ１１７による周囲温度データにより、人間の顔形状を判断し、さらに眼鏡の形状を判断することができる。ここでは、周囲温度データから視聴者の数や３Ｄ眼鏡の装着状況を判断するための所定の特徴量のデータが不揮発性メモリ１１１に予め記憶され、ＣＰＵ１０７は、これらの特徴量のデータを使用して周囲温度データを解析することにより、視聴者の状態を判定することができる。例えば、顔形状と眼鏡形状を示す特徴量を予め記憶しておき、周囲温度データの分布から顔形状を判別し、さらに顔よりも温度が低い眼鏡の形状を判定し、これらから視聴者の数や３Ｄ眼鏡の種類、及び装着の有無等を判断する。
The
そしてＣＰＵ１０７は、上記視聴者の状態の判断結果に応じて表示部１１５の表示を制御する。例えば視聴者の状態として３Ｄ眼鏡を装着している視聴者が存在していると判断されたとき、表示部１１５に３Ｄ映像を表示させる制御を行う。また、３Ｄ眼鏡の装着者と非装着者が混在していることを判断した場合、表示部１１５の表示画面を二つに分割し、分割した各領域に３Ｄ映像と２Ｄ映像とをそれぞれ表示させる制御を行う。ここでは、３Ｄ眼鏡の装着者と非装着者との比率に応じて、分割した各領域の大きさの比率を変化させることができる。また、ＣＰＵ１７は、視聴者の状態を監視し、視聴者の状態が変化した場合、その変化に応じて２Ｄ映像の全画面表示、３Ｄ映像の全画面表示、または２Ｄ映像と３Ｄ映像の２画面表示、を切り換える制御を行う。また、周囲の視聴者に３Ｄ眼鏡を装着した視聴者が含まれている場合、その視聴者が装着している３Ｄ眼鏡に対応付けられて記憶された３Ｄ映像表示方式で表示部１１５に３Ｄ映像を表示させることができる。
Then, the
上記のように、サーモセンサ１１７を使用した本実施形態の構成により、カメラ部１１０の撮影画像を解析する図１の構成例と同様に視聴者の状態を判断することができ、この判断結果に応じて、図１の構成例と同様の表示制御処理を行うことができる。従って、表示処理の詳細については、図１の構成に基づく上記の処理を参照することとし、その繰り返しの説明は省略する。
As described above, according to the configuration of the present embodiment using the
以上説明したように、本発明の表示装置は、表示部を備え、２Ｄ映像と３Ｄ映像とを表示部に表示させることができる表示装置において、表示装置の周囲の状態を示す所定の情報を取得する周囲情報取得部と、周囲情報取得部により取得した情報を解析し、視聴者の数、及び３Ｄ映像を視認するための３Ｄ眼鏡の装着の有無、を含む視聴者の状態を判断する視聴者判断部と、視聴者判断部の判断結果に応じて表示部の表示を制御する表示制御部と、を有し、表示制御部は、視聴者判断部によって３Ｄ眼鏡を装着している視聴者が存在していると判断されたとき、表示装置に３Ｄ映像を表示させるものである。そしてこれにより、視聴者の視聴状態を判別して３Ｄ映像と２Ｄ映像とを適切に切り替えて表示できるようになる。 As described above, the display device of the present invention includes a display unit, and in the display device capable of displaying 2D video and 3D video on the display unit, obtains predetermined information indicating a surrounding state of the display device. Viewers that analyze the information acquired by the surrounding information acquisition unit and the surrounding information acquisition unit to determine the state of the viewer including the number of viewers and whether or not 3D glasses for viewing 3D video are worn A display control unit that controls display of the display unit in accordance with a determination result of the viewer determination unit, and the display control unit is configured so that the viewer wearing the 3D glasses by the viewer determination unit When it is determined that it exists, a 3D image is displayed on the display device. As a result, the viewer's viewing state can be discriminated and the 3D video and the 2D video can be appropriately switched and displayed.
さらに本発明の表示装置は、上記視聴者判断部が、視聴者の状態として、３Ｄ眼鏡の装着者と非装着者が混在していることを判断した場合、表示制御部は、表示部の表示画面を二つに分割し、分割した各領域に３Ｄ映像と２Ｄ映像とをそれぞれ表示し、３Ｄの装着者と非装着者との位置関係に応じて、３Ｄ映像を表示させる分割領域と２Ｄ映像を表示させる領域とを決定するものである。これにより、表示装置を視聴している視聴者として３Ｄ眼鏡の装着者と非装着者とが混在していたとしても、それぞれの視聴者が、その位置関係に応じて適切に映像を視認することができるようになる。 Furthermore, in the display device according to the present invention, when the viewer determination unit determines that the wearer and non-wearer of 3D glasses are mixed as the state of the viewer, the display control unit displays the display on the display unit. The screen is divided into two, 3D video and 2D video are respectively displayed in the divided areas, and the 3D video is displayed according to the positional relationship between the 3D wearer and the non-wearer. The area to be displayed is determined. As a result, even if a wearer and a non-wearer of 3D glasses are mixed as viewers who are viewing the display device, each viewer can appropriately view the video according to the positional relationship. Will be able to.
さらに本発明の表示装置は、上記表示制御部が、視聴者判断部が判断した３Ｄ眼鏡の装着者と非装着者との比率に応じて、分割した各領域の大きさの比率を変化させるものである。これにより、３Ｄ眼鏡の装着者と非装着者との比率に応じて表示領域の大きさを適切に可変させることができるようになる。 Furthermore, in the display device of the present invention, the display control unit changes the ratio of the size of each divided area according to the ratio between the wearer and the non-wearer of the 3D glasses determined by the viewer determination unit. It is. As a result, the size of the display area can be appropriately varied according to the ratio between the wearer and non-wearer of the 3D glasses.
さらに本発明の表示装置は、上記視聴者判断部が、周囲情報取得部が取得した情報により判断する視聴者の状態を監視し、視聴者の状態が変化した場合、表示制御部は、その変化に応じて２Ｄ映像の全画面表示、３Ｄ映像の全画面表示、または２Ｄ映像と３Ｄ映像の２画面表示、を切り換えるものである。これにより、視聴者の状態に応じて２Ｄ映像／３Ｄ映像を表示中であっても、視聴者の状態が変化したときに、その変化に対応して適切に表示画面を切り換えることができる。 Further, in the display device of the present invention, the viewer determination unit monitors the state of the viewer determined based on the information acquired by the surrounding information acquisition unit, and when the viewer state changes, the display control unit In response to the above, a full screen display of 2D video, a full screen display of 3D video, or a two screen display of 2D video and 3D video is switched. Accordingly, even when 2D video / 3D video is being displayed according to the state of the viewer, when the state of the viewer changes, the display screen can be appropriately switched in response to the change.
さらに本発明の表示装置は、上記表示制御部の制御により複数の３Ｄ映像表示方式を切り換えて３Ｄ映像を表示可能であって、３Ｄ映像を視聴する３Ｄ眼鏡と、特定の３Ｄ映像表示方式とを対応付けて記憶する記憶部を有し、視聴者判断部が、撮像画像に３Ｄ眼鏡を装着した視聴者が含まれていることを判断した場合、表示制御部は、撮像画像に含まれている視聴者が装着している３Ｄ眼鏡に対応付けられて記憶された３Ｄ映像表示方式で表示部に３Ｄ映像を表示させるものである。そしてこれにより、複数の３Ｄ映像表示方式を有する表示装置は、撮像画像から検出した３Ｄ眼鏡から３Ｄ映像表示方式を判別し、その３Ｄ眼鏡に対応した３Ｄ映像表示方式により適切に３Ｄ映像を表示させることができるようになる。 Furthermore, the display device of the present invention can display a 3D video by switching a plurality of 3D video display methods under the control of the display control unit, and includes 3D glasses for viewing the 3D video and a specific 3D video display method. The display control unit is included in the captured image when the viewer determination unit determines that the captured image includes a viewer wearing 3D glasses. The 3D video is displayed on the display unit by the 3D video display method stored in association with the 3D glasses worn by the viewer. Accordingly, the display device having a plurality of 3D video display methods determines the 3D video display method from the 3D glasses detected from the captured image, and appropriately displays the 3D video by the 3D video display method corresponding to the 3D glasses. Will be able to.
１０，１１…視聴者、１２…３Ｄ眼鏡、１００…表示装置、１０１…アンテナ、１０２…分離部、１０３…映像信号処理部、１０４…ＥＰＧ／ＯＳＤ／ＢＭＬ処理部、１０５…音声信号処理部、１０６…ＲＡＭ、１０７…ＣＰＵ、１０８…映像出力変換部、１０９…音声出力変換部、１１０…カメラ部、１１１…不揮発性メモリ、１１２…通信部、１１３…リモコン受光部、１１４…カメラ信号処理部、１１５…表示部、１１５ａ…表示画面、１１６…スピーカ、１１７…サーモセンサ、１１８…サーモセンサ信号処理部。
DESCRIPTION OF
Claims (5)
該表示装置の周囲の状態を示す所定の情報を取得する周囲情報取得部と、
該周囲情報取得部により取得した情報を解析し、視聴者の数、及び３Ｄ映像を視認するための３Ｄ眼鏡の装着の有無、を含む視聴者の状態を判断する視聴者判断部と、
前記視聴者判断部の判断結果に応じて前記表示部の表示を制御する表示制御部と、を有し、
前記表示制御部は、前記視聴者判断部によって前記３Ｄ眼鏡を装着している視聴者が存在していると判断されたとき、前記表示装置に３Ｄ映像を表示させることを特徴とする表示装置。 In a display device comprising a display unit and capable of displaying 2D video and 3D video on the display unit,
A surrounding information acquisition unit that acquires predetermined information indicating a surrounding state of the display device;
A viewer determination unit that analyzes the information acquired by the surrounding information acquisition unit and determines the state of the viewer including the number of viewers and whether or not 3D glasses for wearing 3D images are worn;
A display control unit that controls display of the display unit according to a determination result of the viewer determination unit,
The display control unit displays a 3D video on the display device when the viewer determination unit determines that there is a viewer wearing the 3D glasses.
前記視聴者判断部が、前記視聴者の状態として、前記３Ｄ眼鏡の装着者と非装着者が混在していることを判断した場合、前記表示制御部は、前記表示部の表示画面を二つに分割し、分割した各領域に３Ｄ映像と２Ｄ映像とをそれぞれ表示し、
３Ｄの装着者と非装着者との位置関係に応じて、前記３Ｄ映像を表示させる分割領域と前記２Ｄ映像を表示させる領域とを決定することを特徴とする表示装置。 The display device according to claim 1,
When the viewer determination unit determines that the wearer and non-wearer of the 3D glasses are mixed as the state of the viewer, the display control unit displays two display screens of the display unit. And display 3D video and 2D video in each of the divided areas,
A display device that determines a divided region for displaying the 3D video and a region for displaying the 2D video according to a positional relationship between a 3D wearer and a non-wearer.
前記表示制御部は、前記視聴者判断部が判断した３Ｄ眼鏡の装着者と非装着者との比率に応じて、前記分割した各領域の大きさの比率を変化させることを特徴とする表示装置。 The display device according to claim 2,
The display control unit changes a ratio of the sizes of the divided regions according to a ratio of a wearer and a non-wearer of 3D glasses determined by the viewer determination unit. .
前記視聴者判断部は、前記周囲情報取得部が取得した情報により判断する視聴者の状態を監視し、前記視聴者の状態が変化した場合、前記表示制御部は、該変化に応じて２Ｄ映像の全画面表示、３Ｄ映像の全画面表示、または２Ｄ映像と３Ｄ映像の２画面表示、を切り換えることを特徴とする表示装置。 The display device according to claim 2 or 3,
The viewer determination unit monitors the state of the viewer determined based on the information acquired by the surrounding information acquisition unit, and when the state of the viewer changes, the display control unit changes the 2D video according to the change. A display device that switches between full-screen display, full-screen display of 3D video, or 2-screen display of 2D video and 3D video.
前記表示装置は、前記表示制御部の制御により複数の３Ｄ映像表示方式を切り換えて３Ｄ映像を表示可能であって、
３Ｄ映像を視聴する３Ｄ眼鏡と、特定の前記３Ｄ映像表示方式とを対応付けて記憶する記憶部を有し、前記視聴者判断部が、前記撮像画像に３Ｄ眼鏡を装着した視聴者が含まれていることを判断した場合、前記表示制御部は、前記撮像画像に含まれている視聴者が装着している３Ｄ眼鏡に対応付けられて記憶された３Ｄ映像表示方式で前記表示部に３Ｄ映像を表示させることを特徴とする表示装置。 The display device according to claim 1,
The display device can display a 3D image by switching a plurality of 3D image display methods under the control of the display control unit,
3D glasses for viewing 3D videos and a specific 3D video display method are stored in association with each other, and the viewer determination unit includes a viewer wearing 3D glasses on the captured image. When the display control unit determines that the 3D video is stored in association with the 3D glasses worn by the viewer included in the captured image, the display control unit displays the 3D video on the display unit. A display device characterized by displaying.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013048875A JP2014175982A (en) | 2013-03-12 | 2013-03-12 | Display device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013048875A JP2014175982A (en) | 2013-03-12 | 2013-03-12 | Display device |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2014175982A true JP2014175982A (en) | 2014-09-22 |
Family
ID=51696799
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2013048875A Pending JP2014175982A (en) | 2013-03-12 | 2013-03-12 | Display device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2014175982A (en) |
-
2013
- 2013-03-12 JP JP2013048875A patent/JP2014175982A/en active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20150350626A1 (en) | Method for providing three-dimensional (3d) image, method for converting 3d message, graphical user interface (gui) providing method related to 3d image, and 3d display apparatus and system for providing 3d image | |
| US8749617B2 (en) | Display apparatus, method for providing 3D image applied to the same, and system for providing 3D image | |
| KR20110057629A (en) | A method for providing an user interface and a digital broadcast receiver | |
| EP2627092B1 (en) | Three-dimensional glasses, three-dimensional image display apparatus, and method for driving the three-dimensional glasses and the three-dimensional image display apparatus | |
| KR20100040563A (en) | Broadcast display apparatus and method for display 2-dimensional image | |
| US20140362198A1 (en) | Stereoscopic Video Processor, Stereoscopic Video Processing Method and Stereoscopic Video Processing Program | |
| US20110199463A1 (en) | Display with integrated camera | |
| EP2424259A2 (en) | Stereoscopic video display system with 2D/3D shutter glasses | |
| US20110199468A1 (en) | 3-dimensional display with preferences | |
| JP4960517B1 (en) | Video display device and video display method | |
| JP5132804B1 (en) | Video processing apparatus and video processing method | |
| KR20120020477A (en) | Three dimensional image display apparatus and driving method thereof | |
| JP4806082B2 (en) | Electronic apparatus and image output method | |
| JP5095851B1 (en) | Video processing apparatus and video processing method | |
| JP5156117B1 (en) | Video processing apparatus and video processing method | |
| JP2014175982A (en) | Display device | |
| KR101728724B1 (en) | Method for displaying image and image display device thereof | |
| JP5433763B2 (en) | Video processing apparatus and video processing method | |
| JP5568116B2 (en) | Video processing apparatus and video processing method | |
| JP5603911B2 (en) | VIDEO PROCESSING DEVICE, VIDEO PROCESSING METHOD, AND REMOTE CONTROL DEVICE | |
| KR101620969B1 (en) | Display apparatus and method for providing 3D image preview applied to the same and system for providing 3D Image | |
| KR102014149B1 (en) | Image display apparatus, and method for operating the same | |
| KR20130076349A (en) | Image display apparatus, and method for operating the same | |
| KR101880479B1 (en) | Image display apparatus, and method for operating the same | |
| KR101804912B1 (en) | An apparatus for displaying a 3-dimensional image and a method for displaying subtitles of a 3-dimensional image |