JP5127967B1 - 映像処理装置および映像処理方法 - Google Patents

Abstract

【課題】視聴者の位置に応じて適切に立体映像を表示することが可能な映像処理装置および映像処理方法を提供する。
【解決手段】実施形態によれば、視聴者検出部と、視域情報算出部と、視域制御部とを備える映像処理装置が提供される。前記視聴者検出部は、カメラで撮影された映像を用いて視聴者の人数および視聴者の位置を検出する。前記視域情報算出部は、前記視聴者の人数および前記視聴者の位置に応じて、表示部に表示される複数の視差画像を立体的に見ることが可能な視域が設定されるよう、制御パラメータを算出する。前記視域制御部は、前記制御パラメータに応じて前記視域を設定する。
【選択図】図２

Description

本発明の実施形態は、映像処理装置および映像処理方法に関する。

近年、視聴者が特殊なメガネを使用せずに裸眼で立体映像を見ることができる立体映像表示装置（いわゆる裸眼３Ｄテレビ）が普及しつつある。この立体映像表示装置は、視点の異なる複数の画像を表示する。そして、それらの画像の光線は、例えばパララックスバリア、レンチキュラレンズなどによって出力方向を制御され、視聴者の両眼に導かれる。視聴者の位置が適切であれば、視聴者は、左目と右目とで異なる視差画像を見ることになるため、映像を立体的に認識することができる。

しかしながら、裸眼３Ｄテレビでは、視聴者の位置によっては、映像が立体的に見えないという問題がある。

特開平１１−１６４３２９号公報

視聴者の位置に応じて適切に立体映像を表示することが可能な映像処理装置および映像処理方法を提供する。

実施形態によれば、視聴者検出部と、視域制御部とを備える映像処理装置が提供される。前記視聴者検出部は、撮影された映像を用いて視聴者の人数および視聴者の位置を検出する。前記視域制御部は、前記視聴者が１人のときは前記視聴者の位置に視域を設定し、前記視聴者が複数のときは現在の視域を維持する。前記視域は、表示部に表示される複数の視差画像を立体的に見ることが可能な領域である。

第１の実施形態に係る映像表示装置１００の外観図。 第１の実施形態に係る映像表示装置１００の概略構成を示すブロック図。 液晶パネル１およびレンチキュラレンズ２の一部を上方から見た図。 視域情報を算出する手法の一例を示す図。 第１の実施形態に係る映像表示装置１００のコントローラ１０の処理動作の一例を示すフローチャート。 第２の実施形態に係る映像表示装置１００ａの概略構成を示すブロック図。 第２の実施形態に係る映像表示装置１００ａのコントローラ１０ａの処理動作の一例を示すフローチャート。 視域設定の具体例を示す図。 視聴時間に基づいて優先度を設定する例を説明する図。 優先度テーブルの一例を示す図。 優先度テーブルに基づいて優先度を設定する例を示す図。 視聴者とその視聴者の優先度との関係を提示する例を示す図。 図２の変形例である映像表示装置１００’の概略構成を示すブロック図。

以下、本発明に係る実施形態について、図面を参照しながら具体的に説明する。

（第１の実施形態）
図１は、第１の実施形態に係る映像表示装置１００の外観図であり、図２は、その概略構成を示すブロック図である。映像表示装置１００は、液晶パネル１と、レンチキュラレンズ２と、カメラ３と、受光部４と、コントローラ（映像処理装置）１０とを備えている。

液晶パネル（表示部）１は、例えば５５インチサイズのパネルであり、水平方向に１１５２０（＝１２８０＊９）個、垂直方向に７２０個の画素が配置される。また、各画素内には、３つのサブピクセル、すなわち、Ｒサブピクセル、ＧサブピクセルおよびＢサブピクセルが垂直方向に形成されている。液晶パネル１には、背面に設けられるバックライト装置（不図示）から光が照射される。各画素はコントローラ１０から供給される視差画像信号（後述）に応じた輝度の光を透過させる。

レンチキュラレンズ（開口制御部）２は液晶パネル１の水平方向に沿って配置される複数の凸部を有し、その数は液晶パネル１の水平方向画素数の１／９である。そして、水平方向に配置される９個の画素につき１つの凸部が対応するように、レンチキュラレンズ２は液晶パネル１の表面に貼り付けられている。各画素を透過した光は凸部の頂点付近から指向性を持って特定の方向へ出力される。

本実施形態の液晶パネル１は、３視差以上の多視差方式（インテグラルイメージング方式）または２視差方式で、立体映像を表示することができ、この他に通常の２次元映像も表示可能である。

以下の説明では、レンチキュラレンズ２の各凸部に対応して９個の画素を設けて、９視差の多視差方式を採用可能な例を説明する。多視差方式では、各凸部に対応する９個の画素にそれぞれ第１〜第９視差画像を表示する。第１〜第９視差画像とは、液晶パネル１の水平方向に沿って並ぶ９つの視点からそれぞれ被写体を見た画像である。視聴者は、レンチキュラレンズ２を介して、左目で第１〜第９視差画像のうちの１つの視差画像を、右目で他の１つの視差画像をそれぞれ見ることにより、映像を立体視できる。多視差方式によると、視差の数を増やすほど、視域を広げることができる。視域とは、液晶パネル１の前方から液晶パネル１を見たときに映像を立体視可能な領域をいう。

一方、２視差方式では、各凸部に対応する９個の画素のうちの４個に右目用視差画像を、他の５個に左目用視差画像をそれぞれ表示する。左目用および右目用視差画像とは、水平方向に並ぶ２つの視点のうち、左側の視点および右側の視点からそれぞれ被写体を見た画像である。視聴者は、レンチキュラレンズ２を介して、左目で左目用視差画像を、右目で右目用視差画像をそれぞれ見ることにより、映像を立体視できる。２視差方式によると、表示される映像の立体感が多視差方式よりも得られやすくなるが、多視差方式に比べて視域が狭くなる。

なお、液晶パネル１は各凸部に対応する９個の画素に同一の画像を表示して、２次元画像を表示することもできる。

また、本実施形態では、レンチキュラレンズ２の凸部と表示される視差画像との相対的な位置関係、すなわち、各凸部に対応する９個の画素にどのように視差画像を表示するか、に応じて、視域を可変制御できるようにしている。以下、多視差方式を例に取って、視域の制御について説明する。

図３は、液晶パネル１およびレンチキュラレンズ２の一部を上方から見た図である。同図の網掛けの領域が視域を示しており、視域から液晶パネル１を見ると映像を立体視できる。他の領域は逆視やクロストークが発生する領域であり、映像を立体視するのが困難な領域である。
図３は、液晶パネル１とレンチキュラレンズ２との相対的な位置関係、より具体的には、液晶パネル１とレンチキュラレンズ２との距離、あるいは液晶パネル１とレンチキュラレンズ２との水平方向のずれ量によって、視域が変化する様子を示している。

実際には、レンチキュラレンズ２は、液晶パネル１に高精度に位置合わせをして貼り付けられるため、液晶パネル１とレンチキュラレンズ２との相対的な位置を物理的に変更することは困難である。

そこで、本実施形態では、液晶パネル１の各画素に表示される第１〜第９視差画像の表示位置をずらすことで、見かけ上、液晶パネル１とレンチキュラレンズ２との相対的な位置関係を変更し、これにより、視域の調整を行う。

例えば、各凸部に対応する９個の画素に第１〜第９視差画像をそれぞれ表示した場合（図３（ａ））に比べ、視差画像を全体に右側にずらして表示した場合（図３（ｂ））、視域は左側に移動する。逆に、視差画像を全体に左側にずらして表示した場合、視域は右側に移動する。

また、水平方向の中央付近では視差画像をずらさず、液晶パネル１の外側ほど、視差画像を外側に大きくずらして表示した場合（図３（ｃ））、視域は液晶パネル１に近づく方向に移動する。なお、ずらす視差画像とずらさない視差画像との間の画素や、ずらす量が異なる視差画像間の画素は、周囲の画素に応じて適宜補間すればよい。また、図３（ｃ）とは逆に、水平方向の中央付近では視差画像をずらさず、液晶パネル１の外側ほど、視差画像を中心側に大きくずらして表示した場合、視域は液晶パネル１から遠ざかる方向に移動する。

このように、視差画像の全体あるいは一部をずらして表示することにより、視域を液晶パネル１に対して左右方向あるいは前後方向に移動させることができる。図３では説明を簡略化するために視域を１つだけ示しているが、実際には、複数の視域２１が視聴領域Ｐに存在し、これらは連動して移動する。視域は、後述する図２のコントローラ１０により制御される。なお、視域２１以外の視聴領域は、逆視やクロストーク等の発生により、良好な立体映像を見ることが困難な逆視領域２２である。

図１に戻り、カメラ３は、液晶パネル１の下部中央付近に、所定の仰角で取り付けられ、液晶パネル１の前方の所定の範囲を撮影する。撮影された映像はコントローラ１０に供給され、視聴者の位置や視聴者の顔等、視聴者に関する情報を検出するために用いられる。カメラ３は、動画像と静止画像のどちらを撮影してもよい。

受光部４は、例えば液晶パネル１の下部の左側に設けられる。そして、受光部４は視聴者が使用するリモコンから送信される赤外線信号を受信する。この赤外線信号は、立体映像を表示するか２次元映像を表示するか、立体映像を表示する場合に多視差方式および２視差方式のいずれを採用するか、視域の制御を行うか否か、等を示す信号を含む。

次に、コントローラ１０の構成要素の詳細について説明する。図２に示すように、コントローラ（映像処理装置）１０は、チューナデコーダ１１と、視差画像変換部１２と、視聴者検出部１３と、視域情報算出部１４と、画像調整部１５とを有する。コントローラ１０は、例えば１つのＩＣ（Integrated Circuit）として実装され、液晶パネル１の裏側に配置される。もちろん、コントローラ１０の一部をソフトウェアで実装してもよい。

チューナデコーダ（受信部）１１は入力される放送波を受信および選局し、符号化された映像信号を復号する。放送波に電子番組表（ＥＰＧ）等のデータ放送の信号が重畳されている場合、チューナデコーダ１１はこれを抽出する。あるいは、チューナデコーダ１１は、放送波ではなく、光ディスク再生装置やパーソナルコンピュータ等の映像出力機器から符号化された映像信号を受信し、これを復号する。復号された信号はベースバンド映像信号とも呼ばれ、視差画像変換部１２に供給される。なお、映像表示装置１００が放送波を受信せず、専ら映像出力機器から受信する映像信号を表示する場合、チューナデコーダ１１に代えて単に復号機能を有するデコーダを受信部として設けてもよい。

チューナデコーダ１１が受信する映像信号は、２次元の映像信号であってもよいし、フレームパッキング（ＦＰ）、サイドバイサイド（ＳＢＳ）あるいはトップアンドボトム（ＴＡＢ）方式等で左目用および右目用の画像を含む３次元の映像信号であってもよい。また、映像信号は３視差以上の画像含む３次元の映像信号であってもよい。

視差画像変換部１２は、映像を立体表示するために、ベースバンド映像信号を複数の視差画像信号に変換して画像調整部１５に供給する。視差画像変換部１２は、多視差方式と２視差方式のどちらを採用するかで、処理内容が異なる。また、ベースバンド映像信号が２次元の映像信号であるか、３次元の映像信号であるか、に応じて、視差画像変換部１２の処理内容が異なる。

２視差方式を採用する場合、視差画像変換部１２は、左目用および右目用視差画像にそれぞれ対応する左目用および右目用視差画像信号を生成する。より具体的には以下のようにする。

２視差方式を採用し、かつ、左目用および右目用の画像を含む３次元映像信号が入力された場合、視差画像変換部１２は液晶パネル１に表示可能な形式の左目用および右目用視差画像信号を生成する。また、３つ以上の画像を含む３次元映像信号が入力される場合、例えばそのうちの任意の２つを用いて、視差画像変換部１２は左目用および右目用視差画像信号を生成する。

これに対し、２視差方式を採用し、かつ、視差情報を含まない２次元の映像信号が入力された場合、視差画像変換部１２は、映像信号における各画素の奥行き値に基づいて、左目用および右目用視差画像信号を生成する。奥行き値は、各画素がどの程度液晶パネル１に対して手前または奥に見えるように表示するか、を示す値である。奥行き値は予め映像信号に付加されていてもよいし、映像信号の特徴に基づいて動き検出、構図識別および人間の顔検出等を行って奥行き値を生成してもよい。左目用視差画像では、手前に見える画素は奥に見える画素より右側にずれて表示される必要がある。そのため、視差画像変換部１２は映像信号における手前に見える画素を右側にずらす処理を行って左目用視差画像信号を生成する。奥行き値が大きいほどずらす量を大きくする。

一方、多視差方式を採用する場合、視差画像変換部１２は第１〜第９視差画像にそれぞれ対応する第１〜第９視差画像信号を生成する。より具体的には以下のようにする。

多視差方式を採用し、かつ、２次元の映像信号または８視差以下の画像を含む３次元の映像信号が入力された場合、視差画像変換部１２は、２次元の映像信号から左目用および右目用視差画像信号を生成するのと同様に奥行き情報に基づいて、第１〜第９視差画像信号を生成する。

多視差方式を採用し、かつ、９視差の画像を含む３次元の映像信号が入力された場合、視差画像変換部１２はその映像信号を用いて第１〜第９視差画像信号を生成する。

視聴者検出部１３は、カメラ３により撮影された映像を用いて視聴者を検出し、その検出した視聴者に関する情報（例えば、視聴者の数、位置、顔情報など。以下、「視聴者認識情報」と総称する。）を認識する。また、視聴者検出部１３は、視聴者が動いても、追尾することが可能である。よって、視聴者ごとの視聴時間を把握することもできる。

視聴者の位置情報は、例えば液晶パネル１の中央を原点とするＸ軸（水平方向）、Ｙ軸（垂直方向）およびＺ軸（液晶パネル１に対して直交する方向）上の位置として表される。より具体的には、視聴者検出部１３は、まず、カメラ３により撮影された映像から顔を検出することにより視聴者を認識する。次いで、視聴者検出部１３は映像における視聴者の位置からＸ軸およびＹ軸上の位置を算出し、顔の大きさからＺ軸上の位置を算出する。視聴者の数は、例えば検出された視聴者の顔の数から得ることができる。視聴者が複数いる場合、視聴者検出部１３は、予め定めた数、例えば１０人分の視聴者を検出するようにしてもよい。この場合、検出された顔の数が１０より大きいときは、例えば液晶パネル１から近い、すなわち、Ｚ軸上の位置が小さい順に１０人の視聴者の位置を検出する。また、液晶パネル１に向いている人のみを視聴者として検出するようにしてもよい。

なお、位置検出モジュール１３が視聴者の位置を検出する手法に特に制限はなく、カメラ３は赤外線カメラでもよいし、音波を用いて視聴者の位置を検出してもよい。

視域情報算出部１４は、視聴者の人数および視聴者の位置に応じて視域を設定するための制御パラメータを算出する。この制御パラメータは、例えば、図３で説明した視差画像をずらす量であり、１つのパラメータ、または複数のパラメータの組み合わせである。そして、視域情報算出部１４は、算出した制御パラメータを画像調整部１５に供給する。

図４は、視域情報を算出する手法の一例を示す図である。視域情報算出部１４は設定可能な視域のパターンをいくつか予め定めておく。そして、視域情報算出部１４は、各視域について、視域と検出された視聴者とが重なる面積を算出し、その面積が最大となる視域を適切な視域と判断する。図４の例では、予め定めた図４（ａ）〜図４（ｅ）の５つの視域（網掛けの領域）のパターンのうち、視域を液晶パネル１に向かって左側に設定する図４（ｂ）において、視聴者２０と視域とが重なる面積が最大となる。よって、視域情報算出部１４は図４（ｂ）の視域のパターンを適切な視域と判断する。この場合、図４（ｂ）のパターンで視差画像を表示するための制御パラメータが図２の画像調整部１５に供給される。

より詳しくは、所望の視域を設定するために、視域情報算出部１４は、制御パラメータと、その制御パラメータで設定される視域とを対応付けた視域データベースを用いてもよい。視域情報算出部１４は、視域データベースを検索することによって、選択された視聴者を収めることの可能な視域を見つけることができる。

画像調整部（視域制御部）１５は、視域を制御するために、算出された制御パラメータに応じて視差画像信号をずらしたり補間したりする調整を行った後に、液晶パネル１に供給する。液晶パネル１は調整された視差画像信号に対応する画像を表示する。

図５は、第１の実施形態に係る映像表示装置１００のコントローラ１０の処理動作の一例を示すフローチャートである。

まず、視聴者検出部１３は、カメラ３により撮影された映像を用いて、視聴者の人数および位置を検出する（ステップＳ１１）。そして、検出された視聴者の人数および位置に応じて、以下のように視域を設定する。

視聴者の数が１人の場合（ステップＳ１２のＹＥＳ）、視域情報算出部１４は、その視聴者の位置に視域が設定されるよう、制御パラメータを算出する（ステップＳ１３）。そして、画像調整部１５は制御パラメータに応じて視差画像信号を調整し（ステップＳ１４）、調整された視差画像信号に対応する視差画像が液晶パネル１に表示される。これにより、当該視聴者に対して適切な視域が設定される。

一方、視聴者が複数の場合（ステップＳ１２のＮＯ）、視域情報算出部１４は、視域を変更せず、現在の視域を維持するよう、制御パラメータを更新しない。結果として、画像調整部１５の処理も更新されず、視域は一定の位置に保たれる。

例えば、複数人で映像を見ている途中にそのうちの１人が移動した場合、仮に移動した人に視域が追従してしまうと、静止して映像を見ている他の視聴者の視聴状態が悪化してしまう可能性がある。これに対し、本実施形態では、視域が一定に保たれるため、静止して映像を見ている視聴者に対して適切な視域が設定される。

このように、第１の実施形態では、視聴者の人数を検出し、視聴者が１人であればその視聴者に適した視域を設定するため、視聴者に適した視域が設定される。一方、視聴者が複数であれば視域を更新しないため、視聴者が複数いる場合に不必要に視域が変化してしまうのを抑制できる。

（第２の実施形態）
上述した第１の実施形態は、視聴者が複数の場合は視域を更新しないものであった。これに対し、第２の実施形態では、視聴者が複数の場合は、所定の優先度付けルールに基づいて視域を更新するものである。

図６は、第２の実施形態に係る映像表示装置１００ａの概略構成を示すブロック図である。図６では、図２と共通する構成部分には同一の符号を付しており、以下では相違点を中心に説明する。

図６の映像表示装置１００ａのコントローラ１０ａは、さらに優先度設定部１６と、記憶部１７とを有する。優先度設定部１６は、視聴者が複数である場合、所定の優先度付けルールに基づいて、各視聴者に優先度を設定する。優先度ルールの例については後述する。記憶部１７は優先度を設定するために用いられる。

図７は、第２の実施形態に係る映像表示装置１００ａのコントローラ１０ａの処理動作の一例を示すフローチャートである。

まず、視聴者検出部１３は、カメラ３により撮影された映像を用いて、視聴者の人数および位置を検出する（ステップＳ２１）。そして、優先度設定部１６は各視聴者に優先度を設定する（ステップＳ２２）。視聴者が１人の場合、優先度設定部１６はその視聴者の優先度を最も高く設定すればよい。一方、視聴者が複数の場合、優先度付けルールに基づいて、各視聴者に優先度を設定する。各視聴者の優先度および位置が視域情報算出部１４に供給される。

続いて、視域情報算出部１４は、優先度に応じて制御パラメータを算出する（ステップＳ２３）。例えば、視域情報算出部１４は、優先度が最も高い視聴者の位置に視域が設定されるよう、制御パラメータを算出する。あるいは、視域情報算出部１４は、以下のようにして優先度が高い順にできるだけ多くの視聴者が視域に収まるよう、制御パラメータを算出してもよい。すなわち、まず、優先度が最も低い視聴者を除外して、残りの視聴者が全て視域内に収めるための制御パラメータの算出を試みる。それでもなお制御パラメータを算出できない場合には、残った視聴者のうち最も優先度の低い視聴者を除外して、制御パラメータの算出を試みる。これを繰り返すことで、優先度が相対的高い視聴者を優先して視域内に収めるための制御パラメータを算出できる。

このようにして算出された制御パラメータに応じて、画像調整部１５は視差画像信号を調整し（ステップＳ２４）、調整された視差画像信号に対応する視差画像が液晶パネル１に表示される。

図８は、本実施形態による視域設定の具体例を示す図である。

図８（ａ）は視聴者が１人である場合の例を示している。視聴者が１人の場合、その視聴者の位置に視域Ｓａが設定される。

図８（ｂ），（ｃ）は視聴者が複数である場合の例を示している。両図とも、映像表示装置１００と、視聴者Ａ〜Ｄと、設定された視域Ｓｂ，Ｓｃとを示しており、視聴者の人数および位置は同じである。また、各視聴者の優先度は視聴者Ａ，Ｂ，Ｃ，Ｄの順に高いものとする。

図８（ｂ）は、ステップＳ２３で、視域情報算出部１４が、優先度が最も高い視聴者の位置に視域が設定されるよう、制御パラメータを算出する例である。この場合、優先度が最も高い視聴者Ａが最も高品位に映像を見ることができるよう、視聴者Ａの位置が視域の中央になるように視域が設定される。優先度が２番目以降の視聴者については考慮されない。

図８（ｃ）は、ステップＳ２３で、視域情報算出部１４が、優先度が高い順にできるだけ多くの視聴者が視域に収まるよう、制御パラメータを算出する例である。この場合、優先度が最も高い視聴者Ａが視域の中央からは外れてしまうが、例えば優先度が相対的に高い視聴者Ａ，Ｂの２人を視域に収めることができる。

以下、優先度付けルールの例を説明する。

第１の例として、視聴時間が長い視聴者から順に優先度を設定することができる。視聴時間が長い視聴者ほど、その番組に対して高い視聴意欲を有している可能性が大きいためである。視聴時間は、例えばコンテンツの開始時刻を基準としてもよい。放送波を視聴する場合、例えばチューナデコーダ１１が取得する電子番組表の情報からコンテンツの開始時刻を把握できる。また、視聴時間は記憶部１７に記憶しておくことができる。

図９は、視聴時間に基づいて優先度を設定する例を説明する図である。同図では、優先度が高い視聴者を上に描いている。

初め、時刻ｔ０で視聴者Ａのみが視聴していて視聴者検出部１３により検出されている場合、視聴者Ａの優先度が最も高く設定される（図９（ａ））。時刻ｔ１で視聴者Ｂが新たに視聴者検出部１３により検出されると、視聴者Ａの方が視聴時間が長いため、視聴者Ｂの優先度は視聴者Ａの優先度より低く設定される（図９（ｂ））。時刻ｔ２で視聴者Ａが移動して視聴者検出部１３により検出されなくなると、視聴者Ｂの優先度が高く設定される（図９（ｃ））。このとき、記憶部１７に記憶されていた視聴者Ａの視聴時間は０にリセットされる。時刻ｔ３で視聴者Ａが戻ってきて再び視聴者検出部１３により検出されても、視聴者Ｂの方が視聴時間が長いため、視聴者Ａの優先度は視聴者Ｂの優先度より低く設定される（図９（ｄ））。

なお、視聴者が視聴者検出部１３により検出されない時間が短い場合は、視聴時間を０にリセットしないようにしてもよい。

第２の例として、予め視聴者の情報と、優先度との関係を示す優先度テーブルを記憶部１７に記憶しておいてもよい。視聴者の情報とは、例えば視聴者の顔である。そして、カメラ３により撮影された映像を用いて、視聴者検出部１３が視聴者の顔を検出し、記憶部１７に記憶された優先度テーブルを用いて、優先度設定部１６が各視聴者に優先度を設定することができる。

図１０は、優先度テーブルの一例を示す図である。同図では、予め視聴者Ａ，Ｂ，Ｃの順に優先度が高く設定されている。視聴者Ａ〜Ｃは例えば家族であり、視聴者Ａは母親、視聴者Ｂは子供、視聴者Ｃは父親である。なお、視聴者情報として、実際には視聴者Ａ〜Ｃの顔等が登録されている。

図１１は、優先度テーブルに基づいて優先度を設定する例を示す図である。初め、時刻ｔ０で視聴者Ａのみが視聴していて視聴者検出部１３により検出されている場合、視聴者Ａの優先度が最も高く設定される（図１１（ａ））。時刻ｔ１で視聴者Ｂが新たに視聴者検出部１３により検出されると、視聴者Ａの方が優先度が高い（図１０）ため、視聴者Ｂの優先度は視聴者Ａの優先度より低く設定される（図１１（ｂ））。時刻ｔ２で視聴者Ａが移動して視聴者検出部１３により検出されなくなると、視聴者Ｂの優先度が高く設定される（図１１（ｃ））。時刻ｔ３で視聴者Ａが戻ってきて再び視聴者検出部１３により検出されると、視聴者Ａの方が優先度が高い（図１０）ため、視聴時間に関わらず、視聴者Ｂの優先度は視聴者Ａの優先度より低く設定される（図１１（ｄ））。

その他の例として、優先度設定部１６は視聴者の位置に応じて優先度を設定してもよい。例えば最適な視聴距離である３Ｈ（Ｈは液晶パネル１の高さ）に近い位置にいる視聴者ほど優先度を高く設定してもよいし、液晶パネル１に近い視聴者ほど優先度を高く設定してもよい。あるいは、液晶パネル１の正面にいる視聴者ほど優先度を高く設定してもよい。さらに、リモコンを持っている視聴者の優先度を最も高く設定してもよい。

ところで、優先度設定部１６は視聴者とその視聴者の優先度との関係を提示するようにしてもよい。例えば、図１２（ａ）に示すように、視聴者の優先度が変更されると、その旨を示すテキストデータを映像に重畳して、液晶パネル１に表示してもよい。また、図１２（ｂ）に示すように、カメラ３で撮影された映像の全体あるいは一部を、優先度に応じて視聴者の表示態様を変えて、液晶パネル１に表示してもよい。より具体的には、優先度が高い視聴者ほど色を濃くしたり、優先度に応じて色味を変えたりして表示してもよい。あるいは、優先度が高い順に所定数の視聴者にマーカー（フラグ）を付加して表示してもよい。

このように、第２の実施形態では、視聴者に優先度を付けて視域を設定するため、複数の視聴者が存在し、たとえ視聴者の一部が視域内に収まらない場合であっても、優先度の高い視聴者を視域内に収めることができる。

なお上述した各実施形態の映像表示装置では、レンチキュラレンズ２を用い、視差画像をずらすことによって視域を制御する例を示したが、他の手法で視域を制御してもよい。例えば、レンチキュラレンズ２に代えてパララックスバリアを開口制御部として設けてもよい。また、図１３は、図２の変形例である映像表示装置１００’の概略構成を示すブロック図である。同図に示すように、視差画像をずらす処理を行わず、コントローラ１０’内に視域制御部１５’を設けて開口制御部２’を制御してもよい。この場合、液晶パネル１と開口制御部２’との距離、液晶パネル１と開口制御部との水平方向のずれ量等を制御パラメータとし、液晶パネル１に表示された視差画像の出力方向を制御することにより視域が制御される。図１２の映像表示装置１００’を各実施形態に適用してもよい。

上述した実施形態で説明した映像処理装置の少なくとも一部は、ハードウェアで構成してもよいし、ソフトウェアで構成してもよい。ソフトウェアで構成する場合には、映像処理装置の少なくとも一部の機能を実現するプログラムをフレキシブルディスクやＣＤ−ＲＯＭ等の記録媒体に収納し、コンピュータに読み込ませて実行させてもよい。記録媒体は、磁気ディスクや光ディスク等の着脱可能なものに限定されず、ハードディスク装置やメモリなどの固定型の記録媒体でもよい。

また、映像処理装置の少なくとも一部の機能を実現するプログラムを、インターネット等の通信回線（無線通信も含む）を介して頒布してもよい。さらに、同プログラムを暗号化したり、変調をかけたり、圧縮した状態で、インターネット等の有線回線や無線回線を介して、あるいは記録媒体に収納して頒布してもよい。

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。

１ 液晶パネル
２ レンチキュラレンズ
２’ 開口制御部
３ カメラ
４ 受光部
１０，１０’，１０ａ コントローラ
１１ チューナデコーダ
１２ 視差画像変換部
１３ 視聴者検出部
１４ 視域情報算出部
１５ 画像調整部
１５’ 視域制御部
１６ 優先度設定部
１７ 記憶部
１００，１００’，１００ａ 映像処表示装置

Claims (9)

1. 撮影された映像を用いて視聴者の人数および視聴者の位置を検出する視聴者検出部と、
   前記視聴者が１人のときは前記視聴者の位置に視域を設定し、前記視聴者が複数のときは現在の視域を維持する視域制御部と、を備え、
   前記視域は、表示部に表示される複数の視差画像を立体的に見ることが可能な領域である映像処理装置。
2. 前記視域制御部は、前記視聴者が複数のときは、前記複数の視聴者のうちの一部が移動した場合であっても、現在の視域を維持する請求項１に記載の映像処理装置。
3. 前記視域制御部は、
   前記表示部に表示される前記複数の視差画像の表示位置を調整するか、
   前記表示部に表示される前記複数の視差画像の出力方向を制御する、請求項１または２に記載の映像処理装置。
4. 前記複数の視差画像を表示する表示部と、
   前記表示部に表示された複数の視差画像を所定の方向に出力する開口制御部と、を備える請求項１乃至３のいずれかに記載の映像処理装置。
5. 入力映像信号を復号する受信部と、
   前記復号された入力映像信号に基づいて前記複数の視差画像を生成する視差画像変換部と、を備える請求項１乃至４のいずれかに記載の映像処理装置。
6. 前記受信部は、放送波を受信および選局し、これを復号する請求項５に記載の映像処理装置。
7. 前記視聴者の人数および視聴者の位置を検出するための映像を取得するカメラを備える請求項１乃至６のいずれかに記載の映像処理装置。
8. 撮影された映像を用いて視聴者の人数および視聴者の位置を検出するステップと、
   前記視聴者が１人のときは前記視聴者の位置に視域を設定し、前記視聴者が複数のときは現在の視域を維持するステップと、を備え、
   前記視域は、表示部に表示される複数の視差画像を立体的に見ることが可能な領域である映像処理方法。
9. 前記視聴者が複数のときは、前記複数の視聴者のうちの一部が移動した場合であっても、現在の視域を維持する請求項８に記載の映像処理方法。

Images