JP2021179652A - 画像表示制御装置、画像表示制御方法および画像表示制御用プログラム - Google Patents

Abstract

【課題】３次元空間画像の上に重畳して表示されている別画像をユーザの希望に応じて拡大して表示させることができるようにする。【解決手段】ユーザの頭部の動きに連動して表示対象範囲が変動するように３次元空間画像を生成する３次元空間画像生成部１２と、３次元空間画像に重畳して表示させる別画像を生成する別画像生成部１４と、３次元空間画像および別画像をディスプレイ１０２に表示させる表示制御部１５と、ディスプレイ１０２の一部領域に表示されている別画像をユーザが注目しているか否かを判定する注目判定部１６とを備え、別画像を注目していると判定された場合に、表示制御部１５が当該別画像を拡大して表示させることにより、ユーザが別画像を集中して視聴することを希望している場合に、当該別画像を注目するだけで別画像を拡大して表示させることができるようにする。【選択図】図２

Description

本発明は、画像表示制御装置、画像表示制御方法および画像表示制御用プログラムに関し、特に、３次元空間画像に重畳して表示させる別画像の表示を制御する技術に用いて好適なものである。

近年、コンピュータの中に作られた仮想的な世界をあたかも現実のように体験させる仮想現実（ＶＲ）技術の活用が広がりを見せつつある。ＶＲは、コンピュータグラフィックスなどを利用して作成した３次元空間画像をユーザに提示するものと、現実の世界を撮影して取得した動画をＶＲ用に加工することによって作成した３次元空間画像をユーザに提示するものとに大別される。後者の一例として、ユーザの視線や頭の動きに合わせて３６０度全方位（全天周）を見られるようにした３６０度動画と呼ばれるものも提供されている。

ＶＲの応用例は様々であるが、ユーザが装着したＨＭＤ（ヘッドマウントディスプレイ）に３次元空間画像（ＶＲ画像）を表示させることにより、ＨＭＤに対して描き出された３次元空間画像の中でユーザが仮想的に様々な体験をすることができるようになされたものが存在する。また、ＨＭＤに表示されるＶＲ画像を分割した複数の領域のうち、ユーザの視線方向の中心に合致する領域を拡大して表示させることにより、小さくてよく見えない領域の画像を拡大して見ることができるようにした技術も知られている（例えば、特許文献１参照）。

特許文献１には、ユーザの視線方向に応じた仮想空間を示す第１画像と、拡大表示対象領域の第２画像とを別の領域に表示させることも開示されている。具体例として、ユーザの視線方向に応じて内容が逐次切り替わるライブ画像をメインウィンドウに表示するとともに、追尾指示操作に基づく追尾画像をサブウィンドウに表示することが開示されている。

特開２０１９−４６２９１号公報

上記特許文献１に記載の技術によれば、メインウィンドウに表示されたＶＲ画像上でユーザが所望のオブジェクトに視線を向けることにより、そのオブジェクトを含む領域の画像を拡大してサブウィンドウに表示させることができる。しかしながら、拡大して表示させることができるのは、ＨＭＤの画面全体に表示されているＶＲ画像の中の一部の領域の画像である。すなわち、特許文献１では、ＨＭＤに表示された３次元空間画像とは別の画像を表示させることや、その別画像の表示を制御することについては何ら言及されていない。

これに対し、本発明は、表示画面全体に３次元空間画像を表示させるとともに、その３次元空間画像の上に別画像を重畳して表示させておき、ユーザの希望に応じて別画像を拡大して表示させることができるようにすることを目的とする。

上記した課題を解決するために、本発明では、ユーザの頭部の動きに連動して表示対象範囲が変動するように３次元空間画像を生成するとともに、３次元空間画像に重畳して表示させる別画像を生成し、当該３次元空間画像および別画像をディスプレイに表示させるようにしている。その上で、本発明では、ディスプレイの全画面領域のうち一部領域に表示されている別画像をユーザが注目しているか否かを判定し、注目していると判定された場合に別画像を拡大して表示させるようにしている。

上記のように構成した本発明によれば、３次元空間画像の上に重畳して表示されている別画像をユーザが注目していると判定されると、当該別画像が拡大して表示される。ユーザが別画像を注目している場合は、ユーザが当該別画像に関心を持っていて、集中して視聴することを希望しているものと推定可能である。本発明によれば、このようなユーザの希望に応じて、３次元空間画像とは別のものとして表示されている別画像をユーザが注目するだけで、当該別画像を拡大して表示させることができる。

本実施形態による画像表示制御装置の構成例を示す図である。 本実施形態による画像表示制御装置の機能構成例を示すブロック図である。 ３次元空間画像データ記憶部に記憶される３次元空間画像データおよび３次元空間画像生成部が生成する表示用３次元空間画像を模式的に示す図である。 表示制御部の処理内容を説明するための模式図である。 注目判定部の処理内容を説明するための模式図である。 本実施形態による画像表示制御装置の動作例を示すフローチャートである。 本実施形態による画像表示制御装置の他の機能構成例を示すブロック図である。

以下、本発明の一実施形態を図面に基づいて説明する。図１は、本実施形態による画像表示制御装置の構成例を示す図である。本実施形態の画像表示制御装置１は、例えば図１（ａ）に示すように、スタンドアロン型のＨＭＤ１００に実装される。スタンドアロン型とは、外部機器に接続することなく、内蔵されたコンピュータにより動作するＨＭＤをいう。

本実施形態の画像表示制御装置１は、図１（ｂ）に示すように、ＨＭＤ１００Ａおよび外部機器１００Ｂに実装するようにしてもよい。外部機器１００Ｂは、パーソナルコンピュータまたはスマートフォンである。ＨＭＤ１００Ａと外部機器１００Ｂとの間は、ケーブルによる有線、または、Ｂｌｕｅｔｏｏｔｈ（登録商標）やＷｉ−Ｆｉ（登録商標）などの無線により接続される。

ＨＭＤ１００，１００Ａの形状は、眼鏡型、帽子型、ゴーグル型の何れであってもよい。眼鏡型の場合、両眼型または単眼型の何れであってもよい。また、ＨＭＤ１００，１００Ａが備えるディスプレイは、装着すると外の様子を見ることができなくなる非透過型、装着しても外の様子を見ることができる透過型の何れであってもよい。以上のどのタイプであっても、ＨＭＤ１００，１００Ａは、ジャイロセンサまたは加速度センサ等の動きセンサ１０１を搭載している。

図２は、本実施形態による画像表示制御装置１の機能構成例を示すブロック図である。図２に示すように、本実施形態の画像表示制御装置１は、機能構成として、動き検出部１１、３次元空間画像生成部１２、別画像データ取得部１３、別画像生成部１４、表示制御部１５および注目判定部１６を備えている。また、本実施形態の画像表示制御装置１は、記憶媒体として、３次元空間画像データ記憶部１０を備えている。

上記各機能ブロック１１〜１６は、ハードウェア、ＤＳＰ（Digital Signal Processor）、ソフトウェアの何れによっても構成することが可能である。例えばソフトウェアによって構成する場合、上記各機能ブロック１１〜１６は、実際にはコンピュータのＣＰＵ、ＲＡＭ、ＲＯＭなどを備えて構成され、ＲＡＭやＲＯＭ、ハードディスクまたは半導体メモリ等の記録媒体に記憶されたプログラムが動作することによって実現される。

動き検出部１１は、動きセンサ１０１から出力される検出信号に基づいて、ユーザの頭部の動きを検出する。すなわち、動き検出部１１は、ＨＭＤ１００，１００Ａを搭載しているユーザが頭部を動かして全天周のどの方向を向いているのかを検出する。例えば、動き検出部１１は、ＨＭＤ１００，１００Ａの電源を入れたときの方向を基準として、基準方向からどの方向にどの量だけ頭部の向きが移動しているのかを検出する。

３次元空間画像生成部１２は、３次元空間画像データ記憶部１０に記憶されている３次元空間画像データを用いて、動き検出部１１により検出されるユーザの頭部の動きに連動してディスプレイ１０２への表示対象範囲が変動するように３次元空間画像（以下、表示用３次元空間画像という）を生成する。３次元空間画像データ記憶部１０は、例えば、ユーザの頭部の動きに合わせて３６０度全方位（全天周）を見られるようにした３６０度動画に関する３次元空間画像データをあらかじめ記憶している。３次元空間画像データ記憶部１０が記憶する３次元空間画像データは、実写による画像をＶＲ用に加工したものであってもよいし、コンピュータグラフィックスなどを利用して作成したものであってもよい。

図３は、３次元空間画像データ記憶部１０に記憶される３次元空間画像データおよび３次元空間画像生成部１２が生成する表示用３次元空間画像を模式的に示す図である。なお、図３は説明用の模式図であり、各部のサイズを実際のものに即して示したものではない。

図３に示すように、３次元空間画像生成部１２は、３次元空間画像データ記憶部１０に記憶されている全天周の３次元空間画像データ３０の中から、動き検出部１１により検出されるユーザの頭部の動き（ユーザの頭部が向いている方向）に対応する表示対象範囲３４の３次元空間画像データを取り出し、当該表示対象範囲３４の３次元空間画像データに基づいて表示用３次元空間画像を生成する。表示対象範囲３４は、ＨＭＤ１００，１００Ａが備えるディスプレイ１０２の全画面領域の形状およびサイズに合わせて設定されたものであり、動き検出部１１により検出されるユーザの頭部の動きに応じて、全天周の３次元空間画像データ３０の全範囲の中で任意に移動する。

全天周の３次元空間画像データ３０には、後述する別画像を重畳して表示させるための別画像枠３１〜３３が設定されている。別画像枠３１〜３３は、全天周の３次元空間画像データ３０の全範囲の中の任意の位置に任意の数だけ設定される。別画像枠３１〜３３のサイズは任意であり、表示対象範囲３４と同じ大きさであってもよいし、表示対象範囲３４より小さくても大きくてもよいが、表示対象範囲３４より小さいサイズとするのが好ましい。別画像枠３１〜３３に対して別画像を重畳して表示させるか否かは個別に任意に設定可能であり、別画像を重畳して表示させない場合、別画像枠３１〜３３の位置には３次元空間画像データ３０に基づく表示用３次元空間画像が表示される。

別画像データ取得部１３は、別画像枠３１〜３３に表示させるための別画像データを外部より取得する。別画像データは、３次元空間画像データ記憶部１０の３次元空間画像データにより構成される３次元空間の一部に関するものである必要はなく、別の観点から作成されたものであってよい。また、別画像データは、３次元空間を構成するためのデータである必要はなく、２次元画像データであってもよい。２次元画像データは、静止画データであってもよいし、動画データであってもよい。

例えば、ｅスポーツの試合会場の様子を３６０度動画の３次元空間画像としてＨＭＤ１００，１００Ａの全画面領域に表示させるとともに、試合に参戦しているプレイヤが実行しているゲームのゲーム画像（動画）を別画像枠３１〜３３に別画像として重畳して表示させるといったユースケースが考えられる。図３の例では、３つの別画像枠３１〜３３が設定されており、３人のプレイヤが実行しているゲームの３つのゲーム画像がそれぞれ別画像枠３１〜３３に別画像として重畳して表示される。

この場合、３次元空間画像データ記憶部１０は、ｅスポーツの試合会場の様子を３６０度動画で表した３次元空間画像データを記憶する。また、別画像データ取得部１３は、プレイヤが実行しているゲームのゲーム画像をゲーム装置からダイレクトに、あるいはゲーム装置からサーバ装置および通信機器を経由して取得する。この場合、ゲーム装置または通信機器と画像表示制御装置１との間は、有線またはＷｉ−Ｆｉ等の無線により接続される。

なお、このユースケースは一例に過ぎない。すなわち、３次元空間画像データ記憶部１０が記憶する３次元空間画像データおよび別画像データ取得部１３が取得する別画像データは、他のユースケースに対応したものであってもよいことは言うまでもない。また、ここでは別画像データを画像表示制御装置１の外部から取得する例を示しているが、これに限定されない。例えば、画像表示制御装置１の記憶媒体に別画像データをあらかじめ記憶しておいて、別画像データ取得部１３がその内部の記憶媒体から別画像データを取得するようにしてもよい。

別画像生成部１４は、別画像データ取得部１３により取得された別画像データを用いて、３次元空間画像の別画像枠３１〜３３に重畳して表示させる別画像を生成する。ここで、別画像データ取得部１３が３つの別画像データを取得した場合、別画像生成部１４は、３つの別画像枠３１〜３３に表示させるための３つの別画像を生成する。また、別画像データ取得部１３が１つまたは２つの別画像データを取得した場合、別画像生成部１４は、３つの別画像枠３１〜３３のうち何れか１つまたは２つに表示させるための１つまたは２つの別画像を生成する。

表示制御部１５は、３次元空間画像生成部１２により生成された表示用３次元空間画像および別画像生成部１４により生成された別画像のディスプレイ１０２への表示を制御する。上述したように、表示制御部１５は、ユーザの頭部の動きに連動して移動する表示対象範囲３４に含まれる表示用３次元空間画像をＨＭＤ１００，１００Ａのディスプレイ１０２に表示させるように制御する。また、表示制御部１５は、表示対象範囲３４の中に別画像枠３１〜３３の少なくとも一部が含まれている場合に、その含まれている部分に対応する別画像を表示用３次元空間画像に重畳して表示させるように制御する。

例えば、図４（ａ）に示すように、表示対象範囲３４の中に第１の別画像枠３１の一部が含まれている場合、表示制御部１５は、図４（ｂ）に示すように、表示対象範囲３４について３次元空間画像生成部１２により生成された表示用３次元空間画像３４０を、ＨＭＤ１００，１００Ａが備えるディスプレイ１０２の全画面領域に表示させるように制御する。また、表示制御部１５は、図４（ｂ）に示すように、第１の別画像枠３１について別画像生成部１４により生成された別画像の全体領域うち、第１の別画像枠３１が表示対象範囲３４に含まれる部分に対応する別画像３１０を表示用３次元空間画像３４０に重畳して表示させるように制御する。

注目判定部１６は、ディスプレイ１０２の全画面領域のうち一部領域に表示されている別画像をユーザが注目しているか否かを判定する。例えば、注目判定部１６は、ディスプレイ１０２の全画面領域のうち、画面中央部に設定された判定領域の少なくとも一部に別画像が所定時間以上継続して表示されている場合に、ユーザが別画像を注目していると判定する。図５は、この場合における注目判定部１６の処理内容を説明するための模式図である。なお、この図５では、表示制御部１５による別画像の拡大表示の様子も併せて示している。

図５に示すように、ディスプレイ１０２の全画面領域５１（表示対象範囲３４の表示用３次元空間画像が表示される領域）の画面中央部には、所定形状および所定サイズの判定領域５２が設定されている。判定領域５２のサイズは、別画像枠３１〜３３のサイズよりも小さくするのが好ましい。注目判定部１６は、図５（ａ）に示すように、この判定領域５２の少なくとも一部に別画像５３が所定時間以上継続して表示されている場合に、ユーザが別画像５３を注目していると判定する。一方、図５（ｂ）に示すように、判定領域５２の上に別画像５３が全く表示されていない場合、ユーザは別画像５３を注目していないと判定する。

表示制御部１５は、注目判定部１６によりユーザが別画像を注目していると判定された場合、当該別画像を拡大して表示させる。例えば、図５（ａ）に示すように、表示制御部１５は、注目判定部１６によりユーザが別画像５３を注目していると判定された場合、当該別画像５３を拡大してディスプレイ１０２の全画面領域５１にフルスクリーン状態で表示させる。この場合、表示用３次元空間画像は別画像５３に隠れて見えなくなる。なお、フルスクリーン表示は拡大の一例であり、これに限定されるものではない。例えば、全画面領域５１の９０％または８０％を示す矩形領域に別画像５３を拡大して表示させるようにしてもよい。

表示制御部１５は、別画像を拡大して表示させた後、動き検出部１１により検出されるユーザの頭部の動きの量を監視する。そして、検出されるユーザの頭部の動きの量が所定値以下の場合は、別画像の拡大表示を続ける。一方、表示制御部１５は、別画像を拡大して表示させた後、動き検出部１１により検出されるユーザの頭部の動きの量が所定値を超えた場合、別画像の拡大表示を解除する。拡大表示された別画像をユーザが好んで視聴している場合でも、ユーザの頭部の動きが完全に固定されているわけではないので、頭部の動きの量が所定値以下の場合は、別画像の拡大表示を続ける。一方、頭部の動きの量が所定値を超えた場合は、別画像の視聴を中止したいというユーザの意志であると推定して、別画像の拡大表示を解除する。

図６は、上記のように構成した本実施形態による画像表示制御装置１の動作例を示すフローチャートである。図６に示すフローチャートは、３次元空間画像データ記憶部１０に記憶されている３次元空間画像データに基づく３次元空間画像の再生をユーザが指示したときに開始する。

図６において、まず、動き検出部１１は、動きセンサ１０１から出力される検出信号に基づいて、ユーザの頭部の動きを検出する（ステップＳ１）。そして、３次元空間画像生成部１２は、３次元空間画像データ記憶部１０に記憶されている３次元空間画像データを用いて、動き検出部１１により検出されるユーザの頭部の動きに連動してディスプレイ１０２への表示対象範囲３４が変動するように表示用３次元空間画像を生成する（ステップＳ２）。

また、別画像データ取得部１３は、３次元空間画像の別画像枠３１〜３３に表示させるための別画像データを外部より取得する（ステップＳ３）。そして、別画像生成部１４は、別画像データ取得部１３により取得された別画像データを用いて、３次元空間画像の別画像枠３１〜３３に重畳して表示させる別画像を生成する（ステップＳ４）。

次いで、表示制御部１５は、３次元空間画像生成部１２により生成された表示用３次元空間画像をＨＭＤ１００，１００Ａが備えるディスプレイ１０２の全画面領域に表示させるとともに、表示対象範囲３４の中に別画像枠３１〜３３の少なくとも一部が含まれている場合には、別画像生成部１４により生成された別画像の少なくとも一部を表示用３次元空間画像に重畳させて表示させる（ステップＳ５）。

次に、注目判定部１６は、表示用３次元空間画像に重畳して表示されている別画像をユーザが注目しているか否かを判定する（ステップＳ６）。ここで、ユーザが別画像を注目していないと判定された場合、処理はステップＳ１３に進む。一方、ユーザが別画像を注目していると判定された場合、別画像データ取得部１３は別画像データを外部より取得し（ステップＳ７）、別画像生成部１４は、別画像データ取得部１３により取得された別画像データに基づいて別画像を生成する（ステップＳ８）。そして、表示制御部１５は、ユーザが注目している別画像を拡大してディスプレイ１０２に表示させる（ステップＳ９）。

その後、動き検出部１１は、動きセンサ１０１から出力される検出信号に基づいて、ユーザの頭部の動きを検出する（ステップＳ１０）。そして、表示制御部１５は、動き検出部１１により検出されるユーザの頭部の動きの量が所定値を超えたか否かを判定する（ステップＳ１１）。ここで、ユーザの頭部の動きの量が所定値を超えていないと判定された場合、処理はステップＳ７に戻り、別画像の拡大表示を継続する。一方、ユーザの頭部の動きの量が所定値を超えたと判定された場合、表示制御部１５は、別画像の拡大表示を解除する（ステップＳ１２）。その後、処理はステップＳ１３に進む。

ステップＳ１３において、３次元空間画像生成部１２は、３次元空間画像の再生の終了をユーザが指示したか否かを判定する。３次元空間画像の再生の終了をユーザが指示していない場合、処理はステップＳ１に戻る。一方、３次元空間画像の再生の終了をユーザが指示した場合、図６に示すフローチャートの処理は終了する。

以上詳しく説明したように、本実施形態では、ユーザの頭部の動きに連動して表示対象範囲３４が変動するように３次元空間画像を生成して表示させるとともに、表示対象範囲３４の中に別画像枠３１〜３３が含まれる場合には、３次元空間画像に別画像を重畳して表示させるようにしている。そして、ユーザが別画像を注目しているか否かを判定し、注目していると判定された場合は、当該別画像を拡大して表示させるようにしている。

ユーザが別画像を注目している場合は、ユーザが当該別画像に関心を持っていて、集中して視聴することを希望しているものと推定可能である。本実施形態によれば、このようなユーザの希望に応じて、ディスプレイ１０２の全画面領域のうち一部領域に表示されている別画像を注目するだけで、当該別画像を拡大して表示させることができる。

また、本実施形態では、別画像が拡大して表示された後、動きの量が所定値を超えるほど大きくユーザが頭を動かすと、別画像の拡大表示が解除されて、元のように３次元空間画像が表示されるようになる。本実施形態によれば、拡大表示を解除したいというユーザの意志に応じて、頭部を大きく動かすだけで別画像の拡大表示を停止させて、３次元空間画像を表示させるようにすることができる。

以上のように、本実施形態によれば、所定時間以上続けて頭の動きを止めて、ディスプレイ１０２の全画面領域の一部に表示されている別画像を注目することによって別画像を拡大表示させることができる。また、その後、動きの量が所定値を超えるほど大きく頭を動かすことによって、別画像の拡大表示を解除することができる。このように、ユーザがリモコン等を用いた特別な操作を行うことなく別画像の拡大表示とその解除とを行うことができ、ユーザビリティを向上させることができる。

なお、上記実施形態では、判定領域５２の少なくとも一部に別画像５３が所定時間以上継続して表示されている状態、すなわち、図５（ａ１）および（ａ２）の何れの状態においても、ユーザが別画像５３を注目していると判定する例について説明したが、これに限定されない。例えば、注目判定部１６は、図５（ａ１）のように、判定領域５２の全体に別画像５３が所定時間以上継続して表示されている場合にのみ、ユーザが別画像５３を注目していると判定するようにしてもよい。この場合、図５（ａ２）の状態ではユーザが別画像５３を注目しているとは判定されない。

判定領域５２の全体に別画像５３が所定時間以上継続して表示されているか否かによって注目の有無を判定する場合、判定領域５２のサイズを大きくすると、図５（ａ１）のように別画像５３が画面中央寄りに表示されているときは「注目している」と判定される一方、図５（ａ２）のように別画像５３が画面周辺寄りに表示されているときは「注目していない」と判定されるようになる。別画像５３が画面中央のどの範囲に表示されているときにユーザが注目していると判定されるか（画面中央からの偏在がどの程度許容されるか）は、別画像５３（別画像枠３１〜３３）のサイズと判定領域５２のサイズとの関係から決まる。このサイズ関係を考慮して、判定領域５２のサイズを任意に設定することが可能である。

別の例として、注目判定部１６は、判定領域５２を設定せずに、ディスプレイ１０２の全画面領域５１の中に別画像５３の全体領域が所定時間以上継続して表示されている場合に、ユーザが別画像５３を注目していると判定するようにしてもよい。この場合、図５（ａ）の状態ではユーザが別画像５３を注目していると判定される一方、図５（ｂ）の状態ではユーザが別画像５３を注目していないと判定される。

また、図７に示すように、ＨＭＤ１００，１００Ａに視線センサ１０３を搭載し、画像表示制御装置１が視線検出部１７を更に備えるように構成して、注目判定部１６’がユーザの視線の動きに基づいて、ユーザが別画像を注目しているか否かを判定するようにしてもよい。図７に示す構成において、視線検出部１７は、視線センサ１０３から出力される検出信号に基づいて、ユーザの視線の動きを検出する。注目判定部１６’は、視線検出部１７により検出されるユーザの視線の動きに基づいて、ディスプレイ１０２の全画面領域のうち一部領域に表示されている別画像をユーザが注目しているか否かを判定する。例えば、注目判定部１６’は、所定時間以上続けてユーザの視線が別画像に向けられている場合に、ユーザが別画像を注目していると判定する。

このように視線検出を利用する場合、ユーザの頭部の動きによらず、ディスプレイ１０２の全画面領域の中の所定の位置に別画像を常に表示させておいて、所定時間以上続けてユーザの視線が別画像に向けられている場合に、ユーザが別画像を注目していると判定するようにしてもよい。

また、上記実施形態では、表示対象範囲３４の中に別画像枠３１〜３３が含まれるか否かによらず、別画像生成部１４が全体領域の別画像を生成し、表示制御部１５がその中の一部を切り出して表示させたり、拡大して表示させたりする例について説明したが、本発明はこれに限定されない。すなわち、別画像生成部１４は、表示対象範囲３４の中に別画像枠３１〜３３の少なくとも一部が含まれる場合に限り、その含まれている一部の部分の別画像を生成するようにしてもよい。この場合、表示制御部１５は、別画像生成部１４により生成された一部分の別画像を表示用３次元空間画像に重畳して表示させる。また、何れか一の別画像を拡大して表示させる場合に、別画像生成部１４は、当該拡大用の別画像だけを生成するようにしてもよい。

その他、上記実施形態は、何れも本発明を実施するにあたっての具体化の一例を示したものに過ぎず、これによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその要旨、またはその主要な特徴から逸脱することなく、様々な形で実施することができる。

１ 画像表示制御装置
１０ ３次元空間画像データ記憶部
１１ 動き検出部
１２ ３次元空間画像生成部
１３ 別画像データ取得部
１４ 別画像生成部
１５ 表示制御部
１６，１６’ 注目判定部
１７ 視線検出部
１０１ 動きセンサ
１０２ ディスプレイ
１０３ 視線センサ

Claims (7)

1. 動きセンサから出力される検出信号に基づいてユーザの頭部の動きを検出する動き検出部と、
   上記動き検出部により検出される上記ユーザの頭部の動きに連動してディスプレイへの表示対象範囲が変動するように３次元空間画像を生成する３次元空間画像生成部と、
   上記３次元空間画像に重畳して表示させる別画像を生成する別画像生成部と、
   上記３次元空間画像および上記別画像の上記ディスプレイへの表示を制御する表示制御部と、
   上記ディスプレイの全画面領域のうち一部領域に表示されている上記別画像を上記ユーザが注目しているか否かを判定する注目判定部とを備え、
   上記表示制御部は、上記注目判定部により上記ユーザが上記別画像を注目していると判定された場合、上記別画像を拡大して表示させる
   ことを特徴とする画像表示制御装置。
2. 上記表示制御部は、上記別画像を拡大して表示させた後、上記動き検出部により検出される上記ユーザの頭部の動きの量が所定値以下の場合は上記別画像の拡大表示を続け、上記動き検出部により検出される上記ユーザの頭部の動きの量が上記所定値を超えた場合に上記別画像の拡大表示を解除する
   ことを特徴とする請求項１に記載の画像表示制御装置。
3. 上記注目判定部は、上記ディスプレイの全画面領域のうち、画面中央部に設定された判定領域の少なくとも一部に上記別画像が所定時間以上継続して表示されている場合に、上記ユーザが上記別画像を注目していると判定する
   ことを特徴とする請求項１または２に記載の画像表示制御装置。
4. 上記注目判定部は、上記ディスプレイの全画面領域の中に上記別画像の全体領域が所定時間以上継続して表示されている場合に、上記ユーザが上記別画像を注目していると判定する
   ことを特徴とする請求項１または２に記載の画像表示制御装置。
5. 視線センサから出力される検出信号に基づいてユーザの視線の動きを検出する視線検出部を更に備え、
   上記注目判定部は、上記視線検出部により検出される上記ユーザの視線の動きに基づいて、上記ディスプレイの全画面領域のうち一部領域に表示されている上記別画像を上記ユーザが注目しているか否かを判定する
   ことを特徴とする請求項１または２に記載の画像表示制御装置。
6. ディスプレイの全画面領域に３次元空間画像を表示させるとともに、当該３次元空間画像に別画像を重畳して表示させるようになされた画像表示制御装置において、上記３次元空間画像および上記別画像の上記ディスプレイへの表示を制御する方法であって、
   上記画像表示制御装置の動き検出部が、動きセンサから出力される検出信号に基づいてユーザの頭部の動きを検出する動き検出ステップと、
   上記画像表示制御装置の３次元空間画像生成部が、上記動き検出部により検出される上記ユーザの頭部の動きに連動して上記ディスプレイへの表示対象範囲が変動するように上記３次元空間画像を生成する３次元空間画像生成ステップと、
   上記画像表示制御装置の別画像生成部が、上記３次元空間画像に重畳して表示させる別画像を生成する別画像生成ステップと、
   上記画像表示制御装置の表示制御部が、上記３次元空間画像および上記別画像の上記ディスプレイへ表示させる表示制御ステップと、
   上記画像表示制御装置の注目判定部が、上記ディスプレイの全画面領域のうち一部領域に表示されている上記別画像を上記ユーザが注目しているか否かを判定する注目判定ステップと、
   上記画像表示制御装置の上記表示制御部が、上記注目判定部により上記ユーザが上記別画像を注目していると判定された場合、上記別画像を拡大して表示させる拡大表示ステップとを有する
   ことを特徴とする画像表示制御方法。
7. 動きセンサから出力される検出信号に基づいてユーザの頭部の動きを検出する動き検出手段、
   上記動き検出手段により検出される上記ユーザの頭部の動きに連動してディスプレイへの表示対象範囲が変動するように３次元空間画像を生成する３次元空間画像生成手段、
   上記３次元空間画像に重畳して表示させる別画像を生成する別画像生成手段、
   上記ディスプレイの全画面領域のうち一部領域に表示されている上記別画像を上記ユーザが注目しているか否かを判定する注目判定手段、および
   上記３次元空間画像および上記別画像の上記ディスプレイへの表示を制御し、上記注目判定手段により上記ユーザが上記別画像を注目していると判定された場合、上記別画像を拡大して表示させる表示制御手段
   としてコンピュータを機能させるための画像表示制御用プログラム。

Images