JP2015149654A - ヘッドマウントディスプレイ、視聴システム - Google Patents

Abstract

【課題】ユーザの視聴を妨げることなく、画像に同期して表示される文字情報を表示させるヘッドマウントディスプレイを提供する。
【解決手段】透過型の表示部を有するヘッドマウントディスプレイであって、表示装置から文字情報を受信する受信部と、前記表示部を通してユーザに視認される写像を画像データとして取得するカメラ部と、取得した前記画像データをもとに、前記表示部を通してユーザに視認される前記表示装置の位置を第１領域として検出する表示領域検出部と、検出された前記第１領域に応じて、受信した前記文字情報を表示する前記表示部の位置である第２領域を決定する文字領域決定部と、前記表示部に対して、決定された前記第２領域に受信した前記文字情報を表示させる表示制御部と、を有する。
【選択図】図３

Description

本発明は、透過型の表示部を有するヘッドマウントディスプレイに関する。

従来、ユーザの頭部に装着され、眼前に配置された表示部に画像を表示させるヘッドマウントディスプレイが知られている。ヘッドマウントディスプレイには、透過型と非透過型とが存在する。透過型のヘッドマウントディスプレイでは、表示部を通してユーザは外界を視認することができる。即ち、ヘッドマウントディスプレイを装着したユーザの眼には、表示部に表示された像と、外界の像とが同時に入力し、ユーザは擬似的な合成像を視認することができる。

また、表示部に文字情報を表示させることで、このヘッドマウントディスプレイを装着したユーザに文字情報等を提供することができるヘッドマウントディスプレイが開示されている（例えば、特許文献１参照）。

特開２００６−１１９６５３号公報

透過型のヘッドマウントディスプレイにおいて、表示部に文字情報を表示させると、表示部を通して視認される外界の像に対して、文字情報が適切な位置に配置されない場合がある。例えば、ヘッドマウントディスプレイを装着した状態でユーザが外界に表示された画像を見ている場合に、この画像に同期して表示される文字情報が画像に対して適切な位置に表示されないと、文字情報がユーザの視聴の妨げとなる。

本発明は、上記課題にかんがみてなされたもので、ユーザの視聴を妨げることなく、画像に同期して表示される文字情報を表示させるヘッドマウントディスプレイ、およびこのヘッドマウントディスプレイを一部に備える視聴システムの提供を目的とする。

適用例１
上記課題を解決するために、本発明の一態様では、透過型の表示部を有するヘッドマウントディスプレイであって、表示装置から文字情報を受信する受信部と、前記表示部を通してユーザに視認される写像を画像データとして取得するカメラ部と、取得した前記画像データ内の前記表示装置の位置を第１領域として検出する表示領域検出部と、検出された前記第１領域に応じて、受信した前記文字情報を表示する前記表示部の位置である第２領域を決定する文字領域決定部と、前記表示部に対して、決定された前記第２領域に受信した前記文字情報を表示させる表示制御部と、を有する。

上記のように構成された発明では、カメラ部で取得した画像データに含まれる表示装置の位置を第１領域として検出する。次に、検出された第１領域に応じて、受信した文字情報を表示する表示部の位置である第２領域を決定する。そして、決定された第２領域に対応する表示部の位置に受信した前記文字情報を表示す。
そのため、ユーザが表示装置を視認する第１領域に応じて、文字情報を表示する第２領域が決定されるため、ユーザの視聴を妨げることなく、画像に同期して表示される文字情報を表示させることができる。

適用例２
本発明の一態様では、ユーザから、前記表示部に表示された文字情報の位置または大きさの調整を受付ける操作部を有し、前記表示制御部は、受付けた前記調整に応じて、前記表示部に表示された前記文字情報の位置または大きさを変更する。
上記のように構成された発明では、自動で設定された文字情報の視認位置をユーザが手動で調整することができるため、文字情報の使用をより使いやすいものとすることができる。

適用例３
本発明の一態様では、前記文字領域決定部は、前記第１領域の内部に前記第２領域を決定する。
上記のように構成された発明では、表示装置と一体で文字情報を表示させるため、文字情報を使用するユーザに違和感を起こさせることなく、文字情報を表示することができる。

適用例４
本発明の一態様では、前記文字領域決定部は、前記第１領域のサイズに応じて、前記第２領域の位置を決定する。
上記のように構成された発明では、ユーザに視認される表示装置のサイズに応じて、文字情報を表示する位置を変更することができる。そのため、文字情報の視認性を高めることができる。

適用例５
本発明の一態様では、前記文字領域決定部は、前記第１領域のサイズが小さければ、前記第２領域の位置を前記第１領域の外側に決定する。
上記のように構成された発明では、ユーザに視認される表示装置のサイズが小さい場合でも、文字情報をこの表示装置の外に表示させるため、文字情報の視認性を高めることができる。

適用例６
本発明の一態様では、前記文字情報のサイズが大きければ、前記第２領域の位置を前記第１領域の外側に決定する。
上記のように構成された発明では、文字情報のサイズが大きい場合に、文字情報をこの表示装置の外に表示させるため、ユーザの表示装置の視聴を妨げず、文字情報の視認性を高めることができる。

適用例７
本発明の一態様では、前記表示制御部は、前記表示部に前記文字情報を立体視表示させる。
上記のように構成された発明では、ユーザに立体視をさせるヘッドマウントディスプレイにおいて、本発明を適用することができる。

適用例８
また、本発明は、本発明の特徴を備えるヘッドマウントディスプレイを構成要素に含む視聴システムとしても捉えることができる。

視聴システムの外観図。 ＨＭＤ１０のブロック構成図。 コントローラ３１の機能を説明する機能ブロック図。 表示装置１の構成を示すブロック構成図。 ＨＭＤ１０と表示装置１との間で行なわれるペアリング処理を説明する図。 ＨＭＤ１０を装着したユーザに視認される像を説明する図。 コントローラ３１が文字情報を表示する際に実行する処理を示すフローチャート。 コントローラ３１が文字情報を表示する際に実行する処理を説明する図。 文字情報から生成された右眼用画像と左眼用画像とを示す図。 ユーザが操作部２５を操作した場合にコントローラ３１が実行する処理を説明するフローチャート。 ユーザが操作部２５を操作する際にＨＭＤ１０に表示されるアイコンを説明する図。 コントローラ３１が実行する処理を示すフローチャート。 ＨＭＤ１０を装着したユーザに視認される像を説明する図。

以下、下記の順序に従って本発明の実施形態を説明する。
１．第１の実施形態：
（１）視聴システムの構成
（２）ペアリング方法
（３）文字情報の表示方法
２．第２の実施形態：
３．第３の実施形態：
４．その他の実施形態：

１．第１の実施形態：
（１）視聴システムの構成
図１は、視聴システムの外観図である。
視聴システム１００は、ヘッドマウントディスプレイ（以下、ＨＭＤとも記載する）１０と、表示装置１と、を有する。ＨＭＤ１０と、表示装置１とはネットワークＮＥを通じて接続されており、表示装置１からＨＭＤ１０に文字情報ＷＤを送信することができる。ここで、ネットワークＮＥは、図示しない中継装置を備える無線ＬＡＮ（Local Area Network）や、近距離無線通信である。

ＨＭＤ１は、ユーザの頭部に合わせて形成されたフレーム２０と、ユーザの右眼と左眼に位置するようフレーム２０に支持された右眼用表示部１１および左眼用表示部１２と、ＨＭＤ１の駆動を制御する制御ユニット３０とを有する。

ＨＭＤ１は、透過型であり、ユーザはＨＭＤ１０の右眼用表示部１１および左眼用表示部１２を通じて、表示装置１を視認することができる。また、ＨＭＤ１０が表示装置１からネットワークＮＥを通じて文字情報ＷＤを受信した場合、ユーザは、右眼用表示部１１または左眼用表示部１２に文字情報ＷＤを表示させて、表示装置１とこの文字情報ＷＤとを一度に視認することができる。
文字情報ＷＤは、字幕情報、コンテンツに付属するデータ、さらには、表示装置１がＨＭＤ１０に表示させる特殊パターンであってもよい。
透過型のＨＭＤ１０としては、光学透過型のＨＭＤと、ビデオ透過型のＨＭＤとが存在するが、以下に示す説明では、光学透過型のＨＭＤと中心に説明を行う。

図２は、ＨＭＤ１０のブロック構成図である。
ＨＭＤ１０のフレーム２０には、右眼用表示部１１、左眼用表示部１２、右眼用光学部品１３、左眼用光学部品１４、右眼用カメラ２１、左眼用カメラ２２、右眼用画像生成部２３、左眼用画像生成部２４、操作部２５と、を内蔵している。また、ＨＭＤ１０の制御ユニット３０には、コントローラ３１、ビデオメモリ３２、通信ＩＦ３３と、を内蔵している。さらに、右眼用カメラ２１、左眼用カメラ２２、右眼用画像生成部２３、左眼用画像生成部２４、操作部２５、ビデオメモリ３２、通信ＩＦ３３はコントローラ３１に接続されている。

右眼用画像生成部２３は、コントローラ３１から出力される文字情報ＷＤをもとに右眼用表示部１１に表示させるための右眼用画像光を生成する。また、左眼用画像生成部２４は、コントローラ３１から出力される文字情報ＷＤをもとに左眼用表示部１２に表示させるための左眼用画像光を生成する。右眼用画像生成部２３および左眼用画像生成部２４は、例えば、Ｒ（レッド）Ｇ（グリーン）Ｂ（ブルー）の液晶素子を備える光学変調素子や、バックライトにより構成さる。

また、右眼用画像生成部２３により生成された右眼用画像光は、右眼用光学部品１３により右眼用表示部１１に導光される。また、左眼用画像生成部２４により生成された左眼用画像光は、左眼用光学部品１４により左眼用表示部１２に導光される。右眼用光学部品１３や左眼用光学九品１３は、レンズや導光板により構成される。

そして、右眼用表示部１１および左眼用表示部１２は、右眼用画像光および左眼用画像光により、右眼用画像および左眼用画像をそれぞれ表示する。右眼用画像による反射光、および左眼用画像による反射光は、ユーザの右眼および左眼に入射して、ユーザに画像（文字情報ＷＤ）を視認させる。右眼用表示部１１および左眼用表示部１２は、例えば、ハーフミラー等の半透過型のレンズにより構成される。
そのため、本発明の表示部は、右眼用表示部１１、左眼用表示部１２、右眼用光学部品１３、左眼用光学部品１４、右眼用画像生成部２３、左眼用画像生成部２４により実現される。

右眼用カメラ２１は、ＨＭＤ１０を装着したユーザの右眼により視認される領域を撮像するようフレーム２０に固定されている。また、左眼用カメラ２２は、ＨＭＤ１０を装着したユーザの左眼により視認される領域を撮像するようフレーム２０に固定されている。右眼用カメラ２１および左眼用カメラ２２からの出力は、コントローラ３１に出力される。以下、右眼用カメラ２１により撮像される画像データを右眼周辺画像と、左眼用カメラ２２により撮像される画像データを左眼周辺画像とも記載する。

操作部２５は、操作ボタン等を備え、ユーザからの操作を受付ける。また、操作部２５は、コントローラ３１に接続されており、ユーザにより行われた操作をコントローラ３１に出力することができる。

通信ＩＦ３３は、表示装置１とネットワークＮＥを用いた通信を行う。そして、通信ＩＦ３３によるネットワークＮＥを用いた通信により、表示装置１から送信される文字情報ＷＤがＨＭＤ１０に取得される。そのため、通信ＩＦ３３は、本発明の受信部を実現する。

ビデオメモリ３２は、コントローラ３１によるワークエリアとして機能する。また、右眼用カメラ２１により撮像される右眼周辺画像と、左眼用カメラ２２により撮像される左眼周辺画像とは、ビデオメモリ３２に記録される。

コントローラ３１は、右眼用カメラ２１並びに左眼用カメラ２２からの入力、および、操作部２５からの入力に応じて、右眼用画像生成部２３、左眼用画像生成部２４に出力する右眼用画像および左眼用画像を制御する。コントローラ３１は、図示しないＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）を備える。そして、ＣＰＵがＲＯＭに記録されたプログラムを実行することで、コントローラ３１は、図３に示す部位（表示領域検出部３４、文字領域決定部３５、表示制御部３６）を機能的に備える。

図３は、コントローラ３１の機能を説明する機能ブロック図である。
表示領域検出部３４は、右眼用カメラ２１および左眼用カメラ２２を通じて取得した画像データ（右眼周辺画像、左眼周辺画像）をもとに、ＨＭＤ１０を装着したユーザに視認される表示装置１の位置を第１領域として検出する。例えば、表示領域検出部３４は、ビデオメモリに入力した右眼周辺画像と左眼周辺画像とに含まれる表示装置１の領域の座標を検出する。

また、表示領域検出部３４により検出された第１領域の座標は、文字領域決定部３５に出力される。文字領域決定部３５は、入力した第１領域の座標をもとに、通信ＩＦ３３を通じて取得された文字情報ＷＤを表示する右眼用表示部１１および左眼用表示部１２の位置である第２領域の座標を決定する。

そして、表示制御部３６は、文字領域決定部３５により決定された第２領域の座標をもとに、右眼用画像生成部２３および左眼用画像生成部２４に出力する右眼用画像および左眼用画像を生成する。そのため、右眼用画像生成部２３および左眼用画像生成部２４は、生成された右眼画像および左眼用画像をもとに、右眼用表示部１１、左眼用表示部１２に文字情報ＷＤを表示させる。また、表示制御部３６は、ユーザが操作部２５を操作している場合、操作入力を補正に加味する。

次に、表示装置１について説明を行う。
図４は、表示装置１の構成を示すブロック構成図である。
表示装置１は、ＣＰＵ３、ＲＯＭ４、ＲＡＭ５、チューナ６、通信ＩＦ７、表示パネル８を備える。表示装置１の各部は、バス９を通じて互いに接続されている。各部は筺体２の内部に収容されている。
例えば、表示装置１は、液晶型の表示パネル８を備える、テレビジョン受像機である。

通信ＩＦ７は、ＨＭＤ１０との間で所定のプロトコルに応じた通信を行う。また、ＲＯＭ４には、ＣＰＵ３が通信ＩＦ６を用いてＨＭＤ１０に文字情報ＷＤを送信するためのＯＳ４１や、アプリケーション４２が記録されている。

ＣＰＵ３は、チューナ６または通信ＩＦ７を通じてコンテンツを受信すると、このコンテンツから文字情報ＷＤを取得する。そして、取得した文字情報ＷＤを、通信ＩＦ７を通じて、ＨＭＤ１０に送信する。

（２）ペアリング方法
図５は、ＨＭＤ１０と表示装置１との間で行なわれるペアリング処理を説明する図である。図５（ａ）〜（ｃ）は、ペアリング処理中に表示装置１に表示される画面を示している。このペアリング処理は、表示装置１からＨＭＤ１０に文字情報ＷＤが送信される前に開始され、ユーザが表示装置１を操作することで実施される。このペアリング処理により、表示装置１から送信される文字情報ＷＤの種別が設定される。

ステップＳ１において、表示装置１は、通信を確立するための通信要求をブロードキャストする。この際、表示装置１の表示パネル８には、ペアリング中であることを示す画像が表示される（図５（ａ））。

次に、ステップＳ２において、表示装置１は、通信要求に対してレスポンスがあったＨＭＤ１０を使用機器として登録するか否かの確認画像を表示する（図５（ｂ））。ユーザが確認画面で表示したＨＭＤ１０を登録すると（図５（ｂ）では、ＨＭＤ１０ａ）、表示装置１は、このＨＭＤ１０との間で通信を確立させる。このとき、表示装置１とＨＭＤ１０との間で、ネットワークを接続するセキュリティーの設定等が行われる。

ステップＳ３において、表示装置１は、通信を確立したＨＭＤ１０に対して送信する文字情報ＷＤの選択を受付ける。図５（ｃ）では、表示装置１は２つのＨＭＤ（１０ａ、１０ｂ）を使用機器として登録している。そして、ユーザが面上で、ＨＭＤ１０ａに送信する字幕（文字情報ＷＤ）の種類を設定する。
以下、ペアリングが終了すると、表示装置１からＨＭＤ（１０ａ、１０ｂに対して文字情報ＷＤの送信が行われる。

（３）文字情報の表示方法
次に、ＨＭＤ１０が文字情報ＷＤを表示する手法を説明する。
図６は、ＨＭＤ１０を装着したユーザに視認される像を説明する図である。また、図７は、コントローラ３１が文字情報ＷＤを表示する際に実行する処理を示すフローチャートである。そして、図８は、コントローラ３１が文字情報ＷＤを表示する際に実行する処理を説明する図である。

図６（ａ）は、文字情報ＷＤが表示される前にＨＭＤ１０を装着したユーザにより視認される像を示す。また、図６（ｂ）は、文字情報ＷＤが表示された後にＨＭＤ１０を装着したユーザにより視認される像を示す。ＨＭＤ１０を装着したユーザは、右眼用表示部１１および左眼用表示部１２を通して前方の像が結像した図６（ａ）に示す像を視認しているものとする。この像には、装置１が図中中央に位置している。

ステップＳ１１では、コントローラ（表示領域検出部３４）３１は、右眼用カメラ２１からの右眼周辺画像をもとに右眼用検出画像を取得する。また、コントローラ（表示領域検出部３４）３１は左眼用カメラ２２からの左眼周辺画像をもとに、左眼用検出画像を取得する。右眼用検出画像と、左眼用検出画像とは、コントローラ３１が右眼周辺画像および左眼周辺画像の画素数をビデオメモリ３２の画素数に合わせて変換したものである。
図８（ａ）は、ステップＳ１１により取得された右眼用検出画像と左眼用検出画像とを示す。この右眼用検出画像と左眼用検出画像とには、ユーザの右眼または左眼で見える位置に対応して、表示装置１に対応する画素の領域である第１領域ＡＲ１が存在する。

ステップＳ１２では、コントローラ（表示領域検出部３４）３１は、取得した右眼用検出画像と左眼用検出画像から、表示装置１に対応する第１領域の座標を検出する。
表示領域検出部３４が第１領域ＡＲ１の座標を検出する手法の一例として、周知のエッジサンプリング処理を用いる。例えば、表示領域検出部３４は、右眼用検出画像を２値化し、第１領域ＡＲ１を構成する画素と周辺画素との境界を構成する画素を輪郭画素Ｅｇ（ｘ、ｙ）として検出する（図８（ｂ））。なお、図８（ｂ）では、第１領域ＡＲ１を構成する画素を斜線を付して示し、周辺画素と区別している。そして、輪郭画素Ｅｇ（ｘ、ｙ）により囲まれる領域を第１領域ＡＲ１の座標として検出する。
なお、説明を省略するが、左眼用検出画像に対しても同様の手法により第１領域ＡＲ１の座標が検出される。

ステップＳ１３では、コントローラ（文字領域決定部３５）３１は、ステップＳ１２で取得された第１領域の座標をもとに、右眼用検出画像と左眼用検出画像との文字情報ＷＤを表示する第２領域の座標を決定する。図８（ｃ）は、ステップＳ１２で決定された右眼用検出画像における第１領域ＡＲ１を点線で指名している。この第１の実施形態では、文字領域決定部３５は、第１領域ＡＲ１内に第２領域ＡＲ２の位置を決定する。即ち、ユーザが文字情報ＷＤを視認する際、前方に位置する表示装置１に文字情報ＷＤが重なって視認されるよう第２領域ＡＲ２の座標を決定する。

ここで、第１領域ＡＲ１内における第２領域ＡＲ２の位置は、ユーザが表示装置１を視認する際、文字情報ＷＤが表示パネル８に表示される画像に干渉しない位置であることが望ましい。そのため、図８（ｃ）では、第２領域ＡＲ２は、表示装置１における表示パネル８に対応する第１領域ＡＲ１における下部に位置している。これ以外にも、文字領域決定部３５が周知のエッジサンプリング処理を用いて第１領域ＡＲ１内で画像が表示されない領域を判定し、第２領域ＡＲ２を決定してもよい。
なお、説明を省略するが、左眼用検出画像に対しても同様の手法により第２領域ＡＲ２の座標が検出される。

ステップＳ１４では、コントローラ（表示制御部３６）３１は、通信ＩＦ３３を通じて取得された文字情報ＷＤから、右眼用画像と左眼用画像とを生成する。例えば、表示制御部３６は、文字情報ＷＤを複製して、右眼用画像生成部２３を駆動するための右眼用画像と、左眼用画像生成部２４を駆動するための左眼用画像を生成する。

図９は、文字情報ＷＤから生成された右眼用画像と左眼用画像とを示す図である。図９（ａ）は、補正前の右眼用画像と左眼用画像とを示す。また、図９（ｂ）は、補正後の右眼用画像と左眼用画像とを示す。
図９（ａ）に示すように、右眼用画像および左眼用画像には、文字情報ＷＤに対応する文字列『おはよう』を構成する低階調の文字画素Ｇｗと、情報を有さない背景画素Ｇｅとで構成される。また、右眼用画像および左眼用画像の画素数はビデオメモリ３２の画素数と同数である。即ち、右眼用画像生成部２３または左眼用画像生成部２４を構成する液晶素子のピクセル数と同数となっている。

ステップＳ１５では、コントローラ（表示制御部３６）３１は、右眼用画像および左眼用画像に含まれる文字列の位置を、ステップＳ１３において決定された第２領域ＡＲ２の座標となるよう補正し、右眼用画像生成部２３と、左眼用画像生成部２４とに出力する。そのため、図９（ｂ）では、図９（ａ）と比べて右眼用画像と左眼用画像に含まれる文字画素Ｇｗの座標が、低い位置に変更されている。

以下、コントローラ３１から出力された右眼用画像により右眼用画像生成部２３が駆動し、右眼用表示部１１に文字情報ＷＤを表示させる。同様に、コントローラ３１から出力された左眼用画像により左眼用画像生成部２４が駆動し、左眼用表示部１２に文字情報ＷＤを表示させる。そのため、ＨＭＤ１０を装着したユーザは、右眼用表示部１１および左眼用表示部１２を通して前方の像（表示装置１）が合成された図６（ｂ）に示す像を視認する。この像には、装置１の表示パネル８に文字列である『おはよう』が位置している。

以下、表示装置１からの文字情報ＷＤの入力が継続していれば（ステップＳ１６：ＮＯ）、コントローラ３１は、ステップＳ１１に戻り処理を繰返す。一方、表示装置１からの文字情報ＷＤの入力が終了すれば（ステップＳ１６：ＹＥＳ）、コントローラ３１は、処理を終了する。

以上説明したようにこの第１の実施形態では、ユーザが表示装置１を視認する第１領域ＡＲ１に応じて、文字情報ＷＤを表示する第２領域ＡＲ２が決定されるため、ユーザの視聴を妨げることなく、画像に同期して表示される文字情報ＷＤを表示させることができる。
また、表示装置１と一体で文字情報ＷＤを表示させるため、ユーザに違和感を覚えせること無く文字情報を視聴させることができる。

２．第２の実施形態：
ＨＭＤ１０により視認される文字情報ＷＤの位置を、ユーザが操作部２５を操作して調整するものであってもよい。
図１０は、ユーザが操作部２５を操作した場合にコントローラ３１が実行する処理を説明するフローチャートである。また、図１１は、ユーザが操作部２５を操作する際にＨＭＤ１０に表示されるアイコンを説明する図である。
図１０に示すフローチャートは、例えば、第１の実施形態で示す図７のステップＳ１５以下において、ＨＭＤ１０に文字情報ＷＤが表示された後に実行される処理である。

ユーザが操作部２５を操作して、文字情報ＷＤの位置の調整を開始する入力を行うと（ステップＳ２１：ＹＥＳ）、ステップＳ２２では、コントローラ（表示制御部３６）３１は、ＨＭＤ１０に操作用アイコンを表示させる。図１１（ａ）に示すアイコン２０１は、ユーザに文字情報ＷＤの位置の変更を視覚的に補助するアイコンである。また、アイコン２０１は、文字情報ＷＤを左右または上下に移動させる際に表示される。

ユーザがアイコン２０１の向きを視認しつつ、操作部２５を操作すると（ステップＳ２３：ＹＥＳ）、ステップＳ２４では、表示制御部３６は、文字情報ＷＤを示す右眼用画像と左眼用画像とに含まれる文字側Ｇｗの座標を、操作部２５からの入力に応じて変更する。そのため、ユーザに視認される文字情報ＷＤの位置が変更される。

ユーザが操作部２５を操作して、文字情報ＷＤの位置の調整を終了する入力を行うと（ステップＳ２５：ＹＥＳ）、ステップＳ２６では、コントローラ３１は、アイコン２０１の表示を終了する。無論、ユーザが操作部２５を操作して、文字情報ＷＤの位置の調整を終了する入力を行わなければ（ステップＳ２５：ＮＯ）、コントローラ３１は、アイコン２０１の表示を継続する（ステップＳ２３に戻る）。

また、コントローラ３１は、文字情報ＷＤの大きさを変更するものであってもよい。図１１（ｂ）は、ユーザが操作部２５を操作して文字情報ＷＤの大きさを調整する際に表示されるアイコン２０２を示す。アイコン２０２を視認しつつユーザは操作部２５を操作して文字情報ＷＤのサイズを変更する。
更に、後述するように、ＨＭＤ１０により立体視画像を視認する場合に、文字情報ＷＤの奥行き感を調整するものであってもよい。
そして、コントローラ３１は、文字情報ＷＤの向きやサイズのみを調整可能とするのではなく、文字情報ＷＤの色を変更可能とするものであってもよい。

以上説明したようにこの第２の実施形態では、自動で設定された文字情報ＷＤの視認位置をユーザが手動で調整することができるため、文字情報ＷＤの使用をより使いやすいものとすることができる。

３．第３の実施形態：
文字情報ＷＤが表示される位置は、表示装置１が視認される領域の内側に限定されない。例えば、ユーザにより視認される表示装置１のサイズや、表示を行う文字情報ＷＤのサイズに応じて、第２領域ＡＲ２を決定するものであってもよい。

図１２は、コントローラ３１が実行する処理を示すフローチャートである。この図１２に示すフローチャートでは、図７のステップＳ１３において実行される処理である。また、図１３は、ＨＭＤ１０を装着したユーザに視認される像を説明する図である。

ステップＳ１３１では、コントローラ（文字領域決定部３５）３１は、右眼用検出画像および左眼用検出画像に含まれる第１領域ＡＲ１のサイズを取得する。第１領域ＡＲ１のサイズは、第１領域ＡＲ１を構成する画素Ｇ（ｘ、ｙ）の数をもとに取得される。例えば、表示領域検出部３４により取得される。

ステップＳ１３２では、コントローラ３１は、文字情報ＷＤのサイズを取得する。例えば、コントローラ３１は、文字情報ＷＤの情報量や文字情報ＷＤに含まれる文字数に応じて文字情報ＷＤのサイズを判断する。

ステップＳ１３３では、ステップＳ１３１で取得した第１領域ＡＲ１のサイズを閾値Ｓ１と比較する。閾値Ｓ１は、予め設定された領域のサイズを示す。第１領域ＡＲ１のサイズが閾値Ｓ１以下であれば（ステップＳ１３３：ＮＯ）、コントローラ３１は、ステップＳ１３６に進む。

ステップＳ１３６では、コントローラ３１は、第２領域ＡＲ２の位置（座標）を第１領域ＡＲ１の外部に決定する。この場合、ユーザによって視認される表示装置１のサイズが小さいため、コントローラ３１は、文字情報ＷＤを表示装置１が視認される位置に重ねて表示しないようにする。例えば、図１３（ａ）に示すように、ユーザによりＨＭＤ１０を通して視認される像には、表示装置１の図中右隣に文字情報ＷＤが位置する。

また、第１領域ＡＲ１のサイズが閾値Ｓ１以上であっても（ステップＳ１３３：ＹＥＳ）、文字情報ＷＤのサイズが閾値Ｓ２以上であれば（ステップＳ１３４：ＮＯ）、コントローラ３１は、ステップＳ１３６に進む。即ち、この場合、文字情報ＷＤが多数の文字からなるため、コントローラ３１は、文字情報ＷＤを表示装置１が視認される位置に重ねて表示しないようにする。例えば、図１３（ｂ）に示すように、ユーザによりＨＭＤ１０を通して視認される像には、表示装置１の図中右隣に文字情報ＷＤが位置する。

そして、第１領域ＡＲ１のサイズが閾値Ｓ１以上であり（ステップＳ１３３：ＹＥＳ）、文字情報ＷＤのサイズが閾値Ｓ２以下であれば（ステップＳ１３４：ＹＥＳ）、コントローラ３１は、ステップＳ１３５に進む。即ち、この場合、コントローラ３１は、文字情報ＷＤを表示装置１が視認される位置に重ねて表示させる。そのため、例えば、図１３（ｃ）に示すように、ユーザによりＨＭＤ１０を通して視認される像には、表示装置１の内部（表示パネル８）に文字情報ＷＤが位置する。

以上、説明したようにこの第３の実施形態では、ＨＭＤ１０を装着したユーザにより視認される表示装置１の大きさや、文字情報ＷＤのサイズに応じて、文字情報ＷＤを表示させる位置を変化させるため、ユーザによる表示装置の視聴を阻害させることなく文字情報ＷＤを視認することができる。

４．その他の実施形態：
ＨＭＤ１０は、立体視画像を視聴するものであってもよい。ＨＭＤ１０が２つのカメラ部（右眼用カメラ２１、左眼用カメラ２２）を有する場合、視差の伴う右眼周辺画像と左眼周辺画像とを取得することができる。そのため、右眼周辺画像と左眼周辺画像との視差をもとに、文字情報ＷＤを立体視させるものであってもよい。

ＨＭＤ１０が、２つの画像生成部（右眼用画像生成部２３、左眼用画像生成部２４）を備えることは一例に過ぎない。例えば、ＨＭＤ１０は、１つの画像生成部のみを有し、生成した画像光を右眼用表示部１１と左眼用表示部１２の両方に表示させる構成でもよい。この場合、本発明は、コントローラ３１は、例えば、右側周辺画像、右目用検出画像、右眼用画像のみで本発明の処理が行われる。また、１つの画像生成部と、右眼用表示部１１または左眼用表示部１２のいずれかのみを有するＨＭＤ１０であってもよい。

さらに、コントローラ３１が有する、表示領域検出部３４、文字領域決定部３５、表示制御部３６をプログラムの処理により実現することは一例に過ぎない。例えば、表示領域検出部３４、文字領域決定部３５、表示制御部３６を、コントローラ３１が有するハードウェアにより実現するものであってもよい。

なお、本発明は上記実施例に限られるものでないことは言うまでもない。当業者であれば言うまでもないことであるが、
・上記実施例の中で開示した相互に置換可能な部材および構成等を適宜その組み合わせを変更して適用すること
・上記実施例の中で開示されていないが、公知技術であって上記実施例の中で開示した部材および構成等と相互に置換可能な部材および構成等を適宜置換し、またその組み合わせを変更して適用すること
・上記実施例の中で開示されていないが、公知技術等に基づいて当業者が上記実施例の中で開示した部材および構成等の代用として想定し得る部材および構成等と適宜置換し、またその組み合わせを変更して適用すること
は本発明の一実施例として開示されるものである。

１…表示装置、２…筺体、３…ＣＰＵ、４…ＲＯＭ、５…ＲＡＭ、６…チューナ、７…通信ＩＦ、８…表示パネル、９…バス、１０…ヘッドマウントディスプレイ（ＨＭＤ）、１１…右眼用表示部、１２…左眼用表示部、１３…右眼用光学部品、１４…左眼用光学部品、２０…フレーム、２１…右眼用カメラ、２２…左眼用カメラ、２３…右眼用画像生成部、２４…左眼用画像生成部、２５…操作部、３０…制御ユニット、３１…コントローラ、３２…ビデオメモリ、３３…通信ＩＦ、３４…表示領域検出部、３５…文字領域決定部、３６…表示制御部、４１…ＯＳ、４２…アプリケーション、１００…視聴システム

Claims (8)

1. 透過型の表示部を有するヘッドマウントディスプレイであって、
   表示装置から文字情報を受信する受信部と、
   前記表示部を通してユーザに視認される写像を画像データとして取得するカメラ部と、
   取得した前記画像データ内の前記表示装置の位置を第１領域として検出する表示領域検出部と、
   検出された前記第１領域に応じて、受信した前記文字情報を表示する前記表示部の位置である第２領域を決定する文字領域決定部と、
   前記表示部に対して、決定された前記第２領域に受信した前記文字情報を表示させる表示制御部と、を有することを特徴とするヘッドマウントディスプレイ。
2. ユーザから、前記表示部に表示された文字情報の位置または大きさの調整を受付ける操作部を有し、
   前記表示制御部は、受付けた前記調整に応じて、前記表示部に表示された前記文字情報の位置または大きさを変更する、ことを特徴とする請求項１に記載のヘッドマウントディスプレイ。
3. 前記文字領域決定部は、前記第１領域の内部に前記第２領域の位置を決定する、ことを特徴とする請求項１または請求項２のいずれかに記載のヘッドマウントディスプレイ。
4. 前記文字領域決定部は、前記第１領域のサイズに応じて、前記第２領域の位置を決定する、ことを特徴とする請求項１または請求項２のいずれかに記載のヘッドマウントディスプレイ。
5. 前記文字領域決定部は、前記第１領域のサイズが小さければ、前記第２領域の位置を前記第１領域の外側に決定する、ことを特徴とする請求項４に記載のヘッドマウントディスプレイ。
6. 前記文字領域決定部は、前記文字情報のサイズが大きければ、前記第２領域の位置を前記第１領域の外側に決定する、ことを特徴とする請求項４に記載のヘッドマウントディスプレイ。
7. 前記表示制御部は、前記表示部に前記文字情報を立体視表示させる、ことを特徴とする請求項１から請求項６のいずれか一項に記載のヘッドマウントディスプレイ。
8. 透過型の表示部を有するヘッドマウントディスプレイと、前記ヘッドマウントディスプレイに文字情報を出力する表示装置とで構成された視聴システムであって、
   前記ヘッドマウントディスプレイは、
   表示装置から文字情報を受信する受信部と、
   前記表示部を通してユーザに視認される写像を画像データとして取得するカメラ部と、
   取得した前記画像データ内の前記表示装置の位置を第１領域として検出する表示領域検出部と、
   検出された前記第１領域に応じて、受信した前記文字情報を表示する前記表示部の位置である第２領域を決定する文字領域決定部と、
   前記表示部に対して、決定された前記第２領域に受信した前記文字情報を表示させる表示制御部と、を有することを特徴とする視聴システム。

Images