JP2004289527A - 立体画像表示装置 - Google Patents
立体画像表示装置 Download PDFInfo
- Publication number
- JP2004289527A JP2004289527A JP2003079582A JP2003079582A JP2004289527A JP 2004289527 A JP2004289527 A JP 2004289527A JP 2003079582 A JP2003079582 A JP 2003079582A JP 2003079582 A JP2003079582 A JP 2003079582A JP 2004289527 A JP2004289527 A JP 2004289527A
- Authority
- JP
- Japan
- Prior art keywords
- stereoscopic image
- image data
- storage unit
- data storage
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Stereoscopic And Panoramic Photography (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
【課題】立体視における適正な視差には個人差があり、長時間の立体視はユーザに不快感を与えることがある。
【解決手段】画像提供部１０８が立体画像を提供するに際して、視点画像取得部１０２は適切な視差量に基づいて視点画像を取得する。視差量データ格納部１０６はユーザ毎に登録された視差量を格納するため、視点画像取得部１０２はこの視差量データに応じて、ユーザ毎に適正な視差を決定することが出来る。また、立体感調整部３００が、観察時間などの情報を適宜検出することにより、ユーザが立体視している最中にも、視点画像取得部１０２は状況に応じて適正な視差に基づく視点画像を取得することが出来る。
【選択図】 図４
【解決手段】画像提供部１０８が立体画像を提供するに際して、視点画像取得部１０２は適切な視差量に基づいて視点画像を取得する。視差量データ格納部１０６はユーザ毎に登録された視差量を格納するため、視点画像取得部１０２はこの視差量データに応じて、ユーザ毎に適正な視差を決定することが出来る。また、立体感調整部３００が、観察時間などの情報を適宜検出することにより、ユーザが立体視している最中にも、視点画像取得部１０２は状況に応じて適正な視差に基づく視点画像を取得することが出来る。
【選択図】 図４
Description
【０００１】
【発明の属する技術分野】
本発明は、立体画像表示技術、とくに、視差画像をもとに立体画像を生成または表示する技術に関する。
【０００２】
【従来の技術】
近年、ネットワークインフラストラクチャーの未整備が問題視されてきたが、ブロードバンドへの移行期を迎え、むしろ、広い帯域を有効活用するコンテンツの種類や数の少なさが目立ち始めている。映像はいつの時代でも、最も重要な表現手段であったが、いままでの取り組みの多くは表示品質やデータ圧縮率の改善に関するものであり、それらに比べると、表現の可能性自体を広げる技術的な取り組みは、後手にまわっている感がある。
【０００３】
そうした中で、立体画像表示（以下、単に「立体表示」という）は、以前からいろいろ研究され、劇場用途や特殊な表示装置を利用する、ある程度限られた市場で実用化されてきた。今後は、より臨場感の溢れるコンテンツの提供を目指してこの方面の研究開発が加速し、個人の利用者が家庭でも立体表示を楽しむ時代が来るものと思われる（特許文献１）。
【特許文献１】
特開２００３−００９１８３号公報
【発明が解決しようとする課題】
そうした流れの中にあって、立体表示には以前よりいくつかの課題が指摘されている。例えば、立体感を創生する原因となる視差の適正化が難しい。もともと、本当に三次元のオブジェクトを映し出しているのではなく、その映像を左右両目に対して画素単位でずらして投じているのであり、その人工的な立体感に自然な感じをもたせるのは容易ではない。
【０００４】
また、視差の付けすぎも問題になることがあり、立体画像の観察者（以下、単に「利用者」ともいう）によっては、軽い不快感を訴える場合がある。もちろんこれには、立体表示だけではなく、表示されているシーンと自己の周囲の状況ないし感覚が一致しないなど、種々の要因がある。
【０００５】
本発明はこうした背景に鑑みてなされたものであり、その目的は、立体画像の観察者の状況に応じて適切な立体表示をすることにある。別の目的は、観察環境に応じて適切な立体表示をすることにある。更に別の目的は、立体画像の性質に応じて適切な立体表示をすることにある。
【０００６】
【課題を解決するための手段】
本発明のある態様は、立体画像表示装置である。この装置は、立体画像データを格納する立体画像データ格納部と、利用者ごとの視差量データを格納する視差量データ格納部と、視差量データ格納部に格納されている視差量データに基づいて、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を取得する視点画像取得部を含むことを特徴とする。
【０００７】
「立体画像データ」とは、立体画像の元となるデータである。立体画像データは、あるオブジェクトを複数の視点から捉えた画像であってもよいし、ポリゴンデータのように、立体を三次元的に再現するためのデータであってもよい。「視点画像」とは、ある三次元のオブジェクトを、所定の視点から捉えた二次元の画像をいう。「視差」とは、立体感を生むためのパラメータであり、いろいろな定義が可能だが、一例として視点画像間の同じ点を表す画素のシフト量で表現できる。また、視差については、特にその大きさを表す意味で使用する場合には、「視差量」とよぶ。視点画像の取得は、立体画像データから、所定の視差量に基づいた視点画像を生成することによってなされてもよいし、あらかじめ用意された複数の視点画像のなかから適切な２枚を選択することによってなされてもよい。
【０００８】
利用者ごとに適正な視差量を登録しておくことで、各々に最適な視差で立体表示できる。また、利用の履歴に応じて、利用者毎の視差量を随時調整してもよい。ここで適正視差は範囲指定してもよい。適正視差の特定は、利用者から最も近くに見えるオブジェクトの視差として許容できる最大値で行ってもよい。
【０００９】
この装置は、利用者に質問を提示する質問提示部と、質問への回答に基づいて、視差量データ格納部に格納すべき、適正な視差量データを利用者について特定する視差量データ特定部を更に含んでもよい。
【００１０】
質問は、利用者の年齢、性別、車に酔いやすいか否か、運動を定期的にやっているか、部屋は狭いかなど、所定の項目について利用者に関する情報を問診的に取得するために行われる。たとえば、一般に高齢者は視差量を大きく設定した場合に立体視をしにくいという経験則がある。また、車に酔いやすい体質の利用者にとっては、視差量の変化が大きな立体表示は不快感を伴うことが多い。
【００１１】
本発明の実施の態様によれば、利用者は、質問に回答するだけで、自分にとって適正な視差量を設定することが出来る。また、利用者の状況に応じて視差を調整できるために、安全対策の面でも有効である。たとえば、利用者が高齢者である場合には、立体画像による心理的な圧迫を緩和するため、オブジェクトを利用者に対して近置させすぎないように処置する必要性が考えられる。また、この質問方式によって視差量を設定したあとでも、利用者がさらに視差量を微調整できてもよい。
【００１２】
この装置は、異なる視差に対応する複数の視点画像をもとに表示された立体画像に対する利用者の応答を取得する視差応答取得部と、取得された応答に基づいて、視差量データ格納部に格納すべき、適正な視差量データを特定する視差量データ特定部を更に含んでもよい。
【００１３】
視差応答取得部は、例えばＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）として提供され、まず視点画像間の視差を変えながら表示する。ユーザは自分が好む立体感になったとき、ボタン操作などによってその旨を入力する。あるいは、視差の異なるいくつかの立体画像を用意して、その候補の中から利用者が選択してもよい。あるいは、利用者は視差量をそのまま数値などで入力してもよい。
【００１４】
本発明の別の態様も、立体画像表示装置である。この装置は、立体画像データを格納する立体画像データ格納部と、利用者が立体画像を観察している時間を検出する観察時間検出部と、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、観察時間検出部が検出した時間に基づいて、適宜、その視差量を調整して取得する視点画像取得部を含むことを特徴とする。
【００１５】
「観察時間」とは、利用者が立体画像を観察をしている時間の長さ（以下、「観察期間」とよぶ）でもよいし、立体画像を観察している時刻（以下、「観察時刻」とよぶ）でもよい。たとえば、夜型の生活をしている利用者にとって、早朝は活動時間ではない。このように利用者の生活バイオリズムまで考慮した上で、観察時刻をパラメータとして視差量を調整することにより、より適正な視差量の値を特定できる。なお、観察期間は、観察を継続している時間や観察をしている時間の総合計などの期間的な概念である。
【００１６】
この装置の視点画像取得部は、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、利用者が立体画像を観察している時間が長いほど、視差量を小さくして取得することとしてもよい。
【００１７】
観察期間が長いほど、利用者は立体視により疲労が蓄積する。そのため、観察期間が長いほど視差量を減少させることにより、利用者の立体視に伴う負担を軽減できる。
【００１８】
本発明の更に別の態様も、立体画像表示装置である。この装置は、立体画像データを格納する立体画像データ格納部と、利用者が立体画像を観察している時間を検出する観察時間検出部と、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、観察時間検出部が検出した時間に基づいて、適宜、その表示サイズを調整して取得する視点画像取得部を含むことを特徴とする。
【００１９】
「表示サイズ」とは、立体表示を行う画面の面積、縦幅、横幅のいずれか、またはそれらいずれかの組み合わせをいう。たとえば、立体表示画面の面積を縮小させることにより、利用者の立体視に伴う負担を軽減できる。
【００２０】
この装置の視点画像取得部は、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する視点画像を、利用者が立体画像を観察している時間が長いほど、表示サイズを小さくして取得することとしてもよい。
【００２１】
本発明の更に別の態様も、立体画像表示装置である。この装置は、立体画像データを格納する立体画像データ格納部と、利用者が立体画像を観察している観察環境を計測する観察環境計測部と、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、観察環境計測部が計測した観察環境に関する情報に基づいてその視差量を調整して取得する視点画像取得部を含むことを特徴とする。
【００２２】
「観察環境」とは、利用者が立体視を行っている外界の状況をいう。具体的には、観察環境計測部は、利用者が立体視を行っている部屋の明るさや温度、湿度、騒音、気圧、などのパラメータを計測することにより、観察環境の評価を行う。
【００２３】
この装置の視点画像取得部は、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、利用者が立体画像を観察している環境が明るいほど視差量を小さくして取得することとしてもよい。
【００２４】
一般に周りが明るいほど、立体視による疲労が大きくなるという経験則がある。したがって、周りが明るいほど視差量を小さくすることで、立体視に伴う利用者の負担を軽減できる。
【００２５】
本発明の更に別の態様も、立体画像表示装置である。この装置は、立体画像データを格納する立体画像データ格納部と、利用者が立体画像を観察している観察環境を計測する観察環境計測部と、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、観察環境計測部が計測した観察環境に関する情報に基づいてその表示サイズを調整して取得する視点画像取得部を含むことを特徴とする。
【００２６】
この装置の視点画像取得部は、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、利用者が立体画像を観察している環境が明るいほど表示サイズを小さくして取得することとしてもよい。
【００２７】
本発明の更に別の態様も、立体画像表示装置である。この装置は、立体画像データを格納する立体画像データ格納部と、利用者の疲労を推定する疲労度計測部と、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、疲労度計測部が推定した利用者の疲労に関する情報に基づいてその視差量を調整して取得する視点画像取得部を含むことを特徴とする。
【００２８】
利用者の疲労度は、利用者の身体情報を元に推定される。具体的には、疲労度計測部は、瞬目、瞳孔径、目の充血具合、鼻腔の温度などを計測し、これらの計測値を元に利用者の疲労度を推定する。
【００２９】
本発明の更に別の態様も、立体画像表示装置である。この装置は、立体画像データを格納する立体画像データ格納部と、利用者の疲労を推定する疲労度計測部と、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、疲労度計測部が推定した利用者の疲労に関する情報に基づいてその表示サイズを調整して取得する視点画像取得部を含むことを特徴とする。
【００３０】
本発明の更に別の態様も、立体画像表示装置である。この装置は、立体画像データを格納する立体画像データ格納部と、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、立体画像データ格納部に格納される立体画像データの性質に基づいてその視差量を調整して取得する視点画像取得部を含むことを特徴とする。
【００３１】
「立体画像データの性質」とは、オブジェクトの数、形状、大きさ、色彩およびその変化、オブジェクトの動きの速さ、動きのパターンなど、この装置が提供する立体画像コンテンツの内容をいう。立体画像データの性質によっては、たとえば観察期間が同じであっても、一般的に、利用者の疲労度は異なる。視差量を決定する上で、この性質を表すパラメータは、立体画像データを立体画像データ格納部に格納するときに併せて登録されてもよい。あるいは、立体表示中に、動きの激しい場面とおだやかな場面に応じて、立体画像データの性質を表すパラメータを変更してもよい。
【００３２】
本発明の更に別の態様も、立体画像表示装置である。この装置は、立体画像データを格納する立体画像データ格納部と、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、立体画像データ格納部に格納される立体画像データの性質に基づいてその表示サイズを調整して取得する視点画像取得部を含むことを特徴とする。
【００３３】
立体画像データの性質によっては、画面の縦横比率を変更することが、利用者の立体視に伴う負担軽減に寄与する場合もある。
【００３４】
なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。
【００３５】
【発明の実施の形態】
図１は利用者３０、スクリーン３２、立体表示される再生オブジェクト３４の位置関係を示す。利用者３０の眼間距離がＥ、利用者３０とスクリーン３２の距離がＤ、表示されたときの再生オブジェクト３４の幅がＷである。再生オブジェクト３４は立体表示されているため、スクリーン３２よりも近くに感知される画素、すなわち近置される画素と、スクリーン３２よりも遠くに感知される画素、すなわち遠置される画素を有する。視差が付けられていない画素はスクリーン３２上でちょうど両目から同じ位置に見えるため、スクリーン３２上に感知される。
【００３６】
図２は、図１の理想的な表示を生成するための撮影系を示す。二台のカメラ２２、２４の間隔をＥとし、それらからオブジェクト２０を見たときの光軸交差位置までの距離をＤとし、スクリーン３２と同じ幅を見込む画角で、幅が現実にＷであるオブジェクト２０を撮影すれば、二つのカメラから２つの視点画像が得られる。これを図１のスクリーン３２へ表示すれば、図１の理想状態が実現する。
【００３７】
図３は本実施の態様における立体画像表示装置１０のハードウェア構成を示す。サーバ装置１００は、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）１６を介して接続された第１クライアント端末１４ａおよび第２クライアント端末１４ｂなどの複数の端末（以下、単に「クライアント端末１４」という）に、サービスを提供する。利用者３０はクライアント端末１４を介して立体視を行ってもよいが、サーバ装置１００の画面表示機能により立体視を行うことができてもよい。また、クライアント端末１４はＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）１２を介してサーバ装置１００と接続されてもよい。
【００３８】
サーバ装置１００およびクライアント端末１４は、ハードウェア的には、コンピュータのＣＰＵをはじめとする素子で実現でき、ソフトウェア的にはデータ送受信機能のあるプログラム等によって実現されるが、以下に説明する図４等ではそれらの連携によって実現される機能ブロックを描いている。したがって、これらの機能ブロックはハードウェア、ソフトウェアの組合せによっていろいろなかたちで実現できることは、当業者には理解されるところである。
【００３９】
図４は、立体画像表示装置１０の機能ブロック図である。ユーザインタフェース処理部１２０は利用者３０とのユーザインタフェースに関する処理を行う。ユーザインタフェース処理部１２０のうち、入力部１１０は利用者３０からの操作をはじめとする外部からの入力を受け付ける。また、画像提供部１０８は利用者３０に対して画像の提供を行う。立体画像データ登録部１１２は入力部１１０を介して立体画像データの登録を行う。登録された立体画像データは、立体画像データ格納部１０４に格納される。
【００４０】
視差量データ登録部２００は、入力部１１０を介して、利用者３０ごとに視差量データを特定し、これを視差量データ格納部１０６に格納する。視差量データ登録部２００の内部の機能ブロックについては後に詳述する。視点画像取得部１０２は、立体画像データ格納部１０４に格納される立体画像データから、視差量データ格納部１０６に格納される視差量データに基づいて、視差の異なる２枚の視点画像を取得する。画像提供部１０８は、視点画像取得部１０２が取得した２枚の視点画像を元に利用者３０に立体画像を提供する。
【００４１】
立体感調整部３００は、入力部１１０を介して、利用者３０や観察環境などの状態を検出する。視点画像取得部１０２は、立体感調整部３００が検出した各種の情報も考慮して、視差や表示サイズの値を特定し、立体画像データ格納部１０４から視点画像の取得を行う。立体感調整部３００の内部の機能ブロックについても後に詳述する。
【００４２】
図５は視差量データ登録部２００の内部の機能ブロック図である。視差量データ登録部２００は、利用者３０ごとに視差量データをに特定し視差量データ格納部１０６に格納する。質問データ格納部２０２は利用者３０への質問を格納する。質問提示部２０４は質問データ格納部２０２が格納する質問を利用者３０に提示し、回答を取得する。視差量データ特定部２０８は、質問提示部２０４が取得した回答を元に、視差量データ格納部１０６に格納すべき視差量の特定を行う。視差応答取得部２０６は、立体画像データ格納部１０４に格納されている立体画像データを利用して、立体表示に対する利用者３０の応答を取得する。この場合も、視差量データ特定部２０８は、視差応答取得部２０６が取得した利用者３０の応答を元に、視差量データ格納部１０６に格納すべき視差量の特定を行う。
【００４３】
図６は立体感調整部３００の内部の機能ブロック図である。立体感調整部３００は、利用者３０や観察環境などの状態を検出する。疲労度計測部３５０は利用者３０の疲労を推定するために、利用者３０から身体情報を取得する。そして、取得した情報を適切な指数に変換して視点画像取得部１０２に伝達する。観察時間検出部４００は、利用者３０の観察時間を検出する。観察時間検出部４００のうち、観察時刻検出部４０２は観察時刻を検出する。また、観察期間検出部４０４は観察期間を検出する。観察時刻検出部４０２や観察期間検出部４０４から得られた情報は判断部４０６に送られる。判断部４０６はこれらの情報を適切な指数に変換して視点画像取得部１０２に伝達する。
【００４４】
観察環境計測部４５０は観察環境の計測を行う。観察環境計測部４５０のうち、明るさ検出部４５２は、利用者３０が立体画像を観察する環境の明るさを検出する。温度検出部４５４は、観察環境における温度を検出する。音声検出部４５６は観察環境における騒音などの音を検出する。判断部４５８は明るさ検出部４５２、温度検出部４５４および音声検出部４５６から得られた情報を適切な指数に変換して視点画像取得部１０２に伝達する。視点画像取得部１０２は立体感調整部３００から得られた各種の指数を元に視点画像の視差や、立体画像の表示サイズを調整することは先述の通りである。
【００４５】
図７（ａ）、図７（ｂ）は、視差応答取得部２０６による視差応答を取得するプロセスにおいてそれぞれ表示された左眼画像５００、右眼画像５０２を示す。それぞれの画像には５個の黒丸が表示されており、上にいくほど近置かつ大きな視差、下へいくほど遠置かつ大きな視差が付けられている。
【００４６】
図８はこれら５個の黒丸を表示したとき、利用者３０に感知される距離感を模式的に示す。利用者３０はこれら５個の距離感の範囲を「適正」と応答しており、この応答を視差応答取得部２０６が取得する。同図では、視差が異なる５個の黒丸が同時に、または順に表示され、許容できる視差であるか否かを利用者３０が入力していく。一方、図９では表示自体は１個の黒丸で行うが、その視差を連続的に変更し、利用者３０が遠置と近置それぞれの方向において許容する限界にきたとき応答する。応答は通常のキー操作、マウス操作、音声による入力等、それ自体は既知の技術を利用すればよい。
【００４７】
図１０は、利用者３０が視差量を登録してから立体表示し、これを終了するまでのフローチャートを示す。利用者３０は、視差量データ登録部２００により、視差量データ格納部１０６に自分の視差量データを登録する（Ｓ１０）。視点画像取得部１０２は、立体表示をするにあたって、表示サイズを特定し（Ｓ１２）、適正な視差を特定する（Ｓ１４）。そして、視点画像取得部１０２は、これに基づいて、立体画像データ格納部１０４より適切な視点画像を取得し、立体画像提供部１０８が利用者３０に立体表示をする（Ｓ１６）。立体表示が終了した場合、または利用者３０が立体画像の観察を終了させた場合には（Ｓ１８のＹ）、処理は終了する。
【００４８】
立体表示を終了しない場合には（Ｓ１８のＮ）、立体感調整部３００が取得する各種の情報を元に、視点画像取得部１０２は、表示サイズを変更するか否かを判断する（Ｓ２０）。変更する場合には（Ｓ２０のＹ）、処理はＳ１２に戻る。表示サイズの変更を行わない場合には（Ｓ２０のＮ）、視点画像取得部１０２は、立体感調整部３００が取得する各種の情報を元に、同じく視差を変更するか否かを判断する（Ｓ２２）。変更する場合には（Ｓ２２のＹ）、処理はＳ１４に戻る。変更しない場合には（Ｓ２２のＮ）、処理はＳ１６に戻る。
【００４９】
以上、実施の形態においては、利用者があらかじめ、自分にとって適正な視差量を登録することが出来る。したがって、パーソナルユースの立体表示を行う上で、個人差に対応した立体表示が可能である。また、立体画像表示装置は、利用者が立体視をしている最中においても、その観察時間や利用者の疲れなどを判断し、適宜、視差量や表示サイズを調整している。このため、立体視に伴う利用者の疲労を軽減できる。これにより、利用者に負担をかけずに、長い時間、立体表示をすることが出来る。
【００５０】
以上、本発明を実施の形態をもとに説明した。実施の形態は例示であり、それらの各構成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。
【００５１】
【発明の効果】
本発明によれば、立体画像の観察者の状況に応じて適切な立体表示をすることができる。また、本発明によれば、観察環境に応じて適切な立体表示をすることができる。また、本発明によれば、立体画像の性質に応じて適切な立体画像表示をすることができる。
【図面の簡単な説明】
【図１】理想的な立体視ができているユーザ、スクリーン、再生オブジェクトの位置関係を示す図である。
【図２】図１の状態を実現する撮影系の例を示す図である。
【図３】本実施の形態に係る立体画像表示装置の構成図である。
【図４】本実施の形態に係る立体画像表示装置の機能ブロック図である。
【図５】本実施の形態に係る視差量データ登録部の機能ブロック図である。
【図６】本実施の形態に係る立体感調整部の機能ブロック図である。
【図７】図７（ａ）、図７（ｂ）は、それぞれ、立体画像表示装置の立体感調整部によって表示される左眼画像と右眼画像を示す図である。
【図８】立体画像表示装置の立体感調整部によって表示される、異なる視差をもつ複数のオブジェクトを示す図である。
【図９】立体画像処理装置の立体感調整部によって表示される、視差が変化するオブジェクトを示す図である。
【図１０】本実施の形態に係る立体画像表示装置において、ユーザが視差量を登録してから立体画像を表示し、これを終了するまでのフローチャートである。
【符号の説明】
１０ 立体画像表示装置、１０２ 視点画像取得部、１０４ 立体画像データ格納部、１０６ 視差量データ格納部、２００ 視差量データ登録部、２０４ 質問提示部、２０６ 視差応答取得部、２０８ 視差量データ特定部、３００ 立体感調整部、３５０ 疲労度計測部、４００ 観察時間検出部、４５０ 観察環境計測部。
【発明の属する技術分野】
本発明は、立体画像表示技術、とくに、視差画像をもとに立体画像を生成または表示する技術に関する。
【０００２】
【従来の技術】
近年、ネットワークインフラストラクチャーの未整備が問題視されてきたが、ブロードバンドへの移行期を迎え、むしろ、広い帯域を有効活用するコンテンツの種類や数の少なさが目立ち始めている。映像はいつの時代でも、最も重要な表現手段であったが、いままでの取り組みの多くは表示品質やデータ圧縮率の改善に関するものであり、それらに比べると、表現の可能性自体を広げる技術的な取り組みは、後手にまわっている感がある。
【０００３】
そうした中で、立体画像表示（以下、単に「立体表示」という）は、以前からいろいろ研究され、劇場用途や特殊な表示装置を利用する、ある程度限られた市場で実用化されてきた。今後は、より臨場感の溢れるコンテンツの提供を目指してこの方面の研究開発が加速し、個人の利用者が家庭でも立体表示を楽しむ時代が来るものと思われる（特許文献１）。
【特許文献１】
特開２００３−００９１８３号公報
【発明が解決しようとする課題】
そうした流れの中にあって、立体表示には以前よりいくつかの課題が指摘されている。例えば、立体感を創生する原因となる視差の適正化が難しい。もともと、本当に三次元のオブジェクトを映し出しているのではなく、その映像を左右両目に対して画素単位でずらして投じているのであり、その人工的な立体感に自然な感じをもたせるのは容易ではない。
【０００４】
また、視差の付けすぎも問題になることがあり、立体画像の観察者（以下、単に「利用者」ともいう）によっては、軽い不快感を訴える場合がある。もちろんこれには、立体表示だけではなく、表示されているシーンと自己の周囲の状況ないし感覚が一致しないなど、種々の要因がある。
【０００５】
本発明はこうした背景に鑑みてなされたものであり、その目的は、立体画像の観察者の状況に応じて適切な立体表示をすることにある。別の目的は、観察環境に応じて適切な立体表示をすることにある。更に別の目的は、立体画像の性質に応じて適切な立体表示をすることにある。
【０００６】
【課題を解決するための手段】
本発明のある態様は、立体画像表示装置である。この装置は、立体画像データを格納する立体画像データ格納部と、利用者ごとの視差量データを格納する視差量データ格納部と、視差量データ格納部に格納されている視差量データに基づいて、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を取得する視点画像取得部を含むことを特徴とする。
【０００７】
「立体画像データ」とは、立体画像の元となるデータである。立体画像データは、あるオブジェクトを複数の視点から捉えた画像であってもよいし、ポリゴンデータのように、立体を三次元的に再現するためのデータであってもよい。「視点画像」とは、ある三次元のオブジェクトを、所定の視点から捉えた二次元の画像をいう。「視差」とは、立体感を生むためのパラメータであり、いろいろな定義が可能だが、一例として視点画像間の同じ点を表す画素のシフト量で表現できる。また、視差については、特にその大きさを表す意味で使用する場合には、「視差量」とよぶ。視点画像の取得は、立体画像データから、所定の視差量に基づいた視点画像を生成することによってなされてもよいし、あらかじめ用意された複数の視点画像のなかから適切な２枚を選択することによってなされてもよい。
【０００８】
利用者ごとに適正な視差量を登録しておくことで、各々に最適な視差で立体表示できる。また、利用の履歴に応じて、利用者毎の視差量を随時調整してもよい。ここで適正視差は範囲指定してもよい。適正視差の特定は、利用者から最も近くに見えるオブジェクトの視差として許容できる最大値で行ってもよい。
【０００９】
この装置は、利用者に質問を提示する質問提示部と、質問への回答に基づいて、視差量データ格納部に格納すべき、適正な視差量データを利用者について特定する視差量データ特定部を更に含んでもよい。
【００１０】
質問は、利用者の年齢、性別、車に酔いやすいか否か、運動を定期的にやっているか、部屋は狭いかなど、所定の項目について利用者に関する情報を問診的に取得するために行われる。たとえば、一般に高齢者は視差量を大きく設定した場合に立体視をしにくいという経験則がある。また、車に酔いやすい体質の利用者にとっては、視差量の変化が大きな立体表示は不快感を伴うことが多い。
【００１１】
本発明の実施の態様によれば、利用者は、質問に回答するだけで、自分にとって適正な視差量を設定することが出来る。また、利用者の状況に応じて視差を調整できるために、安全対策の面でも有効である。たとえば、利用者が高齢者である場合には、立体画像による心理的な圧迫を緩和するため、オブジェクトを利用者に対して近置させすぎないように処置する必要性が考えられる。また、この質問方式によって視差量を設定したあとでも、利用者がさらに視差量を微調整できてもよい。
【００１２】
この装置は、異なる視差に対応する複数の視点画像をもとに表示された立体画像に対する利用者の応答を取得する視差応答取得部と、取得された応答に基づいて、視差量データ格納部に格納すべき、適正な視差量データを特定する視差量データ特定部を更に含んでもよい。
【００１３】
視差応答取得部は、例えばＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）として提供され、まず視点画像間の視差を変えながら表示する。ユーザは自分が好む立体感になったとき、ボタン操作などによってその旨を入力する。あるいは、視差の異なるいくつかの立体画像を用意して、その候補の中から利用者が選択してもよい。あるいは、利用者は視差量をそのまま数値などで入力してもよい。
【００１４】
本発明の別の態様も、立体画像表示装置である。この装置は、立体画像データを格納する立体画像データ格納部と、利用者が立体画像を観察している時間を検出する観察時間検出部と、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、観察時間検出部が検出した時間に基づいて、適宜、その視差量を調整して取得する視点画像取得部を含むことを特徴とする。
【００１５】
「観察時間」とは、利用者が立体画像を観察をしている時間の長さ（以下、「観察期間」とよぶ）でもよいし、立体画像を観察している時刻（以下、「観察時刻」とよぶ）でもよい。たとえば、夜型の生活をしている利用者にとって、早朝は活動時間ではない。このように利用者の生活バイオリズムまで考慮した上で、観察時刻をパラメータとして視差量を調整することにより、より適正な視差量の値を特定できる。なお、観察期間は、観察を継続している時間や観察をしている時間の総合計などの期間的な概念である。
【００１６】
この装置の視点画像取得部は、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、利用者が立体画像を観察している時間が長いほど、視差量を小さくして取得することとしてもよい。
【００１７】
観察期間が長いほど、利用者は立体視により疲労が蓄積する。そのため、観察期間が長いほど視差量を減少させることにより、利用者の立体視に伴う負担を軽減できる。
【００１８】
本発明の更に別の態様も、立体画像表示装置である。この装置は、立体画像データを格納する立体画像データ格納部と、利用者が立体画像を観察している時間を検出する観察時間検出部と、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、観察時間検出部が検出した時間に基づいて、適宜、その表示サイズを調整して取得する視点画像取得部を含むことを特徴とする。
【００１９】
「表示サイズ」とは、立体表示を行う画面の面積、縦幅、横幅のいずれか、またはそれらいずれかの組み合わせをいう。たとえば、立体表示画面の面積を縮小させることにより、利用者の立体視に伴う負担を軽減できる。
【００２０】
この装置の視点画像取得部は、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する視点画像を、利用者が立体画像を観察している時間が長いほど、表示サイズを小さくして取得することとしてもよい。
【００２１】
本発明の更に別の態様も、立体画像表示装置である。この装置は、立体画像データを格納する立体画像データ格納部と、利用者が立体画像を観察している観察環境を計測する観察環境計測部と、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、観察環境計測部が計測した観察環境に関する情報に基づいてその視差量を調整して取得する視点画像取得部を含むことを特徴とする。
【００２２】
「観察環境」とは、利用者が立体視を行っている外界の状況をいう。具体的には、観察環境計測部は、利用者が立体視を行っている部屋の明るさや温度、湿度、騒音、気圧、などのパラメータを計測することにより、観察環境の評価を行う。
【００２３】
この装置の視点画像取得部は、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、利用者が立体画像を観察している環境が明るいほど視差量を小さくして取得することとしてもよい。
【００２４】
一般に周りが明るいほど、立体視による疲労が大きくなるという経験則がある。したがって、周りが明るいほど視差量を小さくすることで、立体視に伴う利用者の負担を軽減できる。
【００２５】
本発明の更に別の態様も、立体画像表示装置である。この装置は、立体画像データを格納する立体画像データ格納部と、利用者が立体画像を観察している観察環境を計測する観察環境計測部と、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、観察環境計測部が計測した観察環境に関する情報に基づいてその表示サイズを調整して取得する視点画像取得部を含むことを特徴とする。
【００２６】
この装置の視点画像取得部は、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、利用者が立体画像を観察している環境が明るいほど表示サイズを小さくして取得することとしてもよい。
【００２７】
本発明の更に別の態様も、立体画像表示装置である。この装置は、立体画像データを格納する立体画像データ格納部と、利用者の疲労を推定する疲労度計測部と、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、疲労度計測部が推定した利用者の疲労に関する情報に基づいてその視差量を調整して取得する視点画像取得部を含むことを特徴とする。
【００２８】
利用者の疲労度は、利用者の身体情報を元に推定される。具体的には、疲労度計測部は、瞬目、瞳孔径、目の充血具合、鼻腔の温度などを計測し、これらの計測値を元に利用者の疲労度を推定する。
【００２９】
本発明の更に別の態様も、立体画像表示装置である。この装置は、立体画像データを格納する立体画像データ格納部と、利用者の疲労を推定する疲労度計測部と、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、疲労度計測部が推定した利用者の疲労に関する情報に基づいてその表示サイズを調整して取得する視点画像取得部を含むことを特徴とする。
【００３０】
本発明の更に別の態様も、立体画像表示装置である。この装置は、立体画像データを格納する立体画像データ格納部と、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、立体画像データ格納部に格納される立体画像データの性質に基づいてその視差量を調整して取得する視点画像取得部を含むことを特徴とする。
【００３１】
「立体画像データの性質」とは、オブジェクトの数、形状、大きさ、色彩およびその変化、オブジェクトの動きの速さ、動きのパターンなど、この装置が提供する立体画像コンテンツの内容をいう。立体画像データの性質によっては、たとえば観察期間が同じであっても、一般的に、利用者の疲労度は異なる。視差量を決定する上で、この性質を表すパラメータは、立体画像データを立体画像データ格納部に格納するときに併せて登録されてもよい。あるいは、立体表示中に、動きの激しい場面とおだやかな場面に応じて、立体画像データの性質を表すパラメータを変更してもよい。
【００３２】
本発明の更に別の態様も、立体画像表示装置である。この装置は、立体画像データを格納する立体画像データ格納部と、立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、立体画像データ格納部に格納される立体画像データの性質に基づいてその表示サイズを調整して取得する視点画像取得部を含むことを特徴とする。
【００３３】
立体画像データの性質によっては、画面の縦横比率を変更することが、利用者の立体視に伴う負担軽減に寄与する場合もある。
【００３４】
なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。
【００３５】
【発明の実施の形態】
図１は利用者３０、スクリーン３２、立体表示される再生オブジェクト３４の位置関係を示す。利用者３０の眼間距離がＥ、利用者３０とスクリーン３２の距離がＤ、表示されたときの再生オブジェクト３４の幅がＷである。再生オブジェクト３４は立体表示されているため、スクリーン３２よりも近くに感知される画素、すなわち近置される画素と、スクリーン３２よりも遠くに感知される画素、すなわち遠置される画素を有する。視差が付けられていない画素はスクリーン３２上でちょうど両目から同じ位置に見えるため、スクリーン３２上に感知される。
【００３６】
図２は、図１の理想的な表示を生成するための撮影系を示す。二台のカメラ２２、２４の間隔をＥとし、それらからオブジェクト２０を見たときの光軸交差位置までの距離をＤとし、スクリーン３２と同じ幅を見込む画角で、幅が現実にＷであるオブジェクト２０を撮影すれば、二つのカメラから２つの視点画像が得られる。これを図１のスクリーン３２へ表示すれば、図１の理想状態が実現する。
【００３７】
図３は本実施の態様における立体画像表示装置１０のハードウェア構成を示す。サーバ装置１００は、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）１６を介して接続された第１クライアント端末１４ａおよび第２クライアント端末１４ｂなどの複数の端末（以下、単に「クライアント端末１４」という）に、サービスを提供する。利用者３０はクライアント端末１４を介して立体視を行ってもよいが、サーバ装置１００の画面表示機能により立体視を行うことができてもよい。また、クライアント端末１４はＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）１２を介してサーバ装置１００と接続されてもよい。
【００３８】
サーバ装置１００およびクライアント端末１４は、ハードウェア的には、コンピュータのＣＰＵをはじめとする素子で実現でき、ソフトウェア的にはデータ送受信機能のあるプログラム等によって実現されるが、以下に説明する図４等ではそれらの連携によって実現される機能ブロックを描いている。したがって、これらの機能ブロックはハードウェア、ソフトウェアの組合せによっていろいろなかたちで実現できることは、当業者には理解されるところである。
【００３９】
図４は、立体画像表示装置１０の機能ブロック図である。ユーザインタフェース処理部１２０は利用者３０とのユーザインタフェースに関する処理を行う。ユーザインタフェース処理部１２０のうち、入力部１１０は利用者３０からの操作をはじめとする外部からの入力を受け付ける。また、画像提供部１０８は利用者３０に対して画像の提供を行う。立体画像データ登録部１１２は入力部１１０を介して立体画像データの登録を行う。登録された立体画像データは、立体画像データ格納部１０４に格納される。
【００４０】
視差量データ登録部２００は、入力部１１０を介して、利用者３０ごとに視差量データを特定し、これを視差量データ格納部１０６に格納する。視差量データ登録部２００の内部の機能ブロックについては後に詳述する。視点画像取得部１０２は、立体画像データ格納部１０４に格納される立体画像データから、視差量データ格納部１０６に格納される視差量データに基づいて、視差の異なる２枚の視点画像を取得する。画像提供部１０８は、視点画像取得部１０２が取得した２枚の視点画像を元に利用者３０に立体画像を提供する。
【００４１】
立体感調整部３００は、入力部１１０を介して、利用者３０や観察環境などの状態を検出する。視点画像取得部１０２は、立体感調整部３００が検出した各種の情報も考慮して、視差や表示サイズの値を特定し、立体画像データ格納部１０４から視点画像の取得を行う。立体感調整部３００の内部の機能ブロックについても後に詳述する。
【００４２】
図５は視差量データ登録部２００の内部の機能ブロック図である。視差量データ登録部２００は、利用者３０ごとに視差量データをに特定し視差量データ格納部１０６に格納する。質問データ格納部２０２は利用者３０への質問を格納する。質問提示部２０４は質問データ格納部２０２が格納する質問を利用者３０に提示し、回答を取得する。視差量データ特定部２０８は、質問提示部２０４が取得した回答を元に、視差量データ格納部１０６に格納すべき視差量の特定を行う。視差応答取得部２０６は、立体画像データ格納部１０４に格納されている立体画像データを利用して、立体表示に対する利用者３０の応答を取得する。この場合も、視差量データ特定部２０８は、視差応答取得部２０６が取得した利用者３０の応答を元に、視差量データ格納部１０６に格納すべき視差量の特定を行う。
【００４３】
図６は立体感調整部３００の内部の機能ブロック図である。立体感調整部３００は、利用者３０や観察環境などの状態を検出する。疲労度計測部３５０は利用者３０の疲労を推定するために、利用者３０から身体情報を取得する。そして、取得した情報を適切な指数に変換して視点画像取得部１０２に伝達する。観察時間検出部４００は、利用者３０の観察時間を検出する。観察時間検出部４００のうち、観察時刻検出部４０２は観察時刻を検出する。また、観察期間検出部４０４は観察期間を検出する。観察時刻検出部４０２や観察期間検出部４０４から得られた情報は判断部４０６に送られる。判断部４０６はこれらの情報を適切な指数に変換して視点画像取得部１０２に伝達する。
【００４４】
観察環境計測部４５０は観察環境の計測を行う。観察環境計測部４５０のうち、明るさ検出部４５２は、利用者３０が立体画像を観察する環境の明るさを検出する。温度検出部４５４は、観察環境における温度を検出する。音声検出部４５６は観察環境における騒音などの音を検出する。判断部４５８は明るさ検出部４５２、温度検出部４５４および音声検出部４５６から得られた情報を適切な指数に変換して視点画像取得部１０２に伝達する。視点画像取得部１０２は立体感調整部３００から得られた各種の指数を元に視点画像の視差や、立体画像の表示サイズを調整することは先述の通りである。
【００４５】
図７（ａ）、図７（ｂ）は、視差応答取得部２０６による視差応答を取得するプロセスにおいてそれぞれ表示された左眼画像５００、右眼画像５０２を示す。それぞれの画像には５個の黒丸が表示されており、上にいくほど近置かつ大きな視差、下へいくほど遠置かつ大きな視差が付けられている。
【００４６】
図８はこれら５個の黒丸を表示したとき、利用者３０に感知される距離感を模式的に示す。利用者３０はこれら５個の距離感の範囲を「適正」と応答しており、この応答を視差応答取得部２０６が取得する。同図では、視差が異なる５個の黒丸が同時に、または順に表示され、許容できる視差であるか否かを利用者３０が入力していく。一方、図９では表示自体は１個の黒丸で行うが、その視差を連続的に変更し、利用者３０が遠置と近置それぞれの方向において許容する限界にきたとき応答する。応答は通常のキー操作、マウス操作、音声による入力等、それ自体は既知の技術を利用すればよい。
【００４７】
図１０は、利用者３０が視差量を登録してから立体表示し、これを終了するまでのフローチャートを示す。利用者３０は、視差量データ登録部２００により、視差量データ格納部１０６に自分の視差量データを登録する（Ｓ１０）。視点画像取得部１０２は、立体表示をするにあたって、表示サイズを特定し（Ｓ１２）、適正な視差を特定する（Ｓ１４）。そして、視点画像取得部１０２は、これに基づいて、立体画像データ格納部１０４より適切な視点画像を取得し、立体画像提供部１０８が利用者３０に立体表示をする（Ｓ１６）。立体表示が終了した場合、または利用者３０が立体画像の観察を終了させた場合には（Ｓ１８のＹ）、処理は終了する。
【００４８】
立体表示を終了しない場合には（Ｓ１８のＮ）、立体感調整部３００が取得する各種の情報を元に、視点画像取得部１０２は、表示サイズを変更するか否かを判断する（Ｓ２０）。変更する場合には（Ｓ２０のＹ）、処理はＳ１２に戻る。表示サイズの変更を行わない場合には（Ｓ２０のＮ）、視点画像取得部１０２は、立体感調整部３００が取得する各種の情報を元に、同じく視差を変更するか否かを判断する（Ｓ２２）。変更する場合には（Ｓ２２のＹ）、処理はＳ１４に戻る。変更しない場合には（Ｓ２２のＮ）、処理はＳ１６に戻る。
【００４９】
以上、実施の形態においては、利用者があらかじめ、自分にとって適正な視差量を登録することが出来る。したがって、パーソナルユースの立体表示を行う上で、個人差に対応した立体表示が可能である。また、立体画像表示装置は、利用者が立体視をしている最中においても、その観察時間や利用者の疲れなどを判断し、適宜、視差量や表示サイズを調整している。このため、立体視に伴う利用者の疲労を軽減できる。これにより、利用者に負担をかけずに、長い時間、立体表示をすることが出来る。
【００５０】
以上、本発明を実施の形態をもとに説明した。実施の形態は例示であり、それらの各構成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。
【００５１】
【発明の効果】
本発明によれば、立体画像の観察者の状況に応じて適切な立体表示をすることができる。また、本発明によれば、観察環境に応じて適切な立体表示をすることができる。また、本発明によれば、立体画像の性質に応じて適切な立体画像表示をすることができる。
【図面の簡単な説明】
【図１】理想的な立体視ができているユーザ、スクリーン、再生オブジェクトの位置関係を示す図である。
【図２】図１の状態を実現する撮影系の例を示す図である。
【図３】本実施の形態に係る立体画像表示装置の構成図である。
【図４】本実施の形態に係る立体画像表示装置の機能ブロック図である。
【図５】本実施の形態に係る視差量データ登録部の機能ブロック図である。
【図６】本実施の形態に係る立体感調整部の機能ブロック図である。
【図７】図７（ａ）、図７（ｂ）は、それぞれ、立体画像表示装置の立体感調整部によって表示される左眼画像と右眼画像を示す図である。
【図８】立体画像表示装置の立体感調整部によって表示される、異なる視差をもつ複数のオブジェクトを示す図である。
【図９】立体画像処理装置の立体感調整部によって表示される、視差が変化するオブジェクトを示す図である。
【図１０】本実施の形態に係る立体画像表示装置において、ユーザが視差量を登録してから立体画像を表示し、これを終了するまでのフローチャートである。
【符号の説明】
１０ 立体画像表示装置、１０２ 視点画像取得部、１０４ 立体画像データ格納部、１０６ 視差量データ格納部、２００ 視差量データ登録部、２０４ 質問提示部、２０６ 視差応答取得部、２０８ 視差量データ特定部、３００ 立体感調整部、３５０ 疲労度計測部、４００ 観察時間検出部、４５０ 観察環境計測部。
Claims (15)
- 立体画像データを格納する立体画像データ格納部と、
利用者ごとの視差量データを格納する視差量データ格納部と、
前記視差量データ格納部に格納されている前記視差量データに基づいて、前記立体画像データ格納部に格納される前記立体画像データから、異なる視差に対応する複数の視点画像を取得する視点画像取得部と、
を含むことを特徴とする立体画像表示装置。 - 利用者に質問を提示する質問提示部と、
前記質問への回答に基づいて、前記視差量データ格納部に格納すべき、適正な視差量データを前記利用者について特定する視差量データ特定部と、
を更に含むことを特徴とする請求項１に記載する立体画像表示装置。 - 異なる視差に対応する複数の視点画像をもとに表示された立体画像に対する利用者の応答を取得する視差応答取得部と、
取得された応答に基づいて、前記視差量データ格納部に格納すべき、適正な視差量データを特定する視差量データ特定部と、
を更に含むことを特徴とする請求項１に記載する立体画像表示装置。 - 立体画像データを格納する立体画像データ格納部と、
利用者が立体画像を観察している時間を検出する観察時間検出部と、
前記立体画像データ格納部に格納される前記立体画像データから、異なる視差に対応する複数の視点画像を、前記観察時間検出部が検出した時間に基づいて、適宜、その視差量を調整して取得する視点画像取得部と、
を含むことを特徴とする立体画像表示装置。 - 前記視点画像取得部は、前記立体画像データ格納部に格納される前記立体画像データから、異なる視差に対応する複数の視点画像を、前記利用者が立体画像を観察している時間が長いほど、視差量を小さくして取得することを特徴とする請求項４に記載する立体画像表示装置。
- 立体画像データを格納する立体画像データ格納部と、
利用者が立体画像を観察している時間を検出する観察時間検出部と、
前記立体画像データ格納部に格納される前記立体画像データから、異なる視差に対応する複数の視点画像を、前記観察時間検出部が検出した時間に基づいて、適宜、その表示サイズを調整して取得する視点画像取得部と、
を含むことを特徴とする立体画像表示装置。 - 前記視点画像取得部は、前記立体画像データ格納部に格納される前記立体画像データから、異なる視差に対応する視点画像を、前記利用者が立体画像を観察している時間が長いほど、表示サイズを小さくして取得することを特徴とする請求項６に記載する立体画像表示装置。
- 立体画像データを格納する立体画像データ格納部と、
利用者が立体画像を観察している観察環境を計測する観察環境計測部と、
前記立体画像データ格納部に格納される前記立体画像データから、異なる視差に対応する複数の視点画像を、前記観察環境計測部が計測した観察環境に関する情報に基づいてその視差量を調整して取得する視点画像取得部と、
を含むことを特徴とする立体画像表示装置。 - 前記視点画像取得部は、前記立体画像データ格納部に格納される前記立体画像データから、異なる視差に対応する複数の視点画像を、前記利用者が立体画像を観察している環境が明るいほど視差量を小さくして取得することを特徴とする請求項８に記載する立体画像表示装置。
- 立体画像データを格納する立体画像データ格納部と、
利用者が立体画像を観察している観察環境を計測する観察環境計測部と、
前記立体画像データ格納部に格納される前記立体画像データから、異なる視差に対応する複数の視点画像を、前記観察環境計測部が計測した観察環境に関する情報に基づいてその表示サイズを調整して取得する視点画像取得部と、
を含むことを特徴とする立体画像表示装置。 - 前記視点画像取得部は、前記立体画像データ格納部に格納される前記立体画像データから、異なる視差に対応する複数の視点画像を、前記利用者が立体画像を観察している環境が明るいほど表示サイズを小さくして取得することを特徴とする請求項１０に記載する立体画像表示装置。
- 立体画像データを格納する立体画像データ格納部と、
利用者の疲労を推定する疲労度計測部と、
前記立体画像データ格納部に格納される前記立体画像データから、異なる視差に対応する複数の視点画像を、前記疲労度計測部が推定した利用者の疲労に関する情報に基づいてその視差量を調整して取得する視点画像取得部と、
を含むことを特徴とする立体画像表示装置。 - 立体画像データを格納する立体画像データ格納部と、
利用者の疲労を推定する疲労度計測部と、
前記立体画像データ格納部に格納される前記立体画像データから、異なる視差に対応する複数の視点画像を、前記疲労度計測部が推定した利用者の疲労に関する情報に基づいてその表示サイズを調整して取得する視点画像取得部と、
を含むことを特徴とする立体画像表示装置。 - 立体画像データを格納する立体画像データ格納部と、
前記立体画像データ格納部に格納される前記立体画像データから、異なる視差に対応する複数の視点画像を、前記立体画像データ格納部に格納される前記立体画像データの性質に基づいてその視差量を調整して取得する視点画像取得部と、
を含むことを特徴とする立体画像表示装置。 - 立体画像データを格納する立体画像データ格納部と、
前記立体画像データ格納部に格納される立体画像データから、異なる視差に対応する複数の視点画像を、前記立体画像データ格納部に格納される前記立体画像データの性質に基づいてその表示サイズを調整して取得する視点画像取得部と、
を含むことを特徴とする立体画像表示装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003079582A JP4148811B2 (ja) | 2003-03-24 | 2003-03-24 | 立体画像表示装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003079582A JP4148811B2 (ja) | 2003-03-24 | 2003-03-24 | 立体画像表示装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2004289527A true JP2004289527A (ja) | 2004-10-14 |
| JP4148811B2 JP4148811B2 (ja) | 2008-09-10 |
Family
ID=33293656
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003079582A Expired - Fee Related JP4148811B2 (ja) | 2003-03-24 | 2003-03-24 | 立体画像表示装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4148811B2 (ja) |
Cited By (30)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006262191A (ja) * | 2005-03-17 | 2006-09-28 | Victor Co Of Japan Ltd | 複数視点立体映像表示方法及び複数視点立体映像表示装置並びに複数視点立体映像表示プログラム |
| JP2006267578A (ja) * | 2005-03-24 | 2006-10-05 | Seiko Epson Corp | 立体画像表示装置及び方法 |
| JP2006270924A (ja) * | 2005-02-28 | 2006-10-05 | Victor Co Of Japan Ltd | 映像データ処理装置、映像再生装置、映像データ処理方法、映像再生方法、これらの方法をコンピュータによって実行するためのプログラム並びに記録媒体 |
| JP2006319819A (ja) * | 2005-05-13 | 2006-11-24 | Victor Co Of Japan Ltd | 複数視点映像表示方法及び複数視点映像表示装置並びに複数視点映像表示プログラム |
| CN101902512A (zh) * | 2009-05-28 | 2010-12-01 | Nec卡西欧移动通信株式会社 | 终端装置及其控制程序 |
| JP2011044952A (ja) * | 2009-08-21 | 2011-03-03 | Sony Corp | 送信装置、受信装置、プログラム、及び通信システム |
| JP2011064894A (ja) * | 2009-09-16 | 2011-03-31 | Fujifilm Corp | 立体画像表示装置 |
| JP2011520398A (ja) * | 2008-05-12 | 2011-07-14 | トムソン ライセンシング | 立体動画による潜在的眼精疲労を測定するシステムおよび方法 |
| WO2012002106A1 (ja) * | 2010-06-30 | 2012-01-05 | 富士フイルム株式会社 | 立体画像表示装置、立体画像表示方法、立体画像表示プログラム及び記録媒体 |
| JP2012009010A (ja) * | 2010-05-25 | 2012-01-12 | Mitsubishi Electric Corp | 画像処理装置、画像処理方法および画像表示装置 |
| CN102413343A (zh) * | 2010-09-13 | 2012-04-11 | Lg电子株式会社 | 图像显示装置和操作图像显示装置的方法 |
| JP2012095277A (ja) * | 2010-09-30 | 2012-05-17 | Casio Comput Co Ltd | 画像合成装置、及び画像検索方法、プログラム |
| WO2012070372A1 (en) * | 2010-11-23 | 2012-05-31 | Sharp Kabushiki Kaisha | A method and a system for displaying a pair of stereoscopic images on a display |
| JP2012513146A (ja) * | 2008-12-19 | 2012-06-07 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 表示パラメータ設定の制御 |
| US20120162398A1 (en) * | 2010-12-28 | 2012-06-28 | Tooru Sugiyama | Stereoscopic Video Processor and Stereoscopic Video Processing Method |
| US20120206444A1 (en) * | 2011-02-10 | 2012-08-16 | Sony Corporation | Display and displaying method |
| KR20120095983A (ko) * | 2009-11-18 | 2012-08-29 | 톰슨 라이센싱 | 유연한 디스패리티 선택이 가능한 3차원 컨텐트 전달 방법 및 시스템 |
| JP2012217202A (ja) * | 2012-07-06 | 2012-11-08 | Toshiba Corp | 映像処理装置及び映像処理方法 |
| CN102892023A (zh) * | 2011-07-19 | 2013-01-23 | 三星电子株式会社 | 具有3d结构的显示设备及其控制方法 |
| WO2013047641A1 (ja) * | 2011-09-29 | 2013-04-04 | 富士フイルム株式会社 | 立体画像処理装置及び立体画像処理方法 |
| JP2013065965A (ja) * | 2011-09-15 | 2013-04-11 | Nippon Telegr & Teleph Corp <Ntt> | 観視状況確認装置及び方法及びプログラム |
| JP2013531440A (ja) * | 2010-06-28 | 2013-08-01 | トムソン ライセンシング | 立体コンテンツの３次元効果をカスタマイズする方法及び装置 |
| JP2013157961A (ja) * | 2012-01-31 | 2013-08-15 | Toshiba Corp | 映像出力装置、映像出力方法、映像出力装置の制御プログラム |
| JP5546633B2 (ja) * | 2010-06-25 | 2014-07-09 | 富士フイルム株式会社 | 立体画像再生装置、立体画像再生システム及び立体画像再生方法 |
| US8810564B2 (en) | 2010-05-03 | 2014-08-19 | Samsung Electronics Co., Ltd. | Apparatus and method for reducing three-dimensional visual fatigue |
| CN104160699A (zh) * | 2012-03-07 | 2014-11-19 | 富士通株式会社 | 立体图像显示装置以及程序 |
| KR101479435B1 (ko) * | 2010-12-10 | 2015-01-05 | 후지쯔 가부시끼가이샤 | 입체시 동화상 생성 장치, 입체시 동화상 생성 방법 |
| KR101512255B1 (ko) * | 2010-12-17 | 2015-04-14 | 후지쯔 가부시끼가이샤 | 입체시 동화상 생성 장치 및 입체시 동화상 생성 방법 |
| US9488841B2 (en) | 2010-08-10 | 2016-11-08 | Nikon Corporation | Image processing apparatus, image processing method, display apparatus, display method, and computer readable recording medium |
| KR101824005B1 (ko) * | 2011-04-08 | 2018-01-31 | 엘지전자 주식회사 | 이동 단말기 및 그의 영상 깊이감 조절방법 |
-
2003
- 2003-03-24 JP JP2003079582A patent/JP4148811B2/ja not_active Expired - Fee Related
Cited By (47)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4730120B2 (ja) * | 2005-02-28 | 2011-07-20 | 日本ビクター株式会社 | 映像データ処理装置、映像再生装置、映像データ処理方法、映像再生方法、これらの方法をコンピュータによって実行するためのプログラム並びに記録媒体 |
| JP2006270924A (ja) * | 2005-02-28 | 2006-10-05 | Victor Co Of Japan Ltd | 映像データ処理装置、映像再生装置、映像データ処理方法、映像再生方法、これらの方法をコンピュータによって実行するためのプログラム並びに記録媒体 |
| JP2006262191A (ja) * | 2005-03-17 | 2006-09-28 | Victor Co Of Japan Ltd | 複数視点立体映像表示方法及び複数視点立体映像表示装置並びに複数視点立体映像表示プログラム |
| US7623089B2 (en) | 2005-03-24 | 2009-11-24 | Seiko Epson Corporation | Stereo image display device and method |
| JP2006267578A (ja) * | 2005-03-24 | 2006-10-05 | Seiko Epson Corp | 立体画像表示装置及び方法 |
| US8390535B2 (en) | 2005-03-24 | 2013-03-05 | Seiko Epson Corporation | Stereo image display device and method |
| JP4513645B2 (ja) * | 2005-05-13 | 2010-07-28 | 日本ビクター株式会社 | 複数視点映像表示方法及び複数視点映像表示装置並びに複数視点映像表示プログラム |
| JP2006319819A (ja) * | 2005-05-13 | 2006-11-24 | Victor Co Of Japan Ltd | 複数視点映像表示方法及び複数視点映像表示装置並びに複数視点映像表示プログラム |
| JP2011520398A (ja) * | 2008-05-12 | 2011-07-14 | トムソン ライセンシング | 立体動画による潜在的眼精疲労を測定するシステムおよび方法 |
| JP2012513146A (ja) * | 2008-12-19 | 2012-06-07 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 表示パラメータ設定の制御 |
| US8884960B2 (en) | 2009-05-28 | 2014-11-11 | Nec Corporation | Controlling displayed 3-D depth based on the brightness of the surrounding area and/or based on the brightness of the display |
| JP4609805B2 (ja) * | 2009-05-28 | 2011-01-12 | Ｎｅｃカシオモバイルコミュニケーションズ株式会社 | 端末装置及びプログラム |
| CN101902512B (zh) * | 2009-05-28 | 2013-05-08 | Nec卡西欧移动通信株式会社 | 终端装置及其控制程序 |
| JP2010278703A (ja) * | 2009-05-28 | 2010-12-09 | Nec Casio Mobile Communications Ltd | 端末装置及びプログラム |
| CN101902512A (zh) * | 2009-05-28 | 2010-12-01 | Nec卡西欧移动通信株式会社 | 终端装置及其控制程序 |
| JP2011044952A (ja) * | 2009-08-21 | 2011-03-03 | Sony Corp | 送信装置、受信装置、プログラム、及び通信システム |
| JP2011064894A (ja) * | 2009-09-16 | 2011-03-31 | Fujifilm Corp | 立体画像表示装置 |
| KR20120095983A (ko) * | 2009-11-18 | 2012-08-29 | 톰슨 라이센싱 | 유연한 디스패리티 선택이 가능한 3차원 컨텐트 전달 방법 및 시스템 |
| EP2502222B1 (en) * | 2009-11-18 | 2018-08-29 | Thomson Licensing | Methods and systems for three dimensional content delivery with flexible disparity selection |
| KR101699957B1 (ko) * | 2009-11-18 | 2017-01-25 | 톰슨 라이센싱 | 유연한 디스패리티 선택이 가능한 3차원 컨텐트 전달 방법 및 시스템 |
| JP2013511889A (ja) * | 2009-11-18 | 2013-04-04 | トムソン ライセンシング | 柔軟な視差選択が可能な３次元コンテンツ配信のための方法とシステム |
| US8810564B2 (en) | 2010-05-03 | 2014-08-19 | Samsung Electronics Co., Ltd. | Apparatus and method for reducing three-dimensional visual fatigue |
| JP2012009010A (ja) * | 2010-05-25 | 2012-01-12 | Mitsubishi Electric Corp | 画像処理装置、画像処理方法および画像表示装置 |
| JP5546633B2 (ja) * | 2010-06-25 | 2014-07-09 | 富士フイルム株式会社 | 立体画像再生装置、立体画像再生システム及び立体画像再生方法 |
| US10154243B2 (en) | 2010-06-28 | 2018-12-11 | Interdigital Madison Patent Holdings | Method and apparatus for customizing 3-dimensional effects of stereo content |
| JP2013531440A (ja) * | 2010-06-28 | 2013-08-01 | トムソン ライセンシング | 立体コンテンツの３次元効果をカスタマイズする方法及び装置 |
| WO2012002106A1 (ja) * | 2010-06-30 | 2012-01-05 | 富士フイルム株式会社 | 立体画像表示装置、立体画像表示方法、立体画像表示プログラム及び記録媒体 |
| US10462455B2 (en) | 2010-08-10 | 2019-10-29 | Nikon Corporation | Display apparatus, display method, and computer readable recording medium |
| US9488841B2 (en) | 2010-08-10 | 2016-11-08 | Nikon Corporation | Image processing apparatus, image processing method, display apparatus, display method, and computer readable recording medium |
| CN102413343A (zh) * | 2010-09-13 | 2012-04-11 | Lg电子株式会社 | 图像显示装置和操作图像显示装置的方法 |
| JP2012095277A (ja) * | 2010-09-30 | 2012-05-17 | Casio Comput Co Ltd | 画像合成装置、及び画像検索方法、プログラム |
| US8995750B2 (en) | 2010-09-30 | 2015-03-31 | Casio Computer Co., Ltd. | Image composition apparatus, image retrieval method, and storage medium storing program |
| WO2012070372A1 (en) * | 2010-11-23 | 2012-05-31 | Sharp Kabushiki Kaisha | A method and a system for displaying a pair of stereoscopic images on a display |
| KR101479435B1 (ko) * | 2010-12-10 | 2015-01-05 | 후지쯔 가부시끼가이샤 | 입체시 동화상 생성 장치, 입체시 동화상 생성 방법 |
| KR101512255B1 (ko) * | 2010-12-17 | 2015-04-14 | 후지쯔 가부시끼가이샤 | 입체시 동화상 생성 장치 및 입체시 동화상 생성 방법 |
| US8872903B2 (en) | 2010-12-28 | 2014-10-28 | Kabushiki Kaisha Toshiba | Stereoscopic video processor and stereoscopic video processing method |
| US20120162398A1 (en) * | 2010-12-28 | 2012-06-28 | Tooru Sugiyama | Stereoscopic Video Processor and Stereoscopic Video Processing Method |
| JP2012142752A (ja) * | 2010-12-28 | 2012-07-26 | Toshiba Corp | 立体視映像処理装置及び立体視映像処理方法 |
| US20120206444A1 (en) * | 2011-02-10 | 2012-08-16 | Sony Corporation | Display and displaying method |
| KR101824005B1 (ko) * | 2011-04-08 | 2018-01-31 | 엘지전자 주식회사 | 이동 단말기 및 그의 영상 깊이감 조절방법 |
| CN102892023A (zh) * | 2011-07-19 | 2013-01-23 | 三星电子株式会社 | 具有3d结构的显示设备及其控制方法 |
| JP2013065965A (ja) * | 2011-09-15 | 2013-04-11 | Nippon Telegr & Teleph Corp <Ntt> | 観視状況確認装置及び方法及びプログラム |
| WO2013047641A1 (ja) * | 2011-09-29 | 2013-04-04 | 富士フイルム株式会社 | 立体画像処理装置及び立体画像処理方法 |
| JP2013157961A (ja) * | 2012-01-31 | 2013-08-15 | Toshiba Corp | 映像出力装置、映像出力方法、映像出力装置の制御プログラム |
| US9477305B2 (en) | 2012-03-07 | 2016-10-25 | Fujitsu Limited | Stereoscopic image display apparatus and computer-readable recording medium storing program thereon |
| CN104160699A (zh) * | 2012-03-07 | 2014-11-19 | 富士通株式会社 | 立体图像显示装置以及程序 |
| JP2012217202A (ja) * | 2012-07-06 | 2012-11-08 | Toshiba Corp | 映像処理装置及び映像処理方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4148811B2 (ja) | 2008-09-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4148811B2 (ja) | 立体画像表示装置 | |
| US10235560B2 (en) | Image processing apparatus, image processing method, and image communication system | |
| Lambooij et al. | Visual discomfort and visual fatigue of stereoscopic displays: a review | |
| Lambooij et al. | Visual discomfort of 3D TV: Assessment methods and modeling | |
| US8094927B2 (en) | Stereoscopic display system with flexible rendering of disparity map according to the stereoscopic fusing capability of the observer | |
| IJsselsteijn et al. | Subjective evaluation of stereoscopic images: Effects of camera parameters and display duration | |
| Lambooij et al. | Visual discomfort in stereoscopic displays: a review | |
| JP2004221700A (ja) | 立体画像処理方法および装置 | |
| Kim et al. | Multimodal interactive continuous scoring of subjective 3D video quality of experience | |
| WO2018095317A1 (zh) | 视频数据处理方法、装置及设备 | |
| JP2004007395A (ja) | 立体画像処理方法および装置 | |
| Daugherty et al. | Measuring vergence over stereoscopic video with a remote eye tracker | |
| Lu et al. | On facial asymmetry and self-perception | |
| WO2022267573A1 (zh) | 裸眼3d显示模式的切换控制方法、介质和*** | |
| Lambooij et al. | Emulating autostereoscopic lenticular designs | |
| JP6024159B2 (ja) | 情報提示装置、情報提示システム、サーバ、情報提示方法及びプログラム | |
| JP2004221699A (ja) | 立体画像処理方法および装置 | |
| Wang et al. | System cross-talk and three-dimensional cue issues in autostereoscopic displays | |
| TW201210310A (en) | Method and apparatus for adjusting three dimension video image | |
| JP2004220127A (ja) | 立体画像処理方法および装置 | |
| Kim et al. | Glasses-free randot stereotest | |
| Guan et al. | A tool for stereoscopic parameter setting based on geometric perceived depth percentage | |
| CN117412020A (zh) | 视差调整方法、装置、存储介质和计算设备 | |
| Sakano et al. | Psychophysical evaluations of a current multi‐view 3‐D display: Its advantages in glossiness reproduction | |
| Mikšícek | Causes of visual fatigue and its improvements in stereoscopy |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050701 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080227 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080304 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080425 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080527 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080624 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110704 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110704 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120704 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120704 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130704 Year of fee payment: 5 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |