JP2005229384A - マルチメディア情報配受信システム、マルチメディア情報配信装置およびマルチメディア情報受信装置 - Google Patents

Abstract

【課題】 マルチメディア情報を立体画像として表示することのできるマルチメディア情報配受信システム等を提供する。
【解決手段】 複数のモノメディア情報を生成するモノメディア情報生成部１１と、複数のモノメディア情報にモノメディア情報間のＺ軸方向の配置情報及び複数のモノメディア情報間のＸ・Ｙ軸方向の配置情報を付加して立体マルチメディア情報を生成する立体マルチメディア情報生成部１２と、立体マルチメディア情報を配信する配信部１３とを含むマルチメディア情報配信装置１と、配信された立体マルチメディア情報を受信する受信部２１と、受信された立体マルチメディア情報に基づいて立体マルチメディア画面を描画する立体マルチメディア画面描画部２２と、立体マルチメディア画面を立体表示する立体画面表示部２３とを含むマルチメディア情報受信装置２からなる。
【選択図】 図１

Description

本発明はマルチメディア情報配受信システム、マルチメディア情報配信装置およびマルチメディア情報受信装置に係り、特にテレビジョン情報を含むマルチメディア情報すべてを立体画面として表示することのできるマルチメディア情報配受信システム、マルチメディア情報配信装置およびマルチメディア情報受信装置に関する。

２０００年に開始されたＢＳデジタル放送においては、ハイビジョン放送およびマルチメディアデータ放送のサービスを受けることが可能となっているが、これらはいずれも平面（２次元）画面の放送である。

一方、近年では、本発明の発明者が属する研究所をはじめ、各所において、立体（３次元）テレビジョン放送システムの研究および開発が推進されている。

そして、立体テレビジョン放送においても、当然データ放送のサービスを継続することが望まれている。

この要求を満たすために、平面表示されるデータ放送の画面と立体テレビジョン放送の画面とを合成する「データ放送システム、及びその方法」がすでに提案されている（例えば、特許文献１参照）。
特開２００２−１３５７３４号公報（［０００５］、図３）

しかしながら、上記提案に係る従来のデータ放送システムは、テレビジョン放送画面だけが立体表示されるものであり、データ放送画面を立体的に表示するものではない。

即ち、従来のデータ放送システムにおいては、受信されたデータ放送波は、テキストデータ部と立体映像データ部とに分離され、表示制御部で表示制御され、平面画像である商品の説明（テキストデータ）と立体映像である商品の映像として表示部の同一画面上に表示される。

従って、視聴者が立体画面表示装置を使用している場合であっても、テキストデータ部を立体的に表示することはできなかった。

本発明は、上記課題に鑑みなされたものであって、テレビジョン情報を含むマルチメディア情報すべてを立体画面として表示することのできるマルチメディア情報配受信システム、マルチメディア情報配信装置およびマルチメディア情報受信装置を提供することを目的とする。

本発明に係るマルチメディア情報配受信システムの第１の実施形態は、複数のモノメディア情報を含む立体マルチメディア情報を配信するマルチメディア情報配信手段と、前記マルチメディア情報配信手段から配信された立体マルチメディア情報を受信するマルチメディア情報受信手段とからなるマルチメディア情報配受信システムであって、
前記マルチメディア情報配信手段が、複数のモノメディア情報を生成するモノメディア情報生成部と、前記複数のモノメディア情報に、前記複数のモノメディア情報を描画する際のＺ軸方向の配置情報であるマルチメディアＺ軸配置情報及びＸ・Ｙ軸方向の配置情報であるマルチメディアＸ・Ｙ軸配置情報を付加して立体マルチメディア情報を生成する立体マルチメディア情報生成部と、前記立体マルチメディア情報を配信する配信部とを含み、
マルチメディア情報受信手段が、前記配信部から配信された前記立体マルチメディア情報を受信する受信部と、前記受信部で受信された前記立体マルチメディア情報に基づいて立体マルチメディア画面を描画する立体マルチメディア画面描画部と、前記立体マルチメディア画面描画部で描画された前記立体マルチメディア画面を立体表示する立体画面表示部とを含む。

この構成により、立体マルチメディア画面をマルチメディア情報として配信し、立体マルチメディア画面として表示することが可能となる。

本発明に係るマルチメディア情報配受信システムの第２の実施形態は、複数のモノメディア情報を含む立体マルチメディア情報を配信するマルチメディア情報配信手段と、前記マルチメディア情報配信手段から配信された立体マルチメディア情報を受信するマルチメディア情報受信手段とからなるマルチメディア情報配受信システムであって、
前記マルチメディア情報配信手段が、複数のモノメディア情報を生成するモノメディア情報生成部と、前記複数のモノメディア情報に前記複数のモノメディア情報を描画する際のＺ軸方向の配置情報であるマルチメディアＺ軸配置情報及びＸ・Ｙ軸方向の配置情報であるマルチメディア配置Ｘ・Ｙ軸情報を付加して立体マルチメディア情報を生成する立体マルチメディア情報生成部と、立体テレビジョン情報を生成する立体テレビジョン情報生成部と、前記立体マルチメディア情報に前記立体テレビジョン情報を多重する立体テレビジョン情報多重部と、前記立体テレビジョン情報が多重された前記立体マルチメディア情報を配信する配信部とを含み、
マルチメディア情報受信手段が、前記配信部から配信された前記立体マルチメディア情報を受信する受信部と、前記受信部で受信された前記立体マルチメディア情報から前記立体テレビジョン情報を分離する立体テレビジョン情報分離部と、前記立体テレビジョン情報が分離された前記立体マルチメディア情報に基づいて立体マルチメディア画面を描画する立体マルチメディア画面描画部と、前記立体テレビジョン情報分離部で分離された立体テレビジョン情報に基づいて立体テレビジョン画面を描画する立体テレビジョン画面描画部と、前記立体マルチメディア画面に前記立体テレビジョン画面を合成する立体テレビジョン画面合成部と、前記立体テレビジョン画面が合成された前記立体マルチメディア画面を立体表示する立体画面表示部とを含む。

この構成により、立体テレビジョン画面と立体マルチメディア画面を合成して立体表示することが可能となる。

本発明に係るマルチメディア情報配信装置の第１の実施形態は、複数のモノメディア情報を含む立体マルチメディア情報を配信するマルチメディア情報配信装置であって、
複数のモノメディア情報を生成するモノメディア情報生成部と、前記複数のモノメディア情報に前記複数のモノメディア情報を描画する際のＺ軸方向の配置情報であるマルチメディアＺ軸配置情報及びＸ・Ｙ軸方向の配置情報であるマルチメディアＸ・Ｙ軸配置情報を付加して立体マルチメディア情報を生成する立体マルチメディア情報生成部と、前記立体マルチメディア情報生成部で生成された立体マルチメディア情報を配信する配信部とを含む。

この構成により、立体マルチメディア画面をマルチメディア情報として配信することが可能となる。

本発明に係るマルチメディア情報配信装置の第２の実施形態は、前記モノメディア情報生成部が、画像情報を生成する画像情報生成部と、文字情報を生成する文字情報生成部とを含む。

この構成により、画像情報及び文字情報をマルチメディア情報に含めることが可能となる。

本発明に係るマルチメディア情報配信装置の第３の実施形態は、前記画像情報生成部が、立体画像情報を生成する立体画像情報生成部を含む。

この構成により、画像情報中に立体画像を含めることが可能となる。

本発明に係るマルチメディア情報配信装置の第４の実施形態は、前記文字情報生成部が、立体文字情報を生成する立体文字情報生成部を含む。

この構成により、文字情報中に立体文字を含めることが可能となる。

本発明に係るマルチメディア情報配信装置の第５の実施形態は、複数のモノメディア情報を含む立体マルチメディア情報を配信するマルチメディア情報配信装置であって、複数のモノメディア情報を生成するモノメディア情報生成部と、前記複数のモノメディア情報に前記複数のモノメディア情報を描画する際のＺ軸方向の配置情報であるマルチメディアＺ軸情報及びＸ・Ｙ軸方向の配置情報であるマルチメディアＸ・Ｙ軸配置情報を付加して立体マルチメディア情報を生成する立体マルチメディア情報生成部と、立体テレビジョン情報を生成する立体テレビジョン情報生成部と、前記立体マルチメディア情報に前記立体テレビジョン情報を多重する立体テレビジョン情報多重部と、前記立体テレビジョン情報が多重された前記立体マルチメディア情報を配信する配信部とを含む。

この構成により、立体テレビジョン画面と立体マルチメディア画面を合成して配信することが可能となる。

本発明に係るマルチメディア情報受信装置の第１の実施形態は、複数のモノメディア情報を含む立体マルチメディア情報を受信するマルチメディア情報受信装置であって、前記立体マルチメディア情報を受信する受信部と、前記受信部で受信された前記立体マルチメディア情報に基づいて立体マルチメディア画面を描画する立体マルチメディア画面描画部と、前記立体マルチメディア画面描画部で描画された前記立体マルチメディア画面を立体表示する立体画面表示部とを含む。

この構成により、立体マルチメディア画面をマルチメディア情報として受信することが可能となる。

本発明に係るマルチメディア情報受信装置の第２の実施形態は、前記立体マルチメディア画面描画部が、前記受信部で受信された前記立体マルチメディア情報をモノメディア情報と前記複数のモノメディア情報を描画する際のＺ軸方向の配置情報であるマルチメディアＺ軸配置情報とＸ・Ｙ軸方向の配置情報であるマルチメディアＸ・Ｙ軸配置情報に分離する立体マルチメディア情報分離部と、前記モノメディア情報からモノメディア画面を描画するモノメディア画面描画部と、前記マルチメディアＸ・Ｙ軸配置情報に基づいて前記モノメディア画面を平面的に配置し、前記マルチメディアＸ・Ｙ軸配置情報に基づいて前記モノメディア画面を立体的に配置して立体マルチメディア画面を生成する立体マルチメディア画面生成部とを含む。

この構成により、複数のモノメディア画像が立体的に配置されたマルチメディア画面を立体表示することが可能となる。

本発明に係るマルチメディア情報受信装置の第３の実施形態は、前記モノメディア画面描画部が、立体モノメディア画面を描画するものである。

この構成により、モノメディア画像自体が立体画像である場合にも、立体マルチメディア画像を表示することが可能となる。

本発明に係るマルチメディア情報受信装置の第４の実施形態は、複数のモノメディア情報を含む立体マルチメディア情報を受信するマルチメディア情報受信装置であって、
前記立体マルチメディア情報を受信する受信部と、前記受信部で受信された前記立体マルチメディア情報から前記立体テレビジョン情報を分離する立体テレビジョン情報分離部と、前記立体テレビジョン情報が分離された前記立体マルチメディア情報に基づいて立体マルチメディア画面を描画する立体マルチメディア画面描画部と、前記立体テレビジョン情報分離部で分離された立体テレビジョン情報に基づいて立体テレビジョン画面を描画する立体テレビジョン画面描画部と、前記立体マルチメディア画面に前記立体テレビジョン画面を合成する立体テレビジョン画面合成部と、前記立体テレビジョン画面が合成された前記立体マルチメディア画面を立体表示する立体画面表示部とを含む。

この構成により、立体テレビジョン画面と立体マルチメディア画面を合成して立体表示することが可能となる。

本発明は、マルチメディア情報にマルチメディアＺ軸配置情報を付加して配信し、マルチメディア情報からマルチメディアＺ軸配置情報を分離することにより、マルチメディアＺ軸配置情報に基づいて立体配置したマルチメディア画像を表示することができるものである。

以下本発明の実施の形態について説明する。

本発明に係るマルチメディア情報配受信システムの第１の実施の形態は、図１に示すように、複数のモノメディア情報を含む立体マルチメディア情報を配信するマルチメディア情報配信手段として機能するマルチメディア情報配信装置１と、マルチメディア情報配信装置１から配信された立体マルチメディア情報を受信するマルチメディア情報受信手段として機能するマルチメディア情報受信装置２とからなるマルチメディア情報配受信システムである。

マルチメディア情報配信装置１は、複数のモノメディア情報を生成するモノメディア情報生成部１１と、複数のモノメディア情報に複数のモノメディア情報を描画する際のＺ軸方向の配置情報であるマルチメディアＺ軸配置情報及びＸ・Ｙ軸方向の配置情報であるマルチメディアＸ・Ｙ軸配置情報を付加して立体マルチメディア情報を生成する立体マルチメディア情報生成部１２と、立体マルチメディア情報を配信する配信部１３とを含む。

マルチメディア情報受信装置２は、配信された立体マルチメディア情報を受信する受信部２１と、受信部２１で受信された立体マルチメディア情報に基づいて立体マルチメディア画面を描画する立体マルチメディア画面描画部２２と、立体マルチメディア画面描画部２２で描画された立体マルチメディア画面を立体表示する立体画面表示部２３とを含む。

モノメディア情報生成部１１は、図２に示すように、画像情報を生成する画像情報生成部１５及び文字情報を生成する文字情報生成部１６を含む。

そして、画像情報生成部１５は立体画像情報を生成する立体画像情報生成部１７を含み、文字情報生成部１６は立体文字情報を生成する立体文字情報生成部１８を含む。

従って、モノメディア情報生成部１１からは、平面画像情報、立体画像情報、平面文字情報、立体文字情報からなるモノメディア情報が出力される。

立体マルチメディア情報生成部１２は、モノメディア情報生成部１１で生成された複数のモノメディア情報を一画面に立体的に表示するために、モノメディア画面を描画する際のＺ軸方向の配置情報であるマルチメディアＺ軸配置情報及びＸ・Ｙ軸方向の配置情報であるマルチメディアＸ・Ｙ軸配置情報をモノメディア情報に付加する。

モノメディア情報生成部１１及び立体マルチメディア情報生成部１２は、デジタルコンピュータで構成され、マルチメディア記述言語の一種であるＢＭＬ（Broadcast Markup Language）を立体用に拡張した拡張ＢＭＬを使用してモノメディア情報及び立体マルチメディア情報を生成する。なお、以下拡張ＢＭＬにより記述された文書を拡張ＢＭＬ文書と記す。

以下に、文字列「ＡＢＣＤＥ」と画像「Picture」を一つの画面に表示する場合の立体マルチメディア情報の構成を、図３に基づいて説明する。

この立体マルチメディア情報は、Ｂｏｄｙ要素の開始タグ＜ｂｏｄｙ＞と終了タグ＜／ｂｏｄｙ＞に挟まれており、第２行目の開始タグ＜ｄｉｖ＞と第４行目の終了タグ＜／ｄｉｖ＞で挟まれる第１のＤＩＶ要素、及び第５行目の開始タグ＜ｄｉｖ＞と第７行目の終了タグ＜／ｄｉｖ＞で挟まれる第２のＤＩＶ要素を含んでいる。

立体文字情報生成部１８で生成される文字列「ＡＢＣＤＥ」を表示するための立体文字情報は、第３行目の、文字列「ＡＢＣＤＥ」をＰ要素の開始タグ＜Ｐ＞と終了タグ＜／Ｐ＞で挟んだ構成を有する。なお、文字列「ＡＢＣＤＥ」の表示領域は、属性値「width」５の値“２００ピクセル（px）”によって文字列の幅が、属性値「height」６の値“５０ピクセル”によって文字列の高さが定義される。

そして、文字列「ＡＢＣＤＥ」の描画位置も、スタイル属性の属性値によって定義される。即ち、第１のＤＩＶ要素の原点からの文字列左上端の位置であるＸ・Ｙ軸配置情報は、属性値「left」７の値“０ピクセル”、及び属性値「top」８の値“０ピクセル”により定義される。

また、文字列「ＡＢＣＤＥ」のＺ軸配置情報は、属性値「depth」１８の値“１００ピクセル”により定義される。

立体画像情報生成部１７で生成される画像「Picture」を表示するための立体画像情報は、図３の第６行目に示すように、Ｏｂｊｅｃｔ要素により定義される。なお、画像「Picture」の表示領域は、スタイル属性の属性値によって定義される。即ち、属性値「width」１３の値“３００ピクセル”によって画像の横幅が、属性値「height」１４の値“２００ピクセル”によって画像の高さが定義される。

さらに、第２のＤＩＶ要素の原点からの画像「Picture」の左上端の位置であるＸ・Ｙ軸配置情報が、属性値「left」１５の値“３０ピクセル”、及び属性値「top」１６の値“３０ピクセル”によって定義される。また、画像「Picture」のＺ軸配置情報は、属性値「depth」１８の値“１００ピクセル”により定義される。

同様に、第１のＤＩＶ要素の幅、高さは、スタイル属性の属性値「width」１の値“２００ピクセル”、属性値「height」２の値“５０ピクセル”でそれぞれ定義される。画面原点からの第１のＤＩＶ要素の左上端位置であるＸ・Ｙ軸配置情報は、スタイル属性の属性値「left」３の値“１５０ピクセル”及び属性値「top」４の値“５０ピクセル”で定義される。

さらに、第１のＤＩＶ要素のＺ軸配置情報は、属性値「depth」１７の値“０ピクセル”によって定義される。この場合、属性値「depth」は零ピクセルであるので、第１のＤＩＶ要素は画面原点と同一面に配置される。なお、「depth」を正の値に設定すれば要素は画面原点の前方に配置され、負の値に設定すれば要素は画面原点の後方に配置される。

また、第２のＤＩＶ要素の幅、高さは、スタイル属性の属性値「width」９の値“３６０ピクセル”、属性値「height」１０の値“２６０ピクセル”でそれぞれ定義される。画面原点からの第２のＤＩＶ要素の左上端位置であるＸ・Ｙ軸配置情報は、スタイル属性の属性値「left」１１の値“１２０ピクセル”及び属性値「top」１２の値“１７０ピクセル”で定義される。

さらに、第２のＤＩＶ要素のＺ軸配置情報は、属性値「depth」１９の値“５０ピクセル”によって定義される。この場合、属性値「depth」は５０ピクセルであるので、第２のＤＩＶ要素は画面原点の前方５０ピクセルの位置に配置される。

なお、Ｚ軸配置情報を、図４に示すように、スタイル属性とは別のＺ軸配置属性「three-dimension」の属性値として定義することも可能である。

そして、モノメディア情報に立体マルチメディアＺ軸配置情報及び立体マルチメディアＸ・Ｙ軸配置情報が付加された立体マルチメディア情報は、配信部１３を介してマルチメディア情報受信装置２に配信される。なお、配信方法は、特に限定されず、有線又は無線により配信される。

本発明に係るマルチメディア情報配信装置１を使用して、平面モノメディア情報を配信する場合には、マルチメディアＺ軸配置情報を定義する属性値を零に設定してもよく、属性値そのものを省略してもよい。

配信部１３を介して配信される立体マルチメディア情報を受信するマルチメディア情報受信装置２は、図５に示すように、受信部２１と、立体マルチメディア画面描画部２２と、立体画面表示部２３とを含む。

立体マルチメディア画面描画部２２は、立体マルチメディア情報をモノメディア情報とマルチメディアＺ軸配置情報とマルチメディアＸ・Ｙ軸配置情報とに分離する立体マルチメディア情報分離部２４と、モノメディア情報に基づいてモノメディア画面を生成するモノメディア画面描画部２５と、マルチメディアＸ・Ｙ軸配置情報に基づいてモノメディア画面を平面配置し、マルチメディアＸ・Ｙ軸配置情報に基づいてモノメディア画面を立体配置した立体マルチメディア画面生成部２６とを含む。

立体マルチメディア画面描画部２２は、拡張ＢＭＬ文書から立体マルチメディア画像を描画する拡張ＢＭＬブラウザがインストールされたデジタルコンピュータで構成される。

マルチメディア情報受信装置２が、図３に示される立体マルチメディア情報を受信した場合には、立体マルチメディア情報分離部２４は、マルチメディア情報をモノメディア情報、マルチメディアＺ軸配置情報及びマルチメディアＸ・Ｙ軸配置情報に分離する。

即ち、モノメディア画面描画部２５は、各要素のスタイル属性の「depth」属性値をマルチメディアＺ軸配置情報として、スタイル属性の「left」属性値及び「top」属性値をマルチメディアＸ・Ｙ軸配置情報として、その他の情報をモノメディア情報として分離する。

モノメディア画面描画部２５は、分離されたモノメディア情報に基づいて、文字列「ＡＢＣＤＥ」を幅２００ピクセル、高さ５０ピクセルの領域に、jpegで符号化された画像「Picture」を幅３００ピクセル、高さ２００ピクセルの領域に描画する。

立体マルチメディア画面生成部２６は、図６に示すように、モノメディア画面描画部２５で生成された文字列「ＡＢＣＤＥ」の画面の左上端を第１のＤＩＶの左上端を基準するＸ・Ｙ・Ｚ座標軸系の（０ピクセル、０ピクセル、１００ピクセル）の点に配置し、第１のＤＩＶ要素の左上端をＺ軸方向基準面の原点を基準するＸ・Ｙ・Ｚ座標軸系の（１５０ピクセル、５０ピクセル、０ピクセル）に配置する。

さらに、立体マルチメディア画面生成部２６は、モノメディア画面描画部２５で描画された画像「Picture」の左上端を第２のＤＩＶの原点を基準するＸ・Ｙ・Ｚ座標軸系の（３０ピクセル、３０ピクセル、１００ピクセル）の点に配置し、第２のＤＩＶ要素の左上端をＺ軸方向基準面の原点を基準するＸ・Ｙ・Ｚ座標軸系の（１２０ピクセル、１７０ピクセル、５０ピクセル）に配置する。

そして、立体画面表示部２３は、立体マルチメディア画面生成部２６で生成された立体マルチメディア画面を立体的に表示する。なお、図７は各属性値と表示位置の関係の詳細説明図であって、（イ）は正面図、（ロ）は側面図、（ハ）は文字列の拡大図である。

立体画面表示部２３の形式は、特に限定されないが、視差補正方法を適用した場合には、立体画面表示部２３には図８に示す左画面及び右画面が表示される。

以上は、モノメディア情報が、平面（２次元）モノメディア画面である場合を示したが、モノメディア情報自体が３次元情報を含んでいてもよい。

図９は、モノメディア情報が３次元情報として背景情報を含む場合であって、（イ）に示すようにスタイル属性の１つの属性値「background_depth」として定義されてもよく、（ロ）に示すように三次元属性「three-dimension」の１つの属性値「background_depth」として定義されてもよい。

さらに、図１０に示すように、モノメディア情報が３次元情報として文字の厚み情報をスタイル属性の「front-thickness」属性値として含んでもよい。

また、モノメディア情報が画像を含む場合は、画像自体が３次元画面であってもよい。

図１１は、「depth-data」属性の属性値で指示されるファイルの中に画素ごとのＺ軸配置情報を収納した場合の拡張ＢＭＬ文書である。モノメディア画面描画部２５は、「depth-data」属性の属性値で指示されるファイル「Picture-depth.jpg」をモノメディアＺ軸位置情報として分離し、画像「Picture」の平面画面の各画素をモノメディアＺ軸位置情報に従ってＺ軸方向に配置して立体モノメディア画面を生成する。

図１１は、画像をjpegで符号化した場合を示しているが、ＢＭＰ、mpeg、ＰＮＧ、ＧＩＦ等で符号化した場合にもこの記述形式を適用できる。

図１２は、モノメディアＺ軸位置情報を画像の平面情報がＰＮＧで符号化されているチャンクとは別のチャンクに符号化して、同一のファイルに格納した拡張ＢＭＬ文書である。モノメディア画面描画部２５は、「data」属性の属性値ファイル「Picture.png」の奥行チャンクをモノメディアＺ軸位置情報として分離し、画像「Picture」の平面画面の各画素を奥行チャンクに格納されているモノメディアＺ軸位置情報ファイルに従ってＺ軸方向に配置して立体モノメディア画面を生成する。

さらに、モノメディア画面描画部２５は、自然を立体カメラで撮影した画像のように画像データ自体がＺ軸配置情報を含んでいるものをオブジェクトとすることも可能である。

図１３は、従来の平面画面表示装置用の中央視画像と立体表示装置用に左右二画面を、独立のデータ属性の属性値で指示されるファイルに格納した拡張ＢＭＬ文書である。

この拡張ＢＭＬ文書を本発明に係るマルチメディア情報受信装置２で受信した場合は、モノメディア画面描画部２５は「3D-type」属性、「left-data」属性及び「right-data」属性のファイルを使用して立体モノメディア画像を描画する。

なお、上記は中央視画像と左右画像が独立のファイルに格納されているものとしているが、３つの画像は非常に似ているので、「left-data」属性及び「right-data」属性として中央視画像からの差分を使用するようにすれば、ファイルサイズを低減することができる。

さらに、左右一方の画像を中央視画像で代用することにより、さらにファイルサイズを低減することもできる。

また、モノメディアＺ軸情報として、文字の境界に厚みを定義することも、文字または画像の影を定義することも可能である。モノメディアＺ軸情報として影を定義した場合には、ＤＯＭ（Document Object Model）を使用して影を自由に操作することが可能となる。

なお、図１３の拡張ＢＭＬ文書を従来の平面表示装置を備える受信装置で受信した場合には、「3D-type」属性、「left-data」属性及び「right-data」属性のファイルは無視され、中央視画像に基づいて平面画像が表示される。

立体マルチメディア画面生成部２６は、モノメディア画面描画部２５で生成されたモノメディア画面をマルチメディアＺ軸配置情報に基づいて左眼画面及び右眼画面を描画するが、基準面からＤ（基準面前方を正、基準面後方を負とする）の距離にあるオブジェクトについては、左眼画面は右方に、右眼画面は左方にずらして描画することが必要となる。

図１４は補正方法の説明図であって、補正量ΔＸは次式で表すことができる。
ΔＸ＝（ａ／ｄ）Ｄ＝αＤ
ここで、ａ＝顔中心と眼の距離
ｄ＝眼と基準面の距離
α＝ａ／ｄ
ただし、ｄ＞＞Ｄである。

従って、図３の拡張ＢＭＬ文書を描画する場合には、図１５に示すように、文字列「ＡＢＣＤＥ」はＺ軸方向基準面の前方１００ピクセルに配置されているので、立体マルチメディア画面生成部２６は、左眼画面を１００α右側に移動して描画し、右眼画面を１００α左側に移動して描画する。

同じく図１５に示すように、立体マルチメディア画面生成部２６は、画像「Picture」及び第２のＤＩＶ要素をそれぞれ１５０α、５０α補正して描画する。

なお、図１５は、視差補正方法を適用した場合の左眼画面（イ）、右眼画面（ロ）であり、立体マルチメディア画面生成部２６は矢印の方向に描画位置を補正する。

また、実際に立体画面表示部２３に表示される画面の例を図１６に示す。

なお、マルチメディア情報受信装置２によって、マルチメディアＺ軸配置情報を含まないマルチメディア情報を受信した場合には、立体マルチメディア情報分離部２４はマルチメディアＺ軸情報を零に設定して立体マルチメディア画面生成部２６に出力する。この結果、立体マルチメディア画面生成部２６では、平面マルチメディア画面が生成される。

また、本発明に係るマルチメディア情報配信装置１で配信される立体マルチメディア情報を従来の平面マルチメディア情報受信装置で受信した場合には、拡張ＢＭＬブラウザはマルチメディアＺ軸配置情報およびモノメディアＺ軸情報を無視して、平面マルチメディア画面を生成する。

以上の説明から明らかなように、本発明に係るマルチメディア情報配受信システムは、従来から使用されている２次元マルチメディア情報配受信システムと互換性を有している。

図１７は本発明に係るマルチメディア情報配受信システムと、従来の平面マルチメディア情報配受信システムの互換性の説明図であって、マルチメディア情報配信装置１で生成された立体マルチメディア情報は、経路ａを介してマルチメディア情報受信装置２に配信され、マルチメディア情報受信装置２で立体マルチメディア画面として表示される。

平面マルチメディア情報配信装置３で生成された平面マルチメディア情報は、経路ｂを介して平面マルチメディア情報受信装置４に配信され、平面マルチメディア情報受信装置４で平面マルチメディア画面として表示される。

マルチメディア情報配信装置１で生成された立体マルチメディア情報は、経路ｃを介して平面マルチメディア情報受信装置４に配信され、平面マルチメディア情報受信装置４で平面マルチメディア画面として表示される。この場合、平面マルチメディア情報受信装置４は、立体マルチメディア情報に含まれるマルチメディアＺ軸配置情報を無視する。

平面マルチメディア情報配信装置３で生成された平面マルチメディア情報は、経路ｄを介してマルチメディア情報受信装置２に配信され、マルチメディア情報受信装置２で平面マルチメディア画面として表示される。この場合、マルチメディア情報受信装置２は、マルチメディアＺ軸配置情報を零に設定する。

以上は、複数の画像データおよび文字データを一画面に立体的に表示する場合について説明したが、立体マルチメディア情報を立体テレビジョン放送と多重して配信することも可能である。

即ち、本発明に係るマルチメディア情報配受信システムの第２の実施形態は、図１８に示すように、複数のモノメディア情報が多重された立体マルチメディア情報を配信するマルチメディア情報配信手段として機能するマルチメディア情報配信装置５と、マルチメディア情報配信装置５から配信された立体マルチメディア情報を受信するマルチメディア情報受信手段として機能するマルチメディア情報受信装置６からなるマルチメディア情報配受信システムである。

マルチメディア情報配信装置５は、図１９に示すように、複数のモノメディア情報を生成するモノメディア情報生成部１１と、複数のモノメディア情報に複数のモノメディア情報間のＺ軸方向の配置情報であるマルチメディアＺ軸配置情報及び複数のモノメディア情報間のＸ・Ｙ軸方向の配置情報であるマルチメディアＸ・Ｙ軸配置情報を付加して立体マルチメディア情報を生成する立体マルチメディア情報生成部１２と、立体テレビジョン情報を生成する立体テレビジョン情報生成部５１と、立体マルチメディア情報に立体テレビジョン情報を多重する立体テレビジョン情報多重部５２と、立体テレビジョン情報が多重された立体マルチメディア情報を配信する配信部５３とを含む。なお、第１の実施形態のマルチメディア情報配信装置１と同一の機能を有する構成要素には参照の参照番号を付して、詳細な説明を省略する。

また、マルチメディア情報受信装置６は、図２０に示すように、配信部５３から配信された立体マルチメディア情報を受信する受信部６１と、受信部６１で受信された立体マルチメディア情報から立体テレビジョン情報を分離する立体テレビジョン情報分離部６２と、立体テレビジョン情報が分離された立体マルチメディア情報に基づいて立体マルチメディア画面を描画する立体マルチメディア画面描画部２２と、立体テレビジョン情報分離部６２で分離された立体テレビジョン情報に基づいて立体テレビジョン画面を描画する立体テレビジョン画面描画部６３と、立体マルチメディア画面と立体テレビジョン画面とを合成する立体テレビジョン画面合成部６４と、立体テレビジョン画面が合成された立体マルチメディア画面を立体表示する立体画面表示部６５とを含む。なお、第１の実施形態のマルチメディア情報受信装置２と同一の機能を有する構成要素には参照の参照番号を付して、詳細な説明を省略する。

立体テレビジョン情報生成部５１は、立体テレビジョンカメラで被写体を撮像することにより立体テレビジョン情報を生成する。

立体テレビジョン情報多重部５２は、立体マルチメディア情報生成部１２で生成された立体マルチメディア情報に立体テレビジョン情報を多重して、配信部５３に伝送する。

立体テレビジョン情報分離部６２は、受信部６１で受信した立体マルチメディア情報から立体テレビジョン情報を分離する。

立体テレビジョン画面描画部６３は、立体テレビジョン情報に基づいて立体テレビジョン画面を生成する。

立体テレビジョン画面合成部６４は、立体マルチメディア画面と立体テレビジョン画面とを合成する。

そして、立体画面表示部６５は、立体マルチメディア画面と立体テレビジョン画面を１つの立体画面として表示する。

以上のように、マルチメディア情報をマルチメディアＺ軸配置情報に基づいて立体配置したマルチメディア画像を表示することができるという効果を有し、マルチメディア情報配受信システム、マルチメディア情報配信装置及びマルチメディア情報受信装置等として有用である。

本発明に係るマルチメディア情報配受信システムの第１の実施形態の構成図 本発明に係るマルチメディア情報配信システムの第１の実施形態の構成図 立体マルチメディア情報の符号化文書（その１） 立体マルチメディア情報の符号化文書（その２） 本発明に係るマルチメディア情報受信システムの第１の実施形態の構成図 立体マルチメディア画面の斜視図 属性値と表示位置の関係の説明図 視差補正方法を適用したときの左眼画面と右眼画面（その１） 立体マルチメディア情報の符号化文書（その３） 立体マルチメディア情報の符号化文書（その４） 立体マルチメディア情報の符号化文書（その５） 立体マルチメディア情報の符号化文書（その６） 立体マルチメディア情報の符号化文書（その７） 表示位置補正方法の説明図 表示位置補正後の左眼画面と右眼画面 視差補正方法を適用したときの左眼画面と右眼画面（その２） 立体マルチメディア情報受配信システムと平面マルチメディア情報受配信システムの互換性の説明図 本発明に係るマルチメディア情報配受信システムの第２の実施形態の構成図 本発明に係るマルチメディア情報配信システムの第２の実施形態の構成図 本発明に係るマルチメディア情報受信システムの第２の実施形態の構成図

符号の説明

１、５ マルチメディア情報配信装置
１１ モノメディア情報生成部
１５ 画像情報生成部
１６ 文字情報生成部
１７ 立体画像情報生成部
１８ 立体文字情報生成部
１２ 立体マルチメディア情報生成部
１３、５３ 配信部
５１ 立体テレビジョン情報生成部
５２ 立体テレビジョン情報多重部
２、６ マルチメディア情報受信装置
２１、６１ 受信部
６２ 立体テレビジョン情報分離部
２２ 立体マルチメディア画面描画部
２４ 立体マルチメディア情報分離部
２５ モノメディア画面描画部
２６ 立体マルチメディア画面生成部
６３ 立体テレビジョン画面描画部
６４ 立体テレビジョン画面合成部
２３、６５ 立体画面表示部

Claims (11)

1. 複数のモノメディア情報を含むマルチメディア情報を配信するマルチメディア情報配信手段と、前記マルチメディア情報配信手段から配信されたマルチメディア情報を受信するマルチメディア情報受信手段とからなるマルチメディア情報配受信システムであって、
   前記マルチメディア情報配信手段が、
   複数のモノメディア情報を生成するモノメディア情報生成部と、
   前記複数のモノメディア情報に、前記複数のモノメディア情報を描画する際のＺ軸方向の配置情報であるマルチメディアＺ軸情報、及びＸ・Ｙ軸方向の配置情報であるマルチメディアＸ・Ｙ軸情報を付加して立体マルチメディア情報を生成する立体マルチメディア情報生成部と、
   前記立体マルチメディア情報を配信する配信部とを含み、
   マルチメディア情報受信手段が、
   前記配信部から配信された前記立体マルチメディア情報を受信する受信部と、
   前記受信部で受信された前記立体マルチメディア情報に基づいて立体マルチメディア画面を描画する立体マルチメディア画面描画部と、
   前記立体マルチメディア画面描画部で描画された前記立体マルチメディア画面を立体表示する立体画面表示部とを含むマルチメディア情報配受信システム。
2. 複数のモノメディア情報を含む立体マルチメディア情報を配信するマルチメディア情報配信手段と、前記マルチメディア情報配信手段から配信された立体マルチメディア情報を受信するマルチメディア情報受信手段とからなるマルチメディア情報配受信システムであって、
   前記マルチメディア情報配信手段が、
   複数のモノメディア情報を生成するモノメディア情報生成部と、
   前記複数のモノメディア情報に、前記複数のモノメディア情報を描画する際のＺ軸方向の配置情報であるマルチメディアＺ軸情報、及びＸ・Ｙ軸方向の配置情報であるマルチメディアＸ・Ｙ軸情報を付加して立体マルチメディア情報を生成する立体マルチメディア情報生成部と、
   立体テレビジョン情報を生成する立体テレビジョン情報生成部と、
   前記立体マルチメディア情報に前記立体テレビジョン情報を多重する立体テレビジョン情報多重部と、
   前記立体テレビジョン情報が多重された前記立体マルチメディア情報を配信する配信部とを含み、
   マルチメディア情報受信手段が、
   前記配信部から配信された前記立体マルチメディア情報を受信する受信部と、
   前記受信部で受信された前記立体マルチメディア情報から前記立体テレビジョン情報を分離する立体テレビジョン情報分離部と、
   前記立体テレビジョン情報が分離された前記立体マルチメディア情報に基づいて立体マルチメディア画面を描画する立体マルチメディア画面描画部と、
   前記立体テレビジョン情報分離部で分離された立体テレビジョン情報に基づいて立体テレビジョン画面を描画する立体テレビジョン画面描画部と、
   前記立体マルチメディア画面と前記立体テレビジョン画面とを合成する立体テレビジョン画面合成部と、
   前記立体テレビジョン画面が合成された前記立体マルチメディア画面を立体表示する立体画面表示部とを含むマルチメディア情報配受信システム。
3. 複数のモノメディア情報を含む立体マルチメディア情報を配信するマルチメディア情報配信装置であって、
   複数のモノメディア情報を生成するモノメディア情報生成部と、
   前記複数のモノメディア情報に、前記複数のモノメディア情報を描画する際のＺ軸方向の配置情報であるマルチメディアＺ軸配置情報、及びＸ・Ｙ軸方向の配置情報であるマルチメディアＸ・Ｙ軸配置情報を付加して立体マルチメディア情報を生成する立体マルチメディア情報生成部と、
   前記立体マルチメディア情報生成部で生成された立体マルチメディア情報を配信する配信部とを含むマルチメディア情報配信装置。
4. 前記モノメディア情報生成部が、
   画像情報を生成する画像情報生成部と、
   文字情報を生成する文字情報生成部とを含む請求項３に記載のマルチメディア情報配信装置。
5. 前記画像情報生成部が、立体画像情報を生成する立体画像情報生成部を含む請求項４に記載のマルチメディア情報配信装置。
6. 前記文字情報生成部が、立体文字情報を生成する立体文字情報生成部を含む請求項４に記載のマルチメディア情報配信装置。
7. 複数のモノメディア情報を含む立体マルチメディア情報を配信するマルチメディア情報配信装置であって、
   複数のモノメディア情報を生成するモノメディア情報生成部と、
   前記複数のモノメディア情報に、前記複数のモノメディア情報を描画する際のＺ軸方向の配置情報であるマルチメディアＺ軸情報、及びＸ・Ｙ軸方向の配置情報であるマルチメディアＸ・Ｙ軸情報を付加して立体マルチメディア情報を生成する立体マルチメディア情報生成部と、
   立体テレビジョン情報を生成する立体テレビジョン情報生成部と、
   前記立体マルチメディア情報に前記立体テレビジョン情報を多重する立体テレビジョン情報多重部と、
   前記立体テレビジョン情報が多重された前記立体マルチメディア情報を配信する配信部とを含むマルチメディア情報配信装置。
8. 複数のモノメディア情報を含む立体マルチメディア情報を受信するマルチメディア情報受信装置であって、
   前記立体マルチメディア情報を受信する受信部と、
   前記受信部で受信された前記立体マルチメディア情報に基づいて立体マルチメディア画面を描画する立体マルチメディア画面描画部と、
   前記立体マルチメディア画面描画部で描画された前記立体マルチメディア画面を立体表示する立体画面表示部とを含むマルチメディア情報受信装置。
9. 前記立体マルチメディア画面描画部が、
   前記受信部で受信された前記立体マルチメディア情報をモノメディア情報と前記複数のモノメディア情報を描画する際のＺ軸方向の配置情報であるマルチメディアＺ軸配置情報とＸ・Ｙ軸方向の配置情報であるマルチメディアＸ・Ｙ軸配置情報に分離する立体マルチメディア情報分離部と、
   前記モノメディア情報からモノメディア画面を描画するモノメディア画面描画部と、
   前記マルチメディアＸ・Ｙ軸配置情報に基づいて前記モノメディア画面を平面的に配置し、前記マルチメディアＺ軸配置情報に基づいて前記モノメディア画面を立体的に配置して立体マルチメディア画面を生成する立体マルチメディア画面生成部とを含む請求項８に記載のマルチメディア情報受信装置。
10. 前記モノメディア画面描画部が、立体モノメディア画面を描画するものである請求項９に記載のマルチメディア情報受信部。
11. 複数のモノメディア情報を含む立体マルチメディア情報を受信するマルチメディア情報受信装置であって、
    前記立体マルチメディア情報を受信する受信部と、
    前記受信部で受信された前記立体マルチメディア情報から前記立体テレビジョン情報を分離する立体テレビジョン情報分離部と、
    前記立体テレビジョン情報が分離された前記立体マルチメディア情報に基づいて立体マルチメディア画面を描画する立体マルチメディア画面描画部と、
    前記立体テレビジョン情報分離部で分離された立体テレビジョン情報に基づいて立体テレビジョン画面を描画する立体テレビジョン画面描画部と、
    前記立体マルチメディア画面に前記立体テレビジョン画面を合成する立体テレビジョン画面合成部と、
    前記立体テレビジョン画面が合成された前記立体マルチメディア画面を立体表示する立体画面表示部とを含むマルチメディア情報受信装置。

Images