JP2003259336A - データ生成方法、データ生成装置、データ伝送方法、映像プログラム再生装置、映像プログラム再生方法、記録媒体 - Google Patents

Abstract

(57)【要約】 【課題】 映像プログラム画像中の特定の画像オブジェ
クトに付加される情報である副情報を、視聴者に容易か
つ確実に提供し、視聴者が容易かつ確実に取得できるよ
うにする。 【解決手段】 映像プログラム画像に重畳される仮想画
面上の、映像プログラム中の特定された画像オブジェク
トに重畳されるインデックスオブジェクト領域内の各画
素に対して、当該画像オブジェクトを特定できる一の値
を設定して、インデックスピクチャデータを生成すると
ともに、当該画像オブジェクトに付加される副情報への
アクセス情報を上記の値に関連づけて規定したリンクデ
ータを生成して、再生側に伝送する。再生側では、特定
の画像オブジェクトをポインティングして、その画像オ
ブジェクトに付加される副情報へのアクセス情報を取得
し、そのアクセス情報によって副情報を取得する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】この発明は、映像プログラム
画像中の特定の画像オブジェクト（対象物）に付加され
る情報を、副情報（サブコンテンツ）として、視聴者に
提供し、視聴者が取得するための方法および装置に関す
る。

【０００２】

【従来の技術】デジタル放送などの映像プログラムにお
いて、プログラム画像中の人物や商品などのオブジェク
トについての情報、例えば、ドラマや音楽番組に出演す
る俳優や歌手の氏名、プログラム画像中で紹介される商
品やサービスの具体的な内容、プログラム画像中で紹介
される施設や観光地の詳細な場所などの情報を、視聴者
に提供し、視聴者が取得する方法としては、従来、メニ
ューの表示および選択による方法が考えられている。

【０００３】

【発明が解決しようとする課題】しかしながら、メニュ
ーの表示および選択による方法では、（ａ）視聴者は、
視聴中の映像プログラム中に自分の欲する情報が付加さ
れているか否かを認識する手段がなく、そのため、いた
ずらにメニュー画面を操作して、目的の情報が付加され
ているか否かを検索しなければならない。

【０００４】また、（ｂ）当該プログラムがマルチフレ
ーム表示によって提供され、オブジェクト情報がサブフ
レームとして表示される場合には、主たる映像プログラ
ムの表示領域が縮小されるため、映像を高画質で見たい
視聴者の要求を満足することができない。

【０００５】さらに、（ｃ）ビデオサーバ（ホームサー
バ）などの映像蓄積装置を有しない視聴装置（受信装
置）で映像を再生表示する場合、放送電波やＣＡＴＶな
どによって定時に配信される映像プログラムなどでは、
メニュー操作している間にもストーリーが進行するの
で、視聴者は、メニュー操作している間、映像プログラ
ムを見ることができないだけでなく、メニュー操作によ
る検索の結果、目的の情報を取得できない場合には不満
を抱く。

【０００６】また、（ｄ）映像表示装置の限られた表示
領域に表示できるメニューの数は、制限され、特にマル
チフレーム表示によって映像プログラムと同時にメニュ
ーが表示される場合には、より制限されるため、メニュ
ー表示によって多くの情報を提供しようとすると、メニ
ュー構造を多層化（階層化）する必要がある。しかし、
その場合には、メニュー操作が煩雑となり、目的の情報
を取得するのに時間がかかる。

【０００７】また、（ｅ）メニュー操作によって情報を
選択する場合、視聴者は、メニューに表示された文字を
読んで、内容を認識しなければ、正確な選択をすること
ができず、直感的な操作選択をすることができない。

【０００８】さらに、（ｆ）メニュー操作による情報の
取得には、選択項目として対象オブジェクトの呼称や名
称などを必要とするが、視聴者が対象オブジェクトの呼
称や名称などを知らない場合には、その知識の欠如を補
完する手段がない。そのため、視聴者は、「これは誰
か」「これは何か」といった根元的な疑問を動機として
情報を取得することが難しい。

【０００９】また、（ｇ）映像プログラム中の動画オブ
ジェクトは、画面上で移動し、または他の動画オブジェ
クトと交代するので、メニュー表示による動画オブジェ
クトについての情報の提示は、それ自体が難しいととも
に、メニューで表示されている文字を読んでいる間に当
該オブジェクトが消失してしまうなど、逐次的に情報を
付加することができないという問題がある。

【００１０】また、（ｈ）アイコンによって情報を提示
する方法もあるが、視聴者は、映像プログラムを注視
し、目立たない位置に表示されるアイコンは注視しない
ので、情報が付加されていることに気づかないことがあ
る。

【００１１】また、（ｉ）メニュー方式およびアイコン
方式のいずれについても、提示できるのは主として、そ
のとき表示される画面全体または映像プログラム全体に
ついての情報、または付加サービスの切り替えのための
表示であって、画像オブジェクト単位についての情報を
提示することは難しい。

【００１２】さらに、従来の方法では、（ｊ）映像プロ
グラム画像中の視聴者が注目する特定のオブジェクト
を、強調表示、拡大表示、追跡表示するなど、オブジェ
クト単位で画像処理を施すことができない。

【００１３】また、（ｋ）視聴装置に内蔵された、また
は視聴装置に接続されたパーソナルコンピュータなどの
情報処理端末に装備された、光ディスクやハードディス
クなどの記憶装置に記録された映像プログラムに、その
画像オブジェクトについての視聴者が独自に制作または
収集した情報をサブコンテンツとして、視聴者が検索可
能なように定義して追記することができない。

【００１４】そこで、この発明は、上記の問題を解決し
て、映像プログラム画像中の特定の画像オブジェクトに
付加される情報である副情報を、視聴者に容易かつ確実
に提供し、視聴者が容易かつ確実に取得することができ
るようにしたものである。

【００１５】

【課題を解決するための手段】この発明のデータ生成方
法は、映像プログラム画像に重畳される仮想画面上の、
映像プログラム画像中の特定された画像オブジェクト領
域に重畳される領域であるインデックスオブジェクト領
域内の各画素に対して、同一の映像プログラム中で当該
画像オブジェクトを特定することができる一の値を設定
して、映像プログラムデータとは別のデータであるイン
デックスピクチャデータを生成する工程と、前記特定さ
れた画像オブジェクトに付加される情報である副情報に
アクセスするための情報を、当該画像オブジェクトに対
応したインデックスオブジェクトが有する値に関連づけ
て規定したデータを、リンクデータとして生成する工程
と、を備えるものとする。

【００１６】この発明のデータ伝送方法では、映像プロ
グラムデータ、および上記のように生成されたインデッ
クスピクチャデータおよびリンクデータを、多重化し
て、同一の伝送手段によって、または、同期再生可能
に、別の伝送手段によって、再生側に伝送する。

【００１７】この発明の映像プログラム再生装置は、伝
送された映像プログラムデータを再生して、ディスプレ
イ上に映像プログラム画像を表示する手段と、映像プロ
グラム画像に重畳される仮想画面上の、映像プログラム
画像中の特定された画像オブジェクト領域に重畳される
領域であるインデックスオブジェクト領域内の各画素に
対して、同一の映像プログラム中で当該画像オブジェク
トを特定することができる一の値が設定されて、映像プ
ログラムデータとは別のデータとして生成され、伝送さ
れたインデックスピクチャデータを、映像プログラムデ
ータに同期させて再生する手段と、前記特定された画像
オブジェクトに付加される情報である副情報にアクセス
するための情報が、当該画像オブジェクトに対応したイ
ンデックスオブジェクトが有する値に関連づけて規定さ
れて生成され、伝送されたリンクデータを、前記インデ
ックスピクチャデータに同期させて再生する手段と、指
示操作に基づいて、前記ディスプレイ上に表示された映
像プログラム画像中の画像オブジェクトを指示するポイ
ンティング手段と、その指示された画像オブジェクトに
対応したインデックスオブジェクトが存在するとき、当
該インデックスオブジェクトが有する値によって、当該
画像オブジェクトに対応するリンクデータを参照する手
段と、その参照されたリンクデータに規定されたアクセ
ス情報によって副情報にアクセスして副情報を取得する
手段と、その取得された副情報を再生する手段と、を備
えるものとする。

【００１８】上記のような、この発明の方法または装置
によれば、副情報提供者は、映像プログラム画像中の特
定の画像オブジェクトについての副情報を、視聴者に容
易かつ確実に提供することができ、視聴者は、その副情
報を容易かつ確実に取得することができる。

【００１９】

【発明の実施の形態】〔画像オブジェクトおよびインデ
ックスオブジェクト：図１〕図１の上段に、映像プログ
ラム画像の例を示す。映像プログラムは、輝度データと
色差データが多重化されたデジタル映像データによっ
て、シーン１，２，３…の各シーンの画像を有するもの
として構成される。映像データには音声データや制御情
報が多重化されるが、ここでは省略する。

【００２０】デジタル映像システムとしては、ＮＴＳ
Ｃ，ＰＡＬまたはＤＴＶ（デジタルテレビ）などとして
規定されている各種フォーマットの映像システムのいず
れでもよい。

【００２１】図１の例では、シーン１の映像プログラム
ＶＰ１は、人物１ｖ、端末２ｖ、椅子３ｖ、机５ｖ、植
物６ｖおよび背景を有するものとして、時刻ｔｓ１から
時刻ｔｓ２までの間に展開可能なフレームによって構成
されている。シーン２の映像プログラムＶＰ２は、人物
１ｖおよび背景を有するものとして構成され、シーン３
の映像プログラムＶＰ３は、人物１ｖ，４ｖおよび背景
を有するものとして構成されている。シーン１，２，３
の人物１ｖは、同一人物である。

【００２２】このような映像プログラム画像中の有意の
画像オブジェクトとして、例えば、シーン１では、人物
１ｖ、端末２ｖおよび椅子３ｖを、シーン２では、人物
１ｖを、シーン３では、人物１ｖおよび４ｖを、それぞ
れ特定する。

【００２３】有意とは、視聴者に興味や関心を持って欲
しいもの、または視聴者が興味や関心を持つと思われる
ものであって、副情報（サブコンテンツ）が付加される
ものである。

【００２４】特定した画像オブジェクトについては、当
該画像オブジェクトが出現する画像に重畳される不可視
の画素からなる仮想的な画面上に、当該画像オブジェク
トが出現する画像上における当該画像オブジェクトの領
域と同じ位置および大きさ形状の領域を、インデックス
オブジェクトとして設定する。

【００２５】具体的に、図１の例では、人物１ｖについ
ては、インデックスオブジェクト１ａを設定し、端末２
ｖについては、インデックスオブジェクト２ａを設定
し、椅子３ｖについては、インデックスオブジェクト３
ａを設定し、人物４ｖについては、インデックスオブジ
ェクト４ａを設定する。

【００２６】したがって、インデックスピクチャとして
示すように、インデックスオブジェクトが設定された画
面も、映像プログラムの各シーンおよび各フレームに対
応した各シーンおよび各フレームの画面によって構成さ
れ、シーン１のインデックスピクチャＩＰ１は、インデ
ックスオブジェクト１ａ，２ａおよび３ａを有し、シー
ン２のインデックスピクチャＩＰ２は、インデックスオ
ブジェクト１ａを有し、シーン３のインデックスピクチ
ャＩＰ３は、インデックスオブジェクト１ａおよび４ａ
を有するものとなる。

【００２７】さらに、それぞれのインデックスオブジェ
クト領域内の各画素に対して、当該インデックスオブジ
ェクトに対応した画像オブジェクトを特定することがで
きる一の値を、インデックスオブジェクト値（インデッ
クスオブジェクトを構成する画素の値）として設定す
る。

【００２８】例えば、１フレームの映像プログラム画像
中で最大７個の画像オブジェクトを特定する場合には、
インデックスオブジェクト値は３ビット長とし、２進数
表現で、例えば、人物１ｖに対応したインデックスオブ
ジェクト１ａの領域内の各画素に対しては、００１を付
与し、端末２ｖに対応したインデックスオブジェクト２
ａの領域内の各画素に対しては、０１０を付与し、椅子
３ｖに対応したインデックスオブジェクト３ａの領域内
の各画素に対しては、０１１を付与し、人物４ｖに対応
したインデックスオブジェクト４ａの領域内の各画素に
対しては、１００を付与し、１フレームのインデックス
ピクチャ中のインデックスオブジェクトが設定されない
領域内の各画素に対しては、０００を付与する。

【００２９】後述のように、各シーンの再生開始時刻お
よび再生終了時刻の情報を、リンクデータの一部として
生成して再生側に伝送する場合には、この再生開始時刻
情報および再生終了時刻情報とインデックスオブジェク
ト値とによって、各シーンのインデックスオブジェクト
およびこれに対応した画像オブジェクトを特定できるの
で、同一の画像オブジェクトに対応した同一のインデッ
クスオブジェクトでも、異なるシーンの間でインデック
スオブジェクト値を異ならせることができる。

【００３０】実際的には、１フレームの映像プログラム
画像中で、より多くの画像オブジェクトを特定できるよ
うに、インデックスオブジェクト値のデータ長は３ビッ
トより大きくする。例えば、インデックスオブジェクト
値を８ビット長とすれば、１フレームの映像プログラム
画像中で最大２５５個の画像オブジェクトを特定するこ
とができる。この場合、インデックスオブジェクト以外
の領域の画素値は、１６進数表現で、例えば００ｈとす
る。

【００３１】以上のようにインデックスオブジェクトの
領域内の各画素に対してインデックスオブジェクト値が
設定され、インデックスオブジェクト以外の領域内の各
画素に対して別の画素値が設定されたデータストリーム
が、インデックスピクチャである。

【００３２】〔インデックスピクチャの生成：図２〕図
２（Ａ）（Ｂ）に、それぞれ、インデックスピクチャ生
成装置の一例を示す。

【００３３】図２（Ａ）の例のインデックスピクチャ生
成装置で、映像ソース１１は、デジタルビデオカメラ、
デジタルビデオテープレコーダ、テレシネ変換装置、ビ
デオサーバなどの、デジタル映像プログラムが得られる
装置で、その映像プログラムとして、ＮＴＳＣ映像シス
テムまたはＰＡＬ映像システムなどのデジタル映像シス
テムにおけるＩＴＵ−Ｒ６０１またはＩＴＵ−Ｒ６５６
などの規格で輝度データ（Ｙ）と色差データ（Ｃｂ，Ｃ
ｒ）が多重化された映像データのビットストリームや、
ＨＤＴＶ（高品位テレビ）のＢＴＡＳ−００２Ａなどの
デジタル映像システムにおける映像データのビットスト
リームが得られる。

【００３４】ただし、入力映像信号としてはアナログ映
像信号で、これが映像ソース１１の出力部で所定フォー
マットのデジタル映像データに変換されて、映像ソース
１１から出力される構成でもよい。

【００３５】映像ソース１１からの映像プログラムスト
リームＶＰｓは、インデックスピクチャ生成部１４を構
成するオブジェクト抽出部１５に供給され、操作設定部
１８での操作設定に基づく制御部１９の制御によってオ
ブジェクト抽出部１５で、輪郭強調、色相マッチング、
空間フィルタリングなどの処理が施されることによっ
て、映像プログラム画像中の操作設定部１８で指定され
た画像オブジェクトの領域が、インデックスピクチャ上
の対応するインデックスオブジェクトの領域を示す信号
ＯＳとして、フレームごとに連続して抽出される。

【００３６】さらに、このインデックスオブジェクト領
域信号ＯＳがインデックスオブジェクト値設定部１６に
供給され、操作設定部１８での指定によってインデック
スオブジェクト値設定部１６で、インデックスピクチャ
中のインデックスオブジェクト領域内の各画素に対して
インデックスオブジェクト値が設定され、インデックス
オブジェクト以外の領域内の各画素に対して所定の値が
設定されて、インデックスオブジェクト値設定部１６か
ら、すなわちインデックスピクチャ生成部１４から、例
えば８ビット長のインデックスピクチャストリームＩＰ
ｓが得られ、このインデックスピクチャストリームＩＰ
ｓが、圧縮符号化部１７でＭＰＥＧ２またはＭＰＥＧ４
などの圧縮方式によって圧縮符号化される。

【００３７】インデックスピクチャの圧縮については、
同一のインデックスオブジェクト領域内は一定値で直流
成分しか存在せず、インデックスオブジェクトの輪郭部
分でしか交流成分が発生しないので、高圧縮率とするこ
とができる。

【００３８】また、インデックスピクチャの標本化に当
たって、画素数（サンプル数）を実用上支障のない程度
に減少させることによって、同様にインデックスピクチ
ャを高圧縮率で圧縮することができる。

【００３９】オブジェクト抽出部１５で１フレーム期間
内に一度に抽出可能なオブジェクト数が、１フレームの
映像プログラム画像中で特定可能とする最大オブジェク
ト数より少ない場合、例えば、１フレームの映像プログ
ラム画像中で最大２５５個の画像オブジェクトを特定で
きるようにするとき、オブジェクト抽出部１５では１フ
レーム期間内に一度に７個のオブジェクトしか抽出でき
ない場合には、インデックスピクチャ生成部１４は、生
成したインデックスピクチャを一旦、バッファに記録し
ておいて再度、同一フレームの映像プログラム画像から
別の画像オブジェクト領域をインデックスオブジェクト
領域として抽出し、その領域内の各画素に対してインデ
ックスオブジェクト値を設定してインデックスピクチャ
を生成する、という処理を繰り返した後、同一フレーム
の映像プログラム画像から生成した複数のインデックス
ピクチャを１フレームのインデックスピクチャに多重化
するように構成する。

【００４０】図２（Ａ）の例では、他方で、映像ソース
１１からの映像プログラムストリームＶＰｓが、圧縮符
号化部１２でＭＰＥＧ２またはＭＰＥＧ４などの圧縮方
式によって圧縮符号化され、圧縮後の映像プログラムス
トリームが、フレームバッファ１３に書き込まれ、圧縮
符号化部１７からの圧縮後のインデックスピクチャスト
リームＩＰＳに同期して出力されるように、フレームバ
ッファ１３から読み出される。

【００４１】ただし、このように映像ソース１１からの
映像プログラムストリームＶＰｓを、圧縮符号化部１２
で圧縮後、フレームバッファ１３に書き込み、フレーム
バッファ１３から読み出す構成は、映像プログラム画像
とインデックスピクチャとの間での、例えば、ＭＰＥＧ
２圧縮方式におけるＩ，Ｐ，Ｂ各ピクチャの発生タイミ
ングの同期化および動きベクトルの共用化という点で、
必ずしも適切でない。

【００４２】そこで、図２（Ｂ）の例のインデックスピ
クチャ生成装置では、映像ソース１１からの映像プログ
ラムストリームＶＰｓが、フレームバッファ１３に書き
込まれ、フレームバッファ１３から読み出された後、圧
縮符号化部１２で圧縮符号化される。

【００４３】この例では、圧縮符号化部１２から圧縮符
号化部１７に制御情報ＣＴを送出して圧縮符号化部１７
での圧縮符号化を制御することによって、映像プログラ
ム画像とインデックスピクチャとの間で、例えば、ＭＰ
ＥＧ２圧縮方式におけるＩ，Ｐ，Ｂ各ピクチャの発生タ
イミングを同期させ、動きベクトルを共用することがで
きる。また、動きベクトルを共用できることによって、
インデックスピクチャストリームのデータ総量を少なく
することができる。

【００４４】図２（Ａ）の例ではフレームバッファ１３
からの、図２（Ｂ）の例では圧縮符号化部１２からの、
圧縮後の映像プログラムストリームＶＰＳと、圧縮符号
化部１７からの圧縮後のインデックスピクチャストリー
ムＩＰＳは、多重化して、同一の伝送手段によって、再
生側に伝送する。

【００４５】インデックスピクチャストリームＩＰＳを
映像プログラムストリームＶＰＳに多重化する方法とし
ては、例えば、インデックスピクチャストリームＩＰＳ
を、ＭＰＥＧ２システムのトランスポートストリームに
サブセットとして規定することが望ましい。これによっ
て、ＭＰＥＧ伝送方式と全く変わりなく、映像プログラ
ムストリームＶＰＳおよびインデックスピクチャストリ
ームＩＰＳを伝送することができる。

【００４６】ただし、再生側の対応によっては、インデ
ックスピクチャストリームＩＰＳを、サブセットとして
規定しないで、ＭＰＥＧ２システムで規定されているプ
ライベートストリームに多重化してもよい。

【００４７】また、インデックスピクチャストリームＩ
ＰＳに、映像プログラムとインデックスピクチャの間の
同一性を確保するためのプログラムＩＤ（識別情報）な
どの識別情報、および再生側で映像プログラムに同期さ
せてインデックスピクチャを再生するための再生基準時
刻情報を多重化する場合には、映像プログラムストリー
ムＶＰＳとインデックスピクチャストリームＩＰＳを、
多重化しないで、別の伝送手段によって再生側に伝送す
ることができる。

【００４８】〔副情報およびリンクデータ：図３および
図４〕（副情報の概要）映像プログラム画像中のインデ
ックスオブジェクトが設定された画像オブジェクトにつ
いては、これに付加される副情報（サブコンテンツ）と
して、静止画や動画などの画像データ、音声データ、ま
たはテキスト形式のデータ、これらのデータを統合して
プレゼンテーションするためのＢＭＬ，ＸＭＬ，ＨＴＭ
Ｌ，ＶＲＭＬなどのプレゼンテーションツールによって
記述されたインターネットコンテンツまたはインターネ
ット上で伝送可能なコンテンツ、あるいは再生側で再生
可能なフォーマットに適合させた画像データ、音声デー
タ、またはテキスト形式のデータなどを生成し、再生側
に伝送する。

【００４９】（リンクデータの概要およびデータ構造）
さらに、インデックスオブジェクト値に関連づけて、そ
のインデックスオブジェクトに対応した画像オブジェク
トに関連する情報を、リンクデータとして生成し、再生
側に伝送する。

【００５０】具体的に、図１の例では、シーン１につい
ては、人物１ｖ、端末２ｖおよび椅子３ｖに対応したイ
ンデックスオブジェクト１ａ，２ａおよび３ａについて
のリンクデータを、リンクテーブルデータとして生成
し、シーン２については、人物１ｖに対応したインデッ
クスオブジェクト１ａについてのリンクデータを、リン
クテーブルデータとして生成し、シーン３については、
人物１ｖおよび４ｖに対応したインデックスオブジェク
ト１ａおよび４ａについてのリンクデータを、リンクテ
ーブルデータとして生成する。

【００５１】各リンクデータは、最低限の構成として、
図３（Ａ）に示すように、開始コードＰＲＥ、定義コー
ドＤＣ、インデックスオブジェクト値ＩＯＶ、および終
了コードＴＲＭからなるものとする。

【００５２】定義コードＤＣは、制御コード、プログラ
ムＩＤ、映像プログラムのカテゴリを示すコード、映像
プログラムのスポンサー（コマーシャル提供者）を示す
コード、地域コードなどである。

【００５３】定義コードＤＣに、後述の管理センタへの
アクセス情報を規定することによって、後述のように再
生側で管理センタにアクセスして副情報を取得すること
ができる。

【００５４】また、属性コードを付加して、リンクデー
タを、図３（Ｂ）に示すように、開始コードＰＲＥ、定
義コードＤＣ、属性コードＡＣ、インデックスオブジェ
クト値ＩＯＶ、および終了コードＴＲＭからなるものと
することもできる。

【００５５】属性コードＡＣとしては、例えば、（１）
画像オブジェクトの概要をテキストで定義し、（２）副
情報の概要をテキストで定義し、（３）画像オブジェク
トのカテゴリをコードで定義し、（４）副情報のカテゴ
リをコードで定義し、または上記（１）〜（４）のうち
の複数を組み合わせる。

【００５６】属性コードＡＣを付加することによって、
後述のように、再生側では、画像オブジェクトまたは副
情報の属性（カテゴリ）に応じた、または視聴者の視聴
傾向に応じた画像処理を行うことができるとともに、再
生側または管理センタにおいて、視聴者の副情報選択傾
向を分析して、視聴者固有の嗜好属性を視聴者プロファ
イルとして得ることができる。

【００５７】さらに、リンクデータとして、インデック
スオブジェクト値に関連づけて、そのインデックスオブ
ジェクトに対応した画像オブジェクトに付加される副情
報にアクセスするための情報を生成する。

【００５８】この場合のリンクデータは、少なくとも、
インデックスオブジェクト値、インデックスオブジェク
ト（画像オブジェクト）の開始時刻および終了時刻を示
す情報、およびアクセス情報（副情報にアクセスするた
めの情報）を有するものとする。

【００５９】例えば、リンクデータを、図３（Ｃ）に示
すように、開始コードＰＲＥ、定義コードＤＣ、インデ
ックスオブジェクト値ＩＯＶ、開始時刻情報ＢＴＣ、終
了時刻情報ＣＴＣ、アクセス情報ＲＬＶ、および終了コ
ードＴＲＭによって構成し、または、属性コードを付加
して、図３（Ｄ）に示すように、開始コードＰＲＥ、定
義コードＤＣ、属性コードＡＣ、インデックスオブジェ
クト値ＩＯＶ、開始時刻情報ＢＴＣ、終了時刻情報ＣＴ
Ｃ、アクセス情報ＲＬＶ、および終了コードＴＲＭによ
って構成する。

【００６０】開始時刻情報ＢＴＣおよび終了時刻情報Ｃ
ＴＣは、図１の例においては、シーン１のインデックス
オブジェクト１ａ，２ａ，３ａについての各リンクデー
タでは、シーン１の再生開始時刻ｔｓ１および再生終了
時刻ｔｓ２を示し、シーン２のインデックスオブジェク
ト１ａについてのリンクデータでは、シーン２の再生開
始時刻ｔｓ２および再生終了時刻ｔｓ３を示し、シーン
３のインデックスオブジェクト１ａ，４ａについての各
リンクデータでは、シーン３の再生開始時刻ｔｓ３およ
び再生終了時刻ｔｓ４を示すものである。

【００６１】ただし、インデックスオブジェクト１ａは
シーン１からシーン３まで継続して出現するので、イン
デックスオブジェクト１ａについてのリンクデータとし
ては、開始時刻情報ＢＴＣはシーン１の再生開始時刻ｔ
ｓ１を示し、終了時刻情報ＣＴＣはシーン３の再生終了
時刻ｔｓ４を示すものとしてもよい。

【００６２】また、インデックスオブジェクト（画像オ
ブジェクト）が、シーンの途中から出現し、またはシー
ンの途中で消失する場合には、シーン途中の出現時刻を
開始時刻とし、シーン途中の消失時刻を終了時刻として
もよい。

【００６３】図３（Ｅ）に示すように、図３（Ｄ）の例
で、定義コードＤＣを制御コードＤＣ（１）とプログラ
ムＩＤ（識別情報）ＤＣ（２）からなるものとし、各コ
ードおよび各情報のデータ長を図示するバイト数とする
と、１シーン中で平均３２個の画像オブジェクトを特定
するものとし、シーン継続時間を平均３秒としたとき
の、１秒あたりの平均データ量は、（１２８Ｂｙｔｅ×
３２）／３秒＝１３６５Ｂｙｔｅ／秒、すなわち約１１
ｋｂｐｓとなる。

【００６４】（アクセス情報）アクセス情報ＲＬＶは、
副情報のリソース（情報源）に応じて、以下のような情
報とする。

【００６５】（１）インターネット上のサーバ装置から
副情報を取得する場合には、ＩＰ（Ｉｎｔｅｒｎｅｔ
Ｐｒｏｔｏｃｏｌ）で規定されるＵＲＬ（Ｕｎｉｆｏｒ
ｍＲｅｓｏｕｒｃｅ Ｌｏｃａｔｏｒ）とする。

【００６６】（２）公衆網に接続された閉環境の通信ネ
ットワーク上のサーバ装置から副情報を取得する場合に
は、サーバ装置が設置されている端末装置の回線番号ま
たは呼制御情報、および、副情報リソースを特定するフ
ァイル制御情報としての、階層構造情報やファイル名、
または物理アドレスや論理アドレスなどとする。

【００６７】（３）ＤＶＤ、ビデオＣＤ、ＣＤ−ＲＯ
Ｍ、デジタルビデオテープなどのパッケージ記録媒体か
ら副情報を取得する場合には、副情報が記録されている
媒体を特定する情報としての、記録媒体の名称や、商品
コードなどの公的に整理された番号や記号など、およ
び、副情報リソースを示す情報としての、トラック番号
やセクタ番号、階層構造情報やファイル名、または物理
アドレスや論理アドレスなどとする。ただし、映像プロ
グラムが記録されている媒体に副情報も記録されている
場合には、副情報が記録されている媒体を特定する情報
は必須ではない。

【００６８】（４）衛星デジタル放送、地上波デジタル
放送またはＣＡＴＶの定時プログラム配信によって副情
報を取得する場合には、チャネル識別選択情報や、パケ
ット識別選択情報、時刻情報などとする。

【００６９】（５）ＣＡＴＶ網内に設置されたサーバ装
置またはＣＡＴＶ網からインターネットへのブリッジ
（ＩＸ：Ｉｎｔｅｒｎｅｔ Ｅｘｃｈａｎｇｅ）を経由
して、インターネット上のサーバ装置から副情報を取得
する場合には、副情報リソースを特定するＵＲＬ、ある
いはＣＡＴＶ網内のサーバ装置のリソースを特定する情
報としての、ドライブ情報、階層構造情報やファイル
名、または物理アドレスや論理アドレスなどとする。

【００７０】アクセス情報としては、副情報のリソース
だけでなく、副情報提供者のＣＭ（コマーシャル）情報
のリソースを定義することができ、さらには、副情報と
ＣＭ情報の再生順位や、スクランブルされた副情報を解
読する手順などを規定する再生制御情報を定義すること
ができる。

【００７１】また、副情報にアクセスするのに、後述の
ように管理センタへのアクセスを要するものとする場合
には、副情報リソースとともに、管理センタへのアクセ
ス情報を定義し、または、副情報リソースは定義しない
で、管理センタへのアクセス情報のみを定義する。

【００７２】（リソースの定義）具体的に、リンクデー
タにおけるリソースの定義方法としては、以下のような
態様を採ることができる。

【００７３】（１）リンクデータ中に副情報リソースを
直接定義する場合、副情報として、副情報提供者（ＣＭ
提供者）のＣＭ情報を付加することができる。この場合
には、副情報提供者のＣＭ情報と視聴者によって選択さ
れる副情報とが一体化したコンテンツが提供され、再生
側では、ＣＭ情報をマルチウィンドウ表示やシーケンシ
ャル再生によって表示することができる。

【００７４】対象オブジェクトとしては、絵画や彫刻な
どの美術品や、視聴者が興味を持つ、一般には販売でき
ない、俳優やスポーツ選手などの対象物などである。

【００７５】また、この場合、副情報として、ＥＣ（Ｅ
ｌｅｃｔｒｏｎｉｃ Ｃｏｍｍｅｒｃｅ：電子商取引）
などを行う事業者の対象オブジェクトについての販売情
報などを付加することができる。この場合には、視聴者
にインフォマーシャル的な詳細情報を提供することがで
きる。対象オブジェクトとしては、車、家具、時計、小
物、洋服、旅行などである。

【００７６】（２）リンクデータ中に、副情報リソース
および、その副情報提供者のＣＭリソースを直接定義す
る場合、または、さらに上記の再生制御情報を直接定義
する場合、副情報リソースとＣＭリソースを別個に規定
することができるとともに、副情報の制作者と提供者を
分離することができ、副情報のマルチユースが可能とな
る。

【００７７】再生制御情報を直接定義する場合には、後
述のように、副情報をスクランブルし、スクランブルの
解除キーをＣＭ情報中に分散して埋め込んでおき、再生
側では、ＣＭの再生中に、分散された解除キーを収集
し、ＣＭの再生が完了したとき、スクランブル解除キー
が生成されて、副情報を再生できるようなシステム構成
とすることによって、ＣＭを確実に再生させることがで
きる。

【００７８】また、再生側の視聴装置が、強制蓄積領域
を有するデジタル放送受信装置の場合には、ＣＭリソー
スを強制蓄積領域とすることもできる。

【００７９】（３）リンクデータ中に副情報リソースお
よびセンタアクセス情報を直接定義する場合、再生側で
は、副情報は副情報リソースに直接アクセスして取得
し、ＣＭ情報は管理センタにアクセスして取得する。こ
の場合も、上記のようなＣＭを確実に再生させるシステ
ムとすることが望ましい。

【００８０】この方式では、管理センタによるＣＭ提供
の集中管理およびＣＭの選択的提供が可能となる。

【００８１】（４）リンクデータ中にセンタアクセス情
報のみを定義する場合、後述のように再生側では、映像
プログラムのプログラムＩＤおよび再生基準時刻情報
と、該当する画像オブジェクトに対応したインデックス
オブジェクト値とを、管理センタに通知して、管理セン
タから、該当する副情報リソースと、ＣＭ提供方式およ
びＣＭリソースとを取得し、そのＣＭ提供方式に従っ
て、そのＣＭリソースにアクセスしてＣＭ情報を取得す
る。

【００８２】この場合、管理センタでは、視聴者の副情
報選択傾向から、視聴者固有の嗜好属性を視聴者プロフ
ァイルとして得て、視聴者ごとに最適なＣＭの選択的提
供および管理を行うことができるとともに、副情報提供
者に対する代価の決済などを一元的に行うことができ
る。

【００８３】（リンクデータの伝送）リンクデータは、
例えば、映像プログラムストリームおよびインデックス
ピクチャストリームに、その多重化ストリームの階層構
造において最下層に近い層を占めるものとして多重化し
て、再生側に伝送する。

【００８４】図４に、その多重化の態様を示す。シーン
１，２，３の映像プログラムストリームＶＰＳ１，ＶＰ
Ｓ２，ＶＰＳ３に対しては、それぞれ、シーン１，２，
３のインデックスピクチャストリームＩＰＳ１，ＩＰＳ
２，ＩＰＳ３が多重化される。

【００８５】これに対して、リンクデータについては、
シーンの冒頭からインデックスオブジェクトが存在する
場合、再生側において、そのシーンの開始までに、その
シーン中の画像処理対象となる画像オブジェクトを確定
し、画像オブジェクトに対する画像処理方法を決定し、
副情報のリソースを定義しておくなどの必要があるの
で、そのシーンの開始時刻以前に再生側に伝送されてい
なければならない。

【００８６】そのため、シーン１についてのリンクテー
ブルデータＬＴＤ１は、シーン１の前に伝送され、シー
ン２についてのリンクテーブルデータＬＴＤ２は、シー
ン１の映像プログラムストリームＶＰＳ１およびインデ
ックスピクチャストリームＩＰＳ１に多重化され、シー
ン３についてのリンクテーブルデータＬＴＤ３は、シー
ン２の映像プログラムストリームＶＰＳ２およびインデ
ックスピクチャストリームＩＰＳ２に多重化され、シー
ン４についてのリンクテーブルデータＬＴＤ４が、シー
ン３の映像プログラムストリームＶＰＳ３およびインデ
ックスピクチャストリームＩＰＳ３に多重化される。

【００８７】システムによっては、リンクデータを、映
像プログラムストリームおよびインデックスピクチャス
トリームに多重化しないで、別の伝送手段によって、再
生側に伝送することもできる。

【００８８】〔双方向視聴システム：図５〕図５に、双
方向視聴システムの一例を示す。このシステムは、全体
として、生成系１０、伝送系３０および再生系４０によ
って構成される。

【００８９】生成系１０では、映像ソース１１からの映
像プログラムストリームＶＰｓが、図５では省略した
が、図２（Ｂ）に示したように、フレームバッファ１３
に書き込まれ、フレームバッファ１３から読み出された
後、圧縮符号化部１２で圧縮符号化される。

【００９０】インデックスピクチャ生成部１４では、映
像ソース１１からの映像プログラムストリームＶＰｓか
ら、インデックスピクチャストリームＩＰｓが生成さ
れ、そのインデックスピクチャストリームＩＰｓが、圧
縮符号化部１７で圧縮符号化される。

【００９１】副情報生成部２２では、副情報のデータ、
および副情報へのアクセス情報が生成され、そのうちの
副情報データが、圧縮符号化部２３で圧縮符号化され
る。

【００９２】リンクデータ生成部２１では、インデック
スピクチャ生成部１４からのインデックスオブジェクト
値、開始（出現）時刻情報および終了（消失）時刻情報
と、副情報生成部２２からのアクセス情報、またはコン
テンツサーバ２６からの既存コンテンツについてのアク
セス情報とによって、各インデックスオブジェクトにつ
いての第１次的なリンクデータが生成される。

【００９３】さらに、リンクデータ生成部２１では、こ
の第１次的なリンクデータに、コンテンツサーバ２６か
らの定義コード（制御コードおよびプログラムＩＤ）お
よび属性コードが付加されて、各インデックスオブジェ
クトについての図３（Ｅ）に示したようなリンクデータ
が生成される。

【００９４】そして、圧縮符号化部１２からの圧縮後の
映像プログラムストリーム、圧縮符号化部１７からの圧
縮後のインデックスピクチャストリーム、リンクデータ
生成部２１からのリンクデータ、および圧縮符号化部２
３からの圧縮後の副情報データが、多重化部２４で多重
化され、その多重化ストリームが、衛星デジタル放送網
３１、地上波デジタル放送網３２、ＣＡＴＶ網３３、上
述したＤＶＤなどのパッケージ記録媒体３４などの伝送
手段によって、再生系４０の双方向視聴装置５０に伝送
される。

【００９５】多重化ストリームを、インターネットなど
の通信ネットワーク３８によって再生側に伝送すること
もできる。この場合、多重化ストリームは、通信ネット
ワーク３８に接続されたサーバ装置２５に蓄積され、再
生側からの要求によって双方向視聴装置５０に伝送され
る。双方向視聴装置５０では、この多重化ストリームを
再生することができる。

【００９６】ただし、映像プログラムストリームおよび
インデックスピクチャストリームを、多重化ストリーム
に多重化して、衛星デジタル放送網３１などによって再
生側に伝送し、リンクデータおよび副情報データは、別
に通信ネットワーク３８によって再生側に伝送するな
ど、多重化の方法および伝送手段は、システムに応じて
選択することができる。

【００９７】また、再生系４０では、例えば、パーソナ
ルコンピュータやインターネット接続端末などの情報処
理端末４１が、端末接続インタフェース７３を介して双
方向視聴装置５０に接続される。

【００９８】双方向視聴装置５０では、次に示すよう
に、映像プログラムストリーム、インデックスピクチャ
ストリームおよびリンクデータが同期再生され、ディス
プレイ４９上に映像プログラム画像が表示されるととも
に、リモートコマンダ７９による視聴者の操作によって
映像プログラム画像中の画像オブジェクトが選択され、
選択された画像オブジェクトについての副情報が取得さ
れる。

【００９９】〔双方向視聴装置：図６〕図６に、双方向
視聴装置５０の一例を示す。双方向視聴装置５０は、こ
の例では、ＩＲＤ（Ｉｎｔｅｇｒａｔｅｄ Ｒｅｃｅｉ
ｖｅｒ Ｄｅｃｏｄｅｒ）またはＳＴＢ（Ｓｅｔ−ｔｏ
ｐ Ｂｏｘ）として構成される。

【０１００】双方向視聴装置５０は、ＣＰＵ６１を備
え、そのバス６２には、ＣＰＵ６１が実行すべきプログ
ラムや固定データなどが書き込まれたＲＯＭ、およびＣ
ＰＵ６１のワークエリアなどとして機能するＲＡＭから
なるメモリ６３が接続され、リモートコマンダ７９から
の赤外線遠隔操作信号を受信する受信部（受光部）７８
が接続される。

【０１０１】図５に示した衛星デジタル放送網３１など
の伝送手段３６によって伝送された多重化ストリーム
は、例えばＭＰＥＧ２圧縮方式によって圧縮符号化され
た、少なくとも映像プログラムストリームとインデック
スピクチャストリームが多重化されたものである。

【０１０２】この多重化ストリームは、フロントエンド
５１で、ビットストリームに展開され、誤り訂正やスク
ランブルの解除などの復号処理がなされる。

【０１０３】デマルチプレクサ５２では、ＭＰＥＧ２シ
ステムのトランスポートストリームが分離され、ＭＰＥ
Ｇデコーダ５３では、そのトランスポートストリームか
ら、音声映像ストリームと制御情報が分離される。

【０１０４】分離された音声映像ストリームは、音声映
像デコーダ５４で、映像プログラムの映像データと音声
データに伸長復号される。伸長後の映像データは、映像
処理部５５で、後述のように画像処理され、映像出力部
５６で、アナログ映像信号に変換されて、図５に示した
ディスプレイ４９に供給される。伸長後の音声データ
は、音声出力部５７で、アナログ音声信号に変換され
て、スピーカなどの音声出力装置に出力される。

【０１０５】ＭＰＥＧデコーダ５３で分離された制御情
報は、バス６２に送出され、音声映像デコーダ５４以下
の下位デコーダの制御に用いられる。

【０１０６】一方、インデックスピクチャストリームが
ＭＰＥＧ２システムのトランスポートストリームにサブ
セットとして定義されないで多重化されている場合に
は、図示するように、デマルチプレクサ５２で、インデ
ックスピクチャストリームが分離され、インデックスピ
クチャデコーダ５９に供給される。

【０１０７】インデックスピクチャストリームがＭＰＥ
Ｇ２システムのトランスポートストリームにサブセット
として定義されて多重化されている場合には、デマルチ
プレクサ５２またはＭＰＥＧデコーダ５３で、インデッ
クスピクチャストリームが分離され、インデックスピク
チャデコーダ５９に供給される。

【０１０８】インデックスピクチャデコーダ５９では、
インデックスピクチャストリームが、音声映像デコーダ
５４での映像データおよび音声データの伸長復号（再
生）と同期して伸長復号（再生）される。伸長後のイン
デックスピクチャストリームは、映像処理部５５に供給
される。

【０１０９】多重化ストリームにリンクデータが多重化
されている場合、そのリンクデータは、デマルチプレク
サ５２で分離されて、リンクデータインタフェース６５
を介してバス６２に送出され、ＣＰＵ６１によってデコ
ードされる。

【０１１０】多重化ストリームに副情報データが多重化
されている場合、その副情報データは、デマルチプレク
サ５２で分離されて、副情報データインタフェース６６
を介してバス６２に送出され、ＭＰＥＧデコーダ５３に
よってデコード可能な圧縮された動画情報などの、後述
のように視聴者が選択した画像オブジェクトについての
副情報データは、ＭＰＥＧデコーダ５３に供給されて、
ＭＰＥＧデコーダ５３でデコードされ、その他のデコー
ドされるべき副情報データは、ＣＰＵ６１によってデコ
ードされる。

【０１１１】なお、リンクデータおよび副情報データ
が、デマルチプレクサ５２から共通のインタフェースを
介して、またはデマルチプレクサ５２から直接、バス６
２に送出される構成とすることもできる。

【０１１２】リンクデータまたは副情報データが、多重
化ストリームに多重化されず、例えば、図５に示したサ
ーバ装置２５から、通信ネットワーク３８によって伝送
される場合、そのリンクデータまたは副情報データは、
ネットワークインタフェース６７を介してバス６２に取
り込まれて、上述したように処理される。副情報が動画
情報のようにデータレートの高いものである場合には、
ＣＰＵ６１のバス６２ではなく、専用のデータバスを用
いることもできる。

【０１１３】バス６２には、フォーマット変換部６９が
接続される。フォーマット変換部６９では、後述のよう
に視聴者が選択した画像オブジェクトについての副情報
データが、コンピュータネットワークで一般的に使用さ
れるプレゼンテーションツール（ＸＭＬ，ＶＲＭＬ，Ｈ
ＴＭＬ，Ｊａｖａ（登録商標）、または将来規定される
マークアップランゲージ）で記述されたデータであれ
ば、その構造を解析して、副情報として、動画、静止
画、テキスト、音声などの情報を取得し、デコードし
て、記述された効果を付与し、記述された構造の表示フ
レームを形成し、ディスプレイ４９の特性に適した表示
フレームを再構成し、タグやホットスポットなどで示さ
れるリンク機能を表示フレームに配置するなどの機能を
実行して、表示フレームを再生出力する。

【０１１４】双方向視聴装置５０には、記憶装置部とし
てハードディスク装置部７１が設けられ、上記のように
受信または取得された映像プログラムまたは副情報など
のデータが、ハードディスクインタフェース７２を介し
てハードディスク装置部７１に供給されて、ハードディ
スクに記録されるとともに、ハードディスクから再生さ
れたデータが、ハードディスクインタフェース７２を介
してバス６２に取り込まれる。

【０１１５】また、図５にも示したように、パーソナル
コンピュータやインターネット接続端末などの情報処理
端末４１が、端末接続インタフェース７３を介してバス
６２に接続され、双方向視聴装置５０において、情報処
理端末４１が備える各種リソースが利用される。

【０１１６】例えば、（１）視聴者によって選択された
画像オブジェクトについてのリンクデータ中のアクセス
情報を情報処理端末４１に送信し、情報処理端末４１が
備えるネットワークアクセスや光ディスクドライブなど
のアクセス機能によって、副情報リソースにアクセスす
る、（２）映像プログラムまたは副情報などのデータを
記録する媒体として、情報処理端末４１の記憶装置を利
用する、（３）副情報データなどのフォーマット変換や
副情報中のキャラクタコードのフォント展開などに、情
報処理端末４１のソフトウェアやシステムなどを利用す
る、などである。

【０１１７】上記（１）については、フォーマット変換
部６９につき示したのと同様に、情報処理端末４１は、
取得した副情報データが、コンピュータネットワークで
一般的に使用されるプレゼンテーションツール（ＸＭ
Ｌ，ＶＲＭＬ，ＨＴＭＬ，Ｊａｖａ（登録商標）、また
は将来規定されるマークアップランゲージ）で記述され
たデータであれば、その構造を解析して、副情報とし
て、動画、静止画、テキスト、音声などの情報を取得
し、デコードして、記述された効果を付与し、記述され
た構造の表示フレームを形成し、ディスプレイ４９の特
性に適した表示フレームを再構成し、タグやホットスポ
ットなどで示されるリンク機能を表示フレームに配置す
るなどの機能を実行して、その表示フレームのデータ
を、ＭＰＥＧ２圧縮方式や映像プログラムストリームの
圧縮に用いられている圧縮方式によって圧縮し、端末接
続インタフェース７３を介してバス６２に送信する。双
方向視聴装置５０では、その圧縮された表示フレームの
データをデコードし、再生出力する。

【０１１８】さらに、バス６２には、外部記憶媒体イン
タフェース７６を介して、メモリカードや書き替え可能
な光ディスクなどの外部記憶媒体７５が接続される。外
部記憶媒体インタフェース７６は、外部記憶媒体７５が
双方向視聴装置５０に直接装着される場合には、電気的
なインタフェースとされ、外部記憶媒体７５が外部コン
トローラに装着される場合には、その外部コントローラ
とバス６２を有線または無線や赤外線によって接続する
ものとされる。

【０１１９】外部記憶媒体７５には、視聴者によって選
択された副情報データ、副情報リソースへのアクセス情
報、視聴者の視聴傾向や視聴履歴を示すデータ、視聴者
の個人情報などが記録され、後述の各種機能に必要なデ
ータが保存される。

【０１２０】そのため、外部記憶媒体７５は、視聴者の
パスワードやバイオメトリック（指紋、声紋、虹彩、顔
貌など）などの認証手段によって、視聴者個人を認証で
きるとともに、記録内容をプロテクトし、かつ記録内容
のプロテクトを解除する機能を備えるものとされる。

【０１２１】なお、ハードディスク装置部７１内のハー
ドディスクや、情報処理端末４１の記憶装置から、映像
プログラムストリームなどのデータを再生するに当たっ
ては、等速再生に限らず、倍速再生などの変速再生を行
うことができるように、システムが構成される。

【０１２２】〔画像オブジェクトの選択および画像処
理：図７〕上述したように、映像プログラムストリー
ム、インデックスピクチャストリームおよびリンクデー
タが同期再生され、ディスプレイ４９上に映像プログラ
ム画像が表示された状態では、インデックスピクチャ
は、ディスプレイ４９上に表示されず、視認できないも
のの、映像プログラム画像に重畳されて存在する。

【０１２３】この状態で、視聴者が、リモートコマンダ
７９での操作によって、ディスプレイ４９上にカーソル
を表示させ、そのカーソルを映像プログラム画像中のイ
ンデックスオブジェクトが設定されている画像オブジェ
クトの領域内または領域近傍にポインティングさせる
と、双方向視聴装置５０のＣＰＵ６１は、映像プログラ
ム画像に重畳されているインデックスピクチャのインデ
ックスオブジェクト値から、ポインティングされた画素
を含む、またはポインティングされた画素に最も近いイ
ンデックスオブジェクトを検出し、その検出されたイン
デックスオブジェクトが重畳されている画像オブジェク
トを、選択された画像オブジェクトとする。

【０１２４】図７は、このように選択された画像オブジ
ェクトおよびインデックスオブジェクトを示したもの
で、上段の「選択されたインデックスオブジェクトの第
１」は、図１に示した人物１ｖだけがインデックスオブ
ジェクト１ａとして選択されたことを、中段の「選択さ
れたインデックスオブジェクトの第２」は、図１に示し
た端末２ｖだけがインデックスオブジェクト２ａとして
選択されたことを、下段の「選択されたインデックスオ
ブジェクトの第３」は、図１に示した椅子３ｖおよび人
物４ｖがインデックスオブジェクト３ａおよび４ａとし
て選択されたことを、それぞれ示している。

【０１２５】ＣＰＵ６１は、このように選択された画像
オブジェクトにつき、映像処理部５５において、以下の
（ａ）または（ｂ）のような画像処理を行う。

【０１２６】（ａ）当該画像オブジェクトに対して、枠
づけや影づけなどによる擬似立体視化、またはハイライ
トやフリックなどによる輝度や色調の変調、などの視覚
効果を付与する。

【０１２７】（ｂ）ディスプレイ４９上の映像プログラ
ム画像の視認を妨げない位置に、当該画像オブジェクト
に副情報が付加されていることを示すアイコンを表示す
る。

【０１２８】これによって、視聴者は、当該画像オブジ
ェクトが、インデックスオブジェクトが設定され、副情
報が付加されているものであることを知ることができ
る。

【０１２９】ＣＰＵ６１から映像処理部５５に送出する
処理制御信号は、基本的に、当該画像オブジェクトに対
応したインデックスオブジェクト値、画像処理方法、お
よび時刻制御情報のみでよく、非常に簡便であり、ＣＰ
Ｕ６１の負担も軽い。

【０１３０】そのほか、画像オブジェクトまたは副情報
に関して、ＣＰＵ６１が以下のような画像処理を実行す
るように、双方向視聴装置５０を構成する。

【０１３１】（１）リンクデータの属性コードとして副
情報の概要が伝送される場合には、選択された画像オブ
ジェクトに対応したインデックスオブジェクト値によっ
て、対応するリンクデータから副情報の概要を読み取っ
て、文字やアイコンなどによってオンスクリーン表示す
る。これによって、視聴者は、当該画像オブジェクトに
付加された副情報の概要を知ることができる。

【０１３２】（２）リンクデータの属性コードとして画
像オブジェクトまたは副情報のカテゴリが伝送される場
合には、あらかじめ視聴者がカテゴリを指定しておくこ
とによって、指定されたカテゴリの画像オブジェクトま
たは副情報が出現したとき、指定されたカテゴリの画像
オブジェクト、または指定されたカテゴリの副情報が付
加された画像オブジェクトに対して、上記（ａ）または
（１）のような処理を行い、または他の画像オブジェク
トと異なる画像処理を行う。

【０１３３】例えば、視聴者によって「家具」が指定さ
れている場合に、図１に示した椅子３ｖのカテゴリが
「家具」であるときには、椅子３ｖの画像オブジェクト
がＣＰＵ６１によって選択される。したがって、視聴者
は、画像表示時、何ら特別の操作をすることなく、自分
が興味や関心を持っている対象物が表示されたことを知
ることができる。

【０１３４】（３）リンクデータに定義された、各種の
映像プログラムに共通の体系化されたカテゴリを用い
て、視聴者が画像オブジェクトを選択する際の選択傾向
を分類して、視聴者の視聴傾向として、ハードディスク
装置部７１などに記録し、その履歴を参照して、選択傾
向の高いカテゴリに属する画像オブジェクトが映像プロ
グラム画像中に出現したとき、上記のような画像処理を
行う。

【０１３５】（４）上記のように各種の映像プログラム
に共通の体系化されたカテゴリのもとで、あらかじめ視
聴者がカテゴリを指定しておくことによって、指定され
たカテゴリに属する画像オブジェクトが映像プログラム
画像中に出現したとき、対応するリンクデータに定義さ
れた副情報の概要を、取り込んで記録し、視聴者の表示
指示操作によってディスプレイ４９上に表示する。

【０１３６】（５）リンクデータ中の制御コードに定義
された再生制御情報を奥行き情報として、各種提案され
ている立体視化アルゴリズムによって、選択された画像
オブジェクトを立体視化し、必要に応じて左右眼視差情
報を取得して立体視化する。

【０１３７】（６）選択された画像オブジェクトを、そ
の近傍領域を含めて、固定倍率または任意の倍率で拡大
表示する。

【０１３８】（７）各種提案されている追跡アルゴリズ
ムによって、映像プログラム画像のフレームを再構成し
ながら、移動する当該画像オブジェクトを追跡表示す
る。

【０１３９】なお、ＣＰＵ６１は、視聴者の検出指示操
作によって、そのときディスプレイ４９上に表示されて
いる映像プログラム画像中のいずれかの画像オブジェク
トにインデックスオブジェクトが設定されているか否か
を検出し、いずれかの画像オブジェクトにインデックス
オブジェクトが設定されているときには、インデックス
オブジェクトが設定されている全ての画像オブジェクト
に対して上記（ａ）の処理を実行し、または上記（ｂ）
の処理を実行して、視聴者に副情報が付加されている画
像オブジェクトが存在することを知らせ、次に、視聴者
のポインティング操作によって、上記のように特定の画
像オブジェクトの領域内または領域近傍がポインティン
グされたとき、当該画像オブジェクトに対して上記
（１）（５）（６）（７）などの処理を実行するよう
に、双方向視聴装置５０を構成することもできる。

【０１４０】また、映像プログラムの提供者が、リンク
データの制御コードによって、当該リンクデータに定義
されたインデックスオブジェクト値に対応した画像オブ
ジェクトを、処理対象オブジェクトとして強制的に指定
し、ＣＰＵ６１は、その強制的に指定された画像オブジ
ェクトに対して上述したような画像処理を実行するよう
に、システムを構成することもできる。

【０１４１】〔センタアクセス方式による副情報の取
得：図８〜図１１〕図５のような双方向視聴システムに
おいて、例えば、映像プログラムストリーム、インデッ
クスピクチャストリームおよびリンクデータが多重化さ
れて、衛星デジタル放送網３１などの伝送手段によって
再生側に伝送され、副情報データが、インターネットな
どの通信ネットワーク３８によって再生側に伝送される
場合、副情報またはＣＭ情報の取得および上述したＥＣ
などにつき、以下のようなセンタアクセス方式のシステ
ムを構築することができる。

【０１４２】（システム構成：図８）図８に、このシス
テムの一例を示す。

【０１４３】この例では、放送事業者８１および８２
は、それぞれ、衛星デジタル放送網３１によって、上記
の多重化ストリームを双方向視聴装置５０に伝送する。

【０１４４】放送事業者８１および８２のもとには、コ
ンテンツサーバ８５、タイムテーブルサーバ８６、およ
び副情報提供者課金ＤＢ（データベース）８７が設けら
れ、通信ネットワーク３８に接続される。双方向視聴装
置５０も、通信ネットワーク３８に接続される。

【０１４５】システムには、副情報の提供や、それに対
する課金などを管理するため、以下のいずれかの形態の
管理センタ９０が設けられる。

【０１４６】第１の形態では、放送事業者ごとに管理セ
ンタ９０を設ける。管理センタ９０の運営経費は、当該
の放送事業者が負担する。したがって、管理センタ９０
は、放送事業者と同一の事業体でもよい。

【０１４７】この場合には、双方向視聴装置５０では、
映像プログラム中または選局情報中の記述情報、いわゆ
るメタデータから、センタアクセス情報を抽出して、管
理センタ９０にアクセスする。リンクデータの定義コー
ドにセンタアクセス情報を規定すれば、これによって管
理センタ９０にアクセスすることもできる。

【０１４８】第２の形態では、複数の放送事業者につき
一つの管理センタ９０を設ける。例えば、ある地域の放
送事業者が共同で管理センタ９０を運営する。運営経費
は、各放送事業者が分担し、またはＥＣの代行やＣＭの
提供などによって賄う。この場合には、センタアクセス
情報は、あらかじめ双方向視聴装置５０にセットされ
る。

【０１４９】第３の形態では、管理センタ９０を独自運
営とする。管理センタ９０は、各放送事業者から副情報
リソースの提供を受け、会員の視聴者に対するサービス
のみを行う。運営は、会員からの会費による。

【０１５０】この形態は、個人情報をより確実に保全で
き、ＥＣ決済の一元化を図ることができ、配送などのサ
ービスも一元化できる、などの利点が考えられる。

【０１５１】管理センタ９０のもとには、図９〜図１１
に示すような各場合に応じて、ＥＣサーバ９１、副情報
リソースＤＢ９２、ＣＭリソースＤＢ９３、視聴履歴Ｄ
Ｂ９４、視聴傾向ＤＢ９５、個人情報ＤＢ９６、視聴者
課金ＤＢ９７、ＣＡ（コンディショナルアクセス）顧客
情報ＤＢ９８、および与信決済システムサーバ９９が設
けられ、通信ネットワーク３８に接続される。

【０１５２】さらに、通信ネットワーク３８には、事業
者１１１のＥＣサーバ１０１、事業者１１２のＣＭサー
バ１０２、および副情報制作者１１３の副情報サーバ１
０３などの、各種サーバ群１００が接続される。事業者
１１１は、ＥＣを行う販売会社やメーカなどであり、事
業者１１２は、ＣＭを提供する販売会社やメーカなどで
ある。

【０１５３】また、通信ネットワーク３８には、各事業
者に対して独立した認証機関１２０の放送履歴ＤＢ１２
１および視聴履歴ＤＢ１２２が接続される。

【０１５４】以下では、放送事業者８１が上述した多重
化ストリームを放送する場合につき示す。

【０１５５】（第１の場合：図９）第１の場合は、図３
（Ｃ）〜（Ｅ）に示したようなアクセス情報として、リ
ンクデータに、ＥＣコンテンツ（電子商取引に関する販
売情報などの各種情報）またはＣＭ情報が付加された副
情報のリソースが直接定義される場合である。

【０１５６】この場合、（１）事業者１１１が放送事業
者８１に、定額（一定の代価を支払う）の請負契約、ま
たは従量性（視聴者の副情報リクエスト数に応じた代価
を支払う）の請負契約のもとに、ＥＣ対象となる商品を
映像プログラムの一部の画像オブジェクトとして使用し
てもらい、その画像オブジェクトに対してインデックス
オブジェクトおよびリンクデータを設定してもらう。

【０１５７】あるいは、（２）事業者１１１のＥＣ対象
となる商品を、管理センタ９０の管理下に置いて、管理
センタ９０が、視聴者にＥＣコンテンツを提供し、商品
の販売手続および与信決済を行い、販売手数料を得るた
めに、放送事業者８１が、事業者１１１のＥＣ対象とな
る商品を、映像プログラムの一部の画像オブジェクトと
して使用し、その画像オブジェクトに対してインデック
スオブジェクトおよびリンクデータを設定する。

【０１５８】第１の場合には、双方向視聴装置５０で
は、上述したように画像オブジェクトが選択されたと
き、上記のようにリンクデータに規定された副情報リソ
ースに対して、すなわち図９に示すように、事業者１１
１のＥＣサーバ１０１に対して、副情報のリクエストが
発行され、その応答として、リソース側から双方向視聴
装置５０に、副情報が送られる。

【０１５９】放送事業者８１と事業者１１１との間の契
約が定額の請負契約である場合には、上記のプロセスだ
けで完結してもよい。

【０１６０】これに対して、放送事業者８１と事業者１
１１との間の契約が従量性の請負契約である場合には、
副情報の提供量を、放送事業者８１と事業者１１１とで
共有する必要がある。

【０１６１】そのため、この場合には、さらに、双方向
視聴装置５０から管理センタ９０または放送事業者８１
に、副情報のリクエストがあったことが報告される。

【０１６２】放送事業者８１と管理センタ９０の運営者
が同じ場合には、このリクエスト報告が、放送事業者８
１の副情報提供者課金ＤＢ８７によって積算され、積算
結果に応じた料金が、放送事業者８１から事業者１１１
に請求される。

【０１６３】放送事業者８１と管理センタ９０の運営者
が異なる場合には、放送事業者８１が副情報のリクエス
ト数を把握するため、管理センタ９０から放送事業者８
１にリクエスト報告が発行され、上記のように放送事業
者８１の副情報提供者課金ＤＢ８７によってリクエスト
報告が積算される。

【０１６４】さらに、公正性を担保する必要がある場合
には、副情報のリクエスト報告が認証機関１２０にも発
行される。

【０１６５】リクエストされた副情報がＥＣコンテンツ
である場合、事業者１１１のＥＣサーバ１０１からでは
なく、管理センタ９０のＥＣサーバ９１から双方向視聴
装置５０に、副情報としてのＥＣコンテンツが送られ、
視聴者がＥＣ対象の商品を購入したときには、管理セン
タ９０が備える与信決済システムサーバ９９によって取
引を完結させるように、システムを構成することもでき
る。

【０１６６】（第２の場合：図１０）第２の場合は、図
３（Ｃ）〜（Ｅ）に示したようなアクセス情報として、
リンクデータに、ＣＭリソースおよび副情報リソースが
直接定義される場合である。

【０１６７】この場合、事業者１１２が放送事業者８１
に、上記のような定額または従量性の請負契約のもと
に、直接的には商用ではない画像オブジェクトに対し
て、インデックスオブジェクトおよびリンクデータと、
ＣＭリソースおよび副情報リソースとを設定してもら
う。

【０１６８】第２の場合には、双方向視聴装置５０で
は、上述したように画像オブジェクトが選択されたと
き、上記のようにリンクデータに規定されたＣＭリソー
スおよび副情報リソースに対して、すなわち図１０に示
すように、事業者１１２のＣＭサーバ１０２および副情
報制作者１１３の副情報サーバ１０３に対して、ＣＭの
リクエストおよび副情報のリクエストが発行され、その
応答として、それぞれのリソース側から双方向視聴装置
５０に、ＣＭ情報および副情報が送られる。

【０１６９】この場合、視聴者にＣＭ情報が確実に伝達
されるように、双方向視聴装置５０ではＣＭの再生が完
了してから副情報が再生されるような方法が講じられる
必要がある。

【０１７０】その一例として、副情報をスクランブル
し、スクランブルの解除キーをＣＭ情報中に分散させて
おき、双方向視聴装置５０では、ＣＭの再生中に、分散
された解除キーを収集し、ＣＭの再生が完了したとき、
スクランブル解除キーが生成されて、副情報を再生でき
るように、システムを構成する。

【０１７１】あるいは、ＣＭの再生が終了するとき、図
１０に示すように、双方向視聴装置５０から管理センタ
９０にスクランブル解除キーをリクエストすることによ
って、管理センタ９０から双方向視聴装置５０にスクラ
ンブル解除キーが送られるように構成してもよい。

【０１７２】この第２の場合にも、図９に示した第１の
場合と同様に、リクエスト報告が発行され、積算され
る。

【０１７３】（第３の場合：図１１）第３の場合は、リ
ンクデータに、副情報リソースが直接規定されずに、セ
ンタアクセスによって副情報を取得する手順が規定さ
れ、管理センタ９０からＣＭリソースおよび副情報リソ
ースが指定される場合である。

【０１７４】この場合、（１）特定の画像オブジェクト
（副情報）に対して提供されるＣＭが固定され、副情報
提供者（事業者１１２および副情報制作者１１３）が管
理センタ９０に、上記のような定額または従量性の請負
契約のもとに、直接的には商用ではない画像オブジェク
トに対して、ＣＭリソースおよび副情報リソースとイン
デックスオブジェクトとの関係を登録し、視聴者からの
副情報リクエストへの応答として、管理センタ９０から
双方向視聴装置５０に、副情報提供者（事業者１１２お
よび副情報制作者１１３）のＣＭリソースおよび副情報
リソースが送られる。

【０１７５】あるいは、（２）特定の画像オブジェクト
（副情報）に対して提供されるＣＭが固定されずに、複
数のＣＭ提供者が管理センタ９０に、それぞれ上記のよ
うな従量性の請負契約のもとに、直接的には商用ではな
い画像オブジェクトに対して、それぞれのＣＭリソース
および副情報リソースとインデックスオブジェクトとの
関係を登録し、視聴者からの副情報リクエストへの応答
として、管理センタ９０から双方向視聴装置５０に、ラ
ンダムに、または特定の手順によって選択されたＣＭ提
供者のＣＭリソースおよび副情報リソースが送られる。

【０１７６】あるいは、（３）特定の画像オブジェクト
（副情報）に対して提供されるＣＭが固定されずに、複
数のＣＭ提供者が管理センタ９０に、それぞれ上記のよ
うな従量性の請負契約のもとに、直接的には商用ではな
い画像オブジェクトに対して、それぞれのＣＭリソー
ス、ＣＭ属性および副情報リソースとインデックスオブ
ジェクトとの関係を登録し、視聴者からの副情報リクエ
ストへの応答として、管理センタ９０から双方向視聴装
置５０に、視聴者の嗜好属性に適合するＣＭ属性のもの
として選択されたＣＭ提供者のＣＭリソースおよび副情
報リソースが送られる。

【０１７７】第３の場合には、双方向視聴装置５０で
は、上述したメタデータ中のセンタアクセス情報、また
は双方向視聴装置５０にプリセットされたセンタアクセ
ス情報によって、管理センタ９０にアクセスして、ＣＭ
リソースおよび副情報リソースの指定を受ける。

【０１７８】この場合、上記（１）のように特定の画像
オブジェクト（副情報）に対して提供されるＣＭが固定
されている場合には、図１１に示すように、双方向視聴
装置５０からの副情報リクエストに対して、管理センタ
９０では、ＣＭリソースＤＢ９３および副情報リソース
ＤＢ９２からＣＭリソースおよび副情報リソースの情報
が出力され、双方向視聴装置５０に送られる。

【０１７９】双方向視聴装置５０では、取得したリソー
ス情報によって、図１０に示した第２の場合と同様に、
ＣＭリソースおよび副情報リソースに対して、ＣＭのリ
クエストおよび副情報のリクエストが発行され、その応
答として、それぞれのリソース側から双方向視聴装置５
０に、ＣＭ情報および副情報が送られる。

【０１８０】放送事業者８１とＣＭ提供者および副情報
提供者との間の契約が従量性の請負契約である場合に
は、図９に示した第１の場合と同様に、双方向視聴装置
５０から管理センタ９０または放送事業者８１に、ＣＭ
および副情報のリクエストがあったことが報告される。

【０１８１】管理センタ９０が備えるＣＭリソースＤＢ
９３に、ＣＭリソースとともにＣＭの属性が記録される
場合には、上記（３）のように視聴者の嗜好に応じたＣ
Ｍが視聴者に提供されるように、システムを構成するこ
とができる。

【０１８２】この場合、管理センタ９０では、視聴履歴
ＤＢ９４、視聴傾向ＤＢ９５、個人情報ＤＢ９６などに
よって、視聴者の嗜好が分析され、これにより想定され
る視聴者の嗜好属性に適合したＣＭ情報および副情報の
リソースが選択されて、そのリソース情報が双方向視聴
装置５０に送られる。

【０１８３】この方法によれば、視聴者は、自分の好み
に合ったＣＭを主として視聴することができるととも
に、ＣＭ提供者としても、広告効果の増大を期待するこ
とができる。

【０１８４】この機能を実現するには、管理センタ９０
へのリクエストデータ中に、視聴者個人または双方向視
聴装置５０を特定するための識別情報が必要となるが、
一般にデジタル放送ではコンディショナルアクセス制御
が行われると思われるので、管理センタ９０にＣＡ顧客
情報ＤＢ９８が設けられると、視聴者の嗜好属性の収集
分析に有効である。

【０１８５】〔ＣＭ提供枠の設定方法：図１２および図
１３〕この発明の方法によれば、ＣＭ出稿者は、映像プ
ログラム画像中の画像オブジェクトに関連づけてＣＭを
提供することができるので、放送事業者などの映像プロ
グラム提供者は、従来の方法とは異なる効果的な方法に
よって、ＣＭ出稿者に対してＣＭ提供枠を供与すること
ができる。

【０１８６】第１の方法では、図１２に示すように、映
像プログラムが期間Ｐａ，Ｐｂ，Ｐｃ…からなるものと
するとき、それぞれの期間Ｐａ，Ｐｂ，Ｐｃ…の頭の期
間Ｐａ１，Ｐｂ１，Ｐｃ１…を、それぞれ強制提供枠Ｃ
ａ，Ｃｂ，Ｃｃ…として、それぞれＣＭ出稿者Ｘａ，Ｘ
ｂ，Ｘｃ…に供与するとともに、期間Ｐａ１，Ｐｂ１，
Ｐｃ１…の直後の期間Ｐａ２，Ｐｂ２，Ｐｃ２…も、そ
れぞれ強制提供枠Ｃａ，Ｃｂ，Ｃｃ…へのＣＭ出稿者Ｘ
ａ，Ｘｂ，Ｘｃ…に供与する。

【０１８７】例えば、出稿者Ｘａは、期間Ｐａ１の強制
提供枠ＣａにＣＭを出稿できるとともに、その直後の期
間Ｐａ２にも、これに出現するオブジェクト１〜５とし
て示す画像オブジェクトに付加される副情報につき、Ｃ
Ｍを出稿できる方式である。

【０１８８】第２の方法では、図１２に示すように、映
像プログラムが期間Ｐａ，Ｐｂ，Ｐｃ…からなるものと
するとき、それぞれの期間Ｐａ，Ｐｂ，Ｐｃ…の頭の期
間Ｐａ１，Ｐｂ１，Ｐｃ１…は、それぞれ強制提供枠Ｃ
ａ，Ｃｂ，Ｃｃ…として、それぞれＣＭ出稿者Ｘａ，Ｘ
ｂ，Ｘｃ…に供与するが、期間Ｐａ１，Ｐｂ１，Ｐｃ１
…の直後の期間Ｐａ２，Ｐｂ２，Ｐｃ２…は、それぞれ
強制提供枠Ｃａ，Ｃｂ，Ｃｃ…へのＣＭ出稿者Ｘａ，Ｘ
ｂ，Ｘｃ…とは別のＣＭ出稿者に供与する。

【０１８９】この方法によれば、映像プログラムの限ら
れた時間内で、より多くの事業者がＣＭを提供すること
ができるとともに、放送事業者などの映像プログラム提
供者としても、収益構造の多層化を図ることができる。

【０１９０】第３の方法では、映像プログラム中に強制
提供枠を設けず、ＣＭを全て副情報の取得時に提供す
る。

【０１９１】例えば、図１３に示すように、（１）時刻
ｔ１から時刻ｔ２までの期間に提供枠Ｃ１を設定して、
これに出現する画像オブジェクトにつき、あるＣＭ出稿
者に供与し、（２）時刻ｔ２から時刻ｔ３までの期間
の、特定の画像オブジェクトを除く画像オブジェクトに
つき、提供枠Ｃ２を設定して、あるＣＭ出稿者に供与
し、（３）提供枠Ｃ３で示すように、期間を限らず、特
定の画像オブジェクトにつき、提供枠を設定して、ある
ＣＭ出稿者に供与し、（４）提供枠Ｃ４で示すように、
期間を限って、特定の画像オブジェクトにつき、提供枠
を設定して、あるＣＭ出稿者に供与する、などである。
図１３の場合、（１）と（３）はオブジェクト５につき
競合するが、その場合には、いずれかを選択する。

【０１９２】例えば、ドラマに出演した俳優が身に付け
た服装やアクセサリ、ドラマで用いられた家具、料理番
組に出てきた什器や料理などについては、協賛企業が無
償で提供し、見返りにエンドロールで企業名だけが告知
されることが多いが、これでは広告効果が小さい。

【０１９３】第３の方法によれば、この場合、協賛企業
なども、映像プログラムに画像オブジェクトとして出現
する商品やサービスを、より直截的に広告することがで
き、販売することも可能になる。

【０１９４】視聴者としても、これらのオブジェクトに
対して興味や関心を持っていると思われるので、第３の
方法によれば、そのような視聴者とＣＭ提供者とを直
接、結び付けるシステムを構成することができる。

【０１９５】

【発明の効果】上述したように、この発明によれば、映
像プログラム画像中の特定の画像オブジェクトに付加さ
れる情報である副情報を、視聴者に容易かつ確実に提供
し、視聴者が容易かつ確実に取得することができる。

【０１９６】また、副情報として多種多様な情報を付加
することができるとともに、必要に応じて副情報を容易
に追加または変更することができる。

【０１９７】また、特定の画像オブジェクトに対して視
覚効果付与や追跡処理などの画像処理を容易に施すこと
ができ、副情報が付加されていることを明示することが
できる。

【０１９８】さらに、コンピュータネットワークと組み
合わせることによって、画像オブジェクトまたは副情報
を媒介として、放送事業者などの映像プログラム提供者
と、副情報としてコマーシャルを提供する事業者や、電
子商取引などを行う事業者と、視聴者（消費者）とを直
接、結び付けて、映像プログラム、副情報、および商品
やサービスを提供し、取得するシステムを、容易に構築
することができ、各自の要求を満たすことができる場を
作ることができる。

【図面の簡単な説明】

【図１】映像プログラムおよびインデックスピクチャの
例を示す図である。

【図２】インデックスピクチャ生成装置の一例を示す図
である。

【図３】リンクデータのデータ構造の一例を示す図であ
る。

【図４】リンクデータの伝送方法の説明に供する図であ
る。

【図５】双方向視聴システムの一例を示す図である。

【図６】双方向視聴装置の一例を示す図である。

【図７】画像オブジェクトの選択の説明に供する図であ
る。

【図８】副情報取得システムの一例を示す図である。

【図９】図８のシステムにおける第１の場合のデータ伝
送を示す図である。

【図１０】図８のシステムにおける第２の場合のデータ
伝送を示す図である。

【図１１】図８のシステムにおける第３の場合のデータ
伝送を示す図である。

【図１２】ＣＭ提供枠についての新規な方法の一例を示
す図である。

【図１３】ＣＭ提供枠についての新規な方法の一例を示
す図である。

【符号の説明】

主要部については図中に全て記述したので、ここでは省
略する。

Claims (17)

【特許請求の範囲】
1. 【請求項１】映像プログラム画像に重畳される仮想画面
   上の、映像プログラム画像中の特定された画像オブジェ
   クト領域に重畳される領域であるインデックスオブジェ
   クト領域内の各画素に対して、同一の映像プログラム中
   で当該画像オブジェクトを特定することができる一の値
   を設定して、映像プログラムデータとは別のデータであ
   るインデックスピクチャデータを生成する工程と、 前記特定された画像オブジェクトに付加される情報であ
   る副情報にアクセスするための情報を、当該画像オブジ
   ェクトに対応したインデックスオブジェクトが有する値
   に関連づけて規定したデータを、リンクデータとして生
   成する工程と、 を備えるデータ生成方法。
2. 【請求項２】映像プログラムデータ、および請求項１記
   載のデータ生成方法によって生成されたインデックスピ
   クチャデータおよびリンクデータを、多重化して、同一
   の伝送手段によって、再生側に伝送するデータ伝送方
   法。
3. 【請求項３】映像プログラムデータ、および請求項１記
   載のデータ生成方法によって生成されたインデックスピ
   クチャデータおよびリンクデータを、同期再生可能に、
   別の伝送手段によって、再生側に伝送するデータ伝送方
   法。
4. 【請求項４】映像プログラム画像に重畳される仮想画面
   上の、映像プログラム画像中の特定された画像オブジェ
   クト領域に重畳される領域であるインデックスオブジェ
   クト領域内の各画素に対して、同一の映像プログラム中
   で当該画像オブジェクトを特定することができる一の値
   を設定して、映像プログラムデータとは別のデータであ
   るインデックスピクチャデータを生成する手段と、 前記特定された画像オブジェクトに付加される情報であ
   る副情報にアクセスするための情報を、当該画像オブジ
   ェクトに対応したインデックスオブジェクトが有する値
   に関連づけて規定したデータを、リンクデータとして生
   成する手段と、を備えるデータ生成装置。
5. 【請求項５】請求項４のデータ生成装置において、 映像プログラムデータ、前記インデックスピクチャデー
   タおよび前記リンクデータを多重化する手段を備えるデ
   ータ生成装置。
6. 【請求項６】伝送された映像プログラムデータを再生し
   て、ディスプレイ上に映像プログラム画像を表示する手
   段と、 映像プログラム画像に重畳される仮想画面上の、映像プ
   ログラム画像中の特定された画像オブジェクト領域に重
   畳される領域であるインデックスオブジェクト領域内の
   各画素に対して、同一の映像プログラム中で当該画像オ
   ブジェクトを特定することができる一の値が設定され
   て、映像プログラムデータとは別のデータとして生成さ
   れ、伝送されたインデックスピクチャデータを、映像プ
   ログラムデータに同期させて再生する手段と、 前記特定された画像オブジェクトに付加される情報であ
   る副情報にアクセスするための情報が、当該画像オブジ
   ェクトに対応したインデックスオブジェクトが有する値
   に関連づけて規定されて生成され、伝送されたリンクデ
   ータを、前記インデックスピクチャデータに同期させて
   再生する手段と、 指示操作に基づいて、前記ディスプレイ上に表示された
   映像プログラム画像中の画像オブジェクトを指示するポ
   インティング手段と、 その指示された画像オブジェクトに対応したインデック
   スオブジェクトが存在するとき、当該インデックスオブ
   ジェクトが有する値によって、当該画像オブジェクトに
   対応するリンクデータを参照する手段と、 その参照されたリンクデータに規定されたアクセス情報
   によって副情報にアクセスして副情報を取得する手段
   と、 その取得された副情報を再生する手段と、 を備える映像プログラム再生装置。
7. 【請求項７】請求項６の映像プログラム再生装置におい
   て、 前記ポインティング手段によって指示された画像オブジ
   ェクトに対応したインデックスオブジェクトが存在する
   とき、そのことを告知する手段を備える映像プログラム
   再生装置。
8. 【請求項８】請求項６の映像プログラム再生装置におい
   て、 前記ポインティング手段によって指示された画像オブジ
   ェクトに対応したインデックスオブジェクトが存在する
   とき、当該画像オブジェクトに他の画像オブジェクトと
   異なる画像処理を施す手段を備える映像プログラム再生
   装置。
9. 【請求項９】請求項６の映像プログラム再生装置におい
   て、 前記ディスプレイ上に表示されている映像プログラム画
   像中のいずれかの画像オブジェクトにインデックスオブ
   ジェクトが重畳されているとき、そのことを告知する手
   段を備える映像プログラム再生装置。
10. 【請求項１０】請求項６の映像プログラム再生装置にお
    いて、 前記ディスプレイ上に表示されている映像プログラム画
    像中のいずれかの画像オブジェクトにインデックスオブ
    ジェクトが重畳されているとき、そのインデックスオブ
    ジェクトが重畳されている画像オブジェクトに、インデ
    ックスオブジェクトが重畳されていない画像オブジェク
    トと異なる画像処理を施す手段を備える映像プログラム
    再生装置。
11. 【請求項１１】請求項６の映像プログラム再生装置にお
    いて、 副情報にアクセスして副情報を取得する手段として、ネ
    ットワークインタフェースを備える映像プログラム再生
    装置。
12. 【請求項１２】請求項６の映像プログラム再生装置にお
    いて、 取得された副情報が記録される記憶手段、または当該記
    憶手段が接続されるインタフェースを備える映像プログ
    ラム再生装置。
13. 【請求項１３】伝送された映像プログラムデータを再生
    して、ディスプレイ上に映像プログラム画像を表示する
    工程と、 映像プログラム画像に重畳される仮想画面上の、映像プ
    ログラム画像中の特定された画像オブジェクト領域に重
    畳される領域であるインデックスオブジェクト領域内の
    各画素に対して、同一の映像プログラム中で当該画像オ
    ブジェクトを特定することができる一の値が設定され
    て、映像プログラムデータとは別のデータとして生成さ
    れ、伝送されたインデックスピクチャデータを、映像プ
    ログラムデータに同期させて再生する工程と、 前記特定された画像オブジェクトに付加される情報であ
    る副情報にアクセスするための情報が、当該画像オブジ
    ェクトに対応したインデックスオブジェクトが有する値
    に関連づけて規定されて生成され、伝送されたリンクデ
    ータを、前記インデックスピクチャデータに同期させて
    再生する工程と、 指示操作に基づいて、前記ディスプレイ上に表示された
    映像プログラム画像中の画像オブジェクトを指示する工
    程と、 その指示された画像オブジェクトに対応したインデック
    スオブジェクトが存在するとき、当該インデックスオブ
    ジェクトが有する値によって、当該画像オブジェクトに
    対応するリンクデータを参照する工程と、 その参照されたリンクデータに規定されたアクセス情報
    によって副情報にアクセスして副情報を取得する工程
    と、 その取得された副情報を再生する工程と、 を備える映像プログラム再生方法。
14. 【請求項１４】請求項１３の映像プログラム再生方法に
    おいて、 前記リンクデータまたは前記副情報を記録する工程を備
    える映像プログラム再生方法。
15. 【請求項１５】映像プログラムデータと、 映像プログラム画像に重畳される仮想画面上の、映像プ
    ログラム画像中の特定された画像オブジェクト領域に重
    畳される領域であるインデックスオブジェクト領域内の
    各画素に対して、同一の映像プログラム中で当該画像オ
    ブジェクトを特定することができる一の値が設定され
    て、映像プログラムデータとは別のデータとして生成さ
    れたインデックスピクチャデータとが、 多重化されて記録された記録媒体。
16. 【請求項１６】請求項１５の記録媒体において、 多重化されたデータに多重化されて、前記特定された画
    像オブジェクトに付加される情報である副情報にアクセ
    スするための情報が、当該画像オブジェクトに対応した
    インデックスオブジェクトが有する値に関連づけて規定
    されて生成されたリンクデータが記録された記録媒体。
17. 【請求項１７】請求項１５の記録媒体において、 多重化されたデータに多重化されて、または多重化され
    たデータとは別に、前記特定された画像オブジェクトに
    付加される情報である副情報が記録された記録媒体。