JP4179178B2 - 送受信システム、送信装置、受信装置、情報処理方法 - Google Patents

Description

本発明は、動画像信号の送受信を行う送受信システムと、このような送受信システムを構成する送信装置、受信装置に関する。また、このような送受信システム、送信装置、及び受信装置において行われるべき情報処理方法に関する。

先に本出願人は、例えばＡＶ(Audio Video)システムとして、基地局装置とモニタ装置とを無線通信により接続するように構成したものを提案している。
このＡＶシステムの基地局装置は、例えばテレビジョン放送のチューナを備えることで、テレビジョン放送信号を受信選局してビデオ信号（動画像信号）に復調することができるようになっている。また、例えばビデオ信号入力端子などを備えることで外部からのビデオ信号の入力機能を有する。そして、このようにして得られたビデオ信号を圧縮符号化したビデオデータの形式に変換して無線により送信出力することが可能とされる。

モニタ装置は、例えば室内において持ち歩きが可能な程度の小型のサイズを有しており、基地局装置から無線送信されてくる符号化されたビデオデータを受信可能とされている。そして、モニタ装置では、受信したビデオデータについて復号処理を施して伸長した上で、画像として表示出力することができる。

また、例えばテレビジョン放送の選局や、外部ソースとしてのビデオ信号の選択などをはじめとした、各種の基地局装置側をコントロール（制御）するための操作も、モニタ装置側で行えるようになっており、その操作情報が基地局装置に送信されるようになっている。基地局装置では、受信した操作情報に応じて、例えば選局チャンネルが切り換わるようにチューナに対する制御を実行したり、また、外部ソースの入力切り換えを行うようにされる。

このようなＡＶシステムであれば、ユーザは、例えば室内においてモニタ装置を持ち歩き、任意の場所で使用することができる。つまり、基地局装置と通信可能な範囲内である限りは、自由な場所で、テレビジョン放送をはじめとして基地局装置にて取得可能なコンテンツをモニタ装置に出力させて鑑賞することができる。

ところで、現状において、このＡＶシステムは１つの基地局装置と、１つのモニタ装置とが対となる構成としてユーザに提供されている。しかし、１つの基地局装置と複数のモニタ装置とが組み合わされたＡＶシステムに発展させることも考えることができる。

このような、１つの基地局装置と複数のモニタ装置とから成るＡＶシステムの利用形態としては、例えば次のようになる。先ず、例えば家屋内において１つの基地局装置を設置した上で、複数のモニタ装置のそれぞれは、その家屋内で生活する家族などの居住者ごとが所有して利用するようにされる。この場合において、複数のモニタ装置には、それぞれ異なるコンテンツの画像が出力される。つまり、ＡＶシステムとしては、１つの共通の基地局装置から、複数のモニタ装置の各々に対して、それぞれ異なるビデオ信号を送信可能な仕組みが与えられる。
このようなＡＶシステムの構成であれば、例えば、複数のユーザのそれぞれが、自分の使用しているモニタ装置により、好きなコンテンツの画像を出力させて楽しむことができる。また、基地局装置は複数のモニタ装置に対して共通で１つとされているから、ＡＶシステムを導入して使用するユーザにとっては、例えば家屋内における設置スペースが多くの基地局装置によって占有されてしまわないことや、購入コストもそれだけ低くできるなどのメリットも得られる。

上記もしているように、基地局装置がビデオ信号を送信するときには、圧縮符号化したビデオデータに変換して送信する。また、モニタ装置では、受信したビデオデータの圧縮符号化に対する復号を行って表示出力する。つまり、基地局装置ではビデオ信号を圧縮符号化するビデオエンコーダを備え、モニタ装置では圧縮符号化されたビデオ信号を復号するビデオデコーダを備える。また、これも上記しているように、現状において、このＡＶシステムは、基地局装置とモニタ装置とが１対１であることを前提として構成されており、従って、基地局装置からモニタ装置に送信するビデオ信号も、常に１つのコンテンツに対応したものとなる。従って、基地局装置のビデオエンコーダは、１つのビデオ信号入力に対応して１系統のみを備え、同様にして、モニタ装置のビデオデコーダとしても、１つの圧縮符号化ビデオ信号の受信入力に対応して１系統のみを備えている。

このような構成を基として、上記した１つの基地局装置と複数のモニタ装置とから成るＡＶシステムを構成するとして、１つの共通の基地局装置から複数のモニタ装置の各々に対してそれぞれ異なるビデオ信号を送信可能とするには、例えば、図１５に示すようにして基地局装置を構成することが順当である。なお、説明を簡単にするために、ＡＶシステムを構成するモニタ装置の最大数は２つである場合に対応した基地局装置の構成を図１５に示すこととする。

ここで、図１５に示す基地局装置においては、２つのモニタ装置のそれぞれに対応する動画像の映像ソースとして、それぞれ異なる映像コンテンツとなる動画像信号（ビデオ信号）Ａ、動画像信号Ｂを取得しているものとする。
そして、これら２つの動画像信号Ａ，Ｂに応じて、第１ビデオエンコーダ１２−１と第２ビデオエンコーダ１２−２とが備えられる。第１ビデオエンコーダ１２−１及び第２ビデオエンコーダ１２−２は、それぞれ、入力された動画像信号（ビデオ信号）について、所定方式により圧縮符号化を行い、符号化動画像データとして出力する。この場合には、動画像信号Ａ，Ｂは、それぞれ第１ビデオエンコーダ１２−１、第２ビデオエンコーダ１２−２に対して同時に入力されるようになっている。つまり、第１ビデオエンコーダ１２−１は、動画像信号Ａを圧縮符号化した符号化動画像データを出力し、第２ビデオエンコーダ１２−２は、動画像信号Ｂを圧縮符号化した符号化動画像データを出力するようにされている。

上記のようにして第１ビデオエンコーダ１２−１と第２ビデオエンコーダ１２−２から出力された、動画像信号Ａの符号化動画像データと、動画像信号Ｂの符号化動画像データは、制御部（ＣＰＵ：Central Processing Unit）１３の制御によって、メモリ１４に転送されて、ここに一時保持される。そして、制御部１３は、このメモリ１４に保持させている動画像信号Ａの符号化動画像データと、動画像信号Ｂの符号化動画像データとを、逐次所定のタイミングで読み出して、通信部１５に対して転送する。通信部１５では、制御部１３の制御に従って、所定の通信フォーマットのもとで、転送されてきた符号化動画像データについて、例えばパケット化などの通信データに変換する処理などを実行したうえで、送信動画像データとして、送信先となるモニタ装置に対して送信出力する。ここでは図示していないが、２つのモニタ装置としてモニタ装置Ａ，Ｂがあるとして、例えば、動画像信号Ａの送信動画像データについてはモニタ装置Ａを送信先として送信し、動画像信号Ｂの送信動画像データについてはモニタ装置Ｂを送信先として送信するようにされる。

このようにして、１つの基地局装置が複数のモニタ装置に対して、それぞれ同時に異なるコンテンツとしての動画像信号を送信可能な構成とするためには、基地局装置側において少なくとも、システムを構成するとされるモニタ装置の数に応じた数、つまり同時に送信すべき動画像信号の最大数に対応するビデオエンコーダを設ける構成を採ることになる。

この場合、この図１５に示す基地局装置から、例えば上記のようにして、動画像信号Ａ，Ｂの各送信動画像データを同時送信することとした場合、モニタ装置Ａにおいては動画像信号Ａの送信動画像データのみが受信され、モニタ装置Ｂにおいては動画像信号Ｂの送信動画像データのみが受信されることになる。
そして、モニタ装置Ａでは、受信した送信動画像データを符号化動画像データとして取得してビデオデコーダにより復号し、動画像として表示出力する。同様に、モニタ装置Ｂでは、受信した送信動画像データを符号化動画像データとして取得してビデオデコーダにより復号して動画像として表示出力する。
このようなモニタ装置側のデコード、表示出力の処理、動作となるのであれば、モニタ装置としては、受信取得される符号化動画像データについて、１系統のビデオデコーダにより復号を行って表示出力していればよいということになる。つまり、この点で、つまりモニタ装置側については、１つの基地局装置と１つのモニタ装置とから成るＡＶシステムの場合と同様の構成とされればよい。

特開平８−１３０６２８号公報

しかしながら、上記図１５に示した基地局装置の構成を採るとした場合には、システムを構成するモニタ装置数に応じて、同時に送信すべき動画像信号の最大数に対応するビデオエンコーダを実装する必要がある。このために、基地局装置としての回路規模が拡大して、例えば基板サイズ、装置のサイズが大型化し、また重量が増加してしまう。
また、図１５において説明しているように、複数のビデオエンコーダから同時に符号化されて出力される符号化動画像データは、制御部（ＣＰＵ）の制御によって、そのトラフィックが調整されることになるのであるが、実際の問題として、このような制御処理は、ＣＰＵにとっては、非常に大きな負荷となってしまい、例えば動作上での信頼性が低下する要因となる。
さらには、基地局装置からの実際の送信動作として、それぞれが独立的に符号化されて生成された複数の符号化動画像データを同時的に送信する必要があることから、この符号化動画像データを送受信するための通信網上での通信量が増加する。例えばこのような通信量の肥大は、通信障害を引き起こすような原因となり得るので、好ましいとはいえない。
これらの問題は、ＡＶシステムを構成可能とするモニタ装置の最大数を増加させていくほど拡大されて顕著になっていく。

そこで本発明は上記した課題を考慮して、送受信システムとして次のように構成することとした。
本発明の送受信システムとしては１つの送信装置と複数の受信装置とから成る。
そして、送信装置は、複数の受信装置の各々から送信される、動画像信号を指定して要求するための要求情報を受信する要求情報受信手段と、この要求情報受信手段により受信した要求情報により指定される複数の動画像信号を合成して合成動画像信号を生成する合成手段と、入力される動画像信号について符号化して符号化動画像信号を出力するもので、入力される動画像信号として上記合成動画像信号が入力可能とされる符号化手段と、合成動画像信号を上記符号化手段により符号化した符号化動画像信号を、複数の受信装置に対してブロードキャスト又はマルチキャストにより送信する画像信号送信手段と、合成動画像信号を符号化手段により符号化した符号化動画像信号を画像信号送信手段により送信するときの送信先となる複数の受信装置の各々に対して、その受信装置が上記要求情報により指定した動画像信号の合成動画像信号からの抽出の仕方を指示する抽出指示情報を生成してユニキャストにより送信する、抽出指示情報送信手段とを備えることとした。
また、受信装置の各々は、送信装置に対して、要求情報を送信する要求情報送信手段と画像信号送信手段により送信されてくる符号化動画像信号を受信する画像信号受信手段と、抽出指示情報を受信する抽出指示情報受信手段と、画像信号受信手段により受信した符号化動画像信号について復号して動画像信号を出力する復号手段と、この復号手段から出力される動画像信号が上記合成動画像信号である場合に、抽出指示情報受信手段により受信した抽出指示情報に基づいて、この合成動画像信号に合成されている複数の動画像信号のうちから、所要の動画像信号を抽出する動画像信号抽出手段とを備えることとした。

また、送信装置としては次のように構成することとした。
つまり、複数の受信装置の各々から送信される、動画像信号を指定して要求するための要求情報を受信する要求情報受信手段と、この要求情報受信手段により受信した要求情報により指定される複数の動画像信号を合成して合成動画像信号を生成する合成手段と、入力される動画像信号について符号化して符号化動画像信号を出力するもので、入力される動画像信号として上記合成動画像信号が入力可能とされる符号化手段と、合成動画像信号を上記符号化手段により符号化した符号化動画像信号を、複数の受信装置に対してブロードキャスト又はマルチキャストにより送信する画像信号送信手段と、合成動画像信号を符号化手段により符号化した符号化動画像信号を画像信号送信手段により送信するときの送信先となる複数の受信装置の各々に対して、その受信装置が上記要求情報により指定した動画像信号の合成動画像信号からの抽出の仕方を指示する抽出指示情報を生成してユニキャストにより送信する抽出指示情報送信手段とを備えることとした。

また、受信装置としては次のように構成することとした。
つまり、送信装置に対して、動画像信号を指定して要求するための要求情報を送信する要求情報送信手段と、画像信号送信手段によりブロードキャスト又はマルチキャストにより送信されてくる符号化動画像信号を受信する画像信号受信手段と、送信装置からユニキャストにより送信されてくる情報であって、合成動画像信号からの動画像信号の抽出の仕方を指示する抽出指示情報を受信する抽出指示情報受信手段と、画像信号受信手段により受信した符号化動画像信号について復号して動画像信号を出力する復号手段と、この復号手段から出力される動画像信号が上記合成動画像信号である場合に、抽出指示情報受信手段により受信した抽出指示情報に基づいて、この合成動画像信号に合成されている複数の動画像信号のうちから、所要の動画像信号を抽出する動画像信号抽出手段とを備えることとした。

また、１つの送信装置と複数の受信装置とから成る送受信システムの情報処理方法として次のように構成することとした。
先ず、送信装置では、複数の受信装置の各々から送信される、動画像信号を指定して要求するための要求情報を受信する要求情報受信手順と、この要求情報受信手順により受信した要求情報により指定される複数の動画像信号を合成して合成動画像信号を生成する合成手順と、入力される動画像信号について符号化して符号化動画像信号を出力するもので、入力される動画像信号として上記合成動画像信号についても符号化するようにされる符号化手順と、合成動画像信号を上記符号化手順により符号化した符号化動画像信号を、複数の受信装置に対してブロードキャスト又はマルチキャストにより送信する画像信号送信手順と、合成動画像信号を符号化手順により符号化した符号化動画像信号を画像信号送信手順により送信するときの送信先となる複数の受信装置の各々に対して、その受信装置が上記要求情報により指定した動画像信号の合成動画像信号からの抽出の仕方を指示する抽出指示情報を生成してユニキャストにより送信する、抽出指示情報送信手順とを実行するようにされる。
また、受信装置の各々は、送信装置に対して、要求情報を送信する要求情報送信手順と、
上記画像信号送信手順により送信されてくる符号化動画像信号を受信する画像信号受信手順と、抽出指示情報を受信する抽出指示情報受信手順と、画像信号受信手順により受信した符号化動画像信号について復号して動画像信号を出力する復号手順と、復号手順によって出力される動画像信号が上記合成動画像信号である場合に、抽出指示情報受信手順により受信した抽出指示情報に基づいて、この合成動画像信号に合成されている複数の動画像信号のうちから、所要の動画像信号を抽出する動画像信号抽出手順とを実行するように構成することとした。

また、送信装置における情報処理方法として次のように構成することとした。
つまり、複数の受信装置の各々から送信される、動画像信号を指定して要求するための要求情報を受信する要求情報受信手段と、この要求情報受信手段により受信した要求情報により指定される複数の動画像信号を合成して合成動画像信号を生成する合成手段と、入力される動画像信号について符号化して符号化動画像信号を出力するもので、入力される動画像信号として上記合成動画像信号が入力可能とされる符号化手段と、合成動画像信号を上記符号化手段により符号化した符号化動画像信号を、複数の受信装置に対してブロードキャスト又はマルチキャストにより送信する画像信号送信手段と、合成動画像信号を上記符号化手段により符号化した符号化動画像信号を画像信号送信手段により送信するときの送信先となる複数の受信装置の各々に対して、その受信装置が上記要求情報により指定した動画像信号の合成動画像信号からの抽出の仕方を指示する抽出指示情報を生成してユニキャストにより送信する、抽出指示情報送信手段とを実行するように構成することとした。

また、受信装置における情報処理方法として次のように構成することとした。
つまり、送信装置に対して、動画像信号を指定して要求するための要求情報を送信する要求情報送信手段と、画像信号送信手段によりブロードキャスト又はマルチキャストにより送信されてくる符号化動画像信号を受信する画像信号受信手段と、送信装置からユニキャストにより送信されてくる情報であって、合成動画像信号からの動画像信号の抽出の仕方を指示する抽出指示情報を受信する抽出指示情報受信手段と、画像信号受信手段により受信した符号化動画像信号について復号して動画像信号を出力する復号手段と、この復号手段から出力される動画像信号が合成動画像信号である場合に、抽出指示情報受信手段により受信した抽出指示情報に基づいて、この合成動画像信号に合成されている複数の動画像信号のうちから、所要の動画像信号を抽出する動画像信号抽出手段とを実行することとした。

上記各構成によれば、本発明による送受信システムとしては、送信装置側において複数の動画像信号を合成した合成動画像信号を生成したうえで符号化して符号化動画像信号に変換し、この符号化動画像信号を出力するようにされる。これに対応して、受信装置側においては、この符号化動画像信号を受信して得られる合成動画像信号から、所要の動画像信号を抽出するようにされる。
また、このような送受信システムにおける送信装置としては、複数の動画像信号を合成した合成動画像信号を生成したうえで符号化して符号化動画像信号に変換し、この符号化動画像信号を出力するようにされる。また、これと共に、合成動画像信号の送信先となる複数の受信装置に対して、抽出指示情報を生成して送信するようにされる。この抽出指示情報は、合成動画像信号からの動画像信号の抽出の仕方を指示する情報内容を有する。
また、受信装置としては、この符号化動画像信号を受信して得られる合成動画像信号から動画像信号を抽出するが、このとき、受信した抽出指示情報が示す指示に従うようにして動画像信号の抽出を行うようにされる。

このような構成において共通にいえることとして、先ず、送信装置側においては、複数の動画像信号を１つの動画像信号となるように合成した合成動画像信号を入力して符号化を行っているということになる。この場合、合成前の動画像信号の数にかかわらず、符号化対象となる動画像信号は、合成動画像信号の１つとなる。そして、受信装置側においては、このようにして、複数の動画像信号を合成した状態の合成動画像信号を受信したときには、この合成動画像信号から動画像信号を抽出可能とされている。
また、動画像信号を抽出するための構成として、送信装置側で上記抽出指示情報を送信し、受信装置側で受信した抽出指示情報に従って動画像信号を抽出することによっては、合成動画像信号を送信する送信装置側が抽出のための指示（コントロール）を行い、受信装置側がこのコントロールに従って合成動画像信号から動画像信号を抽出するという、装置間の関係をつくることができる。

これにより本発明としては、動画像信号（ビデオ信号）を符号化して送信するようにされる１つの送信装置と、複数の受信装置とから成るシステムにおいて、送信装置から複数の受信装置に対してそれぞれ異なる内容の動画像信号を符号化して送信させることとした場合にも、送信すべき動画像信号の数にかかわらず、符号化のための信号処理系は１つでよいこととなる。これにより、例えば送信装置のコストアップを避けることができ、また、回路基板サイズや装置サイズが大型になることも避けることができる。そして、このようにして送信装置側から複数の動画像信号を合成した状態の合成動画像信号を送信したとしても、受信装置では、合成画像信号から動画像信号を抽出するようにされているから、受信装置側では、問題なく正常な動画像信号を得ることができる。
そのうえで、抽出指示信号による動画像信号の抽出が行われるように構成することで、合成動画像信号からの動画像信号の抽出は、システムにおいて効率的に行われることとなる。

以下、本発明を実施するための最良の形態（以下、実施の形態という）についての説明を行っていくこととする。ここでの実施の形態としては、例えば家屋などの屋内で使用されることを前提とし、映像／音声データを送信する基地局装置と、基地局装置から送信された映像／音声データを受信して画像／音声として出力可能なモニタ装置とを、無線通信により接続するように構成したＡＶ(Audio Video)システムを例に挙げることとする。つまり、基地局装置が本発明としての送信装置に対応し、モニタ装置が本発明としての受信装置に対応する。

図１は本実施の形態としてのＡＶシステムの構成概念を模式的に示している。なお、本実施の形態のＡＶシステムとしては、１つの基地局装置に対して複数のモニタ装置が対応する関係による装置構成となるが、ここでは例として、１つの基地局装置に対して２つのモニタ装置を対応させた場合を示している。

本実施の形態のＡＶシステムは、この図１に示される基地局装置１とモニタ装置２から成るもので、例えば家庭の屋内で用いられる。この基地局装置１とモニタ装置２は、以降説明するように、相互に通信を行うことが可能とされている。

基地局装置１は、例えば家庭の屋内にてしかるべき場所に対して固定的に設置される。そして、テレビジョン放送を受信選局して復調して映像／音声情報を得る機能を有している。
このため、基地局装置１は、テレビジョン放送受信機能に対応してテレビジョン放送受信用のアンテナANTを接続可能とされている。そして、アンテナANTより受信した放送信号について選局及び復調を行ってテレビジョン信号としてのビデオ／オーディオ情報を得る。そして、このテレビジョン信号については、所定方式により圧縮符号化されたビデオ／オーディオ信号データに変換する。

また、本実施の形態の基地局装置１は、例えばビデオ入力端子も備えており、このビデオ入力端子と接続された外部ＡＶ機器から出力されるビデオ／オーディオ信号についても入力して取得し、上記と同様に、圧縮符号化したビデオ／オーディオ信号データに変換可能とされている。

さらに基地局装置１は、インターネット（ネットワーク）接続機能も有している。これにより、基地局装置１は、例えばインターネットに接続することで、インターネット上のＷｅｂサイトにアクセスしたり、また、電子メールの送受信等も行うことが可能とされる。このために、基地局装置１には、Ｗｅｂサイトを閲覧し、また、電子メールの作成、送受信などを行う、いわゆる、Ｗｅｂブラウザ、メーラなどといわれるアプリケーションソフトウェアがインストールされている。
そして、基地局装置１では、上記Ｗｅｂブラウザ、メーラなどのインターフェイス画像もビデオ信号として生成する。そして、上記したテレビジョン放送のビデオ信号に代えて出力したり、また、テレビジョン放送のビデオ信号と合成することが可能とされている。また、このようにして生成されたビデオ信号も、圧縮符号化されたビデオ信号データに変換可能とされている

そして、基地局装置１からは、上記のようにして得た圧縮符号化により得られたビデオ／オーディオ信号データを、先ず、無線により電波として送信出力可能とされている。つまり、基地局装置１では、受信選局したテレビジョン放送の画像、ＡＶ機器から入力されたビデオ／オーディオ信号、及びインターネット画像を含むインターフェイス画像としての画像情報などの各種コンテンツ情報を、無線送信可能とされている。また、コマンドなどをはじめとした画像情報以外の各種データも無線により送信出力可能とされる。そして、このようにして基地局装置１から送信された情報は、次に説明するモニタ装置２側で受信できるようになっている。
また、基地局装置１とモニタ装置２は、この無線通信によりコマンドの送受信を行うことも可能とされている。これにより、モニタ装置２により基地局装置１をコントロールしたり、また逆に、基地局装置１からモニタ装置２をコントロールすることもできる。

ここで、上記した無線通信は、例えば実際には、約３０ｍの範囲内での通信可能距離とする仕様となっている。つまり、この無線通信は、基地局装置１とモニタ装置２とが例えば同じ家屋内のような比較的近距離にある使用環境を前提としている。

モニタ装置２は、例えばユーザが持ち歩き可能なように配慮されたサイズ形状を有しているものとされる。
このモニタ装置２では、上記のようにして基地局装置１から電波として無線送信された信号を受信して入力することができる。例えば、入力した受信信号が圧縮符号化された形式のビデオ／オーディオ信号データとされるコンテンツ情報であるときには、復号処理を施してビデオ／オーディオ信号を得る。

そして、モニタ装置２は、例えばＬＣＤ（Liquid Crystal Display）などの表示デバイスにより構成される表示部２６を備えており、上記のようにして得たコンテンツ情報におけるビデオ信号について、表示部２６に対して画像として表示させる。つまり、モニタ装置２では、基地局装置１側で受信選局したテレビジョン放送の映像／音声情報や、ＡＶ機器から入力取得した映像／音声情報、及び基地局装置１側で動作するアプリケーションソフトウェアのユーザインターフェイス画像を表示出力することができるようになっている。また、スピーカ２９を含む音声情報の出力機能も備えることで、例えば映像／音声情報の音声や、ユーザインターフェイス画像に対する操作などに対応した音声も出力可能とされている。

また、表示部２６としての表示部位に対しては、タッチパネル３０ａが取り付けられており、このタッチパネル３０ａに対する操作を検出することによって操作情報を発生させるようにしている。
このタッチパネル３０ａに対する操作情報は、必要に応じて、無線によってアンテナ２６から基地局装置１に対して送信するようにされ、基地局装置１では、受信した情報に基づいて、所要の制御処理を実行するようにされる。このような送受信を含む動作が行われることによって、テレビジョン受像機のモニタとしての機能とインターネット機能との切り換えを行ったり、また、テレビジョン放送のチャネル選択、外部ビデオ／オーディオソースの選択などを行ったりすることが可能とされる。また、例えば上述したようにして表示される、Ｗｅｂブラウザやメーラなどのアプリケーションソフトウェアのインターフェイス画面に対する操作を行うことができる。

このように、基地局装置１は、テレビジョン放送や外部ＡＶ機器からビデオ／オーディオ情報を取得し、また、インターネットを通じてＷｅｂコンテンツをはじめとした各種の情報を受信取得し、さらにこれらの取得したコンテンツ情報を送信出力するというように、周囲から取得可能なコンテンツ情報をモニタ装置に伝送するためのインターフェイスとしての機能を有している。
また、モニタ装置２は、上記のようにして基地局装置１が取得したビデオ／オーディオ情報を画像、音声として出力し、また、当該システムに対するユーザの操作入力を受け付けるユーザインターフェイスとしての機能を有している。

そのうえで、本実施の形態としては、前述もしているように、１つの基地局装置１と複数のモニタ装置２とを組み合わせてＡＶシステムを構築するようにされる。そして、例えばモニタ装置２から基地局装置１に対するコントロールとして、複数のモニタ装置２のそれぞれが個別に、画像情報（ビデオ信号）を要求可能とされる。具体的には、例えば複数のモニタ装置２のそれぞれが、異なるチャンネルのテレビジョン放送の画像を要求できるようにされている、ということである。そして、基地局装置１側では、以降説明する構成によって、例えばこれらの要求に応じて、複数のモニタ装置ごとにおいてそれぞれが要求した画像が表示出力されるように、複数の画像情報（ビデオ信号）についての送信を行うようにされる。
なお、確認のために述べておくと、図１においては２つのモニタ装置２が示されているが、以降の説明からも理解されるように、本発明の概念として、ＡＶシステムにおけるモニタ装置２の数は特に限定されるべきものではない。

図２は、本実施の形態の基地局装置１についての、画像情報（ビデオ信号：動画像信号）を送信するための構成例をブロック図により示している。また、この図２においては、上記ブロック図により示す各部における処理の流れ（段階）に応じたとされる、そのときの動画像信号の状態も模式的に示している。ここでの動画像信号の状態については、その動画像信号を表示出力したとされるときの表示状態として示している。

この図においては、基地局装置１において、モニタ装置２側に送信すべき画像情報として、動画像信号（ビデオ信号）Ａと、動画像信号（ビデオ信号）Ｂとを取得した場合が示されている。これらの動画像信号としての画像情報は、例えば上記もしているように、それぞれ異なるチャンネルのテレビジョン放送のビデオ信号などとされる。そして、基地局装置１の処理の流れとして、この動画像信号Ａと動画像信号Ｂとを取得した段階を第１段階とすると、この第１段階では、これら動画像信号Ａと動画像信号Ｂに対応する動画像Ａ，Ｂとしては、図２において動画像の状態として示すようにして、相互に独立したコンテンツ内容を有するそれぞれ個別のものであるということになる。

なお、実際において、上記のようにして、異なる複数のチャンネルのテレビジョン放送のビデオ信号を同時に取得するための構成としては、例えば、基地局装置１に対して、テレビジョン放送のチューナを複数備えるようにすればよい。
また、外部ＡＶ機器として、テレビジョン放送チューナを備える機器を基地局装置１と接続するようにしてもよい。そして、基地局装置１が備えるテレビジョンチューナで受信選局したチャンネルのビデオ信号と、外部ＡＶ機器側で受信選局した異なるチャンネルのビデオ信号とを入力して取得するようにされる。もちろん、基地局装置１が備えるチューナは使用せずに、複数の外部ＡＶ機器にて受信選局したチャンネルのビデオ信号を入力して取得してもよい。

上記のようにして取得された動画像信号Ａ，Ｂは、合成器１１に対して入力される。第２段階の処理として、合成器１１では、入力される複数の動画像信号について合成処理を行って、１つの動画像信号（合成動画像信号）として出力する。この図では、合成器１１は、入力される２つの動画像信号Ａ，Ｂについて合成処理を行って、合成動画像信号を生成することとしている。これにより、この合成動画像信号に対応する動画像の状態としては、例えば、図示するようにして、１画面上において、動画像Ａと動画像Ｂとが合成された状態となる。なお、この図では、２つの動画像信号を合成するのにあたり、合成対象となっている動画像信号を水平方向に沿って配列させるようなかたちで、合成処理を行った結果を示している。
また、合成器１１が入力可能な動画像信号の最大数としては特に限定されるべきものではない。また、合成器１１そのものとしては、アナログ信号処理より合成処理を行うように構成してもよいし、また、デジタル信号処理により合成処理を行うように構成してもよい。例えば基地局装置１の実際の構成として、第１段階として取得される動画像信号がアナログ信号なのであれば、合成器１１についてアナログ信号処理により動画像信号の合成を実行する構成とすればよく、第１段階として取得される動画像信号がデジタル信号なのであれば、合成器１１についてデジタル信号処理により動画像信号の合成を実行する構成とすればよい。

そして、合成器１１による合成処理によって得られた合成動画像信号は、ビデオエンコーダ１２に対して入力される。
ビデオエンコーダ１２は、第３段階の処理として、入力される動画像信号について、所定の符号化方式に従って圧縮符号化を行い、符号化動画像信号を生成して出力する。出力される符号化動画像信号はデジタル信号の形式となっている。なお、入力される動画像信号がアナログ信号である場合には、ビデオエンコーダ１２では、先ずＡ／Ｄ変換処理を実行してから符号化処理を実行するようにされる。また、この場合、ビデオエンコーダ１２は、１つの動画像信号入力に対応して１つの符号化動画像信号を出力するものとされ、この点では、従来と同様とされる。
また、ビデオエンコーダ１２が対応する圧縮符号化方式としては、特に限定されるべきものではないが、現状としては、例えばＭＰＥＧ(Moving Picture Experts Group)方式に準拠した方式、若しくはＨ．２６４などの方式を採用することが考えられる。

そして、ビデオエンコーダ１２では、第３段階の処理として、合成器１２から合成動画像信号が入力されてきた場合にも、通常の動画像信号と同様にして圧縮符号化のための処理を実行し、圧縮符号化した動画像信号として出力する。なお、本実施の形態において合成動画像信号をビデオエンコーダ１２により符号化して得られる符号化動画像信号のデータについては、合成／符号化動画像信号ということにする。図２の場合においては、合成／符号化動画像信号は、動画像信号Ａ，Ｂについて合成した合成動画像信号を符号化したものとなる。従って、図２において、この第３段階の処理により得られる合成／符号化動画像信号に対応する画像としても、図示するようにして、１画面上において動画像Ａと動画像Ｂとが合成された状態のものとなる。

ビデオエンコーダ１２から出力される符号化動画像信号のデータは、制御部１３の制御によりメモリ部１４に転送されて書き込みが行われ、ここで一時蓄積されるようにして保持される。そして、制御部１３は、このメモリ部１４に一時蓄積させた符号化動画像信号のデータを所要のタイミングで読み出して通信部１５に対して転送して入力させる。なお、このときの制御部１３による符号化動画像信号のデータの読み出しタイミングは、例えば、この符号化動画像信号のデータを受信するモニタ装置側で、例えば画像として再生出力するときに途切れが生じないようにすることを考慮して設定される。

制御部１３は、例えばＣＰＵ（Central Processing Unit）を備えるマイクロコンピュータとしての構成を採り、この図に示される動画像信号処理を含む各種の基地局装置１における制御を実行する。

通信部１５は、この場合には、本実施の形態としての電波無線通信に採用される所定の通信プロトコルに従っての通信処理を実行する。あくまでも一例であるが、本実施の形態の電波無線通信の通信プロトコルとしてはＴＣＰ／ＩＰ(Transmission Control Protocol/Internet Protocol)が採用される。つまり、電波無線通信であるが、その通信プロトコルとしては、インターネットと同様としている。ＴＣＰ／ＩＰは、既にインターネットで広く普及していることから、応用が容易であるという利点を有している。
例えば、送信時においては、ＴＣＰ／ＩＰに従った送受信が可能な形式となるように、パケット化などの処理を施し、例えば所定のキャリア変調などを施して電波として送信出力する。また、受信時においては、先ず、電波として伝送されてきた送信情報を受信してパケット単位での情報に復調する。そして、ＴＣＰ／ＩＰの通信プロトコルに従ってパケット化を解くなどの処理を実行することで、コマンド等や映像／音声情報の実データを得るようにされる。

通信部１５は、第４段階の処理として、上記と同様の通信処理を実行することによって、制御部１３の制御によってメモリ１４から転送されてくる符号化動画像信号のデータを、送信動画像データとして、電波無線通信により、送信先として設定されているモニタ装置２に対して送信するようにされる。
そして、図２の例としては、ビデオエンコーダ１２から出力される符号化動画像信号が合成／符号化動画像信号とされていることで、通信部１５から送信出力される送信動画像データとしても、合成／符号化動画像信号とされていることになる。図２においては、この第４段階により送信出力される送信動画像データに対応する画像としても、図示するようにして１画面上において動画像Ａと動画像Ｂとが合成した状態とされているものである。

このようにして、本実施の形態の基地局装置１は、例えば複数のモニタ装置２に対して、異なる複数の動画像の情報を送信する必要のある場合において、これら複数の動画像の情報に対応する複数の動画像信号を合成して１つの動画像信号（合成動画像信号）とするようにしている。そして、この合成動画像信号を、通常の動画像信号と同様に圧縮符号化して送信出力するようにされている。

また、本実施の形態の基地局装置１において、合成／符号化動画像信号を送信動画像データとして送信するときには、複数のモニタ装置２に対して、この送信動画像データを同時送信することになる。そして、このようにして複数のモニタ装置２に送信動画像データを同時送信するためには、モニタ装置２側との通信をブロードキャスト又はマルチキャストにより行うようにされる。

図３は、本実施の形態のモニタ装置２についての、画像情報（ビデオ信号：動画像信号）を受信するための構成例をブロック図により示している。また、この図３においても、上記ブロック図により示す各部における処理の流れ（段階）に応じたとされる、そのときの動画像信号の状態を、その動画像信号を表示出力したとされるときの表示状態として模式的に示している。

先ず、基地局装置１から送信されてきた送信動画像データは、モニタ装置２において通信部２１によって受信復調されることになる。なお、通信部２１の構成としては、先に説明した基地局装置１の通信部１５と同様の構成とされればよい。
通信部１５により送信動画像データを受信復調することによっては、符号化動画像信号のデータが得られることになる。制御部２２は、この通信部１５にて得られる符号化動画像信号のデータをメモリ２３に書き込んで一時蓄積するようにして保持する。そして、所定のタイミングで、メモリ２３に蓄積させている符号化動画像信号のデータの読み出しを行ってビデオデコーダ１２に対して転送する。ここまでの処理が、モニタ装置２における第１段階の処理となる。

制御部２２としても、例えばＣＰＵを備えるマイクロコンピュータとしての構成を採り、この図に示される動画像信号処理を含む各種の基地局装置１における制御を実行する。また、制御部２２によるビデオデコーダ１２への符号化動画像信号のデータの転送タイミングは、ビデオデコーダ１２において復号されて出力される動画像信号について連続性が維持されるようにすることを考慮して設定される。この結果、最終的にディスプレイパネル２６から表示出力される画像としては、途切れによる乱れなどが無いものとすることができる。

そして、図３においては、この第１段階としての処理により、ビデオデコーダ２４に対して転送される符号化動画像信号のデータとしては、動画像信号Ａと動画像信号Ｂとが合成された合成／符号化動画像信号のデータであることになる。このために、この第１段階における動画像信号に対応する画像としても、動画像Ａと動画像Ｂとが合成された状態となっている。

ビデオデコーダ２４では、上記のようにして制御部２２の制御によって転送されてくる符号化動画像信号のデータを入力して、ビデオエンコーダ１２の符号化方式に対応する復号処理を実行し、この復号により伸長された動画像信号を生成して出力する。このビデオデコーダ２４による復号処理が第２段階の処理となる。
そして、図２の第２段階の処理において、ビデオデコーダ２４に対して入力されるのは、動画像信号Ａ，Ｂを合成した合成／符号化動画像信号であり、従って、この第２段階の処理（復号処理）によっては、動画像信号Ａ，Ｂを合成した合成動画像信号が得られるということになる。この合成動画像信号を画像としてみた場合にも、図示するようにして動画像Ａと動画像Ｂとが合成された状態のものとなる。

ビデオデコーダ２４により復号して得られた動画像信号は、グラフィックコントローラ２５に対して入力される。このグラフィックコントローラ２５では、先ず、入力された動画像信号を処理対象として、必要とされる画像表示態様が得られるように画像処理を実行することができる。例えば、入力された動画像信号としての画像全体から一部を切り出した画像部分を表示出力するための動画像信号を、元の入力された動画像信号から生成する処理を実行可能とされる。このようなときには、例えば画素補間、画素間引きなどの処理を行うことで、元の動画像信号の解像度（画像サイズ）を変更することが可能とされている。
また、この場合においては、元の動画像データに対して、チャンネル番号や入力ソースなどを文字等により重畳して表示させる、いわゆるオンスクリーンディスプレイのための信号処理も、このグラフィックコントローラ２５が実行するようにして構成されている。
そして、ビデオデコーダ２４から入力されてくる動画像信号が合成動画像信号とされる場合には、グラフィックコントローラ２５は、画像処理として、この入力される合成動画像信号を形成するとされる複数の動画像信号のうちから、このモニタ装置２により表示出力するべき動画像信号を抽出するようにされる。この画像処理が第３段階の処理となる。 図２に示す場合のようにして、グラフィックコントローラ２５に入力される合成動画像信号が動画像信号Ａ，Ｂを合成したものとされ、モニタ装置２によっては動画像信号Ａを表示出力させることとした場合、この第３段階の処理によっては、合成動画像信号から、動画像信号Ａを抽出することになる。従って、このときに得られる動画像信号に対応した画像としては、図示するようにして、動画像Ａのみとされることになる。

そして、グラフィックコントローラ２５は、上記のようにして、表示部２６に表示させるべき動画像信号（ビデオ信号）を生成した上で、この動画像信号による画像が表示部２６において画像として表示されるようにして、表示部２６を駆動する。これにより表示部２６としてのディスプレイデバイス（例えばＬＣＤ）は、画像表示を行うことになる。これがモニタ装置２における第４段階の処理となる。
そして、図２の場合においては、この段階４として、表示部２６を駆動するための基となる信号は、上記のようにして合成動画像信号から抽出した動画像信号Ａとなり、従って、これに対応する画像としても動画像Ａであることになる。そしてこのことは、第４段階の処理の結果として、実際に表示部２６において動画像Ａが画像として表示されることを意味する。

このような基地局装置１とモニタ装置２の構成であれば、先ず、モニタ装置側は、グラフィックコントローラ２５に対して、複数の動画像信号を含むようにされた合成動画像信号から必要な動画像信号を抽出する機能が与えられているといえる。これに応じて、基地局装置１側としては、複数のモニタ装置に対してそれぞれ異なるコンテンツ（動画像信号）を同時的に配信するのにあたり、これらのコンテンツとしての複数の動画像信号を１つの動画像信号として合成して送信すればよいということになる。また、本実施の形態の場合、動画像信号などのコンテンツのデータは、圧縮符号化してデータサイズを小さくして伝送することとしているが、処理手順としては、先に複数の動画像信号を合成して１つの動画像信号（合成動画像信号）を生成してから、この合成動画像信号について符号化を行うこととしている。
これにより、基地局装置１側においては、符号化処理は常に１つの動画像信号に対して行えばよいということになる。つまり、モニタ装置２側に送信すべき動画像の数にかかわらず、符号化処理のための信号処理系は１系統でよいということになる。これを図２の構成に対応させれば、モニタ装置の最大接続可能数（送信すべき動画像数）がどれだけ増加しても、基地局装置１に設けるべきビデオエンコーダは１つでよい、つまり、ビデオエンコーダ１２のみでよい、ということになる。

このようにして、基地局装置１としては、複数のモニタ装置に対して異なる動画像のデータを同時的に送信できる構成でありながら、ビデオエンコーダとしては１系統でよく、モニタ装置の最大接続可能数（送信すべき動画像数）を増加させたとしても、これに応じてビデオエンコーダを増設する必要はない。これにより、製造コストを抑えることができる。また、回路規模が拡大することもないことから、基地局装置の回路基板サイズ、装置全体のサイズが大型、重量化することも避けられる。また、ビデオエンコーダとしての処理機能を、制御部（ＣＰＵ）１３がプログラムに従って実行するソフトウェア的な処理により実現する構成とした場合においても、制御部１３が実行すべき符号化処理は、常に１つの動画像信号に対応したものとなる。従って、合成対象の動画像信号数の増加にかかわらず、符号化のための制御部の負荷が重くなっていくということがない。
さらに、図２による説明からも理解されるように、合成動画像信号をビデオエンコーダ１２により符号化して通信部１５により送信出力するまでの処理は、１つの通常の動画像信号を対象とするときの処理と変わらない。これは、合成動画像信号そのものが、１つの動画像信号として扱われるべきものだからである。従って、このときの制御部１５によるトラフィックのための制御、つまり、例えばメモリ１４に対する合成／符号化動画像信号データの書き込み／読み出しのためのタイミング制御、及び通信部１５に対する送信タイミング制御などは、通常の１つの動画像信号を送信出力する場合と同様でよいということになる。これにより、複数の動画像情報を送信するのにあたって、制御部１３におけるＣＰＵの負荷が重くなることがなくなり、動作信頼性も損なわないことになる。

続いて、上記した構成による基地局装置１と複数のモニタ装置２とから成るＡＶシステムの使用に応じた動作例について、図４〜図８を参照して説明する。
ここで、ＡＶシステムの動作状態として、図４に示すようにして、基地局装置１では、コンテンツとして、動画像Ａ，Ｂとしての２つの動画像信号を取得し、これらの動画像Ａ，Ｂの動画像信号を合成、符号化して得られる合成／符号化動画像信号を、送信動画像データとしてモニタ装置２−Ａ，２−Ｂに対してブロードキャスト又はマルチキャストにより同時送信しているものとする。これに応じて、モニタ装置２−Ａでは、送信動画像データを受信、復号して得られる合成動画像信号のデータから、動画像Ａの動画像信号を抽出し、表示出力させているものとする。また、モニタ装置２−Ｂでは、送信動画像データを受信、復号して得られる合成動画像信号のデータから、動画像Ｂの動画像信号を抽出し、表示出力させているものとする。

そして、この状態から図５に示すようにして、新たにＡＶシステムの通信圏内にあるとされるモニタ装置２−Ｃから動画像Ｃを要求するコマンドが、基地局装置１に対して送信されてきたとする。この動画像Ｃは、これまで基地局装置１が送信動画像データ（合成／符号化動画像信号）として送信している動画像Ａ，Ｂとは異なるコンテンツとなる。つまり、モニタ装置２−Ｃからは、これまで送信していない新規の動画像の送信が要求されたことになる。

この動画像Ｃの要求を受信した基地局装置１では、図６に示すようにして、動画像Ｃの動画像信号を新規に取得する。そして、合成動画像信号としては、これまでの動画像Ａと動画像Ｂの動画像信号に加えて、動画像Ｃの動画像信号も合成するようにされる。そして、この合成動画像信号を符号化して、送信動画像データとして、モニタ装置２−Ａ，２−Ｂ，２−Ｃに対してブロードキャスト又はマルチキャストにより送信する。なお、このときに生成される合成動画像信号を画像としてみた場合には、例えば、図において模式的に示すように、１つの画面領域に対して動画像Ａ，Ｂ，Ｃを配列したような動画像信号とすることが考えられる。
そして、モニタ装置２−Ａ，２−Ｂ，２−Ｃでは、送信されてきた送信動画像データを受信して、動画像Ａ，Ｂ，Ｃが合成された合成動画像信号を得る。そして、モニタ装置２−Ａは、これまでと同様に、合成動画像信号から動画像Ａの動画像信号を抽出して表示出力する。モニタ装置２−Ｂは、合成動画像信号から動画像Ｂの動画像信号を抽出して表示出力する。モニタ装置２−Ｃは、合成動画像信号から動画像Ｃの動画像信号を抽出して表示出力する。つまり、モニタ装置２−Ｃ側としては、要求した動画像Ｃの供給を受け、これを表示出力できていることになる。

そして、図６に示す動作状態から、さらに、図７に示すようにして、モニタ装置２−Ｄから動画像Ａを要求するコマンドが基地局装置１に対して送信されたとする。ここで、モニタ装置２−Ｄが要求した動画像Ａは、モニタ装置２−Ａにおいて受信、復号、抽出して表示出力させているのと同じコンテンツである。つまり、モニタ装置２−Ｄが要求した動画像Ａは、既に基地局装置１から合成動画像信号に合成されて送信されている状態にある。

このモニタ装置２−Ｄからの要求を受信した基地局装置１の応答動作として、基地局装置１から送信する送信動画像データの内容としては、これまでと同様に、動画像Ａ，Ｂ，Ｃのそれぞれに対応する動画像信号を合成した合成動画像信号のままとする。つまり、この場合には、送信動画像データについて、図６のときと同じ内容を変更することなく継続して送信させることとしている。

そして、この場合においても、モニタ装置２−Ａ，２−Ｂ，２−Ｃ，２−Ｄでは、同時送信されてきた送信動画像データを受信、復号して、動画像Ａ，Ｂ，Ｃが合成された合成動画像信号を得る。
モニタ装置２−Ａは、これまでと同様に、合成動画像信号から動画像Ａの動画像信号を抽出して表示出力する。モニタ装置２−Ｂは、合成動画像信号から動画像Ｂの動画像信号を抽出して表示出力する。モニタ装置２−Ｃは、合成動画像信号から動画像Ｃの動画像信号を抽出して表示出力する。そして、モニタ装置２−Ｄも、この合成動画像信号から、モニタ装置２−Ａと同じ動画像Ａの動画像信号を抽出して表示出力する。この場合にも、つまり、モニタ装置２−Ｄ側では、要求した動画像Ａの供給を受け、これを表示出力できているといえる。

ここで、図５及び図６に示すようにして、モニタ装置２側から新規の動画像が要求された場合には、基地局装置１では、この要求された動画像としての動画像信号を新規に取得し、合成動画像信号に追加的に合成して送信するようにされる。
これに対して、図７及び図８に示すようにして、モニタ装置２側から要求された動画像が、既に合成動画像信号に合成して送信中のものであった場合には、基地局装置１では、その要求された動画像を新たに、合成動画像信号に追加することはしないようにされる。本実施の形態の場合、複数のモニタ装置に対してブロードキャスト又はマルチキャストにより同時送信する情報は、これらモニタ装置側で要求している全ての動画像信号を合成した合成動画像信号とされている。したがって、複数のモニタ装置において、同じ動画像を必要とするときには、合成動画像信号に合成されている同じ動画像信号を抽出すればよいことになる。つまり、同じ情報資源を共有すればよいわけであるから、合成動画像信号に同じ動画像信号を重複して合成させる必要ない。
これにより、例えば、動画像を要求するモニタ装置が増加してきたとしても、同じ動画像を要求している複数のモニタ装置がある場合には、その分、合成動画像信号として合成すべき動画像信号数を増やさないようにできる。このため、例えば画像合成処理の負担もいたずらに重くなることがない。これは、例えば合成器１１としての構成が大規模化することを抑制できる１つの要因となる。また、合成動画像信号に合成する動画像信号数が増えないことで、例えばモニタ装置側での抽出処理についてもそれだけ処理負担の軽いものとして構成することが可能となる。また、合成器１１が実行する画像信号処理、及びモニタ装置２側での抽出処理をソフトウェアとして構成した場合にも、これらの処理がいたずらに重くは成らないので、これらの処理を実行する各制御部（１３，２２）の処理負担を軽減できることになる。
なお、これら図４〜図８におけるようにしてモニタ装置２において受信取得した合成動画像信号から必要とされる動画像信号を適切に抽出するための仕組み、構成については後述する。

ここで、基地局装置１の合成器１１により動画像信号を合成するのにあたっては、例えば、図９及び図１０に示すような合成動画像信号が得られるようにして合成処理を行うようにすることが考えられる。
図９（ａ）（ｂ）は、合成動画像信号について、これを表示出力させた場合に得られる画像状態により模式的に示している。また、これらの図においては、説明を簡単なものとするために、動画像Ａ，Ｂの２つに対応する動画像信号を合成する例を示している。
先ず、図９（ａ）においては、例えば、これまでに説明した図２〜図５においても示されているのと同様の動画像信号の状態が示されている。つまり、１画面上において合成対象となる動画像が水平方向に配列された画像に対応する合成動画像信号となるように、合成処理を行うものである。このための処理としては、例えば合成動画像信号の１水平ラインごとに、合成対象となる動画像信号における同位置の水平ラインが連続するものとなるようにして映像信号を生成していくようにすればよい。

あるいは、図９（ｂ）に示すようにして、１画面上において合成対象となる動画像が垂直方向に配列された画像に対応する合成動画像信号となるように合成処理を行うこととしてもよい。このような合成動画像信号を生成するためには、例えば、１画面分の画像信号において、１つの動画像信号の第１水平ラインから最終水平ラインまでの信号を入力させた後に、これに続けて、その下に位置するべき動画像信号の第１水平ラインから最終水平ラインまでの信号を入力して連続させるようにして生成を行っていけばよいものとされる。

また、合成すべき動画像信号が所定数以下のうちは、図９（ａ）又は図９（ｂ）に示すようにして、水平方向又は垂直方向に沿って動画像が配列されていくようにして合成を行い、合成すべき動画像信号が所定数を越えたのであれば、所定規則に従って、水平／垂直両方向でのマトリクス状に動画像が配列されていくように合成するようにしてもよい。例えば図６〜図８において示される動画像Ａ，Ｂ，Ｃを合成した送信動画像データが、このような合成のパターン例となる。

また、動画像を垂直方向に沿って配列させる合成の変形として、図１０に例示するような合成パターンとすることも可能である。なお、この図においても、動画像Ａ，Ｂに対応する２つの動画像信号を合成する場合を例としている。
図１０（ａ）（ｂ）は、それぞれ、動画像Ａ，Ｂの動画像信号について、水平ラインの信号から成るフレーム画像信号として示している。動画像Ａのフレーム画像信号は、第１水平ラインＤＨA-1〜最終水平ラインＤＨA-nのライン信号から成り、動画像Ｂのフレーム画像信号は、第１水平ラインＤＨB-1〜最終水平ラインＤＨB-nのライン信号から成るものとして示している。

そして、このような動画像Ａ，Ｂの動画像信号を合成して合成動画像信号を生成するのにあたっては、図１０（ｃ）に示すようにして、第１水平ラインから最終ラインにかけて水平ラインＤＨA-1→ＤＨB-1→ＤＨA-2→ＤＨB-2→ＤＨA3→ＤＨB-3→・・・・・→ＤＨA-n→ＤＨB-nのようにして配列させることとしている。つまり、この場合には、動画像Ａ，Ｂのフレーム画像信号の水平ラインが交互となるようにして合成して１つのフレーム画像信号を生成するようにして合成動画像信号を得ることとしている。このような図１０に示す合成の手法は、例えば図９に示した合成の手法が合成対象となる動画像単位によるものであるのに対して、合成対象となる動画像についての映像信号の水平ライン単位による合成であるということがいえる。

また、このような合成の手法を採ることは、合成対象となる動画像が３以上の場合にも可能である。例えば上記した動画像Ａ，Ｂに加えて動画像Ｃを合成するとした場合において、この動画像のフレーム画像信号が第１水平ラインＤＨC-1〜最終ラインＤＨC-nから成るものとすれば、合成動画像信号としての合成フレーム画像信号は、例えば、水平ラインＤＨA-1→ＤＨB-1→ＤＨC-1→ＤＨA-2→ＤＨB-2→ＤＨC-2→ＤＨA3→ＤＨB-3→ＤＨC-3→・・・・・→ＤＨA-n→ＤＨB-n→ＤＨC-nのようにして配列させていく処理を行えばよい。

なお、この図１０により説明する例では、合成動画像信号の１水平ラインごとに、合成対象となる動画像信号の１つの水平ラインを順次割り当てるようにしているが、その基本概念としては、水平ラインによる単位を基とする合成が行われさえすればよい。従って、例えば合成対象となる動画像信号の複数の水平ラインを１つの映像信号部分単位として、この映像信号部分単位により合成を行うようにしても構わない。また、例えば図１０において、合成動画像のフレーム画像信号において、１つの動画像のフレーム画像信号だけを抜き出してみた場合には、元の動画像のフレーム画像信号と同じ水平ラインの配列となっているが、例えば、元の動画像のフレーム画像信号の水平ラインを、所定規則に従ってスクランブルさせるようにしたうで、合成動画像のフレーム画像信号の水平ラインに割り当てるような合成を行ってもよいものである。

また、本実施の形態としては、図５及び図６による説明から理解されるように、送信動画像データとして送信する合成動画像信号に合成して含める動画像信号の数は、例えばモニタ装置２側からの要求に応じてダイナミックに可変可能とされている。そのうえで、本実施の形態としては、次に説明するようにして、合成動画像信号に合成して含める動画像信号の数に応じて、合成動画像信号を圧縮符号化するときの符号化率（例えば圧縮率など）を変更するようにされる。

ここで、動画像信号をフレーム画像としてみた場合の、基地局装置１において処理できる最大解像度（画素数）は、図１１（ａ）に示すようにして、水平解像度（水平画素数）をａ、垂直解像度（垂直画素数）をｂとして、ａ×ｂで表されるものとする。
これまでの説明から理解されるように、基地局装置１においては、合成動画像信号も１つの動画像信号として扱われるものであるから、合成動画像信号としての最大解像度も、ａ×ｂとなる。そしてここでは、合成動画像信号を生成するのにあたり、２つから４つまでの動画像を合成する場合には、同じ図１１（ａ）に示すようにして、ａ×ｂの最大解像度に対応する画像サイズを合成領域としたうえで、各動画像について、ｃ（水平解像度）×ｄ（垂直解像度）で表される解像度を設定する。
ここでは説明を簡単にするために、合成領域の水平解像度ａと、合成される動画像の水平解像度ｃは、１／２ａ＝ｃの関係であることとする。同様に、合成領域の垂直解像度ｂと、合成される動画像の垂直解像度ｄの関係も、１／２ｂ＝ｄの関係であることとする。 そして、上記のようにして設定された解像度による４つ以内の所要数の動画像信号を、合成領域に対してマトリクス状の配列パターンに割り当てるようにして合成を行うようにされる。この場合、図１１（ａ）において動画像Ａ，Ｂ，Ｃ，Ｄとして示すようにして、解像度ａ×ｂによる合成領域に対しては、解像度ｃ×ｄによる動画像信号は、最大で４つを割り当てて合成することが可能となる。

そして、例えば図１１（ａ）に示すようにして、合成動画像信号として４つの動画像信号が合成されている状態から、さらに合成すべき動画像信号を増加することになったとする。この場合、図１１（ａ）に示されるｃ×ｄの解像度のままでは、増加分の動画像信号を追加して合成することができない。
そこで、このような場合には、図１１（ｂ）に示すようにして、合成すべき動画像信号の解像度（水平解像度×垂直解像度）について、ｃ×ｄよりも小さいｅ×ｆを設定するようにされる。
図１１（ｂ）においては、合成される動画像信号の解像度ｅ×ｆとしては、合成領域の解像度ａ×ｂに対して、１／３ａ＝ｅ、１／３＝ｆの関係となるようにしており、これにより、図において動画像Ａ〜Ｉとして示すように、最大で９の動画像信号をマトリクス状の配列パターンに割り当てて合成することが可能になる。
このようにして、合成すべき動画像信号の数が増加するのに応じて、動画像信号の解像度を小さくしていけば、限られた合成領域において、全ての合成すべき動画像信号を割り当てて合成させることができる。

しかしながら、よく知られているように、画像信号の解像度が小さくなることは、画像として表示出力したときの画質の劣化を招く。従って、上記のようにして合成すべき動画像の数に応じて各動画像信号の解像度を小さくしていった場合には、モニタ装置２側で表示出力される画像の画質も劣化していくことになる。
そこで、本実施の形態としては、このような画質劣化を補うために、合成すべき動画像の数に応じて各動画像信号の解像度を小さくしたのに応じては、これらの動画像信号を合成した合成動画像信号をビデオエンコーダ１２により符号化するときの符号化率（例えば圧縮率）を小さくするようにされる。周知のようにして同じ圧縮符号化方式であっても、符号化率を大きくするように変更すれば、データレートは小さくなるが再生品質は低下する。逆に符号化率を小さくしていけば、データレートは大きくなるが再生品質は向上する。
なお、実際の符号化率の値としては、実際の合成領域の最大解像度及び合成対象の動画像信号に設定する解像度の兼ね合いや、実際にモニタ装置２にて表示出力される動画像の画質などを考慮して設定すべきものとなる。
また、このような合成すべき動画像数に応じた符号化率の変更は、例えば図１０に示したようにして水平ライン単位による合成を行う場合にも適用されるべきものである。

続いて、図１２〜図１４のフローチャートを参照して、これまで説明した本実施の形態としてのＡＶシステムの動作に対応して、基地局装置１とモニタ装置２のそれぞれにおいて実行される処理動作について説明する。

本実施の形態のＡＶシステムにおいて、モニタ装置２側で新規に何らかのコンテンツの動画像を表示出力させるためには、基地局装置１から、そのコンテンツの動画像信号を送信してもらう必要がある。このために、モニタ装置２側としては、例えば図５のモニタ装置２−Ｃ又は図７のモニタ装置２−Ｄの動作として示したように、基地局装置１に対して、動画像としてのコンテンツ内容を指定した上で、動画像信号の要求を行う必要がある。図１２はこの処理手順を示すもので、例えば図３に示す制御部２２がプログラムなどに従って実行すべきものとなる。

この図１２に示す処理としては、先ずステップＳ１０１において、モニタ装置２において、動画像を表示出力させるための指示が発生することを待機している。そして、例えばモニタ装置２に対するユーザの操作などに応じて、ユーザが所望のコンテンツ内容を指定して、そのコンテンツの画像を表示出力させるための操作を行ったとすると、これに応じて動画像出力のための指示が発生されることとなる。具体例として、ユーザがモニタ装置２に対して、或る所望のチャンネルを選択してテレビジョン放送の画像を表示させるための操作を行ったとされる。すると、コンテンツとして、この選択されたチャンネルの動画像を指定して表示出力させるための指示が発生されることになる。
このようにして、動画像を出力させる指示が発生されると、ステップＳ１０１からステップＳ１０２の処理に進むことになる。

ステップＳ１０２においては、上記のようにして動画像の表示出力指示が発生されたのに応じて、動画像の送信を要求するためのコマンド（動画像要求コマンド）を、送信先として基地局装置１を指定して送信するための制御処理を実行する。ここで、動画像の表示出力の指示が発生されたとき、この発生された指示情報には、表示出力すべきコンテンツ（動画像信号）を指定する情報も含むこととしており、上記した動画像要求コマンドには、コマンド内容として、送信してもらうべきコンテンツ（動画像信号）として、上記と同様のコンテンツ（動画像信号）を指定する情報も含めるようにされる。
このステップＳ１０２としての制御処理によって、通信部２１からは、送信先となる基地局装置１に対して動画像要求コマンドが送信出力される。

図１４は、上記動画像要求コマンドの受信に応答した基地局装置１側にて実行する処理を示している。この図に示す処理は、図２に示した制御部１３がプログラムに従って実行するものとして実現される。なお、図１３は、この図１４に示す処理によって送信される抽出指示情報に応じたモニタ装置２側の処理となるので、後述する。
先ず、基地局装置１側では、ステップＳ３０１の処理として、システムを組むとされる何れかのモニタ装置から送信された動画像要求コマンドが受信されるのを待機しており、動画像要求コマンドを受信したことが判別されると、ステップＳ３０２以降の処理に進むことになる。

ステップＳ３０２においては、受信した動画像要求コマンドの内容を参照して、このコマンドが指定している動画像のコンテンツを認識する。そして、この認識したコンテンツに対応する動画像信号は、現在において送信動画像データとして送信中であるか否かについて判別する。
このステップＳ３０２において、今回受信した動画像要求コマンドが指定する動画像信号は送信中であるとして肯定の判別結果が得られた場合には、後述するステップＳ３１０の処理に進む。これに対して、今回受信した動画像要求コマンドが指定する動画像信号は現在送信中ではないとして否定の判別結果が得られた場合には、ステップＳ３０３の処理に進む。

ステップＳ３０２において否定の判別結果が得られた場合には、ステップＳ３０１に対応して今回受信したとされる動画像要求コマンドが指定する動画像信号を、これまで送信しているとされる送信動画像データに追加するようにして含めて送信しなければならないということになる。ステップＳ３０３以降の処理は、このための処理となる。
そこで、先ずステップＳ３０３においては、今回受信された動画像要求コマンドの内容を参照して、このコマンドが要求する動画像信号のコンテンツが何であるのかを認識する。そして、このコマンドが要求しているコンテンツ、つまり、動画像信号を取得するための制御処理を実行する。例えば要求されたコンテンツが、テレビジョン放送の所定チャンネルの画像なのであれば、基地局装置１が搭載するチューナの選局チャンネルを切り換えるための制御などを実行し、選局させたチャンネルの映像信号を取得するようにされる。
このようにして動画像要求コマンドが指定する動画像信号を取得しておいた上で、次のステップＳ３０４の処理を実行する。

ステップＳ３０４においては、現在、合成器１１から出力されてビデオエンコーダ１２に入力されている動画像信号の状態として、例えば図１０に例示したような合成領域内において、現在設定されている合成対象の動画像についての解像度のままで、今回、新規に追加すべき動画像信号（ステップＳ３０３にて取得した動画像信号である）を割り当てて合成するための空きの領域が残っているか否かについて判別する。このためには、例えば制御部１２は、ビデオエンコーダ１２からメモリ部１４に転送する符号化動画像信号の状態を監視するようにされる。例えば、合成動画像信号において動画像信号が合成されていない空き領域としての信号部分は、例えば黒画像、白画像などに対応させることとして、制御部１２は、符号化動画像信号の状態として、この黒画像、白画像の領域がどれだけの信号部分を占有しているのかについて認識するようにされる。この認識結果に基づいて、空き領域としてどの程度の容量を有しているのかが分かり、新規の動画像信号のための空きの領域が確保されているか否かについて判断することができる。
そして、ステップＳ３０４において、空き領域が存在するとして肯定の判別結果が得られた場合にはステップＳ３０９の処理に進むことになる。

ステップＳ３０９では、以降においては、合成領域内における空き領域に対して、今回要求された動画像（コンテンツ）に対応する動画像信号を割り当てたうえでの合成処理が行われるように、合成器１１に対する制御を実行する。
この処理によって、ステップＳ３０３により取得された動画像信号が新たに追加されるようにして合成された合成動画像信号が得られることとなる。

次のステップＳ３１０では、先のステップＳ３０１にて動画像の要求を行ってきたとされるモニタ装置２に対して、抽出指示情報を、通信部１５から送信出力させるための処理を実行する。
ここで、抽出指示情報とは、合成動画像信号から目的とする動画像信号を抽出するために必要な情報要素から成るものとされる。
例として、図９により説明したような合成動画像信号であれば、抽出すべき動画像信号が配置される合成動画像信号における信号位置などの情報が格納されることになる。また、合成動画像信号が図１０（ｃ）に示すようなものであれば、例えば抽出すべき動画像信号の水平ラインが挿入されている合成動画像信号における水平ライン位置を示す情報等が格納されることになる。
また、ステップＳ３１０において生成される抽出指示情報により抽出させるべき動画像信号としては、先のステップＳ３０１に対応して受信した動画像要求コマンドが指定したのと同じ動画像信号であることになる。

また、ステップＳ３０９を経てステップＳ３１０に至った場合、このステップＳ３１０の処理としては、先のステップＳ３０３にて取得し、ステップＳ３０９により新規に追加して合成した動画像信号が抽出されるようにするための抽出指示情報を新規に生成したうえで、この抽出指示情報を送信させることになる。

これに対して、ステップＳ３０２により肯定の判別結果が得られたことでステップＳ３１０に至った場合、ステップＳ３１０における処理としては、上記のようにして新規に抽出指示情報を生成する必要はない。つまり、この場合には、既に指定された動画像信号をモニタ装置側に対して送信中の状態にあり、従って、今回指定されたのと同じ動画像信号を抽出して表示させているモニタ装置２も既に存在している、ということになる。これは、基地局装置１から、既に、今回指定されたのと同じ動画像信号を抽出するための抽出指示信号を生成して送信しているということである。そこで、少なくとも、現在送信中とされる動画像信号についての抽出指示情報は保持しておくようにすれば、この場合のステップＳ３１０の処理としては、この保持されている抽出情報を再利用すればよいということになる。

また、ステップＳ３１０による、基地局装置１からモニタ装置２に対する抽出指示情報の送信は、先のステップＳ３０１に対応して動画像信号の要求を送信してきたモニタ装置のみを送信先として特定した、ユニキャストによる通信で行われる。また、この抽出指示情報の送信は、ステップＳ３０１に対応して受信された動画像信号の要求に対するレスポンスとして定義することも考えられる。
ステップＳ３１０の処理を実行した後は、後述するステップＳ３１１の処理に移行する。

また、ステップＳ３０４において、今回追加して合成すべき動画像信号のための空き領域が無い、あるいは不足しているとして否定結果が得られた場合には、ステップＳ３０５に進む。
ステップＳ３０５においては、現段階において合成対象となっている動画像信号について設定すべき解像度を、これまで設定していた値よりも、例えば１段階小さいとされる所定の値に変更する。これにより、合成器１１における合成対象となっている動画像信号の各々の解像度は、変更設定された解像度による動画像信号としての形式に変換される。本実施の形態では、このような解像度変更のための信号処理は、例えば合成器１１内において、合成処理を実行する前段階で行うこととすればよい。

そして次のステップＳ３０６では、現段階において合成対象となっている動画像信号について、上記ステップＳ３０５により変更された解像度に対応した合成パターンにより、再合成が行われるように、合成器１１を制御する。

続くステップＳ３０７では、先のステップＳ２０５により変更された解像度に応じて、符号化のための符号化率の設定が変更されるように、ビデオエンコーダ１２に対する制御を実行する。ステップＳ２０５においては、解像度を小さくするようにして変更設定しているので、これに応じて、ステップＳ３０７としても、符号化率は小さくなるようにして変更される。

また、次のステップＳ３０８は、先のステップＳ３０６の処理としての再合成の処理によって生成された合成動画像信号を送信動画像データとして送信すべき全てのモニタ装置を対象（送信先）として、抽出指示情報を送信するための制御処理を実行するようにされる。
この場合、先のステップＳ３０６の処理によって再合成が行われたことで、再合成前とは合成動画像信号内における各動画像信号の合成レイアウトのパターンが異なっていることになる。
そこで、ステップＳ３０８としては、先ず、合成動画像信号に合成される各動画像信号についての抽出の仕方を指示する抽出指示情報を生成する。つまり、合成動画像信号に合成される動画像信号ごとに対応する抽出指示情報を生成する。そして、再合成した合成動画像信号を送信すべき全てのモニタ装置２ごとに対して、そのモニタ装置２が要求したとされる動画像信号に対応する抽出指示情報を送信する。このとき、各モニタ装置に対して抽出指示情報を送信するのにも、ユニキャストによる通信でもって行われるようにされる。ステップＳ３０８の処理が終了した後はステップＳ３１１の処理に進む。

ステップＳ３１１においては、現段階において合成器１１の合成処理によって得られている合成動画像信号を、通信部１５から送信動画像データとして送信出力させるための制御処理を実行する。確認のために述べておくと、合成器１１にて合成された合成信号は、符号化された上で通信部１５に転送されることで、通信部１５から送信動画像データとして送信されるものである。

図１３は、モニタ装置２側において、合成動画像信号としての送信動画像データを受信した場合の信号処理動作に対応する制御処理動作を示すものとなる。この図に示す処理としても、例えば制御部２２が実行すべきものとされる。
この図に示す処理としては、先ず、ステップＳ２０１において基地局装置１から送信される抽出指示情報が受信されるのを待機している。そして、抽出指示情報が受信されたことを判別すると、次のステップＳ２０２の処理として、この受信された抽出指示情報を、例えばメモリ１４などの所定の記憶領域に保持しておくようにされる。そして、次のステップＳ２０３においては、基地局装置１から送信されてくる、合成動画像信号としての送信動画像データの受信が開始されるのを待機するようにされる。そして、このデータの受信が開始されたことを判別するとステップＳ２０４に進む。

上記ステップＳ２０３に対応して、合成動画像信号としての送信動画像データの受信が開始されるのに応じて、モニタ装置２では、この受信された合成動画像信号をビデオデコーダ２４により復号して、グラフィックコントローラ２５に転送して表示部２６に表示させるための一連の信号処理、表示制御を実行開始することになる。
そのうえで、ステップＳ２０４の処理としては、例えば、ステップＳ２０２にて保持している抽出指示情報が示す内容に従ってグラフィックコントローラ２５を制御することで、このグラフィックコントローラ２５に入力されてくる復号後の合成動画像信号から、例えば１つの動画像信号を抽出する。そして、続くステップＳ２０５の処理として示すように、この抽出された動画像信号を表示部２６に表示出力させるためのグラフィックコントローラ２５に対する制御処理も実行するようにされる。
このような仕組みによって、本実施の形態のＡＶシステムとしては、モニタ装置２側が必要とする動画像信号を適切に取得して合成動画像信号として合成して、基地局装置１から送信出力させることができる。また、モニタ装置側では、受信した合成動画像信号から目的とする動画像信号を正しく抽出して表示出力させることができる。

なお、これまでの説明は動画像信号に関する処理についてのみとされていたが、例えば実際のテレビジョン放送のテレビジョン信号や、各種ＡＶ機器から出力されるコンテンツの情報などのように、コンテンツの情報としては、動画像信号だけではなく、この動画像信号と同期して再生すべき音声信号が対応付けられた形式とされている場合がある。このような場合に対応しては、合成動画像信号に合成されている動画像信号ごとに対応する音声信号も同時的にモニタ装置２に対して送信することができれば、各モニタ装置では、動画像の表示出力と共に音声も再生して出力させることができるので好ましい。
このための構成としては、例えばＭＰＥＧ−２などの符号化方式においてサポートされている、マルチチャンネルやマルチリンガルなどの規格を応用することが考えられる。

また、上記実施の形態としては、モニタ装置２側において合成動画像信号から１つの動画像信号のみを抽出することとしているが、本発明の概念としては、合成動画像信号から、必要とされる複数の動画像信号を抽出する構成としても構わない。つまり、合成動画像信号から抽出すべき動画像信号数については特に限定しない。

なお、上記実施の形態では、基地局装置とモニタ装置とから成るＡＶシステムを例に挙げているが、これ以外の形態の制御システムに対しても適用されるべきものである。例えば、基地局装置とモニタ装置に代えて、実施の形態として説明したようなＡＶ機能を備えるパーソナルコンピュータなどとすることも考えられるし、特に、モニタ装置に代えては、より携帯性、可搬性に優れたＰＤＡ(Personal Digital Assistants)などの小型端末装置とすることも考えられる。

本発明の実施の形態としてのＡＶシステムの構成を模式的に示す図である。 実施の形態のＡＶシステムを構成する基地局装置の内部構成例を示すブロック図である。 実施の形態のＡＶシステムを構成するモニタ装置の内部構成例を示すブロック図である。 実施の形態のＡＶシステムの動作例を示す図である。 実施の形態のＡＶシステムの動作例を示す図である。 実施の形態のＡＶシステムの動作例を示す図である。 実施の形態のＡＶシステムの動作例を示す図である。 実施の形態のＡＶシステムの動作例を示す図である。 合成動画像信号における動画像信号の合成形態を模式的に示す図である。 合成動画像信号における動画像信号の合成形態を模式的に示す図である。 合成動画像信号数に応じた動画像信号の解像度の変更例を模式的に示す図である。 モニタ装置が基地局装置に対して動画像要求を行うための処理動作を示すフローチャートである。 モニタ装置により、合成動画像信号としての送信動画像データを受信した場合の信号処理を実現するための制御処理動作を示すフローチャートである。 動画像要求の受信に応じた基地局装置の処理動作を示すフローチャートである。 従来例としての基地局装置の構成例を示すブロック図である。

符号の説明

１ 基地局装置、２ モニタ装置、１１ 合成器、１２ ビデオエンコーダ、１３ 制御部（基地局装置側）、１４ メモリ、１５ 通信部（基地局装置側）、２１ 通信部（モニタ装置側）、２２ 制御部、２３ メモリ、２４ ビデオデコーダ、２５ グラフィックコントローラ、２６ 表示部、２９ スピーカ、３０ａ タッチパネル、１００ インターネット、ANT アンテナ

Claims (12)

1. １つの送信装置と複数の受信装置とから成り、
   上記送信装置は、
   上記複数の受信装置の各々から送信される、動画像信号を指定して要求するための要求情報を受信する要求情報受信手段と、
   上記要求情報受信手段により受信した要求情報により指定される複数の動画像信号を合成して合成動画像信号を生成する合成手段と、
   入力される動画像信号について符号化して符号化動画像信号を出力するもので、入力される動画像信号として上記合成動画像信号が入力可能とされる符号化手段と、
   上記合成動画像信号を上記符号化手段により符号化した符号化動画像信号を、複数の受信装置に対してブロードキャスト又はマルチキャストにより送信する画像信号送信手段と、
   上記合成動画像信号を上記符号化手段により符号化した符号化動画像信号を上記画像信号送信手段により送信するときの送信先となる複数の受信装置の各々に対して、その受信装置が上記要求情報により指定した動画像信号の合成動画像信号からの抽出の仕方を指示する抽出指示情報を生成してユニキャストにより送信する、抽出指示情報送信手段と、を備え、
   上記受信装置の各々は、
   上記送信装置に対して、上記要求情報を送信する要求情報送信手段と、
   上記画像信号送信手段により送信されてくる符号化動画像信号を受信する画像信号受信手段と、
   上記抽出指示情報を受信する抽出指示情報受信手段と、
   上記画像信号受信手段により受信した符号化動画像信号について復号して動画像信号を出力する復号手段と、
   上記復号手段から出力される動画像信号が上記合成動画像信号である場合に、上記抽出指示情報受信手段により受信した抽出指示情報に基づいて、この合成動画像信号に合成されている複数の動画像信号のうちから、所要の動画像信号を抽出する動画像信号抽出手段と、
   を備えることを特徴とする送受信システム。
2. 上記合成手段は、上記要求情報受信手段により受信した上記要求情報が指定する動画像信号が新規とされる場合には、この新規とされる動画像信号がこれまでの合成動画像信号に追加して合成されるようにして、合成動画像信号の生成を行うようにされている、
   ことを特徴とする請求項１に記載の送受信システム。
3. 上記符号化手段は、
   上記合成手段により生成される合成動画像信号に含まれる動画像信号の数に応じて、符号化についての符号化率を変更設定するようにされている、
   ことを特徴とする請求項１に記載の送受信システム。
4. 上記合成手段は、上記要求情報受信手段により受信した上記要求情報が指定する動画像信号が既に上記合成動画像信号に含まれている場合には、これまでと同じ合成動画像信号を生成するようにされている、
   ことを特徴とする請求項１に記載の送受信システム。
5. 上記合成手段は、
   合成すべき複数の動画像信号としての画像が所定の配列パターンによって配列されるようにして合成を行うことで、上記合成動画像信号を生成するようにされている、
   ことを特徴とする請求項１に記載の送受信システム。
6. 上記合成手段は、
   合成すべき複数の動画像信号ごとの１以上の水平ラインを基とする合成信号単位を配列するようにして合成を行うことで、上記合成画像信号を生成するようにされている、
   ことを特徴とする請求項１に記載の送受信システム。
7. 上記要求情報送信手段は、
   上記受信装置に対する操作に応じて指定されたコンテンツの動画像信号を指定して要求するための要求情報を送信するようにされている、
   ことを特徴とする請求項１に記載の送受信システム。
8. 複数の受信装置の各々から送信される、動画像信号を指定して要求するための要求情報を受信する要求情報受信手段と、
   上記要求情報受信手段により受信した要求情報により指定される複数の動画像信号を合成して合成動画像信号を生成する合成手段と、
   入力される動画像信号について符号化して符号化動画像信号を出力するもので、入力される動画像信号として上記合成動画像信号が入力可能とされる符号化手段と、
   上記合成動画像信号を上記符号化手段により符号化した符号化動画像信号を、複数の受信装置に対してブロードキャスト又はマルチキャストにより送信する画像信号送信手段と、
   上記合成動画像信号を上記符号化手段により符号化した符号化動画像信号を上記画像信号送信手段により送信するときの送信先となる複数の受信装置の各々に対して、その受信装置が上記要求情報により指定した動画像信号の合成動画像信号からの抽出の仕方を指示する抽出指示情報を生成してユニキャストにより送信する、抽出指示情報送信手段と、
   を備えて構成されることを特徴とする送信装置。
9. 送信装置に対して、動画像信号を指定して要求するための要求情報を送信する要求情報送信手段と、
   上記送信装置からブロードキャスト又はマルチキャストにより送信されてくる符号化動画像信号を受信する画像信号受信手段と、
   上記送信装置からユニキャストにより送信されてくる情報であって、この受信装置が上記要求情報により指定した動画像信号の合成動画像信号からの抽出の仕方を指示する抽出指示情報を受信する抽出指示情報受信手段と、
   上記画像信号受信手段により受信した符号化動画像信号について復号して動画像信号を出力する復号手段と、
   上記復号手段から出力される動画像信号が上記合成動画像信号である場合に、上記抽出指示情報受信手段により受信した抽出指示情報に基づいて、この合成動画像信号に合成されている複数の動画像信号のうちから、所要の動画像信号を抽出する動画像信号抽出手段と、
   を備えることを特徴とする受信装置。
10. １つの送信装置と複数の受信装置とから成る送受信システムの情報処理方法において、
    上記送信装置は、
    上記複数の受信装置の各々から送信される、動画像信号を指定して要求するための要求情報を受信する要求情報受信手順と、
    上記要求情報受信手順により受信した要求情報により指定される複数の動画像信号を合成して合成動画像信号を生成する合成手順と、
    入力される動画像信号について符号化して符号化動画像信号を出力するもので、上記入力される動画像信号として上記合成動画像信号についても符号化するようにされる符号化手順と、
    上記合成動画像信号を上記符号化手順により符号化した符号化動画像信号を、複数の受信装置に対してブロードキャスト又はマルチキャストにより送信する画像信号送信手順と、
    上記合成動画像信号を上記符号化手順により符号化した符号化動画像信号を上記画像信号送信手順により送信するときの送信先となる複数の受信装置の各々に対して、その受信装置が上記要求情報により指定した動画像信号の合成動画像信号からの抽出の仕方を指示する抽出指示情報を生成してユニキャストにより送信する、抽出指示情報送信手順とを実行し、
    上記受信装置の各々は、
    上記送信装置に対して、上記要求情報を送信する要求情報送信手順と、
    上記画像信号送信手順により送信されてくる符号化動画像信号を受信する画像信号受信手順と、
    上記抽出指示情報を受信する抽出指示情報受信手順と、
    上記画像信号受信手順により受信した符号化動画像信号について復号して動画像信号を出力する復号手順と、
    上記復号手順によって出力される動画像信号が上記合成動画像信号である場合に、上記抽出指示情報受信手順により受信した抽出指示情報に基づいて、この合成動画像信号に合成されている複数の動画像信号のうちから、所要の動画像信号を抽出する動画像信号抽出手順と、
    を実行することを特徴とする情報処理方法。
11. 送信装置の情報処理方法において、
    複数の受信装置の各々から送信される、動画像信号を指定して要求するための要求情報を受信する要求情報受信手順と、
    上記要求情報受信手順により受信した要求情報により指定される複数の動画像信号を合成して合成動画像信号を生成する合成手順と、
    入力される動画像信号について符号化して符号化動画像信号を出力するもので、上記入力される動画像信号として上記合成動画像信号についても符号化するようにされる符号化手順と、
    上記合成動画像信号を上記符号化手順により符号化した符号化動画像信号を、複数の受信装置に対してブロードキャスト又はマルチキャストにより送信する画像信号送信手順と、
    上記合成動画像信号を上記符号化手順により符号化した符号化動画像信号を上記画像信号送信手順により送信するときの送信先となる複数の受信装置の各々に対して、その受信装置が上記要求情報により指定した動画像信号の合成動画像信号からの抽出の仕方を指示する抽出指示情報を生成してユニキャストにより送信する、抽出指示情報送信手順と、
    を実行するようにされていることを特徴とする情報処理方法。
12. 受信装置の情報処理方法において、
    送信装置に対して、動画像信号を指定して要求するための要求情報を送信する要求情報送信手順と、
    上記送信装置からブロードキャスト又はマルチキャストにより送信されてくる符号化動画像信号を受信する画像信号受信手順と、
    上記送信装置からユニキャストにより送信されてくる情報であって、上記受信装置が上記要求情報により指定した動画像信号の合成動画像信号からの抽出の仕方を指示する抽出指示情報を受信する抽出指示情報受信手順と、
    上記画像信号受信手順により受信した符号化動画像信号について復号して動画像信号を出力する復号手順と、
    上記復号手順によって出力される動画像信号が上記合成動画像信号である場合に、上記抽出指示情報受信手順により受信した抽出指示情報に基づいて、この合成動画像信号に合成されている複数の動画像信号のうちから、所要の動画像信号を抽出する動画像信号抽出手順と、
    を実行することを特徴とする情報処理方法。

Images