JP2004282667A - 再生同期ずれ補正機能を備えた送信機及び受信機、並びにそれらを有する伝送装置 - Google Patents

Abstract

【課題】無線を用いたホームシアターシステムのように、音声と映像を別々の受信機に伝送し各々の受信機で音声再生や映像再生を行う場合、伝送処理時間や信号処理時間の差異により音声再生と映像再生の再生時刻にずれが発生する。
【解決手段】音声信号及び映像信号を受信して再生する受信機６０，７０に対して、音声信号及び映像信号を別々に伝送する送信機１０において、検出手段３０は送信機１０に帰還された音声再生の信号と映像再生の信号とを基に、音声及び映像の再生同期ずれの情報である差分時間情報を検出する。検出された再生同期ずれを解消するべく、検出手段３０により得られた差分時間情報をもとに音声または映像の伝送を遅延手段４０ａ又は４０ｂにより遅延させる。
【選択図】 図１

Description

【０００１】
【発明の属する技術分野】
本発明は、音声及び映像の再生同期ずれの補正機能を有する送信機及び受信機、並びにそれらを有する伝送装置に関するものである。
【０００２】
【従来の技術】
従来、映像及び音声情報（ＡＶ情報）の再生同期ずれを解消する機能を有する情報出力装置としては、例えば、特許文献１に記載されたものがあった。
図２１は情報出力装置の一例を示すブロック図である。受信側装置１００において、伝送路１０１より受信した音声パケットと映像パケットが多重化されているＡＶデータは、チューナにより受信されシステムデコーダ１０２に入力され、音声パケットと映像パケットとに分離される。その後、音声処理としてオーディオバッファ１０３へ音声パケットを一度蓄積し、オーディオデコーダ１０４により復号化（デコード）して音声再生を行う。
【０００３】
映像処理としては、ビデオバッファ１０５へ映像パケットを一度蓄積し、ビデオデコーダ１０６により復号化 （デコード）して映像再生を行う。また、音声再生と映像再生とを同期させるため、再生時刻管理部１０７およびクロック発生装置１０８を設けている。
一方、前記音声パケット及び映像パケットは、例えば、図２２のようにＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｉｍａｇｅ Ｃｏｄｉｎｇ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）規格のデータフォーマットを有しており、映像パケット、音声パケットは共通の再生時刻管理情報を持っている。
【０００４】
そこで、ＡＶ情報の再生同期ずれを解消する、すなわち、伝送遅延や各デコーダの処理時間差により生じた音声再生と映像再生の出力時間差（再生タイミングずれ）を補正するために、音声再生および映像再生を行うと同時に、出力時刻毎の音声パケットの再生時刻管理情報と映像パケットの再生時刻管理情報とから出力時間差を求め、この出力時間差をもとに再生時間管理部１０７よりクロック発生装置１０８に対して、音声再生に用いるクロック周波数の変更命令を与えるようにしている。例えば、音声再生が映像再生に比べ早い場合は、音声再生に用いるクロック周波数を小さくし、逆に遅い場合は、音声再生に用いるクロック周波数を大きくする。
【０００５】
以上の処理により、クロック発生装置１０８より出力される音声再生の出力クロック（周波数）を制御し、映像再生と映像再生の出力時間差の補正を行っていた。
【０００６】
【特許文献１】
特開平０９−３１２８３４号公報 （第４〜８頁、図１）
【０００７】
【発明が解決しようとする課題】
しかしながら、特許文献１に記載された技術は、単一の装置内で音声と映像とを再生するものであって、音声パケットが持つ再生時刻管理情報と映像パケットが持つ再生時刻管理情報とを共に利用し、両者の差異により制御を行っているものである。
したがって、例えば、無線ホームシアターシステムのようなＡＶ機器、換言すれば、送信機（ＡＶ機器の無線アダプタ）から音声を受信機（スピーカ）へ、映像を別の受信機（プロジェクタ）へと無線伝送し、且つ同時に再生を行うといったような音声と映像とが別々に出力される伝送装置の場合、従来の技術を適用することが困難であったり、映像再生と映像再生の出力時間差のずれ補正が難しいといった問題があった。
【０００８】
そこで、本発明は、送信機から受信機へ音声情報と映像情報とを別々伝送し再生を行うものであって、両者の再生タイミングにずれが生じた場合でも、そのずれを解消して音声及び映像の同時再生を可能とする再生同期ずれの補正機能を備えた受信機、送信機、及びそれらを有する伝送装置を提供することを目的とする。
【０００９】
【課題を解決するための手段】
前記目的を達成するため、本発明においては以下の技術的手段を講じた。
すなわち、本発明の送信機における課題解決のための技術的手段は、音声信号及び映像信号を受信して再生する受信機に対して、音声信号及び映像信号を別々に伝送する送信機において、前記送信機に帰還された音声再生の信号と映像再生の信号とを基に、音声及び映像の再生同期ずれの情報である差分時間情報を検出する検出手段と、前記再生同期ずれを解消するべく、前記検出手段により得られた差分時間情報をもとに音声または映像の伝送を遅延させる遅延手段とを具備しており、前記差分時間情報は、伝送を経て音声再生までに要する時間と伝送を経て映像再生までに要する時間との差分時間と、音声再生又は映像再生のどちらが遅延しているかの情報とを有していることを特徴とする。
【００１０】
なお、好ましくは、前記伝送は、無線伝送とするとよい。
また、本発明の送信機における課題解決のための技術的手段は、前記差分時間情報を保持する記憶手段と、前記記憶手段が保持する差分時間情報を前記遅延手段に転送するべく命令を出す制御手段とを具備することを特徴とする。
なお、前記記憶手段は着脱可能な情報記憶媒体を有することが好ましい。
また、本発明の送信機における課題解決のための技術的手段は、前記音声再生の信号を帰還させて前記検出手段に入力する音声入力手段と、映像再生の信号を帰還させて前記検出手段に入力する映像入力手段とを具備することを特徴とする。
【００１１】
また、本発明の送信機における課題解決のための技術的手段は、前記音声入力手段は、マイクロフォン、アナログ音声入力端子、デジタル音声入力端子のいずれかであることを特徴とする。
また、本発明の送信機における課題解決のための技術的手段は、前記映像入力手段は、カメラ、受光デバイス、映像識別デバイス、アナログ映像入力端子、デジタル映像入力端子のいずれかであることを特徴とする。
【００１２】
また、本発明の送信機における課題解決のための技術的手段は、前記検出手段は、所定の音声信号を発生する基準音声信号発生手段と、所定の映像信号を発生する基準映像信号発生手段と、前記基準音声信号発生手段および音声入力手段より得られる信号をもとに音声再生に要する時間を測定する音声再生時間測定手段と、前記基準映像信号発生手段および映像入力手段より得られる信号をもとに映像再生に要する時間を測定する映像再生時間測定手段と、前記音声再生時間測定手段の結果と映像再生時間測定手段の結果より前記差分時間情報を算出する演算手段とを有することを特徴とする。
【００１３】
また、本発明の送信機における課題解決のための技術的手段は、前記音声再生時間測定手段は、基準音声信号発生手段が発生する音声信号の発生時刻または終了時刻と、前記音声入力手段により得られる音声再生信号の開始時刻または終了時刻とから、音声再生に要する時間の測定を行うことを特徴とする。
また、本発明の送信機における課題解決のための技術的手段は、前記映像再生時間測定手段は、基準映像信号発生手段が発生する映像信号の開始時刻または終了時刻と、前記映像入力手段により得られる映像再生信号の開始時刻または終了時刻より、映像再生に要する時間の測定を行うことを特徴とする。
また、本発明の送信機における課題解決のための技術的手段は、前記検出手段に代えて、前記差分時間情報を外部より調節し設定可能とする調節手段、又は差分時間情報を外部より入力させる制御信号検出手段を設けたことを特徴とする。
また、本発明の送信機における課題解決のための技術的手段は、前記音声信号及び映像信号は、当該信号内に信号再生の際に使用する時間情報を有しており、前記遅延手段は差分時間情報をもとに当該時間情報を修正することを特徴とする。
【００１４】
本発明の受信機における課題解決のための技術的手段は、送信機から別々に伝送された映像及び音声を受信して再生する受信機において、前記受信機に取り込まれた音声再生の信号又は映像再生の信号をもとに、音声及び映像の再生同期ずれの情報である差分時間情報を検出する検出手段と、前記再生同期ずれを解消するべく、前記検出手段により得られた差分時間情報をもとに音声または映像の再生を遅延させる遅延手段とを具備しており、前記差分時間情報は、伝送を経て音声再生までに要する時間と伝送を経て映像再生までに要する時間との差分時間と、音声再生又は映像再生のどちらが遅延しているかの情報とを有していることを特徴とする。
【００１５】
なお、好ましくは、前記伝送は、無線伝送であるとよい。
また、本発明の受信機における課題解決のための技術的手段は、前記差分時間情報を外部に出力するための通知手段を具備することを特徴とする。
また、本発明の受信機における課題解決のための技術的手段は、前記差分時間情報を保持する記憶手段と、前記記憶手段が保持する差分時間情報を遅延手段又は通知手段に転送するべく命令を出す制御手段とを具備することを特徴とする。
なお、好ましくは、前記記憶手段は、着脱可能な情報記憶媒体を有するとよい。
【００１６】
また、本発明の受信機における課題解決のための技術的手段は、前記音声再生の信号を取り込み前記検出手段に入力させる音声入力手段、又は、前記映像再生の信号を取り込み前記検出手段に入力させる映像入力手段を具備することを特徴とする。
【００１７】
また、本発明の受信機における課題解決のための技術的手段は、前記音声入力手段は、マイクロフォン、アナログ音声入力端子、デジタル音声入力端子のいずれかであることを特徴とする。
また、本発明の受信機における課題解決のための技術的手段は、前記映像入力手段は、カメラ、受光デバイス、映像識別デバイス、アナログ映像入力端子、デジタル映像入力端子のいずれかであることを特徴とする。
本発明の伝送装置における課題解決のための技術的手段は、前記技術的手段のいずれかに記載された送信機、及び前記技術的手段のいずれかに記載された受信機を有することを特徴とする。
また、本発明の伝送装置における課題解決のための技術的手段は、前記受信機の有する通知手段から出力された差分時間情報は、前記送信機の備える制御信号検出手段に入力した後、送信機の遅延手段へ転送され、当該遅延手段は前記差分時間情報をもとに音声又は映像の伝送を遅らせることを特徴とする。
【００１８】
【発明の実施の形態】
以下、本発明の実施の形態について、図面を参照しながら説明する。
（第１の実施の形態）
図１は、本発明にかかる第１の実施の形態の伝送装置を示すものであり、接続されたＡＶ機器からの音声及び映像入力は、無線送信機（送信機）１０Ａに入力され、無線パケット化された無線データ（信号）となり、スピーカ等を含む音声受信機（受信機）６０やプロジェクタ等を含む映像受信機（受信機）７０へ伝送されるようになっている。
【００１９】
以下、説明において、無線送信機１０Ａから無線伝送を経て音声受信機６０へ到達し音声再生されるまでに要する時間を音声再生時間といい、無線伝送を経て映像受信機７０へ到達し映像再生されるまでに要する時間を映像再生時間という。
図１に示す如く、本実施の形態において、無線送信機１０Ａは、音声信号処理のために、音声入力を音声パケットにエンコードする音声信号符号化部１１と、音声パケットを蓄積する音声信号バッファ１２と、遅延手段４０ａ及び音声パケットを無線伝送路に適したフォーマットで無線パケット化する無線パケット化部１３とを備えている。
【００２０】
無線パケット化部１３により、無線パケット化された音声パケットは音声受信機６０へ送信されるようになっている。
同様に、無線送信機１０Ａは映像信号処理のために、映像信号符号化部１４と、映像信号バッファ１５と、遅延手段４０ｂ及び無線パケット化部１６とを有している。無線パケット化部１６により無線パケット化された映像パケットは映像受信機７０へ送信される。
なお、音声信号バッファ１２に蓄積される音声パケットや映像信号バッファ１５に蓄積される映像パケットは、例えば、図２２のフォーマットを有している。
【００２１】
無線送信機１０Ａは、音声受信機６０および映像受信機７０の出力をフィードバックして入力するための入力手段２０を有する。更に音声再生と映像再生との時間差を検出する検出手段３０と、その結果をもとに音声または映像の再生時刻を遅延させるための遅延手段４０ａ，４０ｂとを備えている。
以下の説明において、音声再生時間と映像再生時間との差の時間を差分時間といい、音声再生又は映像再生のどちらが遅延しているかの情報とその差分時間とを合わせて差分時間情報ということとする。
【００２２】
入力手段２０は、音声受信機６０で再生された音声をフィードバックし無線送信機１０Ａに入力させるための音声入力手段２１と、映像受信機７０で再生された映像をフィードバックし、入力させるための映像入力手段２２とを備えている。検出手段３０はこの差分時間情報を検出するものであり、遅延手段４０ａ，４０ｂはこの差分時間情報をもとに、音声または映像の再生時刻を遅延させるものである。
【００２３】
当該音声入力手段２１の具体例として、マイクロフォン（マイク）や、アナログ若しくはデジタル音声入力端子等がある。すなわち、音声入力手段２１は、マイクを用いて音声受信機６０の再生音声を取り込む、または、無線送信機１０Ａの音声入力端子と音声受信機６０の音声出力端子をケーブル接続することによりフィードバックし、検出手段３０で用いるための電気信号に変換するものである。 映像入力手段２２の具体例としては、カメラ、受光デバイス、アナログ又はデジタル映像入力端子がある。すなわち、映像入力手段２２は、カメラや受光デバイスを用いて映像受信機７０の再生映像を取り込んだり、又は映像入力端子と映像受信機７０の映像出力端子をケーブル接続することによりフィードバックし、検出手段３０で用いるための電気信号に変換するものである。
【００２４】
次に、図２のフローチャートを用いて差分時間情報の検出手順を説明する。なお、図１に図示された検出手段３０としてはカウンタを用いる。
まず、無線送信機１０Ａは、音声信号バッファ１２および映像信号バッファ１５より音声パケットおよび映像パケットを取り出し、無線パケット化した後、無線伝送路へ無線パケットから成る音声データ（信号）と映像データ（信号）とを同時に送信する（Ｓ１）。このとき、伝送された音声及び映像データはパルス信号のように単発で送信され、データの出力の前後には無線伝送路に映像データおよび音声データが存在しない期間がある。
【００２５】
その後、無線送信機１０Ａで、音声受信機６０及び映像受信機７０から音声再生および映像再生の取り込みを開始し（Ｓ２）、再生された音声又は映像のどちらか、すなわち再生信号が無線送信機１０Ａにフィードバックされるまで待機する（Ｓ３：ＮＯ）。
無線送信機１０Ａの検出手段３０は、再生信号を受信すると（Ｓ３：ＹＥＳ）、音声入力手段２１から得られる入力に変化が生じたのか、または、映像入力手段２２から得られる入力に変化が生じたのかより、先に到達した再生信号が音声か映像かを判断する（Ｓ４）。
【００２６】
再生された映像が先に到達した場合、すなわち映像再生が速く行われた場合（Ｓ４：ＹＥＳ）、検出手段３０は差分時間の測定を開始する（Ｓ５）。その後、再生された音声の入力を確認する（Ｓ６：ＹＥＳ）と、差分時間の測定を終了し、測定した差分時間だけ音声の再生が遅延していることを遅延手段４０ｂへ報告する（Ｓ７）。
逆に、音声再生が先に行われた場合（Ｓ４：ＮＯ）、検出手段３０は差分時間の測定を開始する（Ｓ８）。その後、映像再生を確認する（Ｓ９：ＹＥＳ）と差分時間の測定を終了し、測定した差分時間だけ再生された映像の信号到達が遅延していることを遅延手段４０ａへ報告する（Ｓ１０）。
【００２７】
上述の手順により、差分時間情報を得ることが可能となる。
次に、図３〜５のフローチャートを用いて、検出手段３０より得られた差分時間情報をもとに、遅延手段４０ａ又は４０ｂにより再生同期ずれを補正する方法を説明する。
まず、検出手段３０において前述した方法（図２参照）により、音声再生および映像再生のどちらが遅れ、且つ差分時間Ｔの値を取得する（Ｓ１１）。映像再生が遅れている場合（Ｓ１２：ＹＥＳ）は、音声信号処理側の遅延手段４０ａに対して差分時間Ｔだけ音声再生時刻を遅延させる処理を要求する（Ｓ１３）。
【００２８】
音声再生が遅れている場合（Ｓ１２：ＮＯ）は、映像信号処理側の遅延手段４０ｂに対して差分時間Ｔだけ映像再生時刻を遅延させる処理を要求する（Ｓ１４）。検出手段３０から遅延処理を要求された遅延手段４０ｂでは、要求に基づき以下の遅延処理を行う。
例えば、音声信号処理側にて遅延処理を行う、すなわち映像再生が差分時間Ｔだけ遅れる場合（Ｓ１５：ＹＥＳ）は、音声信号バッファ１２から取出した音声パケットを無線パケット化するタイミングを差分時間Ｔだけ遅らせる（Ｓ１６）。これにより、同じ再生時刻管理情報を持つ映像パケットと音声パケットにおいて、映像パケットが無線伝送路へ送り出される時刻より差分時間Ｔだけ遅れて音声パケットが無線伝送路に送り出されることになる。
【００２９】
逆に、映像信号処理側にて遅延処理を行う場合、すなわち、音声再生が差分時間Ｔだけ遅れる場合（Ｓ１７：ＹＥＳ）は、映像信号処理側で同様の遅延処理を行う（Ｓ１８）。
以上の手順により、無線伝送路への音声パケット及び映像パケットのいずれか一方の送信を、差分時間Ｔだけずらすことにより、受信側の音声再生と映像再生の同期をとることが可能となる。
なお、上述のやり方だけではなく、音声パケットや映像パケットに付加している再生時刻管理情報を修正することにより遅延処理を行うことも可能である。例えば、音声信号処理側にて遅延処理を行う場合（Ｓ１５：ＹＥＳ）は、音声信号バッファ１２から取出した音声パケットの再生時刻管理情報を差分時間Ｔだけ遅くなるように変更する。
【００３０】
この方法を用いることにより、音声受信機６０と映像受信機７０とが共通時刻を持ち、その共通時刻にあわせて出力を行っている場合、音声再生時刻を差分時間Ｔだけずらすことができる。
逆に、映像処理側にて遅延処理を行う場合（Ｓ１７：ＹＥＳ）は、映像信号バッファ１５から取出した映像パケットの再生時刻管理情報を差分時間Ｔだけ遅くなるように変更する。
以上の実施の形態によれば、映像と音声を異なる無線伝送方式もしくは同じ無線伝送方式により別々に伝送する伝送装置において、音声と映像の同期再生、すなわち再生同期タイミングのずれを無くすことが可能となる。
【００３１】
（第２の実施の形態）
以下、本発明にかかる第２の実施の形態について説明する。図６は、第２の実施の形態を示す構成図である。
無線送信機１０Ｂは、音声信号処理を行うべく、音声信号符号化部１１と、音声信号バッファ１２と、無線パケット化部１３とを備えている。また、映像信号処理のために、映像信号符号化部１４と、映像信号バッファ１５と、無線パケット化部１６とを備えている。さらに、音声受信機６０の音声再生時間と映像受信機７０の映像再生時間とを同期させるために、入力手段２０と、検出手段３０と、遅延手段４０ａ，４０ｂとを備えている。
【００３２】
これらは第１の実施の形態に記載されたものと略同一動作を行うものである。
以上の構成に加え、本実施の形態では、検出手段３０より得た差分時間情報を保持する記憶手段５０ａ，５０ｂと、無線送信機１０Ｂの起動時やユーザが指定した任意の時刻に記憶手段５０ａ，５０ｂから差分時間情報を遅延手段４０ａ，４０ｂに受け渡すように指示する制御手段５１とを備えている。
この記憶手段５０ａ，５０ｂには、無線送信機１０Ｂ内部に組み込まれた不揮発性メモリや無線送信機１０Ｂより取外し可能なメモリカードを利用することができる。記憶手段５０ａ，５０ｂ及び制御手段５１を追加することにより、差分時間情報を保持するとともに、無線送信機１０Ｂの起動時又は意図した時間に、差分時間情報を遅延手段４０ａ，４０ｂに伝えることが可能となる。
【００３３】
これにより、無線送信機１０Ｂは常に差分時間情報を検出する必要がなくなり、例えば、無線ホームシアターシステムの構成時の初期調節として、システム内での差分時間情報の検出を一度だけ行い、記憶手段５０ａ，５０ｂに保存しておけばよいことになる。ここに保存された差分時間情報は、無線送信機１０Ｂの起動時や所定の時間に遅延手段４０ａ又は４０ｂに送るようにするとよく、これにより常に差分時間情報を検出する処理を省略することが可能となる。
【００３４】
（第３の実施の形態）
次に、本発明にかかる第３の実施の形態について説明する。図７は、第３の実施の形態を示す構成図である。
無線送信機１０Ｃは、音声信号処理のために、音声信号符号化部１１と、音声信号バッファ１２と、無線パケット化部１３とを備えている。また、映像信号処理を行うべく、映像信号符号化部１４と、映像信号バッファ１５と、無線パケット化部１６とを備えている。
さらに、無線送信機１０Ｃは、入力手段２０と、音声側及び映像側の遅延手段４０ａ，４０ｂとを備えており、入力手段２０は、音声受信機６０の音声再生をフィードバックするための音声入力手段２１と、映像受信機７０の映像再生をフィードバックするための映像入力手段２２とを有している。
【００３５】
これらは第１の実施の形態と略同じ動作を行うものである。
以上の構成に加え、本実施の形態では、差分時間情報を検出する検出手段３０として、所定の音声パケットを出力する基準音声信号発生手段３１と、音声再生時間を測定する音声再生時間測定手段３２とを備えている。
さらに、検出手段３０は、所定の映像パケットを出力する基準映像信号発生手段３３と、映像再生時間を測定する映像再生時間測定手段３４と、音声再生時間測定手段３２及び映像再生時間測定手段３４より得られた情報から差分情報時間を算出する演算手段３５とを備えている。
【００３６】
本実施の形態における無線伝送を介した映像再生に要する時間Ｔｖの測定手順を、図８〜１０のフローチャートを用いて説明する。
まず、基準映像信号発生手段３３は、所定の映像パケットを無線パケット化部１６および映像再生時間測定手段３４に送る（Ｓ２０）。映像再生時間測定手段３４では、基準映像信号発生手段３３からの映像パケットが入力されたかどうかを随時検知しており（Ｓ２１）、入力された場合、それをトリガとして、時間計測を始める（Ｓ２２）。
【００３７】
また、無線パケット化部１６から出力された映像パケットは、映像受信機７０の出力する映像として、映像入力手段２２を通じて無線受信機１０Ｃにフィードバックされ、映像再生開始を検知することになる（Ｓ２３：ＹＥＳ）。映像入力手段２２は、映像再生を開始した旨を映像再生時間測定手段３４へ通知する（Ｓ２４）。映像再生時間測定手段３４は、映像入力手段２２からの通知をトリガとして（Ｓ２５：ＹＥＳ）、時間計測を終了し演算手段３５へ測定時間Ｔｖを渡す。
なお、映像再生測定手段３４の測定方法として、基準映像信号発生手段３３の信号入力開始をトリガとしたが、信号入力終了をトリガにして時間計測を開始してもよく、測定終了も映像再生が終了するタイミングを用いても良い。同様の方法で、音声データを無線伝送し、音声受信機６０において再生するまでの処理時間Ｔａを求めることができる。
【００３８】
演算手段３５は、ＴｖとＴａの差をとることで、音声および映像のどちらが時間Ｔだけ遅れているのかを計算し、差分時間情報を求める。そして第１の実施の形態と同様に、遅延手段４０ａ，４０ｂを用いて遅延処理を行う。
本実施の形態では、信号源を無線送信機１０Ｃ内部に備えることになり、音声再生時間Ｔｖおよび映像再生時間Ｔａを正確かつ個別に測定することができ、音声再生と映像再生の同期処理を行う上での精度を高めることが可能となる。
【００３９】
（第４の実施の形態）
次に、本発明にかかる第４の実施の形態について説明する。図１１は第４の実施の形態を示す構成図である。
本実施の形態においては、無線送信機１０Ｄは、音声信号処理のために、音声信号符号化部１１と、音声信号バッファ１２と、無線パケット化部１３とを備えている。また、映像信号処理のため、映像信号符号化部１４と、映像信号バッファ１５と、無線パケット化部１６とを備えている。加えて、差分時間情報に基づき音声再生時刻または映像再生時刻を任意に遅延させるための遅延手段４０ａ，４０ｂを備えている。
これらは第１の実施の形態と略同一動作を行うものであり、さらに、無線送信機１０Ｄは、可変抵抗器等からなる調節手段３６を有している。
【００４０】
当該調節手段３６の操作と差分時間情報とを対応させることにより、調節手段３６の操作により差分時間情報を直接に入力し設定することが可能となる。なお、遅延手段４０ａ，４０ｂでは差分時間情報をもとに第１の実施の形態と略同様に遅延処理を行う。
以上の実施の形態を用いることにより、ユーザが可変抵抗器等の調節手段３６を直接操作することにより、音声再生と映像再生のずれを使用者の聴感覚、視感覚を用いて調節することが可能となる。
【００４１】
（第５の実施の形態）
次に、本発明にかかる第５の実施の形態について説明する。図１２は、第５の実施の形態を示した構成図である。
本実施の形態において、音声受信機６０は、無線送信機１０より受信した無線パケットから音声パケットを取出す無線パケット受信部６１と、取出した音声パケットを蓄積する音声信号バッファ６２と、音声パケットに付加された再生時刻管理情報をもとに復号化（デコード）し且つ外部へ出力する音声信号復号化部６４とを有している。
【００４２】
さらに、音声受信機６０は、映像受信機７０の映像再生を取り込む入力手段６８と、差分時間情報を検出する検出手段６７と、差分時間情報をもとに音声再生時間を遅延させる遅延手段６３を備えている。検出手段６７は、音声信号復号化部６４及び入力手段６８から得た情報をもとに、音声受信機６０が行う音声再生開始と映像受信機７０の映像再生開始との差分時間（差分時間情報）を求めるものである。
入力手段６８の具体例として、カメラ、受光デバイス、アナログ又はデジタル映像入力端子を用いている。すなわち、カメラや受光デバイス等を用いて、映像受信機７０の映像再生を取り込む。また、音声受信機６０の映像入力端子と映像受信機７０の映像出力端子とをケーブル接続することでフィードバックし、検出手段６７で用いるための電気信号に変換するようにしてもよい。
【００４３】
映像受信機７０は、無線送信機１０より受信した無線パケットから映像パケットを取出す無線パケット受信部７１と、取出した映像パケットを蓄積する映像信号バッファ７２と、映像パケットに付加された再生時刻管理情報をもとに復号化（デコード）し外部へ出力する映像信号復号化部７４とを有している。さらに、映像受信機７０は、音声受信機６０の音声再生を取り込むための入力手段７８と、差分時間情報を検出する検出手段７７と、差分時間情報をもとに映像再生時間を遅延させる遅延手段７３を備えている。検出手段７７は、映像信号復号化部７４及び入力手段７８より得た情報をもとに、映像受信機７０の映像再生開始時間と音声受信機６０の音声再生開始時間との差分時間（差分時間情報）を求めるものである。
【００４４】
入力手段７８の具体例としては、マイクやアナログ又はデジタル音声入力端子等が用いられる。すなわち、マイクを用いて音声受信機６０の音声再生を取り込む、または、映像受信機７０の音声入力端子と音声受信機６０の音声出力端子をケーブル接続することによりフィードバックし、検出手段７７で用いるための電気信号に変換する。
【００４５】
次に本実施の形態の音声再生と映像再生を同期させる方法を、図１３〜１５のフローチャートを用いて説明する。
まず、無線送信機１０は、音声受信機６０および映像受信機７０に対して、音声パケットを無線パケット化した音声データと、映像パケットを無線パケット化した映像データとを同時に送信する（Ｓ３０）。このとき、送信する音声データおよび映像データは、第１〜４の実施の形態のいずれかのように、外部ＡＶ機器より入力された音声および映像を用いてもよく、内部信号源により発生したものであっても構わない。
映像受信機７０では、無線送信機１０より得た映像データを処理し、映像信号復号化部７４より得られる映像再生開始時間と、入力手段７８により得られる音声受信機６０の音声再生開始時間とにより、映像再生開始時間と音声再生開始時間との差分時間Ｔおよび音声再生と映像再生のどちらが遅れているのかを検出手段７７により測定する（Ｓ３１）。
【００４６】
このとき、音声再生が遅れている場合（Ｓ３２：ＹＥＳ）は、遅延手段７３において、映像パケットに付加された再生時刻管理情報の再生時刻より差分時間Ｔだけ映像再生時刻を遅らせる（Ｓ３３）。
同様に、音声受信機６０では無線送信機１０より得た音声データを処理し、音声信号復号化部６４より得られる音声再生開始時間と、入力手段６８により得られる映像受信機７０の映像再生開始時間とから、音声再生開始時間と映像再生開始時間との差分時間Ｔおよび音声再生と映像再生のどちらが遅れているのかを検出手段６７により測定する（Ｓ３４）。
【００４７】
このとき、映像再生が遅れている場合（Ｓ３５：ＹＥＳ）は、遅延手段６３において、音声パケットに付加された再生時刻管理情報の再生時刻より差分時間Ｔだけ音声再生時刻を遅らせる（Ｓ３６）。
すなわち、映像が遅延している場合は、音声受信機６０側の遅延手段６３を動作させ、音声が遅延している場合は、映像受信機７０側の遅延手段７３を動作させるようにしている。
以上の実施の形態を用いることにより、受信機側において、音声再生と映像再生の同期を取ることが可能となる。
【００４８】
なお、第２の実施の形態と同様に、音声受信機６０や映像受信機７０へ記憶手段６６（７６）と制御手段６９（７９）を追加することにより、差分時間情報を保持し、必要に応じ遅延手段６３（７３）に転送することができるようになる。したがって、動作毎に差分時間情報を検出する必要がなくなる。更に無線ホームシアターシステムの構成時の初期調節として、システム内での差分時間情報検出を一度だけ行っておいて、以後の起動時には検出処理を省略できるという効果を得ることができる。
【００４９】
（第６の実施の形態）
次に、本発明にかかる第６の実施の形態について説明する。図１６，１７は、第６の実施の形態を示す構成図である。
本実施の形態の場合、無線送信機１０Ｅは、第１の実施の形態と略同様であり、音声信号処理のため、音声信号符号化部１１と、音声信号バッファ１２と、無線パケット化部１３とを備えている。また、映像信号処理のため、映像信号符号化部１４と、映像信号バッファ１５と、無線パケット化部１６とを備えている。これらは第１の実施の形態と略同じ動作を行うものである。
また、図示はしていないものの、図７に示すような音声受信機６０の音声再生をフィードバックするための音声入力手段２１と、映像受信機７０の映像再生をフィードバックするための映像入力手段２２とを備えていても何ら問題はない。
【００５０】
さらに、無線送信機１０Ｅは、差分時間情報を音声受信機６０および映像受信機７０より取得するための制御信号検出手段３７と、差分時間情報をもとに遅延処理を行う遅延手段４０ａ，４０ｂとを有している。なお、この遅延手段４０ａ，４０ｂは例えば、第１の実施の形態と略同じ動作を行うものである。
制御信号検出手段３７は、無線伝送路を通じて音声受信機６０および映像受信機７０より差分時間情報を取得するものであり、ここで取得した差分時間情報をもとに遅延手段４０ａ，４０ｂで、無線伝送路への映像又は音声の転送遅延を行うようにするものである。この制御信号検出手段３７は、着脱可能なメモリを有することが好ましい。
【００５１】
図１７の音声受信機６０は、第５の実施の形態と略同様の構成を有し、無線パケット受信部６１と、音声信号バッファ６２と、音声信号復号化部６４とを備えている。
映像受信機７０は、第５の実施の形態と略同様の構成を有し、無線パケット受信部７１と、映像信号バッファ７２と、映像信号復号化部７４とを有している。
さらに、音声受信機６０と映像受信機７０との少なくともどちらか一方に、入力手段６８（７８）と、差分時間情報を測定する検出手段６７（７７）と、遅延手段６３（７３）とを有しており、無線送信機１０Ｅに遅延処理を要求するための通知手段６５（７５）を備えている。当該入力手段６８（７８）、検出手段６７（７７）、遅延手段６５（７５）は、第５の実施の形態と略同様の動作を行うものとなっている。
【００５２】
本実施の形態において、音声再生と映像再生を同期させる手順を図１８〜２０のフローチャートにもとづいて説明する。
無線送信機１０Ｅは、音声受信機６０および映像受信機７０に対して同時に音声データおよび映像データを伝送する（Ｓ４０）。このとき、送信する音声データおよび映像データは、第１〜第５の実施の形態のいずれかのように、外部ＡＶ機器より入力された音声および映像を用いても、また内部信号源により発生したものであっても構わない。
【００５３】
映像受信機７０では、受信した映像データの再生開始時間と、入力手段７８により得られた音声受信機６０の音声再生開始時間との差分時間Ｔおよび、音声再生と映像再生のどちらが遅れているのかを検出手段７７により測定する（Ｓ４１）。
このとき、映像再生が遅れている場合（Ｓ４２：ＮＯ）は、無線伝送を介して無線送信機１０Ｅに対し、音声受信機への音声データ伝送を差分時間Ｔだけ遅延させるよう要求を行う（Ｓ４３）。また、音声再生が遅れている場合（Ｓ４２：ＹＥＳ）において、映像信号バッファ７２のバッファサイズが充分大きく、映像信号復号化部７４による映像再生時刻を差分時間Ｔだけ遅らせることが可能なとき（Ｓ４４：ＹＥＳ）は、遅延手段７３により遅延処理を行う（Ｓ４５）。
【００５４】
映像信号バッファ７２のバッファサイズが小さく差分時間Ｔだけの再生遅延処理が行えない場合（Ｓ４４：ＮＯ）は、無線送信機１０Ｅに映像再生時間の遅延を要求する（Ｓ４６）。
無線送信機１０Ｅでは、制御信号検出手段３７において映像受信機７０からの再生時間調整の要求を受理し、要求に基づき遅延処理を行う（Ｓ５３）。
なお、この一連の処理は、音声受信機６０においても同様である（図２０参照）。
【００５５】
音声受信機６０には、入力手段６８を介して映像受信機７０の映像再生信号が入力されており、検出手段６７は、この映像再生信号の再生開始時間と音声受信機６０の受信した音声データの再生開始時間とから、両者の差分時間Ｔ、及び音声再生と映像再生のどちらが遅れているのかを測定する（Ｓ４７）。
このとき、音声再生が遅れている場合（Ｓ４８：ＮＯ）は、無線伝送を介して無線送信機１０Ｅに対し、映像受信機への映像データ伝送を差分時間Ｔだけ遅延させるよう要求を行う（Ｓ４９）。逆に、映像再生が遅れている場合（Ｓ４８：ＹＥＳ）において、音声信号バッファ６２のバッファサイズが充分大きく、音声信号復号化部６４による音声再生時刻を差分時間Ｔだけ遅らせることが可能なとき（Ｓ５０：ＹＥＳ）は、遅延手段６３により遅延処理を行う（Ｓ５１）。
【００５６】
音声信号バッファ６２のバッファサイズが小さく差分時間Ｔだけの再生遅延処理が行えない場合（Ｓ５０：ＮＯ）は、無線送信機１０Ｅに音声再生時間の遅延を要求する（Ｓ５２）。
無線送信機１０Ｅでは、制御信号検出手段３７において音声受信機６０からの再生時間調整の要求を受理し、要求に基づき遅延処理を行う（Ｓ５３）。
なお、音声受信機６０側で遅延処理を行う場合は、映像受信機７０側での遅延処理は不要であり、逆でも同様である。
【００５７】
以上により、受信機側でのバッファサイズが小さい場合においても音声再生と映像再生の同期を取ることが可能となる。また、音声受信機６０もしくは映像受信機７０のどちらか一方に入力手段、検出手段を備えるだけで、音声再生と映像再生の同期を取ることが可能となる。
なお、第２の実施の形態の如く、音声受信機６０や映像受信機７０へ記憶手段６６（７６）と制御手段６９（７９）を追加することにより、動作毎に差分時間情報を検出する必要がなくなる上に、無線ホームシアター装置構成時の初期調節として装置内での差分時間情報の検出を一度だけ行えばよく、以後の起動時には検出処理を省略できるという効果を追加することができる。
【００５８】
なお、本発明にかかる伝送装置は、上記実施の形態に限定されるものではない。
すなわち、送信機から受信機からの伝送方式は無線伝送に限定されるものでなく、有線伝送であってもよい。無線伝送も電波を用いたものであってもよく、赤外線を用いた伝送であっても何ら問題はない。
また、送信機は、外部ＡＶ機器の外部に取り付けられたものであってもよく、内部に設けられる構成であってもよい。
【００５９】
【発明の効果】
以上のように、本発明では、音声信号及び映像信号を受信して再生する受信機に対して、音声信号及び映像信号を別々に伝送する送信機において、前記送信機に帰還された音声再生の信号と映像再生の信号とを基に、音声及び映像の再生同期ずれの情報である差分時間情報を検出する検出手段と、前記再生同期ずれを解消するべく、前記検出手段により得られた差分時間情報をもとに音声または映像の伝送を遅延させる遅延手段とを具備しており、前記差分時間情報は、伝送を経て音声再生までに要する時間と伝送を経て映像再生までに要する時間との差分時間と、音声再生又は映像再生のどちらが遅延しているかの情報とを有しているために、音声及び映像の再生同期にずれが生じた場合でも、その再生同期ずれを送信機側で解消して音声及び映像の同時再生を可能とすることができる。
【００６０】
また、本発明では、送信機から別々に伝送された映像及び音声を受信して再生する受信機において、前記受信機に取り込まれた音声再生の信号又は映像再生の信号をもとに、音声及び映像の再生同期ずれの情報である差分時間情報を検出する検出手段と、前記再生同期ずれを解消するべく、前記検出手段により得られた差分時間情報をもとに音声または映像の再生を遅延させる遅延手段とを具備しており、前記差分時間情報は、伝送を経て音声再生までに要する時間と伝送を経て映像再生までに要する時間との差分時間と、音声再生又は映像再生のどちらが遅延しているかの情報とを有しているため、音声及び映像の再生同期にずれが生じた場合でも、その再生同期ずれを受信機側で解消して音声及び映像の同時再生を可能とすることができる。
【００６１】
また、本発明にかかる伝送装置では、前記受信機の有する通知手段から出力された差分時間情報は、前記送信機の備える制御信号検出手段に入力した後、送信機の遅延手段へ転送され、当該遅延手段は前記差分時間情報をもとに音声又は映像の伝送を遅らせることができ、これにより、音声及び映像の再生同期にずれが生じた場合でも、その再生同期ずれを伝送装置全体で解消して音声及び映像の同時再生を可能とすることができる。
【図面の簡単な説明】
【図１】本発明の第１の実施の形態を示すブロック図である。
【図２】差分時間情報の取得方法を示すフローチャートである。
【図３】遅延処理を示すフローチャート（その１）である。
【図４】遅延処理を示すフローチャート（その２）である。
【図５】遅延処理を示すフローチャート（その３）である。
【図６】本発明の第２の実施の形態を示すブロック図である。
【図７】本発明の第３の実施の形態を示すブロック図である。
【図８】基準信号発生手段を用いた差分時間情報の取得方法を示すフローチャート（その１）である。
【図９】基準信号発生手段を用いた差分時間情報の取得方法を示すフローチャート（その２）である。
【図１０】基準信号発生手段を用いた差分時間情報の取得方法を示すフローチャート（その３）である。
【図１１】本発明の第４の実施の形態を示すブロック図である。
【図１２】本発明の第５の実施の形態を示すブロック図である。
【図１３】本発明の第５の実施の形態の動作を示すフローチャート（その１）である。
【図１４】本発明の第５の実施の形態の動作を示すフローチャート（その２）である。
【図１５】本発明の第５の実施の形態の動作を示すフローチャート（その３）である。
【図１６】本発明の第６の実施の形態を示すブロック図（その１）である。
【図１７】本発明の第６の実施の形態を示すブロック図（その２）である。
【図１８】本発明の第６の実施の形態の動作を示すフローチャート（その１）である。
【図１９】本発明の第６の実施の形態の動作を示すフローチャート（その２）である。
【図２０】本発明の第６の実施の形態の動作を示すフローチャート（その３）である。
【図２１】従来例を示すブロック図である。
【図２２】（ａ）は映像パケットの構成を示す図であり、（ｂ）は音声パケットの構成を示す図である。
【符合の説明】
１０ 無線送信機
１０Ａ 第１の実施の形態の無線送信機
１０Ｂ 第２の実施の形態の無線送信機
１０Ｃ 第３の実施の形態の無線送信機
１０Ｄ 第４の実施の形態の無線送信機
１０Ｅ 第６の実施の形態の無線送信機
１１ 音声信号符号化部
１２ 音声信号バッファ
１３ （音声側） 無線パケット化部
１４ 映像信号符号化部
１５ 映像信号バッファ
１６ （映像側） 無線パケット化部
２０ 入力手段
２１ 音声入力手段
２２ 映像入力手段
３０ 検出手段
３１ 基準音声信号発生手段
３２ 音声再生時間測定手段
３３ 基準映像信号発生手段
３４ 映像再生時間測定手段
３５ 演算手段
３６ 調節手段
３７ 制御信号検出手段
４０ａ （音声側）遅延手段
４０ｂ （映像側）遅延手段
５０ａ （音声側）記憶手段
５０ｂ （映像側）記憶手段
５１ 制御手段
６０ 音声受信機
６１ （音声側）無線パケット受信部
６２ 音声信号バッファ
６３ （音声側）遅延手段
６４ 音声信号復号化部
６５ （音声側）通知手段
６６ （音声側）記憶手段
６７ （音声側）検出手段
６８ （音声側）入力手段
６９ （音声側）制御手段
７０ 音声受信機
７１ （映像側）無線パケット受信部
７２ 映像信号バッファ
７３ （映像側）遅延手段
７４ 映像信号復号化部
７５ （映像側）通知手段
７６ （映像側）記憶手段
７７ （映像側）検出手段
７８ （映像側）入力手段
７９ （映像側）制御手段

Claims (23)

1. 音声信号及び映像信号を受信して再生する受信機に対して、音声信号及び映像信号を別々に伝送する送信機において、
   前記送信機に帰還された音声再生の信号と映像再生の信号とを基に、音声及び映像の再生同期ずれの情報である差分時間情報を検出する検出手段と、
   前記再生同期ずれを解消するべく、前記検出手段により得られた差分時間情報をもとに音声または映像の伝送を遅延させる遅延手段とを具備しており、
   前記差分時間情報は、伝送を経て音声再生までに要する時間と伝送を経て映像再生までに要する時間との差分時間と、音声再生又は映像再生のどちらが遅延しているかの情報とを有していることを特徴とする再生同期ずれ補正機能を備えた送信機。
2. 前記伝送は、無線伝送であることを特徴とする請求項１に記載の再生同期ずれ補正機能を備えた送信機。
3. 前記差分時間情報を保持する記憶手段と、
   前記記憶手段が保持する差分時間情報を前記遅延手段に転送するべく命令を出す制御手段と、
   を具備することを特徴とする請求項１又は２に記載の再生同期ずれ補正機能を備えた送信機。
4. 前記記憶手段は、着脱可能な情報記憶媒体であることを特徴とする請求項３に記載の再生同期ずれ補正機能を備えた送信機。
5. 前記音声再生の信号を帰還させて前記検出手段に入力する音声入力手段と、
   映像再生の信号を帰還させて前記検出手段に入力する映像入力手段と、
   を具備することを特徴とする請求項２〜４のいずれかに記載の再生同期ずれ補正機能を備えた送信機。
6. 前記音声入力手段は、マイクロフォン、アナログ音声入力端子、デジタル音声入力端子のいずれかであることを特徴とする請求項５に記載の再生同期ずれ補正機能を備えた送信機。
7. 前記映像入力手段は、カメラ、受光デバイス、映像識別デバイス、アナログ映像入力端子、デジタル映像入力端子のいずれかであることを特徴とする請求項５に記載の再生同期ずれ補正機能を備えた送信機。
8. 前記検出手段は、所定の音声信号を発生する基準音声信号発生手段と、
   所定の映像信号を発生する基準映像信号発生手段と、
   前記基準音声信号発生手段および音声入力手段より得られる信号をもとに音声再生に要する時間を測定する音声再生時間測定手段と、
   前記基準映像信号発生手段および映像入力手段より得られる信号をもとに映像再生に要する時間を測定する映像再生時間測定手段と、
   前記音声再生時間測定手段の結果と映像再生時間測定手段の結果より前記差分時間情報を算出する演算手段と、
   を有することを特徴とする請求項６又は７に記載の再生同期ずれ補正機能を備えた送信機。
9. 前記音声再生時間測定手段は、基準音声信号発生手段が発生する音声信号の発生時刻または終了時刻と、前記音声入力手段により得られる音声再生信号の開始時刻または終了時刻とから、音声再生に要する時間の測定を行うことを特徴とする請求項８に記載の再生同期ずれ補正機能を備えた送信機。
10. 前記映像再生時間測定手段は、基準映像信号発生手段が発生する映像信号の開始時刻または終了時刻と、前記映像入力手段により得られる映像再生信号の開始時刻または終了時刻より、映像再生に要する時間の測定を行うことを特徴とする請求項８に記載の再生同期ずれ補正機能を備えた送信機。
11. 前記検出手段に代えて、前記差分時間情報を外部より調節し設定可能とする調節手段を設けたことを特徴とする請求項１又は２に記載の再生同期ずれ補正機能を備えた送信機。
12. 前記検出手段に代えて、前記差分時間情報を外部より入力させる制御信号検出手段を設けたことを特徴とする請求項１又は２に記載の再生同期ずれ補正機能を備えた送信機。
13. 前記音声信号及び映像信号は、当該信号内に信号再生の際に使用する時間情報を有しており、
    前記遅延手段は差分時間情報をもとに当該時間情報を修正することを特徴とする請求項１又は２に記載の再生同期ずれ補正機能を備えた送信機。
14. 送信機から別々に伝送された映像及び音声を受信して再生する受信機において、
    前記受信機に取り込まれた音声再生の信号又は映像再生の信号をもとに、音声及び映像の再生同期ずれの情報である差分時間情報を検出する検出手段と、
    前記再生同期ずれを解消するべく、前記検出手段により得られた差分時間情報をもとに音声または映像の再生を遅延させる遅延手段とを具備しており、
    前記差分時間情報は、伝送を経て音声再生までに要する時間と伝送を経て映像再生までに要する時間との差分時間と、音声再生又は映像再生のどちらが遅延しているかの情報とを有していることを特徴とする再生同期ずれ補正機能を備えた受信機。
15. 前記伝送は、無線伝送であることを特徴とする請求項１４に記載の再生同期ずれ補正機能を備えた受信機。
16. 前記差分時間情報を外部に出力するための通知手段を具備することを特徴とする請求項１４又は１５に記載の再生同期ずれ補正機能を備えた受信機。
17. 前記差分時間情報を保持する記憶手段と、
    前記記憶手段が保持する差分時間情報を遅延手段又は通知手段に転送するべく命令を出す制御手段と、
    を具備することを特徴とする請求項１６に記載の再生同期ずれ補正機能を備えた受信機。
18. 前記記憶手段は、着脱可能な情報記憶媒体であることを特徴とする請求項１７に記載の再生同期ずれ補正機能を備えた受信機。
19. 前記音声再生の信号を取り込み前記検出手段に入力させる音声入力手段、又は、前記映像再生の信号を取り込み前記検出手段に入力させる映像入力手段を具備することを特徴とする請求項１５〜１８のいずれかに記載の再生同期ずれ補正機能を備えた受信機。
20. 前記音声入力手段は、マイクロフォン、アナログ音声入力端子、デジタル音声入力端子のいずれかであることを特徴とする請求項１９に記載の再生同期ずれ補正機能を備えた受信機。
21. 前記映像入力手段は、カメラ、受光デバイス、映像識別デバイス、アナログ映像入力端子、デジタル映像入力端子のいずれかであることを特徴とする請求項１９に記載の再生同期ずれ補正機能を備えた受信機。
22. 請求項１〜１３のいずれかに記載された送信機、及び請求項１４〜２１のいずれかに記載された受信機を有することを特徴とする伝送装置。
23. 請求項１１又は１２に記載された送信機と、請求項１６〜２１のいずれかに記載された受信機とを有し、前記受信機の有する通知手段から出力された差分時間情報は、前記送信機の備える制御信号検出手段に入力した後、送信機の遅延手段へ転送され、当該遅延手段は前記差分時間情報をもとに音声又は映像の伝送を遅らせることを特徴とする伝送装置。

Images