JP2004282667A - Transmitter having correction function of regeneration desynchronization, receiver having the same, and transmission equipment having the transmitter and the receiver - Google Patents

Transmitter having correction function of regeneration desynchronization, receiver having the same, and transmission equipment having the transmitter and the receiver Download PDF

Info

Publication number
JP2004282667A
JP2004282667A JP2003074927A JP2003074927A JP2004282667A JP 2004282667 A JP2004282667 A JP 2004282667A JP 2003074927 A JP2003074927 A JP 2003074927A JP 2003074927 A JP2003074927 A JP 2003074927A JP 2004282667 A JP2004282667 A JP 2004282667A
Authority
JP
Japan
Prior art keywords
video
audio
reproduction
signal
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2003074927A
Other languages
Japanese (ja)
Inventor
Yoshitaka Ota
良隆 太田
康男 ▲はま▼本
Yasuo Hamamoto
Shuichi Sato
修一 佐藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP2003074927A priority Critical patent/JP2004282667A/en
Publication of JP2004282667A publication Critical patent/JP2004282667A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Television Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Receiver Circuits (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To solve the problem of deviation generated between the time of audio regeneration and the time of video regeneration, caused by the difference of a transmission processing time or a signal processing time, when audio regeneration and video regeneration are performed by separate receivers after the audio signal and the video signal are transmitted to different receivers, in case of a wireless home theater system or the like. <P>SOLUTION: In a transmitter 10 for transmitting the audio signal and the video signal separately to receivers 60, 70 for receiving and regenerating the audio signal and the video signal, a detecting means 30 detects differential time information, which is the information of regeneration desynchronization between voice and video image, based on a voice regeneration signal and a video regeneration signal feedbacked to the transmitter 10. To cancel the detected regeneration desynchronization, the transmission of voice or video image is delayed by a delay means 40a or 40b based on the differential time information obtained from the detecting means 30. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

【０００１】
【発明の属する技術分野】
本発明は、音声及び映像の再生同期ずれの補正機能を有する送信機及び受信機、並びにそれらを有する伝送装置に関するものである。
【０００２】
【従来の技術】
従来、映像及び音声情報（ＡＶ情報）の再生同期ずれを解消する機能を有する情報出力装置としては、例えば、特許文献１に記載されたものがあった。
図２１は情報出力装置の一例を示すブロック図である。受信側装置１００において、伝送路１０１より受信した音声パケットと映像パケットが多重化されているＡＶデータは、チューナにより受信されシステムデコーダ１０２に入力され、音声パケットと映像パケットとに分離される。その後、音声処理としてオーディオバッファ１０３へ音声パケットを一度蓄積し、オーディオデコーダ１０４により復号化（デコード）して音声再生を行う。
【０００３】
映像処理としては、ビデオバッファ１０５へ映像パケットを一度蓄積し、ビデオデコーダ１０６により復号化 （デコード）して映像再生を行う。また、音声再生と映像再生とを同期させるため、再生時刻管理部１０７およびクロック発生装置１０８を設けている。
一方、前記音声パケット及び映像パケットは、例えば、図２２のようにＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｉｍａｇｅ Ｃｏｄｉｎｇ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）規格のデータフォーマットを有しており、映像パケット、音声パケットは共通の再生時刻管理情報を持っている。
【０００４】
そこで、ＡＶ情報の再生同期ずれを解消する、すなわち、伝送遅延や各デコーダの処理時間差により生じた音声再生と映像再生の出力時間差（再生タイミングずれ）を補正するために、音声再生および映像再生を行うと同時に、出力時刻毎の音声パケットの再生時刻管理情報と映像パケットの再生時刻管理情報とから出力時間差を求め、この出力時間差をもとに再生時間管理部１０７よりクロック発生装置１０８に対して、音声再生に用いるクロック周波数の変更命令を与えるようにしている。例えば、音声再生が映像再生に比べ早い場合は、音声再生に用いるクロック周波数を小さくし、逆に遅い場合は、音声再生に用いるクロック周波数を大きくする。
【０００５】
以上の処理により、クロック発生装置１０８より出力される音声再生の出力クロック（周波数）を制御し、映像再生と映像再生の出力時間差の補正を行っていた。
【０００６】
【特許文献１】
特開平０９−３１２８３４号公報 （第４〜８頁、図１）
【０００７】
【発明が解決しようとする課題】
しかしながら、特許文献１に記載された技術は、単一の装置内で音声と映像とを再生するものであって、音声パケットが持つ再生時刻管理情報と映像パケットが持つ再生時刻管理情報とを共に利用し、両者の差異により制御を行っているものである。
したがって、例えば、無線ホームシアターシステムのようなＡＶ機器、換言すれば、送信機（ＡＶ機器の無線アダプタ）から音声を受信機（スピーカ）へ、映像を別の受信機（プロジェクタ）へと無線伝送し、且つ同時に再生を行うといったような音声と映像とが別々に出力される伝送装置の場合、従来の技術を適用することが困難であったり、映像再生と映像再生の出力時間差のずれ補正が難しいといった問題があった。
【０００８】
そこで、本発明は、送信機から受信機へ音声情報と映像情報とを別々伝送し再生を行うものであって、両者の再生タイミングにずれが生じた場合でも、そのずれを解消して音声及び映像の同時再生を可能とする再生同期ずれの補正機能を備えた受信機、送信機、及びそれらを有する伝送装置を提供することを目的とする。
【０００９】
【課題を解決するための手段】
前記目的を達成するため、本発明においては以下の技術的手段を講じた。
すなわち、本発明の送信機における課題解決のための技術的手段は、音声信号及び映像信号を受信して再生する受信機に対して、音声信号及び映像信号を別々に伝送する送信機において、前記送信機に帰還された音声再生の信号と映像再生の信号とを基に、音声及び映像の再生同期ずれの情報である差分時間情報を検出する検出手段と、前記再生同期ずれを解消するべく、前記検出手段により得られた差分時間情報をもとに音声または映像の伝送を遅延させる遅延手段とを具備しており、前記差分時間情報は、伝送を経て音声再生までに要する時間と伝送を経て映像再生までに要する時間との差分時間と、音声再生又は映像再生のどちらが遅延しているかの情報とを有していることを特徴とする。
【００１０】
なお、好ましくは、前記伝送は、無線伝送とするとよい。
また、本発明の送信機における課題解決のための技術的手段は、前記差分時間情報を保持する記憶手段と、前記記憶手段が保持する差分時間情報を前記遅延手段に転送するべく命令を出す制御手段とを具備することを特徴とする。
なお、前記記憶手段は着脱可能な情報記憶媒体を有することが好ましい。
また、本発明の送信機における課題解決のための技術的手段は、前記音声再生の信号を帰還させて前記検出手段に入力する音声入力手段と、映像再生の信号を帰還させて前記検出手段に入力する映像入力手段とを具備することを特徴とする。
【００１１】
また、本発明の送信機における課題解決のための技術的手段は、前記音声入力手段は、マイクロフォン、アナログ音声入力端子、デジタル音声入力端子のいずれかであることを特徴とする。
また、本発明の送信機における課題解決のための技術的手段は、前記映像入力手段は、カメラ、受光デバイス、映像識別デバイス、アナログ映像入力端子、デジタル映像入力端子のいずれかであることを特徴とする。
【００１２】
また、本発明の送信機における課題解決のための技術的手段は、前記検出手段は、所定の音声信号を発生する基準音声信号発生手段と、所定の映像信号を発生する基準映像信号発生手段と、前記基準音声信号発生手段および音声入力手段より得られる信号をもとに音声再生に要する時間を測定する音声再生時間測定手段と、前記基準映像信号発生手段および映像入力手段より得られる信号をもとに映像再生に要する時間を測定する映像再生時間測定手段と、前記音声再生時間測定手段の結果と映像再生時間測定手段の結果より前記差分時間情報を算出する演算手段とを有することを特徴とする。
【００１３】
また、本発明の送信機における課題解決のための技術的手段は、前記音声再生時間測定手段は、基準音声信号発生手段が発生する音声信号の発生時刻または終了時刻と、前記音声入力手段により得られる音声再生信号の開始時刻または終了時刻とから、音声再生に要する時間の測定を行うことを特徴とする。
また、本発明の送信機における課題解決のための技術的手段は、前記映像再生時間測定手段は、基準映像信号発生手段が発生する映像信号の開始時刻または終了時刻と、前記映像入力手段により得られる映像再生信号の開始時刻または終了時刻より、映像再生に要する時間の測定を行うことを特徴とする。
また、本発明の送信機における課題解決のための技術的手段は、前記検出手段に代えて、前記差分時間情報を外部より調節し設定可能とする調節手段、又は差分時間情報を外部より入力させる制御信号検出手段を設けたことを特徴とする。
また、本発明の送信機における課題解決のための技術的手段は、前記音声信号及び映像信号は、当該信号内に信号再生の際に使用する時間情報を有しており、前記遅延手段は差分時間情報をもとに当該時間情報を修正することを特徴とする。
【００１４】
本発明の受信機における課題解決のための技術的手段は、送信機から別々に伝送された映像及び音声を受信して再生する受信機において、前記受信機に取り込まれた音声再生の信号又は映像再生の信号をもとに、音声及び映像の再生同期ずれの情報である差分時間情報を検出する検出手段と、前記再生同期ずれを解消するべく、前記検出手段により得られた差分時間情報をもとに音声または映像の再生を遅延させる遅延手段とを具備しており、前記差分時間情報は、伝送を経て音声再生までに要する時間と伝送を経て映像再生までに要する時間との差分時間と、音声再生又は映像再生のどちらが遅延しているかの情報とを有していることを特徴とする。
【００１５】
なお、好ましくは、前記伝送は、無線伝送であるとよい。
また、本発明の受信機における課題解決のための技術的手段は、前記差分時間情報を外部に出力するための通知手段を具備することを特徴とする。
また、本発明の受信機における課題解決のための技術的手段は、前記差分時間情報を保持する記憶手段と、前記記憶手段が保持する差分時間情報を遅延手段又は通知手段に転送するべく命令を出す制御手段とを具備することを特徴とする。
なお、好ましくは、前記記憶手段は、着脱可能な情報記憶媒体を有するとよい。
【００１６】
また、本発明の受信機における課題解決のための技術的手段は、前記音声再生の信号を取り込み前記検出手段に入力させる音声入力手段、又は、前記映像再生の信号を取り込み前記検出手段に入力させる映像入力手段を具備することを特徴とする。
【００１７】
また、本発明の受信機における課題解決のための技術的手段は、前記音声入力手段は、マイクロフォン、アナログ音声入力端子、デジタル音声入力端子のいずれかであることを特徴とする。
また、本発明の受信機における課題解決のための技術的手段は、前記映像入力手段は、カメラ、受光デバイス、映像識別デバイス、アナログ映像入力端子、デジタル映像入力端子のいずれかであることを特徴とする。
本発明の伝送装置における課題解決のための技術的手段は、前記技術的手段のいずれかに記載された送信機、及び前記技術的手段のいずれかに記載された受信機を有することを特徴とする。
また、本発明の伝送装置における課題解決のための技術的手段は、前記受信機の有する通知手段から出力された差分時間情報は、前記送信機の備える制御信号検出手段に入力した後、送信機の遅延手段へ転送され、当該遅延手段は前記差分時間情報をもとに音声又は映像の伝送を遅らせることを特徴とする。
【００１８】
【発明の実施の形態】
以下、本発明の実施の形態について、図面を参照しながら説明する。
（第１の実施の形態）
図１は、本発明にかかる第１の実施の形態の伝送装置を示すものであり、接続されたＡＶ機器からの音声及び映像入力は、無線送信機（送信機）１０Ａに入力され、無線パケット化された無線データ（信号）となり、スピーカ等を含む音声受信機（受信機）６０やプロジェクタ等を含む映像受信機（受信機）７０へ伝送されるようになっている。
【００１９】
以下、説明において、無線送信機１０Ａから無線伝送を経て音声受信機６０へ到達し音声再生されるまでに要する時間を音声再生時間といい、無線伝送を経て映像受信機７０へ到達し映像再生されるまでに要する時間を映像再生時間という。
図１に示す如く、本実施の形態において、無線送信機１０Ａは、音声信号処理のために、音声入力を音声パケットにエンコードする音声信号符号化部１１と、音声パケットを蓄積する音声信号バッファ１２と、遅延手段４０ａ及び音声パケットを無線伝送路に適したフォーマットで無線パケット化する無線パケット化部１３とを備えている。
【００２０】
無線パケット化部１３により、無線パケット化された音声パケットは音声受信機６０へ送信されるようになっている。
同様に、無線送信機１０Ａは映像信号処理のために、映像信号符号化部１４と、映像信号バッファ１５と、遅延手段４０ｂ及び無線パケット化部１６とを有している。無線パケット化部１６により無線パケット化された映像パケットは映像受信機７０へ送信される。
なお、音声信号バッファ１２に蓄積される音声パケットや映像信号バッファ１５に蓄積される映像パケットは、例えば、図２２のフォーマットを有している。
【００２１】
無線送信機１０Ａは、音声受信機６０および映像受信機７０の出力をフィードバックして入力するための入力手段２０を有する。更に音声再生と映像再生との時間差を検出する検出手段３０と、その結果をもとに音声または映像の再生時刻を遅延させるための遅延手段４０ａ，４０ｂとを備えている。
以下の説明において、音声再生時間と映像再生時間との差の時間を差分時間といい、音声再生又は映像再生のどちらが遅延しているかの情報とその差分時間とを合わせて差分時間情報ということとする。
【００２２】
入力手段２０は、音声受信機６０で再生された音声をフィードバックし無線送信機１０Ａに入力させるための音声入力手段２１と、映像受信機７０で再生された映像をフィードバックし、入力させるための映像入力手段２２とを備えている。検出手段３０はこの差分時間情報を検出するものであり、遅延手段４０ａ，４０ｂはこの差分時間情報をもとに、音声または映像の再生時刻を遅延させるものである。
【００２３】
当該音声入力手段２１の具体例として、マイクロフォン（マイク）や、アナログ若しくはデジタル音声入力端子等がある。すなわち、音声入力手段２１は、マイクを用いて音声受信機６０の再生音声を取り込む、または、無線送信機１０Ａの音声入力端子と音声受信機６０の音声出力端子をケーブル接続することによりフィードバックし、検出手段３０で用いるための電気信号に変換するものである。 映像入力手段２２の具体例としては、カメラ、受光デバイス、アナログ又はデジタル映像入力端子がある。すなわち、映像入力手段２２は、カメラや受光デバイスを用いて映像受信機７０の再生映像を取り込んだり、又は映像入力端子と映像受信機７０の映像出力端子をケーブル接続することによりフィードバックし、検出手段３０で用いるための電気信号に変換するものである。
【００２４】
次に、図２のフローチャートを用いて差分時間情報の検出手順を説明する。なお、図１に図示された検出手段３０としてはカウンタを用いる。
まず、無線送信機１０Ａは、音声信号バッファ１２および映像信号バッファ１５より音声パケットおよび映像パケットを取り出し、無線パケット化した後、無線伝送路へ無線パケットから成る音声データ（信号）と映像データ（信号）とを同時に送信する（Ｓ１）。このとき、伝送された音声及び映像データはパルス信号のように単発で送信され、データの出力の前後には無線伝送路に映像データおよび音声データが存在しない期間がある。
【００２５】
その後、無線送信機１０Ａで、音声受信機６０及び映像受信機７０から音声再生および映像再生の取り込みを開始し（Ｓ２）、再生された音声又は映像のどちらか、すなわち再生信号が無線送信機１０Ａにフィードバックされるまで待機する（Ｓ３：ＮＯ）。
無線送信機１０Ａの検出手段３０は、再生信号を受信すると（Ｓ３：ＹＥＳ）、音声入力手段２１から得られる入力に変化が生じたのか、または、映像入力手段２２から得られる入力に変化が生じたのかより、先に到達した再生信号が音声か映像かを判断する（Ｓ４）。
【００２６】
再生された映像が先に到達した場合、すなわち映像再生が速く行われた場合（Ｓ４：ＹＥＳ）、検出手段３０は差分時間の測定を開始する（Ｓ５）。その後、再生された音声の入力を確認する（Ｓ６：ＹＥＳ）と、差分時間の測定を終了し、測定した差分時間だけ音声の再生が遅延していることを遅延手段４０ｂへ報告する（Ｓ７）。
逆に、音声再生が先に行われた場合（Ｓ４：ＮＯ）、検出手段３０は差分時間の測定を開始する（Ｓ８）。その後、映像再生を確認する（Ｓ９：ＹＥＳ）と差分時間の測定を終了し、測定した差分時間だけ再生された映像の信号到達が遅延していることを遅延手段４０ａへ報告する（Ｓ１０）。
【００２７】
上述の手順により、差分時間情報を得ることが可能となる。
次に、図３〜５のフローチャートを用いて、検出手段３０より得られた差分時間情報をもとに、遅延手段４０ａ又は４０ｂにより再生同期ずれを補正する方法を説明する。
まず、検出手段３０において前述した方法（図２参照）により、音声再生および映像再生のどちらが遅れ、且つ差分時間Ｔの値を取得する（Ｓ１１）。映像再生が遅れている場合（Ｓ１２：ＹＥＳ）は、音声信号処理側の遅延手段４０ａに対して差分時間Ｔだけ音声再生時刻を遅延させる処理を要求する（Ｓ１３）。
【００２８】
音声再生が遅れている場合（Ｓ１２：ＮＯ）は、映像信号処理側の遅延手段４０ｂに対して差分時間Ｔだけ映像再生時刻を遅延させる処理を要求する（Ｓ１４）。検出手段３０から遅延処理を要求された遅延手段４０ｂでは、要求に基づき以下の遅延処理を行う。
例えば、音声信号処理側にて遅延処理を行う、すなわち映像再生が差分時間Ｔだけ遅れる場合（Ｓ１５：ＹＥＳ）は、音声信号バッファ１２から取出した音声パケットを無線パケット化するタイミングを差分時間Ｔだけ遅らせる（Ｓ１６）。これにより、同じ再生時刻管理情報を持つ映像パケットと音声パケットにおいて、映像パケットが無線伝送路へ送り出される時刻より差分時間Ｔだけ遅れて音声パケットが無線伝送路に送り出されることになる。
【００２９】
逆に、映像信号処理側にて遅延処理を行う場合、すなわち、音声再生が差分時間Ｔだけ遅れる場合（Ｓ１７：ＹＥＳ）は、映像信号処理側で同様の遅延処理を行う（Ｓ１８）。
以上の手順により、無線伝送路への音声パケット及び映像パケットのいずれか一方の送信を、差分時間Ｔだけずらすことにより、受信側の音声再生と映像再生の同期をとることが可能となる。
なお、上述のやり方だけではなく、音声パケットや映像パケットに付加している再生時刻管理情報を修正することにより遅延処理を行うことも可能である。例えば、音声信号処理側にて遅延処理を行う場合（Ｓ１５：ＹＥＳ）は、音声信号バッファ１２から取出した音声パケットの再生時刻管理情報を差分時間Ｔだけ遅くなるように変更する。
【００３０】
この方法を用いることにより、音声受信機６０と映像受信機７０とが共通時刻を持ち、その共通時刻にあわせて出力を行っている場合、音声再生時刻を差分時間Ｔだけずらすことができる。
逆に、映像処理側にて遅延処理を行う場合（Ｓ１７：ＹＥＳ）は、映像信号バッファ１５から取出した映像パケットの再生時刻管理情報を差分時間Ｔだけ遅くなるように変更する。
以上の実施の形態によれば、映像と音声を異なる無線伝送方式もしくは同じ無線伝送方式により別々に伝送する伝送装置において、音声と映像の同期再生、すなわち再生同期タイミングのずれを無くすことが可能となる。
【００３１】
（第２の実施の形態）
以下、本発明にかかる第２の実施の形態について説明する。図６は、第２の実施の形態を示す構成図である。
無線送信機１０Ｂは、音声信号処理を行うべく、音声信号符号化部１１と、音声信号バッファ１２と、無線パケット化部１３とを備えている。また、映像信号処理のために、映像信号符号化部１４と、映像信号バッファ１５と、無線パケット化部１６とを備えている。さらに、音声受信機６０の音声再生時間と映像受信機７０の映像再生時間とを同期させるために、入力手段２０と、検出手段３０と、遅延手段４０ａ，４０ｂとを備えている。
【００３２】
これらは第１の実施の形態に記載されたものと略同一動作を行うものである。
以上の構成に加え、本実施の形態では、検出手段３０より得た差分時間情報を保持する記憶手段５０ａ，５０ｂと、無線送信機１０Ｂの起動時やユーザが指定した任意の時刻に記憶手段５０ａ，５０ｂから差分時間情報を遅延手段４０ａ，４０ｂに受け渡すように指示する制御手段５１とを備えている。
この記憶手段５０ａ，５０ｂには、無線送信機１０Ｂ内部に組み込まれた不揮発性メモリや無線送信機１０Ｂより取外し可能なメモリカードを利用することができる。記憶手段５０ａ，５０ｂ及び制御手段５１を追加することにより、差分時間情報を保持するとともに、無線送信機１０Ｂの起動時又は意図した時間に、差分時間情報を遅延手段４０ａ，４０ｂに伝えることが可能となる。
【００３３】
これにより、無線送信機１０Ｂは常に差分時間情報を検出する必要がなくなり、例えば、無線ホームシアターシステムの構成時の初期調節として、システム内での差分時間情報の検出を一度だけ行い、記憶手段５０ａ，５０ｂに保存しておけばよいことになる。ここに保存された差分時間情報は、無線送信機１０Ｂの起動時や所定の時間に遅延手段４０ａ又は４０ｂに送るようにするとよく、これにより常に差分時間情報を検出する処理を省略することが可能となる。
【００３４】
（第３の実施の形態）
次に、本発明にかかる第３の実施の形態について説明する。図７は、第３の実施の形態を示す構成図である。
無線送信機１０Ｃは、音声信号処理のために、音声信号符号化部１１と、音声信号バッファ１２と、無線パケット化部１３とを備えている。また、映像信号処理を行うべく、映像信号符号化部１４と、映像信号バッファ１５と、無線パケット化部１６とを備えている。
さらに、無線送信機１０Ｃは、入力手段２０と、音声側及び映像側の遅延手段４０ａ，４０ｂとを備えており、入力手段２０は、音声受信機６０の音声再生をフィードバックするための音声入力手段２１と、映像受信機７０の映像再生をフィードバックするための映像入力手段２２とを有している。
【００３５】
これらは第１の実施の形態と略同じ動作を行うものである。
以上の構成に加え、本実施の形態では、差分時間情報を検出する検出手段３０として、所定の音声パケットを出力する基準音声信号発生手段３１と、音声再生時間を測定する音声再生時間測定手段３２とを備えている。
さらに、検出手段３０は、所定の映像パケットを出力する基準映像信号発生手段３３と、映像再生時間を測定する映像再生時間測定手段３４と、音声再生時間測定手段３２及び映像再生時間測定手段３４より得られた情報から差分情報時間を算出する演算手段３５とを備えている。
【００３６】
本実施の形態における無線伝送を介した映像再生に要する時間Ｔｖの測定手順を、図８〜１０のフローチャートを用いて説明する。
まず、基準映像信号発生手段３３は、所定の映像パケットを無線パケット化部１６および映像再生時間測定手段３４に送る（Ｓ２０）。映像再生時間測定手段３４では、基準映像信号発生手段３３からの映像パケットが入力されたかどうかを随時検知しており（Ｓ２１）、入力された場合、それをトリガとして、時間計測を始める（Ｓ２２）。
【００３７】
また、無線パケット化部１６から出力された映像パケットは、映像受信機７０の出力する映像として、映像入力手段２２を通じて無線受信機１０Ｃにフィードバックされ、映像再生開始を検知することになる（Ｓ２３：ＹＥＳ）。映像入力手段２２は、映像再生を開始した旨を映像再生時間測定手段３４へ通知する（Ｓ２４）。映像再生時間測定手段３４は、映像入力手段２２からの通知をトリガとして（Ｓ２５：ＹＥＳ）、時間計測を終了し演算手段３５へ測定時間Ｔｖを渡す。
なお、映像再生測定手段３４の測定方法として、基準映像信号発生手段３３の信号入力開始をトリガとしたが、信号入力終了をトリガにして時間計測を開始してもよく、測定終了も映像再生が終了するタイミングを用いても良い。同様の方法で、音声データを無線伝送し、音声受信機６０において再生するまでの処理時間Ｔａを求めることができる。
【００３８】
演算手段３５は、ＴｖとＴａの差をとることで、音声および映像のどちらが時間Ｔだけ遅れているのかを計算し、差分時間情報を求める。そして第１の実施の形態と同様に、遅延手段４０ａ，４０ｂを用いて遅延処理を行う。
本実施の形態では、信号源を無線送信機１０Ｃ内部に備えることになり、音声再生時間Ｔｖおよび映像再生時間Ｔａを正確かつ個別に測定することができ、音声再生と映像再生の同期処理を行う上での精度を高めることが可能となる。
【００３９】
（第４の実施の形態）
次に、本発明にかかる第４の実施の形態について説明する。図１１は第４の実施の形態を示す構成図である。
本実施の形態においては、無線送信機１０Ｄは、音声信号処理のために、音声信号符号化部１１と、音声信号バッファ１２と、無線パケット化部１３とを備えている。また、映像信号処理のため、映像信号符号化部１４と、映像信号バッファ１５と、無線パケット化部１６とを備えている。加えて、差分時間情報に基づき音声再生時刻または映像再生時刻を任意に遅延させるための遅延手段４０ａ，４０ｂを備えている。
これらは第１の実施の形態と略同一動作を行うものであり、さらに、無線送信機１０Ｄは、可変抵抗器等からなる調節手段３６を有している。
【００４０】
当該調節手段３６の操作と差分時間情報とを対応させることにより、調節手段３６の操作により差分時間情報を直接に入力し設定することが可能となる。なお、遅延手段４０ａ，４０ｂでは差分時間情報をもとに第１の実施の形態と略同様に遅延処理を行う。
以上の実施の形態を用いることにより、ユーザが可変抵抗器等の調節手段３６を直接操作することにより、音声再生と映像再生のずれを使用者の聴感覚、視感覚を用いて調節することが可能となる。
【００４１】
（第５の実施の形態）
次に、本発明にかかる第５の実施の形態について説明する。図１２は、第５の実施の形態を示した構成図である。
本実施の形態において、音声受信機６０は、無線送信機１０より受信した無線パケットから音声パケットを取出す無線パケット受信部６１と、取出した音声パケットを蓄積する音声信号バッファ６２と、音声パケットに付加された再生時刻管理情報をもとに復号化（デコード）し且つ外部へ出力する音声信号復号化部６４とを有している。
【００４２】
さらに、音声受信機６０は、映像受信機７０の映像再生を取り込む入力手段６８と、差分時間情報を検出する検出手段６７と、差分時間情報をもとに音声再生時間を遅延させる遅延手段６３を備えている。検出手段６７は、音声信号復号化部６４及び入力手段６８から得た情報をもとに、音声受信機６０が行う音声再生開始と映像受信機７０の映像再生開始との差分時間（差分時間情報）を求めるものである。
入力手段６８の具体例として、カメラ、受光デバイス、アナログ又はデジタル映像入力端子を用いている。すなわち、カメラや受光デバイス等を用いて、映像受信機７０の映像再生を取り込む。また、音声受信機６０の映像入力端子と映像受信機７０の映像出力端子とをケーブル接続することでフィードバックし、検出手段６７で用いるための電気信号に変換するようにしてもよい。
【００４３】
映像受信機７０は、無線送信機１０より受信した無線パケットから映像パケットを取出す無線パケット受信部７１と、取出した映像パケットを蓄積する映像信号バッファ７２と、映像パケットに付加された再生時刻管理情報をもとに復号化（デコード）し外部へ出力する映像信号復号化部７４とを有している。さらに、映像受信機７０は、音声受信機６０の音声再生を取り込むための入力手段７８と、差分時間情報を検出する検出手段７７と、差分時間情報をもとに映像再生時間を遅延させる遅延手段７３を備えている。検出手段７７は、映像信号復号化部７４及び入力手段７８より得た情報をもとに、映像受信機７０の映像再生開始時間と音声受信機６０の音声再生開始時間との差分時間（差分時間情報）を求めるものである。
【００４４】
入力手段７８の具体例としては、マイクやアナログ又はデジタル音声入力端子等が用いられる。すなわち、マイクを用いて音声受信機６０の音声再生を取り込む、または、映像受信機７０の音声入力端子と音声受信機６０の音声出力端子をケーブル接続することによりフィードバックし、検出手段７７で用いるための電気信号に変換する。
【００４５】
次に本実施の形態の音声再生と映像再生を同期させる方法を、図１３〜１５のフローチャートを用いて説明する。
まず、無線送信機１０は、音声受信機６０および映像受信機７０に対して、音声パケットを無線パケット化した音声データと、映像パケットを無線パケット化した映像データとを同時に送信する（Ｓ３０）。このとき、送信する音声データおよび映像データは、第１〜４の実施の形態のいずれかのように、外部ＡＶ機器より入力された音声および映像を用いてもよく、内部信号源により発生したものであっても構わない。
映像受信機７０では、無線送信機１０より得た映像データを処理し、映像信号復号化部７４より得られる映像再生開始時間と、入力手段７８により得られる音声受信機６０の音声再生開始時間とにより、映像再生開始時間と音声再生開始時間との差分時間Ｔおよび音声再生と映像再生のどちらが遅れているのかを検出手段７７により測定する（Ｓ３１）。
【００４６】
このとき、音声再生が遅れている場合（Ｓ３２：ＹＥＳ）は、遅延手段７３において、映像パケットに付加された再生時刻管理情報の再生時刻より差分時間Ｔだけ映像再生時刻を遅らせる（Ｓ３３）。
同様に、音声受信機６０では無線送信機１０より得た音声データを処理し、音声信号復号化部６４より得られる音声再生開始時間と、入力手段６８により得られる映像受信機７０の映像再生開始時間とから、音声再生開始時間と映像再生開始時間との差分時間Ｔおよび音声再生と映像再生のどちらが遅れているのかを検出手段６７により測定する（Ｓ３４）。
【００４７】
このとき、映像再生が遅れている場合（Ｓ３５：ＹＥＳ）は、遅延手段６３において、音声パケットに付加された再生時刻管理情報の再生時刻より差分時間Ｔだけ音声再生時刻を遅らせる（Ｓ３６）。
すなわち、映像が遅延している場合は、音声受信機６０側の遅延手段６３を動作させ、音声が遅延している場合は、映像受信機７０側の遅延手段７３を動作させるようにしている。
以上の実施の形態を用いることにより、受信機側において、音声再生と映像再生の同期を取ることが可能となる。
【００４８】
なお、第２の実施の形態と同様に、音声受信機６０や映像受信機７０へ記憶手段６６（７６）と制御手段６９（７９）を追加することにより、差分時間情報を保持し、必要に応じ遅延手段６３（７３）に転送することができるようになる。したがって、動作毎に差分時間情報を検出する必要がなくなる。更に無線ホームシアターシステムの構成時の初期調節として、システム内での差分時間情報検出を一度だけ行っておいて、以後の起動時には検出処理を省略できるという効果を得ることができる。
【００４９】
（第６の実施の形態）
次に、本発明にかかる第６の実施の形態について説明する。図１６，１７は、第６の実施の形態を示す構成図である。
本実施の形態の場合、無線送信機１０Ｅは、第１の実施の形態と略同様であり、音声信号処理のため、音声信号符号化部１１と、音声信号バッファ１２と、無線パケット化部１３とを備えている。また、映像信号処理のため、映像信号符号化部１４と、映像信号バッファ１５と、無線パケット化部１６とを備えている。これらは第１の実施の形態と略同じ動作を行うものである。
また、図示はしていないものの、図７に示すような音声受信機６０の音声再生をフィードバックするための音声入力手段２１と、映像受信機７０の映像再生をフィードバックするための映像入力手段２２とを備えていても何ら問題はない。
【００５０】
さらに、無線送信機１０Ｅは、差分時間情報を音声受信機６０および映像受信機７０より取得するための制御信号検出手段３７と、差分時間情報をもとに遅延処理を行う遅延手段４０ａ，４０ｂとを有している。なお、この遅延手段４０ａ，４０ｂは例えば、第１の実施の形態と略同じ動作を行うものである。
制御信号検出手段３７は、無線伝送路を通じて音声受信機６０および映像受信機７０より差分時間情報を取得するものであり、ここで取得した差分時間情報をもとに遅延手段４０ａ，４０ｂで、無線伝送路への映像又は音声の転送遅延を行うようにするものである。この制御信号検出手段３７は、着脱可能なメモリを有することが好ましい。
【００５１】
図１７の音声受信機６０は、第５の実施の形態と略同様の構成を有し、無線パケット受信部６１と、音声信号バッファ６２と、音声信号復号化部６４とを備えている。
映像受信機７０は、第５の実施の形態と略同様の構成を有し、無線パケット受信部７１と、映像信号バッファ７２と、映像信号復号化部７４とを有している。
さらに、音声受信機６０と映像受信機７０との少なくともどちらか一方に、入力手段６８（７８）と、差分時間情報を測定する検出手段６７（７７）と、遅延手段６３（７３）とを有しており、無線送信機１０Ｅに遅延処理を要求するための通知手段６５（７５）を備えている。当該入力手段６８（７８）、検出手段６７（７７）、遅延手段６５（７５）は、第５の実施の形態と略同様の動作を行うものとなっている。
【００５２】
本実施の形態において、音声再生と映像再生を同期させる手順を図１８〜２０のフローチャートにもとづいて説明する。
無線送信機１０Ｅは、音声受信機６０および映像受信機７０に対して同時に音声データおよび映像データを伝送する（Ｓ４０）。このとき、送信する音声データおよび映像データは、第１〜第５の実施の形態のいずれかのように、外部ＡＶ機器より入力された音声および映像を用いても、また内部信号源により発生したものであっても構わない。
【００５３】
映像受信機７０では、受信した映像データの再生開始時間と、入力手段７８により得られた音声受信機６０の音声再生開始時間との差分時間Ｔおよび、音声再生と映像再生のどちらが遅れているのかを検出手段７７により測定する（Ｓ４１）。
このとき、映像再生が遅れている場合（Ｓ４２：ＮＯ）は、無線伝送を介して無線送信機１０Ｅに対し、音声受信機への音声データ伝送を差分時間Ｔだけ遅延させるよう要求を行う（Ｓ４３）。また、音声再生が遅れている場合（Ｓ４２：ＹＥＳ）において、映像信号バッファ７２のバッファサイズが充分大きく、映像信号復号化部７４による映像再生時刻を差分時間Ｔだけ遅らせることが可能なとき（Ｓ４４：ＹＥＳ）は、遅延手段７３により遅延処理を行う（Ｓ４５）。
【００５４】
映像信号バッファ７２のバッファサイズが小さく差分時間Ｔだけの再生遅延処理が行えない場合（Ｓ４４：ＮＯ）は、無線送信機１０Ｅに映像再生時間の遅延を要求する（Ｓ４６）。
無線送信機１０Ｅでは、制御信号検出手段３７において映像受信機７０からの再生時間調整の要求を受理し、要求に基づき遅延処理を行う（Ｓ５３）。
なお、この一連の処理は、音声受信機６０においても同様である（図２０参照）。
【００５５】
音声受信機６０には、入力手段６８を介して映像受信機７０の映像再生信号が入力されており、検出手段６７は、この映像再生信号の再生開始時間と音声受信機６０の受信した音声データの再生開始時間とから、両者の差分時間Ｔ、及び音声再生と映像再生のどちらが遅れているのかを測定する（Ｓ４７）。
このとき、音声再生が遅れている場合（Ｓ４８：ＮＯ）は、無線伝送を介して無線送信機１０Ｅに対し、映像受信機への映像データ伝送を差分時間Ｔだけ遅延させるよう要求を行う（Ｓ４９）。逆に、映像再生が遅れている場合（Ｓ４８：ＹＥＳ）において、音声信号バッファ６２のバッファサイズが充分大きく、音声信号復号化部６４による音声再生時刻を差分時間Ｔだけ遅らせることが可能なとき（Ｓ５０：ＹＥＳ）は、遅延手段６３により遅延処理を行う（Ｓ５１）。
【００５６】
音声信号バッファ６２のバッファサイズが小さく差分時間Ｔだけの再生遅延処理が行えない場合（Ｓ５０：ＮＯ）は、無線送信機１０Ｅに音声再生時間の遅延を要求する（Ｓ５２）。
無線送信機１０Ｅでは、制御信号検出手段３７において音声受信機６０からの再生時間調整の要求を受理し、要求に基づき遅延処理を行う（Ｓ５３）。
なお、音声受信機６０側で遅延処理を行う場合は、映像受信機７０側での遅延処理は不要であり、逆でも同様である。
【００５７】
以上により、受信機側でのバッファサイズが小さい場合においても音声再生と映像再生の同期を取ることが可能となる。また、音声受信機６０もしくは映像受信機７０のどちらか一方に入力手段、検出手段を備えるだけで、音声再生と映像再生の同期を取ることが可能となる。
なお、第２の実施の形態の如く、音声受信機６０や映像受信機７０へ記憶手段６６（７６）と制御手段６９（７９）を追加することにより、動作毎に差分時間情報を検出する必要がなくなる上に、無線ホームシアター装置構成時の初期調節として装置内での差分時間情報の検出を一度だけ行えばよく、以後の起動時には検出処理を省略できるという効果を追加することができる。
【００５８】
なお、本発明にかかる伝送装置は、上記実施の形態に限定されるものではない。
すなわち、送信機から受信機からの伝送方式は無線伝送に限定されるものでなく、有線伝送であってもよい。無線伝送も電波を用いたものであってもよく、赤外線を用いた伝送であっても何ら問題はない。
また、送信機は、外部ＡＶ機器の外部に取り付けられたものであってもよく、内部に設けられる構成であってもよい。
【００５９】
【発明の効果】
以上のように、本発明では、音声信号及び映像信号を受信して再生する受信機に対して、音声信号及び映像信号を別々に伝送する送信機において、前記送信機に帰還された音声再生の信号と映像再生の信号とを基に、音声及び映像の再生同期ずれの情報である差分時間情報を検出する検出手段と、前記再生同期ずれを解消するべく、前記検出手段により得られた差分時間情報をもとに音声または映像の伝送を遅延させる遅延手段とを具備しており、前記差分時間情報は、伝送を経て音声再生までに要する時間と伝送を経て映像再生までに要する時間との差分時間と、音声再生又は映像再生のどちらが遅延しているかの情報とを有しているために、音声及び映像の再生同期にずれが生じた場合でも、その再生同期ずれを送信機側で解消して音声及び映像の同時再生を可能とすることができる。
【００６０】
また、本発明では、送信機から別々に伝送された映像及び音声を受信して再生する受信機において、前記受信機に取り込まれた音声再生の信号又は映像再生の信号をもとに、音声及び映像の再生同期ずれの情報である差分時間情報を検出する検出手段と、前記再生同期ずれを解消するべく、前記検出手段により得られた差分時間情報をもとに音声または映像の再生を遅延させる遅延手段とを具備しており、前記差分時間情報は、伝送を経て音声再生までに要する時間と伝送を経て映像再生までに要する時間との差分時間と、音声再生又は映像再生のどちらが遅延しているかの情報とを有しているため、音声及び映像の再生同期にずれが生じた場合でも、その再生同期ずれを受信機側で解消して音声及び映像の同時再生を可能とすることができる。
【００６１】
また、本発明にかかる伝送装置では、前記受信機の有する通知手段から出力された差分時間情報は、前記送信機の備える制御信号検出手段に入力した後、送信機の遅延手段へ転送され、当該遅延手段は前記差分時間情報をもとに音声又は映像の伝送を遅らせることができ、これにより、音声及び映像の再生同期にずれが生じた場合でも、その再生同期ずれを伝送装置全体で解消して音声及び映像の同時再生を可能とすることができる。
【図面の簡単な説明】
【図１】本発明の第１の実施の形態を示すブロック図である。
【図２】差分時間情報の取得方法を示すフローチャートである。
【図３】遅延処理を示すフローチャート（その１）である。
【図４】遅延処理を示すフローチャート（その２）である。
【図５】遅延処理を示すフローチャート（その３）である。
【図６】本発明の第２の実施の形態を示すブロック図である。
【図７】本発明の第３の実施の形態を示すブロック図である。
【図８】基準信号発生手段を用いた差分時間情報の取得方法を示すフローチャート（その１）である。
【図９】基準信号発生手段を用いた差分時間情報の取得方法を示すフローチャート（その２）である。
【図１０】基準信号発生手段を用いた差分時間情報の取得方法を示すフローチャート（その３）である。
【図１１】本発明の第４の実施の形態を示すブロック図である。
【図１２】本発明の第５の実施の形態を示すブロック図である。
【図１３】本発明の第５の実施の形態の動作を示すフローチャート（その１）である。
【図１４】本発明の第５の実施の形態の動作を示すフローチャート（その２）である。
【図１５】本発明の第５の実施の形態の動作を示すフローチャート（その３）である。
【図１６】本発明の第６の実施の形態を示すブロック図（その１）である。
【図１７】本発明の第６の実施の形態を示すブロック図（その２）である。
【図１８】本発明の第６の実施の形態の動作を示すフローチャート（その１）である。
【図１９】本発明の第６の実施の形態の動作を示すフローチャート（その２）である。
【図２０】本発明の第６の実施の形態の動作を示すフローチャート（その３）である。
【図２１】従来例を示すブロック図である。
【図２２】（ａ）は映像パケットの構成を示す図であり、（ｂ）は音声パケットの構成を示す図である。
【符合の説明】
１０ 無線送信機
１０Ａ 第１の実施の形態の無線送信機
１０Ｂ 第２の実施の形態の無線送信機
１０Ｃ 第３の実施の形態の無線送信機
１０Ｄ 第４の実施の形態の無線送信機
１０Ｅ 第６の実施の形態の無線送信機
１１ 音声信号符号化部
１２ 音声信号バッファ
１３ （音声側） 無線パケット化部
１４ 映像信号符号化部
１５ 映像信号バッファ
１６ （映像側） 無線パケット化部
２０ 入力手段
２１ 音声入力手段
２２ 映像入力手段
３０ 検出手段
３１ 基準音声信号発生手段
３２ 音声再生時間測定手段
３３ 基準映像信号発生手段
３４ 映像再生時間測定手段
３５ 演算手段
３６ 調節手段
３７ 制御信号検出手段
４０ａ （音声側）遅延手段
４０ｂ （映像側）遅延手段
５０ａ （音声側）記憶手段
５０ｂ （映像側）記憶手段
５１ 制御手段
６０ 音声受信機
６１ （音声側）無線パケット受信部
６２ 音声信号バッファ
６３ （音声側）遅延手段
６４ 音声信号復号化部
６５ （音声側）通知手段
６６ （音声側）記憶手段
６７ （音声側）検出手段
６８ （音声側）入力手段
６９ （音声側）制御手段
７０ 音声受信機
７１ （映像側）無線パケット受信部
７２ 映像信号バッファ
７３ （映像側）遅延手段
７４ 映像信号復号化部
７５ （映像側）通知手段
７６ （映像側）記憶手段
７７ （映像側）検出手段
７８ （映像側）入力手段
７９ （映像側）制御手段[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a transmitter and a receiver having a function of correcting a reproduction synchronization deviation between audio and video, and a transmission device having the same.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, as an information output device having a function of eliminating a reproduction synchronization deviation of video and audio information (AV information), for example, there is an information output device described in Patent Document 1.
FIG. 21 is a block diagram illustrating an example of the information output device. In the receiving-side apparatus 100, the AV data in which the audio packet and the video packet received from the transmission path 101 are multiplexed is received by the tuner, input to the system decoder 102, and separated into the audio packet and the video packet. Thereafter, as audio processing, audio packets are once stored in the audio buffer 103, and decoded by the audio decoder 104 to reproduce audio.
[0003]
As the video processing, the video packets are once stored in the video buffer 105, and decoded (decoded) by the video decoder 106 to reproduce the video. In order to synchronize audio reproduction and video reproduction, a reproduction time management unit 107 and a clock generator 108 are provided.
On the other hand, the audio packet and the video packet have a data format of the MPEG (Moving Picture Image Coding Experts Group) standard, for example, as shown in FIG. 22, and the video packet and the audio packet have common playback time management information. ing.
[0004]
Therefore, in order to eliminate the reproduction synchronization deviation of the AV information, that is, to correct the output time difference (reproduction timing deviation) between the audio reproduction and the video reproduction caused by the transmission delay and the processing time difference of each decoder, the audio reproduction and the video reproduction are performed. At the same time, the output time difference is obtained from the reproduction time management information of the audio packet and the reproduction time management information of the video packet for each output time, and the reproduction time management unit 107 sends the clock generation device 108 A command to change the clock frequency used for sound reproduction is given. For example, when the audio reproduction is faster than the video reproduction, the clock frequency used for the audio reproduction is reduced. Conversely, when the audio reproduction is slower, the clock frequency used for the audio reproduction is increased.
[0005]
Through the above processing, the output clock (frequency) of the audio reproduction output from the clock generator 108 is controlled, and the output time difference between the video reproduction and the video reproduction is corrected.
[0006]
[Patent Document 1]
JP-A-09-31834 (pages 4 to 8, FIG. 1)
[0007]
[Problems to be solved by the invention]
However, the technique described in Patent Literature 1 reproduces audio and video in a single device, and uses both the reproduction time management information of an audio packet and the reproduction time management information of a video packet. The control is performed using the difference between the two.
Therefore, for example, wirelessly transmits audio from an AV device such as a wireless home theater system, in other words, a transmitter (wireless adapter of the AV device) to a receiver (speaker) and video to another receiver (projector). In the case of a transmission device that outputs audio and video separately, such as performing simultaneous playback, it is difficult to apply the conventional technology, and it is difficult to correct the difference between the output time differences between video playback and video playback. There was a problem.
[0008]
Accordingly, the present invention is to transmit audio information and video information separately from the transmitter to the receiver and reproduce the audio information and video data. It is an object of the present invention to provide a receiver and a transmitter having a function of correcting a reproduction synchronization shift that enables simultaneous reproduction of images, and a transmission device having the same.
[0009]
[Means for Solving the Problems]
In order to achieve the above object, the following technical measures have been taken in the present invention.
That is, the technical means for solving the problem in the transmitter of the present invention is a transmitter that receives and reproduces an audio signal and a video signal, and a transmitter that separately transmits an audio signal and a video signal, Based on the audio reproduction signal and the video reproduction signal returned to the transmitter, based on a detection means for detecting difference time information that is information on audio and video reproduction synchronization deviation, and to eliminate the reproduction synchronization deviation, Delay means for delaying the transmission of audio or video based on the difference time information obtained by the detection means, wherein the difference time information is transmitted through time required for sound reproduction through transmission and transmission. It is characterized by having a difference time from the time required for video reproduction and information on which of the audio reproduction and the video reproduction is delayed.
[0010]
Preferably, the transmission is wireless transmission.
Further, the technical means for solving the problem in the transmitter of the present invention is a storage means for holding the difference time information, and a control for issuing an instruction to transfer the difference time information held by the storage means to the delay means. Means.
Preferably, the storage means has a removable information storage medium.
Further, the technical means for solving the problem in the transmitter of the present invention includes an audio input means for feeding back the audio reproduction signal and inputting the signal to the detection means, and a feedback signal for video reproduction to the detection means. Video input means for inputting.
[0011]
Further, the technical means for solving the problem in the transmitter of the present invention is characterized in that the audio input means is any one of a microphone, an analog audio input terminal, and a digital audio input terminal.
Further, the technical means for solving the problem in the transmitter of the present invention is characterized in that the video input means is any one of a camera, a light receiving device, a video identification device, an analog video input terminal, and a digital video input terminal. And
[0012]
Further, the technical means for solving the problem in the transmitter of the present invention, the detecting means, the reference audio signal generating means for generating a predetermined audio signal, the reference video signal generating means for generating a predetermined video signal, A sound reproduction time measuring means for measuring a time required for sound reproduction based on signals obtained from the reference sound signal generating means and the sound input means; and a signal obtained from the reference video signal generating means and the video input means. Video playback time measurement means for measuring the time required for video playback, and arithmetic means for calculating the difference time information from the result of the audio playback time measurement means and the result of the video playback time measurement means, I do.
[0013]
Further, in the technical means for solving the problem in the transmitter of the present invention, the audio reproduction time measuring means obtains the generation time or end time of the audio signal generated by the reference audio signal generation means and the audio input means. The time required for sound reproduction is measured from the start time or the end time of the sound reproduction signal to be reproduced.
Further, in the technical means for solving the problem in the transmitter of the present invention, the video playback time measuring means obtains the start time or end time of the video signal generated by the reference video signal generating means, and obtains the video playback time by the video input means. The time required for video reproduction is measured from the start time or end time of the video reproduction signal to be obtained.
Further, the technical means for solving the problem in the transmitter of the present invention is such that, instead of the detection means, an adjustment means for adjusting and setting the difference time information from outside, or inputting the difference time information from outside. A control signal detecting means is provided.
Further, the technical means for solving the problem in the transmitter of the present invention is that the audio signal and the video signal have time information used in signal reproduction in the signals, and the delay means The time information is modified based on the time information.
[0014]
The technical solution for solving the problem in the receiver of the present invention is a receiver for receiving and reproducing a video and an audio separately transmitted from a transmitter, and a signal or a video of an audio reproduction captured by the receiver. Based on the reproduction signal, a detecting means for detecting difference time information which is information of a reproduction synchronization shift between audio and video, and a difference time information obtained by the detection means for eliminating the reproduction synchronization shift are also used. And delay means for delaying the reproduction of audio or video, and the differential time information is a differential time between the time required for audio reproduction via transmission and the time required for video reproduction via transmission, And information on which one of the audio reproduction and the video reproduction is delayed.
[0015]
Preferably, the transmission is a wireless transmission.
Further, the technical means for solving the problem in the receiver of the present invention is characterized by comprising a notifying means for outputting the differential time information to the outside.
Further, the technical means for solving the problem in the receiver of the present invention is a storage means for holding the differential time information, and an instruction to transfer the differential time information held by the storage means to the delay means or the notification means. And a control means for outputting.
Preferably, the storage means has a removable information storage medium.
[0016]
Further, the technical means for solving the problem in the receiver of the present invention is an audio input means for taking in the audio reproduction signal and inputting it to the detection means, or taking in the video reproduction signal and inputting it to the detection means. It is characterized by comprising video input means.
[0017]
Further, the technical means for solving the problem in the receiver of the present invention is characterized in that the audio input means is any one of a microphone, an analog audio input terminal, and a digital audio input terminal.
Further, the technical means for solving the problem in the receiver of the present invention is characterized in that the video input means is any one of a camera, a light receiving device, a video identification device, an analog video input terminal, and a digital video input terminal. And
Technical means for solving the problem in the transmission device of the present invention includes a transmitter described in any of the technical means, and a receiver described in any of the technical means. I do.
Further, the technical means for solving the problem in the transmission device of the present invention is such that the differential time information output from the notifying means of the receiver is input to the control signal detecting means of the transmitter, The delay means delays transmission of audio or video based on the difference time information.
[0018]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
(First Embodiment)
FIG. 1 shows a transmission apparatus according to a first embodiment of the present invention, in which audio and video inputs from connected AV equipment are input to a wireless transmitter (transmitter) 10A, and a wireless packet is transmitted. The converted wireless data (signal) is transmitted to an audio receiver (receiver) 60 including a speaker and the like and a video receiver (receiver) 70 including a projector and the like.
[0019]
Hereinafter, in the description, the time required from the wireless transmitter 10A to reach the audio receiver 60 via wireless transmission and be played back is referred to as audio playback time, and reaches the video receiver 70 via wireless transmission and is played back. The time it takes to complete is called the video playback time.
As shown in FIG. 1, in this embodiment, a wireless transmitter 10A includes an audio signal encoding unit 11 for encoding an audio input into an audio packet and an audio signal buffer 12 for storing the audio packet for audio signal processing. And a wireless packetizing unit 13 for converting a voice packet into a wireless packet in a format suitable for a wireless transmission path.
[0020]
The voice packetized by the wireless packetizer 13 is transmitted to the voice receiver 60.
Similarly, the wireless transmitter 10A includes a video signal encoding unit 14, a video signal buffer 15, a delay unit 40b, and a wireless packetizing unit 16 for video signal processing. The video packet wirelessly packetized by the wireless packetizer 16 is transmitted to the video receiver 70.
The audio packets stored in the audio signal buffer 12 and the video packets stored in the video signal buffer 15 have, for example, the format shown in FIG.
[0021]
The wireless transmitter 10A has input means 20 for feeding back and inputting the outputs of the audio receiver 60 and the video receiver 70. Further, a detection unit 30 for detecting a time difference between the audio reproduction and the video reproduction, and delay units 40a and 40b for delaying the reproduction time of the audio or the video based on the result are provided.
In the following description, the time difference between the audio playback time and the video playback time is referred to as a difference time, and information on which of the audio playback or the video playback is delayed and the difference time are referred to as difference time information. I do.
[0022]
The input means 20 is an audio input means 21 for feeding back the audio reproduced by the audio receiver 60 and inputting the audio to the wireless transmitter 10A, and a video for feeding back and inputting the video reproduced by the video receiver 70. And input means 22. The detecting means 30 detects the difference time information, and the delay means 40a and 40b delay the reproduction time of the audio or video based on the difference time information.
[0023]
Specific examples of the voice input unit 21 include a microphone (microphone) and an analog or digital voice input terminal. That is, the audio input means 21 takes in the reproduced audio of the audio receiver 60 by using a microphone, or feeds back by connecting a cable between the audio input terminal of the wireless transmitter 10A and the audio output terminal of the audio receiver 60, The signal is converted into an electric signal to be used by the detecting means 30. Specific examples of the video input means 22 include a camera, a light receiving device, and an analog or digital video input terminal. That is, the video input unit 22 captures the reproduced video of the video receiver 70 using a camera or a light receiving device, or feeds back the video input terminal and the video output terminal of the video receiver 70 by connecting the cable, and performs 30 for converting into an electric signal for use.
[0024]
Next, a procedure for detecting differential time information will be described with reference to the flowchart in FIG. Note that a counter is used as the detection means 30 shown in FIG.
First, the wireless transmitter 10A extracts audio packets and video packets from the audio signal buffer 12 and the video signal buffer 15, converts them into wireless packets, and then sends the audio data (signals) and the video data (signals) composed of the wireless packets to a wireless transmission path. ) Are transmitted simultaneously (S1). At this time, the transmitted audio and video data is transmitted as a single pulse like a pulse signal, and before and after the data is output, there is a period in which the video data and the audio data do not exist in the wireless transmission path.
[0025]
After that, the wireless transmitter 10A starts taking in the audio reproduction and the video reproduction from the audio receiver 60 and the video receiver 70 (S2), and either the reproduced audio or video, that is, the reproduction signal is transmitted to the radio transmitter 10A. (S3: NO).
Upon receiving the reproduction signal (S3: YES), the detection unit 30 of the wireless transmitter 10A determines whether a change has occurred in the input obtained from the audio input unit 21 or a change has occurred in the input obtained from the video input unit 22. It is determined whether the reproduction signal that arrives first is audio or video based on the fact (S4).
[0026]
When the reproduced video arrives first, that is, when the video is reproduced quickly (S4: YES), the detecting unit 30 starts measuring the difference time (S5). Thereafter, when the input of the reproduced sound is confirmed (S6: YES), the measurement of the difference time is terminated, and the fact that the reproduction of the sound is delayed by the measured difference time is reported to the delay unit 40b (S7). .
Conversely, when the sound reproduction is performed first (S4: NO), the detecting unit 30 starts measuring the difference time (S8). Thereafter, when the video reproduction is confirmed (S9: YES), the measurement of the differential time is terminated, and the delay means 40a is notified that the signal of the reproduced video is delayed by the measured differential time (S10).
[0027]
According to the above procedure, it is possible to obtain difference time information.
Next, a method of correcting the reproduction synchronization shift by the delay unit 40a or 40b based on the difference time information obtained by the detection unit 30 will be described with reference to the flowcharts of FIGS.
First, the detection means 30 obtains the value of the difference time T by delaying either the audio reproduction or the video reproduction by the method described above (see FIG. 2) (S11). If the video reproduction is delayed (S12: YES), a request is made to the delay means 40a on the audio signal processing side to delay the audio reproduction time by the difference time T (S13).
[0028]
If the sound reproduction is delayed (S12: NO), the video signal processing-side delay unit 40b is requested to perform processing for delaying the video reproduction time by the difference time T (S14). The delay means 40b requested to perform the delay processing by the detection means 30 performs the following delay processing based on the request.
For example, when delay processing is performed on the audio signal processing side, that is, when video reproduction is delayed by the difference time T (S15: YES), the timing at which the audio packet extracted from the audio signal buffer 12 is converted into a wireless packet is changed by the difference time T. It is delayed (S16). As a result, in the video packet and the audio packet having the same reproduction time management information, the audio packet is transmitted to the wireless transmission path with a delay time T later than the time at which the video packet is transmitted to the wireless transmission path.
[0029]
Conversely, when the delay processing is performed on the video signal processing side, that is, when the audio reproduction is delayed by the difference time T (S17: YES), the same delay processing is performed on the video signal processing side (S18).
By the above procedure, the transmission of either the audio packet or the video packet to the wireless transmission path is shifted by the difference time T, so that the audio reproduction and the video reproduction on the receiving side can be synchronized.
In addition to the above-described method, it is also possible to perform the delay processing by modifying the reproduction time management information added to the audio packet or the video packet. For example, when delay processing is performed on the audio signal processing side (S15: YES), the reproduction time management information of the audio packet extracted from the audio signal buffer 12 is changed to be delayed by the difference time T.
[0030]
By using this method, if the audio receiver 60 and the video receiver 70 have a common time and output in accordance with the common time, the audio reproduction time can be shifted by the difference time T.
Conversely, if the delay processing is performed on the video processing side (S17: YES), the reproduction time management information of the video packet extracted from the video signal buffer 15 is changed to be delayed by the difference time T.
According to the above-described embodiment, in a transmission device that separately transmits video and audio using different wireless transmission schemes or the same wireless transmission scheme, it is possible to eliminate synchronous playback of audio and video, that is, eliminate a shift in playback synchronization timing. Become.
[0031]
(Second embodiment)
Hereinafter, a second embodiment according to the present invention will be described. FIG. 6 is a configuration diagram showing the second embodiment.
The wireless transmitter 10B includes an audio signal encoding unit 11, an audio signal buffer 12, and a wireless packetizing unit 13 to perform audio signal processing. Further, for video signal processing, a video signal encoding unit 14, a video signal buffer 15, and a wireless packetizing unit 16 are provided. Further, in order to synchronize the audio playback time of the audio receiver 60 and the video playback time of the video receiver 70, the input unit 20, the detection unit 30, and the delay units 40a and 40b are provided.
[0032]
These perform substantially the same operations as those described in the first embodiment.
In addition to the above configuration, in the present embodiment, the storage units 50a and 50b that hold the difference time information obtained from the detection unit 30 and the storage unit 50a at the time of activation of the wireless transmitter 10B or at any time specified by the user. , 50b to the delay means 40a, 40b.
For the storage units 50a and 50b, a nonvolatile memory incorporated in the wireless transmitter 10B or a memory card removable from the wireless transmitter 10B can be used. By adding the storage units 50a and 50b and the control unit 51, it is possible to hold the differential time information and to transmit the differential time information to the delay units 40a and 40b when the wireless transmitter 10B is activated or at an intended time. It becomes.
[0033]
This eliminates the need for the wireless transmitter 10B to always detect the differential time information. For example, as an initial adjustment at the time of configuring the wireless home theater system, the wireless transmitter 10B detects the differential time information only once in the system and stores the information in the storage unit 50a, What is necessary is to save it in 50b. The difference time information stored here may be sent to the delay means 40a or 40b at the time of activation of the wireless transmitter 10B or at a predetermined time, so that the process of constantly detecting the difference time information can be omitted. It becomes.
[0034]
(Third embodiment)
Next, a third embodiment according to the present invention will be described. FIG. 7 is a configuration diagram showing the third embodiment.
The wireless transmitter 10C includes an audio signal encoding unit 11, an audio signal buffer 12, and a wireless packetizing unit 13 for audio signal processing. In addition, in order to perform video signal processing, the image processing apparatus includes a video signal encoding unit 14, a video signal buffer 15, and a wireless packetizing unit 16.
Further, the wireless transmitter 10C includes an input unit 20, and delay units 40a and 40b on the audio and video sides. The input unit 20 is an audio input unit for feeding back the audio reproduction of the audio receiver 60. 21 and a video input means 22 for feeding back the video reproduction of the video receiver 70.
[0035]
These perform substantially the same operations as in the first embodiment.
In addition to the above configuration, in the present embodiment, as the detecting means 30 for detecting the difference time information, a reference audio signal generating means 31 for outputting a predetermined audio packet, and an audio reproducing time measuring means 32 for measuring an audio reproducing time. And
Further, the detecting means 30 includes a reference video signal generating means 33 for outputting a predetermined video packet, a video playing time measuring means 34 for measuring a video playing time, an audio playing time measuring means 32 and a video playing time measuring means 34. A calculating means 35 for calculating a difference information time from the obtained information.
[0036]
The procedure for measuring the time Tv required for video reproduction via wireless transmission in the present embodiment will be described with reference to the flowcharts in FIGS.
First, the reference video signal generating unit 33 sends a predetermined video packet to the wireless packetizing unit 16 and the video reproduction time measuring unit 34 (S20). The video playback time measuring means 34 detects at any time whether or not a video packet has been input from the reference video signal generating means 33 (S21), and when it is input, starts the time measurement by using it as a trigger (S22). .
[0037]
The video packet output from the wireless packetizer 16 is fed back to the wireless receiver 10C through the video input unit 22 as a video output from the video receiver 70, and detects the start of video playback (S23: YES). The video input unit 22 notifies the video playback time measuring unit 34 that the video playback has started (S24). The video playback time measuring means 34 terminates the time measurement and passes the measurement time Tv to the calculating means 35 with the notification from the video input means 22 as a trigger (S25: YES).
Note that, as a measurement method of the video reproduction measuring means 34, the signal input start of the reference video signal generating means 33 is used as a trigger. However, the time measurement may be started with the signal input end as a trigger. The end timing may be used. In a similar manner, the processing time Ta from the wireless transmission of the audio data to the reproduction by the audio receiver 60 can be obtained.
[0038]
The arithmetic means 35 calculates which of the audio and the video is delayed by the time T by calculating the difference between Tv and Ta, and obtains difference time information. Then, similarly to the first embodiment, the delay processing is performed using the delay units 40a and 40b.
In the present embodiment, the signal source is provided inside the wireless transmitter 10C, so that the audio reproduction time Tv and the video reproduction time Ta can be accurately and individually measured, and the audio reproduction and the video reproduction are synchronized. The above accuracy can be improved.
[0039]
(Fourth embodiment)
Next, a fourth embodiment according to the present invention will be described. FIG. 11 is a configuration diagram showing the fourth embodiment.
In the present embodiment, wireless transmitter 10D includes an audio signal encoding unit 11, an audio signal buffer 12, and a wireless packetizing unit 13 for audio signal processing. In addition, for video signal processing, the image processing apparatus includes a video signal encoding unit 14, a video signal buffer 15, and a wireless packetizing unit 16. In addition, delay means 40a and 40b for arbitrarily delaying the audio reproduction time or the video reproduction time based on the difference time information are provided.
These perform substantially the same operations as in the first embodiment, and the wireless transmitter 10D further includes an adjusting means 36 including a variable resistor or the like.
[0040]
By associating the operation of the adjusting means 36 with the differential time information, it becomes possible to directly input and set the differential time information by operating the adjusting means 36. Note that the delay units 40a and 40b perform delay processing based on the difference time information in substantially the same manner as in the first embodiment.
By using the above embodiment, the user can directly operate the adjusting means 36 such as a variable resistor to adjust the difference between the audio reproduction and the video reproduction using the user's sense of hearing and visual sense. It becomes possible.
[0041]
(Fifth embodiment)
Next, a fifth embodiment according to the present invention will be described. FIG. 12 is a configuration diagram showing the fifth embodiment.
In the present embodiment, the audio receiver 60 includes a wireless packet receiving unit 61 that extracts an audio packet from a wireless packet received from the wireless transmitter 10, an audio signal buffer 62 that stores the extracted audio packet, and a voice packet that is added to the audio packet. And an audio signal decoding unit 64 that decodes (decodes) based on the reproduced reproduction time management information and outputs the decoded signal to the outside.
[0042]
Further, the audio receiver 60 includes an input unit 68 for capturing the video reproduction of the video receiver 70, a detection unit 67 for detecting the difference time information, and a delay unit 63 for delaying the audio reproduction time based on the difference time information. Have. Based on the information obtained from the audio signal decoding unit 64 and the input unit 68, the detection unit 67 calculates a difference time (start time difference information) between the start of the audio reproduction performed by the audio receiver 60 and the start of the video reproduction of the video receiver 70. ).
As a specific example of the input means 68, a camera, a light receiving device, an analog or digital video input terminal is used. That is, the video reproduction of the video receiver 70 is captured using a camera, a light receiving device, or the like. Alternatively, the video input terminal of the audio receiver 60 and the video output terminal of the video receiver 70 may be connected by a cable and fed back to be converted into an electric signal to be used by the detecting means 67.
[0043]
The video receiver 70 includes a wireless packet receiving unit 71 for extracting a video packet from a wireless packet received from the wireless transmitter 10, a video signal buffer 72 for storing the extracted video packet, and reproduction time management information added to the video packet. And a video signal decoding unit 74 for decoding (decoding) based on the video signal and outputting it to the outside. Further, the video receiver 70 includes an input unit 78 for capturing the audio reproduction of the audio receiver 60, a detection unit 77 for detecting the difference time information, and a delay unit for delaying the video reproduction time based on the difference time information. 73 are provided. Based on the information obtained from the video signal decoding unit 74 and the input unit 78, the detecting unit 77 calculates a difference time between the video reproduction start time of the video receiver 70 and the audio reproduction start time of the audio receiver 60 (difference time Information).
[0044]
As a specific example of the input means 78, a microphone, an analog or digital audio input terminal, or the like is used. That is, the audio reproduction of the audio receiver 60 is taken in by using a microphone, or the audio input terminal of the video receiver 70 is connected to the audio output terminal of the audio receiver 60 by a cable connection so that the feedback is performed, and the detection unit 77 uses the feedback. To an electrical signal.
[0045]
Next, a method of synchronizing audio reproduction and video reproduction according to the present embodiment will be described with reference to the flowcharts in FIGS.
First, the wireless transmitter 10 simultaneously transmits, to the audio receiver 60 and the video receiver 70, audio data obtained by converting an audio packet into a wireless packet and video data obtained by converting a video packet into a wireless packet (S30). At this time, the audio data and video data to be transmitted may be audio and video input from an external AV device as in any of the first to fourth embodiments, and may be generated by an internal signal source. It does not matter.
The video receiver 70 processes the video data obtained from the wireless transmitter 10, and processes the video reproduction start time obtained by the video signal decoding unit 74 and the audio reproduction start time of the audio receiver 60 obtained by the input unit 78. Thus, the difference time T between the video reproduction start time and the audio reproduction start time, and which of the audio reproduction and the video reproduction is delayed is measured by the detecting means 77 (S31).
[0046]
At this time, if the audio reproduction is delayed (S32: YES), the delay means 73 delays the video reproduction time by the difference time T from the reproduction time of the reproduction time management information added to the video packet (S33).
Similarly, the audio receiver 60 processes the audio data obtained from the wireless transmitter 10, and starts the audio reproduction start time obtained by the audio signal decoding unit 64 and the video reproduction start time of the video receiver 70 obtained by the input unit 68. From the time, the difference time T between the audio reproduction start time and the video reproduction start time, and which of the audio reproduction and the video reproduction is delayed is measured by the detecting means 67 (S34).
[0047]
At this time, if the video playback is delayed (S35: YES), the delay unit 63 delays the audio playback time by the difference time T from the playback time of the playback time management information added to the audio packet (S36).
That is, when the video is delayed, the delay unit 63 of the audio receiver 60 is operated, and when the audio is delayed, the delay unit 73 of the video receiver 70 is operated.
By using the above-described embodiment, it becomes possible to synchronize audio reproduction and video reproduction on the receiver side.
[0048]
As in the second embodiment, by adding the storage means 66 (76) and the control means 69 (79) to the audio receiver 60 and the video receiver 70, the difference time information is held and becomes necessary. Accordingly, the data can be transferred to the delay means 63 (73). Therefore, it is not necessary to detect the difference time information for each operation. Further, as an initial adjustment at the time of configuring the wireless home theater system, it is possible to obtain the effect that the detection of the differential time information in the system is performed only once, and the detection process can be omitted at the time of subsequent startup.
[0049]
(Sixth embodiment)
Next, a sixth embodiment according to the present invention will be described. 16 and 17 are configuration diagrams showing the sixth embodiment.
In the case of the present embodiment, the wireless transmitter 10E is substantially the same as that of the first embodiment, and performs an audio signal encoding unit 11, an audio signal buffer 12, and a wireless packetizing unit 13 for audio signal processing. And In addition, for video signal processing, the image processing apparatus includes a video signal encoding unit 14, a video signal buffer 15, and a wireless packetizing unit 16. These perform substantially the same operations as in the first embodiment.
Although not shown, an audio input means 21 for feeding back audio reproduction of the audio receiver 60 as shown in FIG. 7 and a video input means 22 for feeding back video reproduction of the video receiver 70 are provided. There is no problem even if it has.
[0050]
Further, the wireless transmitter 10E includes a control signal detection unit 37 for acquiring the difference time information from the audio receiver 60 and the video receiver 70, and delay units 40a and 40b for performing a delay process based on the difference time information. have. The delay units 40a and 40b perform, for example, substantially the same operation as in the first embodiment.
The control signal detecting means 37 is for acquiring the differential time information from the audio receiver 60 and the video receiver 70 via the wireless transmission path, and based on the acquired differential time information, the delay means 40a, 40b This is to delay the transfer of video or audio to the transmission path. The control signal detecting means 37 preferably has a removable memory.
[0051]
The audio receiver 60 in FIG. 17 has a configuration substantially similar to that of the fifth embodiment, and includes a wireless packet receiving unit 61, an audio signal buffer 62, and an audio signal decoding unit 64.
The video receiver 70 has substantially the same configuration as that of the fifth embodiment, and includes a wireless packet receiving unit 71, a video signal buffer 72, and a video signal decoding unit 74.
Further, at least one of the audio receiver 60 and the video receiver 70 includes an input unit 68 (78), a detection unit 67 (77) for measuring differential time information, and a delay unit 63 (73). And a notifying unit 65 (75) for requesting the wireless transmitter 10E to perform a delay process. The input means 68 (78), the detection means 67 (77), and the delay means 65 (75) perform substantially the same operations as in the fifth embodiment.
[0052]
In the present embodiment, a procedure for synchronizing audio reproduction and video reproduction will be described with reference to flowcharts in FIGS.
The wireless transmitter 10E simultaneously transmits audio data and video data to the audio receiver 60 and the video receiver 70 (S40). At this time, the audio data and the video data to be transmitted are generated by the internal signal source even when using the audio and the video input from the external AV equipment as in any of the first to fifth embodiments. It may be something.
[0053]
In the video receiver 70, a difference time T between the reproduction start time of the received video data and the audio reproduction start time of the audio receiver 60 obtained by the input means 78, and which of the audio reproduction and the video reproduction is delayed Is measured by the detecting means 77 (S41).
At this time, if the video reproduction is delayed (S42: NO), a request is made to the wireless transmitter 10E via wireless transmission to delay the audio data transmission to the audio receiver by the difference time T (S43). ). If the audio reproduction is delayed (S42: YES), the buffer size of the video signal buffer 72 is sufficiently large, and the video reproduction time by the video signal decoding unit 74 can be delayed by the difference time T (S44). : YES), a delay process is performed by the delay means 73 (S45).
[0054]
If the buffer size of the video signal buffer 72 is too small to perform the playback delay processing for the difference time T (S44: NO), the wireless transmitter 10E is requested to delay the playback time (S46).
In the wireless transmitter 10E, the control signal detecting means 37 receives the request for adjusting the reproduction time from the video receiver 70, and performs a delay process based on the request (S53).
This series of processing is the same for the audio receiver 60 (see FIG. 20).
[0055]
A video reproduction signal of the video receiver 70 is input to the audio receiver 60 via the input means 68, and the detection means 67 determines the reproduction start time of the video reproduction signal and the audio data received by the audio receiver 60. From the reproduction start time, the difference time T between the two, and which of the audio reproduction and the video reproduction is delayed are measured (S47).
At this time, if the audio reproduction is delayed (S48: NO), a request is made to the wireless transmitter 10E via wireless transmission to delay the video data transmission to the video receiver by the difference time T (S49). ). Conversely, when the video reproduction is delayed (S48: YES), the buffer size of the audio signal buffer 62 is sufficiently large, and the audio reproduction time by the audio signal decoding unit 64 can be delayed by the difference time T ( In S50: YES), the delay unit 63 performs a delay process (S51).
[0056]
If the buffer size of the audio signal buffer 62 is too small to perform the playback delay processing for the difference time T (S50: NO), the wireless transmitter 10E is requested to delay the audio playback time (S52).
In the wireless transmitter 10E, the control signal detecting means 37 receives the request for adjusting the reproduction time from the audio receiver 60, and performs a delay process based on the request (S53).
In the case where the delay processing is performed on the audio receiver 60 side, the delay processing on the video receiver 70 side is unnecessary, and vice versa.
[0057]
As described above, even when the buffer size on the receiver side is small, it is possible to synchronize the audio reproduction and the video reproduction. In addition, simply providing the input means and the detection means in either the audio receiver 60 or the video receiver 70 makes it possible to synchronize the audio reproduction and the video reproduction.
As in the second embodiment, by adding the storage means 66 (76) and the control means 69 (79) to the audio receiver 60 and the video receiver 70, it is necessary to detect the difference time information for each operation. In addition to this, the effect that the detection of the differential time information in the device only needs to be performed only once as an initial adjustment at the time of configuring the wireless home theater device, and the detection process can be omitted in the subsequent startup can be added.
[0058]
Note that the transmission device according to the present invention is not limited to the above embodiment.
That is, the transmission system from the transmitter to the receiver is not limited to wireless transmission, but may be wired transmission. The wireless transmission may use radio waves, and there is no problem even if the transmission uses infrared rays.
Further, the transmitter may be attached to the outside of the external AV device, or may be provided inside.
[0059]
【The invention's effect】
As described above, according to the present invention, in a transmitter that receives and reproduces an audio signal and a video signal, in a transmitter that separately transmits the audio signal and the video signal, the audio reproduction returned to the transmitter is performed. Detecting means for detecting difference time information, which is information of audio / video reproduction synchronization deviation, based on the signal and the video reproduction signal; and a difference time obtained by the detection means for eliminating the reproduction synchronization deviation. Delay means for delaying the transmission of audio or video based on the information, wherein the differential time information is the difference between the time required for audio reproduction via transmission and the time required for video reproduction via transmission. Since there is a time and information on whether audio playback or video playback is delayed, even if the playback synchronization of audio and video is out of sync, the playback synchronization offset is eliminated by the transmitter. Voice It is possible to allow the simultaneous playback of fine image.
[0060]
Further, according to the present invention, in a receiver that receives and reproduces video and audio separately transmitted from the transmitter, the audio and video reproduction signals or the video reproduction signal captured by the receiver are used for audio and video reproduction. Detecting means for detecting difference time information which is information of a video playback synchronization shift; and delaying audio or video playback based on the difference time information obtained by the detection means to eliminate the playback synchronization shift. Delay means, the difference time information, the difference between the time required for audio reproduction via transmission and the time required for video reproduction via transmission, and which of the audio reproduction or video reproduction is delayed Even if there is a difference in audio and video playback synchronization, the receiver can resolve the synchronization error and enable simultaneous audio and video playback. .
[0061]
Further, in the transmission device according to the present invention, the difference time information output from the notifying means of the receiver is input to the control signal detecting means of the transmitter, and then transferred to the delay means of the transmitter. The delay means can delay the transmission of audio or video based on the difference time information, so that even if the reproduction synchronization of audio and video is deviated, the reproduction synchronization deviation is eliminated by the entire transmission apparatus. Audio and video can be reproduced simultaneously.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a first embodiment of the present invention.
FIG. 2 is a flowchart illustrating a method for acquiring differential time information.
FIG. 3 is a flowchart (part 1) illustrating a delay process.
FIG. 4 is a flowchart (part 2) illustrating a delay process.
FIG. 5 is a flowchart (part 3) illustrating a delay process.
FIG. 6 is a block diagram showing a second embodiment of the present invention.
FIG. 7 is a block diagram showing a third embodiment of the present invention.
FIG. 8 is a flowchart (part 1) illustrating a method of acquiring differential time information using a reference signal generating unit.
FIG. 9 is a flowchart (part 2) illustrating a method of acquiring difference time information using a reference signal generating unit.
FIG. 10 is a flowchart (part 3) illustrating a method of acquiring difference time information using a reference signal generating unit.
FIG. 11 is a block diagram showing a fourth embodiment of the present invention.
FIG. 12 is a block diagram showing a fifth embodiment of the present invention.
FIG. 13 is a flowchart (part 1) illustrating an operation of the fifth exemplary embodiment of the present invention.
FIG. 14 is a flowchart (part 2) illustrating the operation of the fifth exemplary embodiment of the present invention.
FIG. 15 is a flowchart illustrating an operation according to the fifth embodiment of the present invention (part 3);
FIG. 16 is a block diagram (part 1) illustrating a sixth embodiment of the present invention.
FIG. 17 is a block diagram (part 2) illustrating the sixth embodiment of the present invention.
FIG. 18 is a flowchart (part 1) illustrating the operation of the sixth embodiment of the present invention.
FIG. 19 is a flowchart (2) showing an operation of the sixth embodiment of the present invention.
FIG. 20 is a flowchart (part 3) illustrating the operation of the sixth embodiment of the present invention.
FIG. 21 is a block diagram showing a conventional example.
22A is a diagram illustrating a configuration of a video packet, and FIG. 22B is a diagram illustrating a configuration of an audio packet.
[Description of sign]
10 Wireless transmitter
10A Wireless Transmitter of First Embodiment
10B Wireless Transmitter of Second Embodiment
10C Wireless Transmitter of Third Embodiment
10D Wireless Transmitter of Fourth Embodiment
10E Wireless transmitter according to sixth embodiment
11 audio signal encoding unit
12 Audio signal buffer
13 (voice side) Wireless packetizing unit
14 Video signal encoding unit
15 Video signal buffer
16 (Video side) Wireless packetizer
20 Input means
21 Voice input means
22 Video input means
30 Detection means
31 Reference audio signal generation means
32 Audio playback time measuring means
33 Reference video signal generating means
34 Video playback time measuring means
35 Calculation means
36 Adjusting means
37 Control signal detecting means
40a (voice side) delay means
40b (video side) delay means
50a (voice side) storage means
50b (video side) storage means
51 control means
60 audio receiver
61 (voice side) wireless packet receiver
62 audio signal buffer
63 (voice side) delay means
64 audio signal decoding unit
65 (voice side) notification means
66 (sound side) storage means
67 (voice side) detection means
68 (voice side) input means
69 (voice side) control means
70 audio receiver
71 (Video side) Wireless packet receiver
72 Video signal buffer
73 (Video side) delay means
74 Video signal decoding unit
75 (Video side) notification means
76 (Video side) storage means
77 (Video side) detection means
78 (Video side) input means
79 (Video side) control means

Claims (23)

音声信号及び映像信号を受信して再生する受信機に対して、音声信号及び映像信号を別々に伝送する送信機において、
前記送信機に帰還された音声再生の信号と映像再生の信号とを基に、音声及び映像の再生同期ずれの情報である差分時間情報を検出する検出手段と、
前記再生同期ずれを解消するべく、前記検出手段により得られた差分時間情報をもとに音声または映像の伝送を遅延させる遅延手段とを具備しており、
前記差分時間情報は、伝送を経て音声再生までに要する時間と伝送を経て映像再生までに要する時間との差分時間と、音声再生又は映像再生のどちらが遅延しているかの情報とを有していることを特徴とする再生同期ずれ補正機能を備えた送信機。For a receiver that receives and reproduces an audio signal and a video signal, a transmitter that separately transmits an audio signal and a video signal,
Based on the audio reproduction signal and the video reproduction signal returned to the transmitter, detection means for detecting difference time information that is information of audio and video reproduction synchronization deviation,
A delay unit that delays transmission of audio or video based on the difference time information obtained by the detection unit, in order to eliminate the reproduction synchronization shift,
The difference time information includes a difference time between a time required for audio reproduction after transmission and a time required for video reproduction via transmission, and information on which of the audio reproduction and the video reproduction is delayed. A transmitter having a function of correcting a reproduction synchronization shift. 前記伝送は、無線伝送であることを特徴とする請求項１に記載の再生同期ずれ補正機能を備えた送信機。The transmitter according to claim 1, wherein the transmission is a wireless transmission. 前記差分時間情報を保持する記憶手段と、
前記記憶手段が保持する差分時間情報を前記遅延手段に転送するべく命令を出す制御手段と、
を具備することを特徴とする請求項１又は２に記載の再生同期ずれ補正機能を備えた送信機。Storage means for holding the difference time information,
Control means for issuing an instruction to transfer the differential time information held by the storage means to the delay means;
3. The transmitter according to claim 1, wherein the transmitter has a function of correcting a reproduction synchronization shift. 前記記憶手段は、着脱可能な情報記憶媒体であることを特徴とする請求項３に記載の再生同期ずれ補正機能を備えた送信機。The transmitter according to claim 3, wherein the storage unit is a removable information storage medium. 前記音声再生の信号を帰還させて前記検出手段に入力する音声入力手段と、
映像再生の信号を帰還させて前記検出手段に入力する映像入力手段と、
を具備することを特徴とする請求項２〜４のいずれかに記載の再生同期ずれ補正機能を備えた送信機。Sound input means for feeding back the sound reproduction signal and inputting the signal to the detection means,
Video input means for feeding back a video reproduction signal and inputting the signal to the detection means,
The transmitter according to any one of claims 2 to 4, further comprising: 前記音声入力手段は、マイクロフォン、アナログ音声入力端子、デジタル音声入力端子のいずれかであることを特徴とする請求項５に記載の再生同期ずれ補正機能を備えた送信機。The transmitter according to claim 5, wherein the audio input unit is one of a microphone, an analog audio input terminal, and a digital audio input terminal. 前記映像入力手段は、カメラ、受光デバイス、映像識別デバイス、アナログ映像入力端子、デジタル映像入力端子のいずれかであることを特徴とする請求項５に記載の再生同期ずれ補正機能を備えた送信機。The transmitter according to claim 5, wherein the video input unit is one of a camera, a light receiving device, a video identification device, an analog video input terminal, and a digital video input terminal. . 前記検出手段は、所定の音声信号を発生する基準音声信号発生手段と、
所定の映像信号を発生する基準映像信号発生手段と、
前記基準音声信号発生手段および音声入力手段より得られる信号をもとに音声再生に要する時間を測定する音声再生時間測定手段と、
前記基準映像信号発生手段および映像入力手段より得られる信号をもとに映像再生に要する時間を測定する映像再生時間測定手段と、
前記音声再生時間測定手段の結果と映像再生時間測定手段の結果より前記差分時間情報を算出する演算手段と、
を有することを特徴とする請求項６又は７に記載の再生同期ずれ補正機能を備えた送信機。The detection means, a reference audio signal generating means for generating a predetermined audio signal,
Reference video signal generating means for generating a predetermined video signal,
Sound reproduction time measurement means for measuring the time required for sound reproduction based on the signal obtained from the reference sound signal generation means and the sound input means,
A video playback time measurement unit that measures a time required for video playback based on a signal obtained from the reference video signal generation unit and a video input unit,
An arithmetic unit that calculates the difference time information from the result of the audio reproduction time measurement unit and the result of the video reproduction time measurement unit,
The transmitter having the function of correcting a reproduction synchronization shift according to claim 6 or 7, characterized by comprising: 前記音声再生時間測定手段は、基準音声信号発生手段が発生する音声信号の発生時刻または終了時刻と、前記音声入力手段により得られる音声再生信号の開始時刻または終了時刻とから、音声再生に要する時間の測定を行うことを特徴とする請求項８に記載の再生同期ずれ補正機能を備えた送信機。The sound reproduction time measuring means calculates a time required for sound reproduction from a generation time or end time of the sound signal generated by the reference sound signal generation means and a start time or end time of the sound reproduction signal obtained by the sound input means. 9. The transmitter according to claim 8, wherein the measurement is performed. 前記映像再生時間測定手段は、基準映像信号発生手段が発生する映像信号の開始時刻または終了時刻と、前記映像入力手段により得られる映像再生信号の開始時刻または終了時刻より、映像再生に要する時間の測定を行うことを特徴とする請求項８に記載の再生同期ずれ補正機能を備えた送信機。The video playback time measurement unit is configured to calculate a time required for video playback from a start time or an end time of a video signal generated by the reference video signal generation unit and a start time or an end time of the video playback signal obtained by the video input unit. 9. The transmitter according to claim 8, wherein the transmitter performs the measurement. 前記検出手段に代えて、前記差分時間情報を外部より調節し設定可能とする調節手段を設けたことを特徴とする請求項１又は２に記載の再生同期ずれ補正機能を備えた送信機。3. The transmitter according to claim 1, further comprising an adjusting unit configured to adjust and set the difference time information from outside, instead of the detecting unit. 前記検出手段に代えて、前記差分時間情報を外部より入力させる制御信号検出手段を設けたことを特徴とする請求項１又は２に記載の再生同期ずれ補正機能を備えた送信機。3. The transmitter according to claim 1, further comprising a control signal detecting unit that inputs the differential time information from outside, instead of the detecting unit. 前記音声信号及び映像信号は、当該信号内に信号再生の際に使用する時間情報を有しており、
前記遅延手段は差分時間情報をもとに当該時間情報を修正することを特徴とする請求項１又は２に記載の再生同期ずれ補正機能を備えた送信機。The audio signal and the video signal have time information used in signal reproduction in the signal,
3. The transmitter according to claim 1, wherein the delay unit corrects the time information based on the difference time information. 送信機から別々に伝送された映像及び音声を受信して再生する受信機において、
前記受信機に取り込まれた音声再生の信号又は映像再生の信号をもとに、音声及び映像の再生同期ずれの情報である差分時間情報を検出する検出手段と、
前記再生同期ずれを解消するべく、前記検出手段により得られた差分時間情報をもとに音声または映像の再生を遅延させる遅延手段とを具備しており、
前記差分時間情報は、伝送を経て音声再生までに要する時間と伝送を経て映像再生までに要する時間との差分時間と、音声再生又は映像再生のどちらが遅延しているかの情報とを有していることを特徴とする再生同期ずれ補正機能を備えた受信機。In a receiver that receives and reproduces the video and audio separately transmitted from the transmitter,
Based on a signal of audio reproduction or a signal of video reproduction taken in by the receiver, detection means for detecting difference time information that is information of audio and video reproduction synchronization deviation,
A delay unit that delays the reproduction of audio or video based on the difference time information obtained by the detection unit, in order to eliminate the reproduction synchronization shift,
The difference time information includes a difference time between a time required for audio reproduction after transmission and a time required for video reproduction via transmission, and information on which of the audio reproduction and the video reproduction is delayed. A receiver provided with a reproduction synchronization deviation correction function. 前記伝送は、無線伝送であることを特徴とする請求項１４に記載の再生同期ずれ補正機能を備えた受信機。The receiver according to claim 14, wherein the transmission is a wireless transmission. 前記差分時間情報を外部に出力するための通知手段を具備することを特徴とする請求項１４又は１５に記載の再生同期ずれ補正機能を備えた受信機。16. The receiver according to claim 14, further comprising: a notification unit configured to output the difference time information to an external device. 前記差分時間情報を保持する記憶手段と、
前記記憶手段が保持する差分時間情報を遅延手段又は通知手段に転送するべく命令を出す制御手段と、
を具備することを特徴とする請求項１６に記載の再生同期ずれ補正機能を備えた受信機。Storage means for holding the difference time information,
Control means for issuing an instruction to transfer the differential time information held by the storage means to a delay means or a notification means,
The receiver according to claim 16, wherein the receiver has a function of correcting a reproduction synchronization shift. 前記記憶手段は、着脱可能な情報記憶媒体であることを特徴とする請求項１７に記載の再生同期ずれ補正機能を備えた受信機。18. The receiver according to claim 17, wherein the storage unit is a removable information storage medium. 前記音声再生の信号を取り込み前記検出手段に入力させる音声入力手段、又は、前記映像再生の信号を取り込み前記検出手段に入力させる映像入力手段を具備することを特徴とする請求項１５〜１８のいずれかに記載の再生同期ずれ補正機能を備えた受信機。19. The apparatus according to claim 15, further comprising: an audio input unit that captures the audio reproduction signal and inputs the signal to the detection unit, or a video input unit that captures the video reproduction signal and inputs the signal to the detection unit. A receiver provided with a reproduction synchronization deviation correction function as described in Crab. 前記音声入力手段は、マイクロフォン、アナログ音声入力端子、デジタル音声入力端子のいずれかであることを特徴とする請求項１９に記載の再生同期ずれ補正機能を備えた受信機。20. The receiver according to claim 19, wherein the audio input unit is one of a microphone, an analog audio input terminal, and a digital audio input terminal. 前記映像入力手段は、カメラ、受光デバイス、映像識別デバイス、アナログ映像入力端子、デジタル映像入力端子のいずれかであることを特徴とする請求項１９に記載の再生同期ずれ補正機能を備えた受信機。20. The receiver according to claim 19, wherein the video input unit is one of a camera, a light receiving device, a video identification device, an analog video input terminal, and a digital video input terminal. . 請求項１〜１３のいずれかに記載された送信機、及び請求項１４〜２１のいずれかに記載された受信機を有することを特徴とする伝送装置。A transmission device comprising a transmitter according to any one of claims 1 to 13 and a receiver according to any one of claims 14 to 21. 請求項１１又は１２に記載された送信機と、請求項１６〜２１のいずれかに記載された受信機とを有し、前記受信機の有する通知手段から出力された差分時間情報は、前記送信機の備える制御信号検出手段に入力した後、送信機の遅延手段へ転送され、当該遅延手段は前記差分時間情報をもとに音声又は映像の伝送を遅らせることを特徴とする伝送装置。It has the transmitter described in claim 11 or 12, and the receiver described in any one of claims 16 to 21, and the differential time information output from the notifying means of the receiver is the transmission time difference information. A transmission device, wherein the signal is input to a control signal detection means included in the transmission device, and then transferred to a delay unit of the transmitter, wherein the delay unit delays transmission of audio or video based on the difference time information.
JP2003074927A 2003-03-19 2003-03-19 Transmitter having correction function of regeneration desynchronization, receiver having the same, and transmission equipment having the transmitter and the receiver Pending JP2004282667A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003074927A JP2004282667A (en) 2003-03-19 2003-03-19 Transmitter having correction function of regeneration desynchronization, receiver having the same, and transmission equipment having the transmitter and the receiver

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003074927A JP2004282667A (en) 2003-03-19 2003-03-19 Transmitter having correction function of regeneration desynchronization, receiver having the same, and transmission equipment having the transmitter and the receiver

Publications (1)

Publication Number Publication Date
JP2004282667A true JP2004282667A (en) 2004-10-07

Family

ID=33290373

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003074927A Pending JP2004282667A (en) 2003-03-19 2003-03-19 Transmitter having correction function of regeneration desynchronization, receiver having the same, and transmission equipment having the transmitter and the receiver

Country Status (1)

Country Link
JP (1) JP2004282667A (en)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006186544A (en) * 2004-12-27 2006-07-13 Toshiba Corp Apparatus and method of repeating signal
JP2007096708A (en) * 2005-09-28 2007-04-12 Victor Co Of Japan Ltd Video reproducing device and audio reproducing device
JP2008521302A (en) * 2004-11-16 2008-06-19 トムソン ライセンシング Data reproduction apparatus, digital service source apparatus, and method for synchronizing two parts of digital service
JP2009540425A (en) * 2006-06-05 2009-11-19 サムスン エレクトロニクス カンパニー リミテッド Method for transmitting / reproducing multimedia data on a wireless network, and wireless device using the method
US7746904B2 (en) 2005-11-11 2010-06-29 Sharp Kabushiki Kaisha Audio/video processing unit and control method thereof
JP2010154249A (en) * 2008-12-25 2010-07-08 Toshiba Corp Video and sound playback system and distribution apparatus
JP2010219783A (en) * 2009-03-16 2010-09-30 Toshiba Corp Communication terminal, communication method, and computer program
US8077745B2 (en) 2007-03-23 2011-12-13 Qualcomm Incorporated Techniques for unidirectional disabling of audio-video synchronization
US8107538B2 (en) 2005-08-19 2012-01-31 Nec Viewtechnology, Ltd. Moving image distribution system and moving image distribution server
JP4912296B2 (en) * 2005-04-28 2012-04-11 パナソニック株式会社 Lip sync correction system, lip sync correction device, and lip sync correction method
JP2013115782A (en) * 2011-11-30 2013-06-10 Toshiba Corp Electronic apparatus and audio output method
JP2013192247A (en) * 2008-05-23 2013-09-26 Yamaha Corp Av system
US8811375B2 (en) 2007-11-22 2014-08-19 Samsung Electronics Co., Ltd. Multimedia apparatus and synchronization method thereof
JP2015534315A (en) * 2012-08-28 2015-11-26 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． Audio transfer device and corresponding method
JP2017528009A (en) * 2015-06-17 2017-09-21 シャオミ・インコーポレイテッド Method and apparatus for playing multimedia files
US9819839B2 (en) 2012-10-30 2017-11-14 Mitsubishi Electric Corporation Audio/video reproduction system, video display device, and audio output device for synchronizing decoding of video frames by the video display device to decoding of audio frames by the audio output device
WO2017221433A1 (en) * 2016-06-24 2017-12-28 ヤマハ株式会社 Synchronization setting device, delivery system, synchronization setting method, and program
JP2022511406A (en) * 2018-10-24 2022-01-31 フラウンホファー ゲセルシャフト ツール フェールデルンク ダー アンゲヴァンテン フォルシュンク エー．ファオ． Source devices, sink devices, methods, and computer programs

Cited By (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012090271A (en) * 2004-11-16 2012-05-10 Thomson Licensing Data reproduction device, digital service source device, and method of synchronizing two parts of digital service
US9826126B2 (en) 2004-11-16 2017-11-21 Thomson Licensing Device and method for synchronizing different parts of a digital service
JP2008521302A (en) * 2004-11-16 2008-06-19 トムソン ライセンシング Data reproduction apparatus, digital service source apparatus, and method for synchronizing two parts of digital service
US9509887B2 (en) 2004-11-16 2016-11-29 Thomson Licensing Device and method for synchronizing different parts of a digital service
JP2015015745A (en) * 2004-11-16 2015-01-22 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ Data reproduction device, digital service source device, and method of synchronizing two parts of digital service
US8903217B2 (en) 2004-11-16 2014-12-02 Thomson Licensing Device and method for synchronizing different parts of a digital service
US8606070B2 (en) 2004-11-16 2013-12-10 Thomson Licensing Device and method for synchronizing different parts of a digital service
JP4660184B2 (en) * 2004-12-27 2011-03-30 株式会社東芝 Signal relay apparatus and signal relay method
JP2006186544A (en) * 2004-12-27 2006-07-13 Toshiba Corp Apparatus and method of repeating signal
JP4912296B2 (en) * 2005-04-28 2012-04-11 パナソニック株式会社 Lip sync correction system, lip sync correction device, and lip sync correction method
US9049474B2 (en) 2005-08-19 2015-06-02 Nec Display Solutions, Ltd. Moving image distribution system and moving image distribution server
US8107538B2 (en) 2005-08-19 2012-01-31 Nec Viewtechnology, Ltd. Moving image distribution system and moving image distribution server
JP4556185B2 (en) * 2005-09-28 2010-10-06 日本ビクター株式会社 Video playback device and audio playback device
JP2007096708A (en) * 2005-09-28 2007-04-12 Victor Co Of Japan Ltd Video reproducing device and audio reproducing device
US7746904B2 (en) 2005-11-11 2010-06-29 Sharp Kabushiki Kaisha Audio/video processing unit and control method thereof
JP2009540425A (en) * 2006-06-05 2009-11-19 サムスン エレクトロニクス カンパニー リミテッド Method for transmitting / reproducing multimedia data on a wireless network, and wireless device using the method
US8077745B2 (en) 2007-03-23 2011-12-13 Qualcomm Incorporated Techniques for unidirectional disabling of audio-video synchronization
US8811375B2 (en) 2007-11-22 2014-08-19 Samsung Electronics Co., Ltd. Multimedia apparatus and synchronization method thereof
KR101450100B1 (en) * 2007-11-22 2014-10-15 삼성전자주식회사 Multimedia apparatus and synchronization method thereof
JP2013192247A (en) * 2008-05-23 2013-09-26 Yamaha Corp Av system
JP2010154249A (en) * 2008-12-25 2010-07-08 Toshiba Corp Video and sound playback system and distribution apparatus
JP2010219783A (en) * 2009-03-16 2010-09-30 Toshiba Corp Communication terminal, communication method, and computer program
US8909828B2 (en) 2011-11-30 2014-12-09 Kabushiki Kaisha Toshiba Electronic device and audio output method
US8751705B2 (en) 2011-11-30 2014-06-10 Kabushiki Kaisha Toshiba Electronic device and audio output method
JP2013115782A (en) * 2011-11-30 2013-06-10 Toshiba Corp Electronic apparatus and audio output method
JP2015534315A (en) * 2012-08-28 2015-11-26 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． Audio transfer device and corresponding method
US9819839B2 (en) 2012-10-30 2017-11-14 Mitsubishi Electric Corporation Audio/video reproduction system, video display device, and audio output device for synchronizing decoding of video frames by the video display device to decoding of audio frames by the audio output device
JP2017528009A (en) * 2015-06-17 2017-09-21 シャオミ・インコーポレイテッド Method and apparatus for playing multimedia files
US9961393B2 (en) 2015-06-17 2018-05-01 Xiaomi Inc. Method and device for playing multimedia file
WO2017221433A1 (en) * 2016-06-24 2017-12-28 ヤマハ株式会社 Synchronization setting device, delivery system, synchronization setting method, and program
JPWO2017221433A1 (en) * 2016-06-24 2019-01-31 ヤマハ株式会社 Synchronization setting device, distribution system, synchronization setting method, and program
US10917465B2 (en) 2016-06-24 2021-02-09 Yamaha Corporation Synchronization setting device and distribution system
JP2022511406A (en) * 2018-10-24 2022-01-31 フラウンホファー ゲセルシャフト ツール フェールデルンク ダー アンゲヴァンテン フォルシュンク エー．ファオ． Source devices, sink devices, methods, and computer programs
JP7278373B2 (en) 2018-10-24 2023-05-19 フラウンホファー ゲセルシャフト ツール フェールデルンク ダー アンゲヴァンテン フォルシュンク エー．ファオ． Source device, sink device, method and computer program
US11962833B2 (en) 2018-10-24 2024-04-16 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Source devices, sink devices, methods and computer programs

Similar Documents

Publication Publication Date Title
JP2004282667A (en) Transmitter having correction function of regeneration desynchronization, receiver having the same, and transmission equipment having the transmitter and the receiver
JP4001091B2 (en) Performance system and music video playback device
JP2019091973A (en) Imaging apparatus
JP2015130662A (en) Av apparatus and its control method
KR101888464B1 (en) Multi-vision system with multiple synchronization
JP4256710B2 (en) AV transmission method, AV transmission device, AV transmission device, and AV reception device
TW201206181A (en) Camera system, signal delay amount adjusting method and program
JP2008061010A (en) Video and audio transmitter
JP6606526B2 (en) Synchronization control device and synchronization control method
JP2006250638A (en) Video camera provided with clock synchronization function
JP6956354B2 (en) Video signal output device, control method, and program
JP2003163897A (en) Contents transmission method, contents transmitter, contents transmission program, contents reception control method, contents reception controller, contents reception control program, and contents time control system
JP2008131591A (en) Lip-sync control device and lip-sync control method
JPH06343165A (en) Transmitter
JP2019211638A (en) Processing device, output device, synchronization control system, and these control methods, as well as programs
JP3958531B2 (en) Synchronous control device
JP4953707B2 (en) Digital broadcast receiver
JP3544538B2 (en) Recording system, video photographing apparatus and video recording method
JP4669366B2 (en) Intercom device
JP2010183237A (en) System and method of content synchronous reproduction, reproduction terminal, method of controlling the same, and control program
JP5367771B2 (en) Video transmission system
JP2005223821A (en) Multistream reproduction system
JP4274988B2 (en) Data transmission device
JP2021078028A (en) Media data recording device, information processing method, and program
JP2007329709A (en) Audio reproducing device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060222

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080613

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080924

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20090203