JP6449318B2 - Hdmiインタフェースを介して補助データフレームを同期送信するためのトランスミッタ、レシーバ、及び、システム - Google Patents

Hdmiインタフェースを介して補助データフレームを同期送信するためのトランスミッタ、レシーバ、及び、システム Download PDF

Info

Publication number
JP6449318B2
JP6449318B2 JP2016555283A JP2016555283A JP6449318B2 JP 6449318 B2 JP6449318 B2 JP 6449318B2 JP 2016555283 A JP2016555283 A JP 2016555283A JP 2016555283 A JP2016555283 A JP 2016555283A JP 6449318 B2 JP6449318 B2 JP 6449318B2
Authority
JP
Japan
Prior art keywords
video
video frame
auxiliary data
data
line
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016555283A
Other languages
English (en)
Other versions
JP2017516329A5 (ja
JP2017516329A (ja
Inventor
レーンデルト テウニス ローゼンダール
レーンデルト テウニス ローゼンダール
ニコール バーレイ シェパード
ニコール バーレイ シェパード
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=52633289&utm_source=***_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP6449318(B2) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of JP2017516329A publication Critical patent/JP2017516329A/ja
Publication of JP2017516329A5 publication Critical patent/JP2017516329A5/ja
Application granted granted Critical
Publication of JP6449318B2 publication Critical patent/JP6449318B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43632Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • H04N21/43635HDMI
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/006Details of the interface to the display terminal
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2353Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614Multiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/04Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/12Use of DVI or HDMI protocol in interfaces along the display data pipeline
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/18Timing circuits for raster scan displays

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Library & Information Science (AREA)
  • Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、データストリームを送信するために設けられるトランスミッタ、データストリームを受信するためのレシーバ、並びに、斯様なトランスミッタ及びレシーバを有するシステムに関するものであり、データストリームは、ビデオ画素ストリームと補助データチャネルとを有し、ビデオ画素ストリームは、ビデオフレームフォーマットに従うビデオフレームを有し、ビデオフレームは、アクティブビデオラインを有し、ビデオラインは、ビデオ画素を有し、トランスミッタは、補助データチャネルを介してビデオ画素ストリームに関連した補助データを送信するように構成される。
斯様なトランスミッタは、(例えば、オーディオのための、及び、シグナリング(InfoFrames)のための)TMDSストリームにおいて多重化されるか、又は、(CECを用いるような)別々のワイヤ上で、ビデオ画素ストリームに加えて補助データチャネルにおいて補助データを伝送するための幾つかの方法を与えるHDMI(High-Definition Multimedia Interface)規格から知られている。HDMIは、EIA/CEA−861規格を実装する。これは、ビデオ形式及び波形、圧縮、非圧縮、及びLPCMオーディオ、補助データの伝送、及び、VESA EDID[2][3]の実装を規定する。HDMIにより伝送されるCEA−861信号は、DVI(digital visual interface)により使用されるCEA−861信号と電気的に適合する。
HDMI規格は、補助チャネルの全てがビデオに対して非同期であるという欠点を有する。実用的な実装において、HDMI受信回路は、ビデオへの異なる接続バスを用いてこれらのターゲットサブシステムに接続される。それ故、これらは、ビデオと同期している態様で補助データを供給するために用いられ得ない。
しかしながら、補助データがビデオストリームとフレームアキュレート(frame-accurate)であることを要する、及び、とりわけHDMIトランスミッタ及びレシーバコンポーネントの現在のアーキテクチャを用いて、HDMI2.0において及び先に述べられた既存の非同期メカニズムにより遅れずに伝送され得ない、幾つかのアプリケーションが存在する。斯様なアプリケーションの例は、いわゆる3Dビデオのためのフレームアキュレートな視差及び遮蔽情報、又は、追加の高ダイナミックレンジ若しくは色域(colour gamut)情報である。これらのアプリケーションは、ビデオフレームの範囲に含まれるビデオより大幅に小さいデータ量を要するが、これは、そのフレームのためのビデオデータと同時に供給及び処理されなければならない。
バージョン1.3以降のHDMIは、画素毎の色毎に最大16ビット(bcp;bits per colour per pixel)の色深度を可能にする。標準のビデオコンテンツは、通常8bcpを用いる。いわゆる"Deep Colour"アプリケーションは、10,12又は16bcpを用いる。それ故、ビデオデータ(EP2235956参照)よりもむしろ一部の追加のデータを伝送するために、拡張された色深度を対象とするビットの一部を用いることが可能である。これは、上述のアプリケーションにより必要とされるよりも非常に高いデータレートで画素アキュレート(pixel-accurate)な情報を伝送することが可能であり、従って、これは、デバイスにおける、及び、HDMIケーブル上の、リソースを浪費するだろう。更に、現在の実用的な実装は、必要とされる高い色深度を扱うことができない。
EP1231795A2は、デジタルビデオリンクの1又はそれ以上のチャネルを介して、低帯域幅、非タイミング情報を含むデータを送信するために、規格のVESA及びCEA−EIAブランキング期間と比較して、短縮されたブランキング期間を用いることを開示している。ブランキング期間を短くすることにより、各スキャン線においてデータを送信するために利用可能な時間は増大され、システムが各チャネルを介してより多くのデータを送信するのを可能にする。垂直同期の間に送信されるスキャン線の非アクティブなビデオ部分は、追加のデジタルデータを送信するために用いられてもよい。ブランキング期間を短くすること、及び/又は、水平スキャン線の非アクティブなビデオセクションを用いることは、リンクの容量を全体的なデータに追加し、マルチチャネルオーディオ、ビデオ、制御、タイミング、字幕使用又は他のデジタルデータのような、他のデジタルデータを送信するために用いられ得る。
US2010/157169A1は、テレビ受信機の遠隔制御送信部を用いることによりテレビ受信機に接続されたCEC非準拠デバイスを制御することを可能にする。[解決手段]物理アドレス[2000]がフォトプレーヤ370Bが物理アドレス〔2000〕の場所において制御するデバイス(レコーディングデバイス)であるという事実は、フォトプレーヤ370Bにおいてユーザによりセットされる。この設定に従って、フォトプレーヤ370Bは、CEC制御されたレコーディングデバイスとして論理アドレス{1}を決定する。ユーザが遠隔制御送信部277を用いることによりCEC非準拠デバイスであるディスクレコーダ21OBを動作させるとき、テレビ受信機250Bは、ディスクレコーダ210BにアドレスされるCEC制御コマンドを生成する。フォトプレーヤ370Bは、CEC制御コマンドを検出し、CEC制御コマンドを赤外線の遠隔制御コマンドに変換し、赤外線送信ユニット384からディスクレコーダ210Bに赤外線の遠隔制御コマンドを送信する。
JP2011146929Aにおいて、各システムのビデオの1つのフレームは、より大きなスクリーンサイズを有するビデオフレームである多重化されたビデオフレームに挿入され、及び、多重化されたビデオフレームのデータとして送信される。各システムのオーディオデータは、各サンプルにより分割され、多重化されたビデオフレームの1つのフレーム期間に対応する時間の範囲内で入力され、多重化されたビデオフレームに挿入される。それぞれの多重化回路において、各システムのデータにおける多重化されたビデオフレームにおける配置位置に関する情報及び各システムのデータのフォーマットに関する情報は、多重化されたビデオフレームに挿入される。本方法は、複数のシステムのオーディオデータを処理するためのビデオ音響装置に適用される。
本発明の目的は、HDMIトランスミッタ及びレシーバコンポーネントの現在のアーキテクチャを使用して既存のものを用いてビデオデータと同期して補助情報を送信することにある。
この目的を達成するために、トランスミッタは、ビデオフレームフォーマットに従うビデオフレームのために必要とされるアクティブなビデオラインを超えてビデオフレームにおける追加のビデオラインを挿入するための挿入部を有し、ビデオフレームに関する補助データは、ビデオフレームの追加のビデオラインにおいて挿入され、補助データは、補助データが関連するビデオフレームの前のビデオフレームの追加のビデオラインに、又は、これにおいて関連する。
ビデオフレームフォーマットにおいて規定されるビデオラインの数を超えてビデオラインを追加することにより、補助データが格納される余裕が作り出される。補助データは、ビデオフレーム自体において格納されるので、関連するビデオフレームとの同期の態様で伝送される。それ故、補助データの同期伝送を実現する。追加のビデオラインがビデオフレームフォーマットにより通常のビデオフレームのために規定されるビデオラインの数に追加されるので、既存のレシーバにより安全に無視され得る、及び、無視されるだろう。従って、補助データは、前記既存のレシーバとの後方互換性の問題をもたらすことなく既存のレシーバに送信され得る。ビデオフレーム自体において又は補助データが関連するビデオフレームの前のビデオフレームにおいて補助データを含めることにより、補助データが関連するビデオフレームが処理されるときに補助データが利用可能になることが保証される。
HDMIは、フレームを用いた種々のビデオ形式におけるビデオのためのトランスポートチャネルとして用いられる。例えばHDビデオフレームフォーマットにおける斯様なフレームは、30又は60Hzのようなフレーム速度で繰り返される1080アクティブライン毎に1920画素を有する。これらのフォーマットの完全な説明は、DTD(Detailed Timing Descriptor)において、又は、予め規定されたSVD(Short Video Descriptor)を用いることにより与えられる。これらの双方は、CEA−861において規定される。また、HDMI1.4は、幾つかの追加の予め規定されたフォーマットを規定する。アクティブなビデオライン(例えば、本例においては1080)に加えて、AVL(Additional Video Line)によりビデオフレームを拡張することにより、HDMIインタフェースは、前記のアプリケーションにより必要とされる補助データを伝送することができる。この方法の利点は、これらのAVLにおいて伝送されるデータがビデオストリームの部分として同じ内部コンポーネント及びバスによりビデオ処理回路へ、あるいは、前記ビデオ処理回路から、伝送されるということである。従って、補助データは、関連付けられたビデオフレームにおけるデータと同時に処理され得る。(例えばメモリバッファにおいて)ビデオデータを供給又は使用するデバイスは、同じメモリバッファにおいて補助データを供給又は使用してもよい。
一実施形態において、トランスミッタは、ビデオフレームフォーマットに従うビデオフレームのために必要とされるアクティブなビデオラインを超える少なくとも1つの追加のビデオラインを規定するビデオフレームフォーマット記述子を挿入するように構成される挿入部を有する。記述子を用いてより多くのビデオラインを規定することにより、トランスミッタは、レシーバに対して、ビデオフレームが追加のビデオラインを含むこと、それ故、これらの追加のビデオラインにおいて補助情報を含むことを示すことができる。前記記述子を扱うことができないレシーバは、ビデオ情報を取り出すために標準の数のビデオラインを用い、追加のビデオライン及び記述子を無視するだろう。
特定のビデオ形式(又は、例えば予め規定されたSVD)のためのDTDは、HDの例における1080のような、ビデオフレーム毎のアクティブなラインの実際の数を特定する代わりに、より大きな数のラインを特定する。DTD(又はSVD)は、例えば、1082(即ち、1080のビデオラインの標準数を超える2つのビデオライン)としてラインの数を規定することができる。既存のレシーバは、標準数のビデオラインを超えるビデオラインを無視するだろう。これらは、例えばHDにおける標準の1080のアクティブなビデオラインを抽出するように構成されているためである。本発明を用いて、ビデオ形式及びフレーム速度により変化する、補助データのための原データ速度が実現され得る。一例として、(8bcpにおける)1920x1080p60フォーマットは、5.5296Mb/sの原データレートを実現することができ、フレームにおいて2つのAVLが存在すると想定した場合、従って、どれくらい多くの追加のビデオラインが記述子により規定されるかに依存して、補助データのために利用可能な帯域幅は、ニーズに調整され得る。代替実施形態において、DTD(又はSVD)は変えられないだろう。しかしながら、トランスミッタとレシーバとの間の他のシグナリング(例えば、E−EDID,InfoFrame、CEC及び/又は他の方法のうち1又はそれ以上)は、補助フレーム同期データが送信されること、及び、このデータがどこに配置されているかを示すために用いられるだろう。
トランスミッタの一実施形態において、補助データは、ビデオフレームのサブセクションのみに関連する。
本発明によるレシーバは、ビデオフレームにおける追加のビデオラインから補助データを抽出するための抽出部を有する。ビデオフレームに関する補助データは、ビデオフレームの追加のビデオラインから抽出され、補助データは、補助データが関連するビデオフレームの前のビデオフレームの追加のビデオラインに、あるいは、この追加のビデオラインから、関連付けられる。
ビデオフレームフォーマットにおいて規定されるビデオラインの数を超えるビデオラインを追加することにより、補助データが格納される余裕が作り出される。補助データは、ビデオフレーム自体に格納されるので、関連するビデオフレームとの同期の態様において伝送される。追加のビデオラインは、ビデオフレームフォーマットにより通常のビデオフレームのために規定される数のビデオラインに追加されるので、既存のレシーバにより安全に無視され得る、及び、無視されるだろう。ビデオフレーム自体において又は補助データが関連するビデオフレームの前のビデオフレームにおいて補助データを含めることにより、補助データが関連するビデオフレームが処理されるときに補助データが利用可能であることが保証される。レシーバは、これらにおける補助データを伴う追加のビデオラインが存在することを確立することができ、ビデオフレームから追加のビデオラインを識別及び抽出することができ、追加のビデオラインから補助情報を抽出することができ、ビデオフレーム又は後のビデオフレームを処理するために補助情報を用いることができる。
一実施形態において、レシーバは、ビデオフレームフォーマットに従うビデオフレームのために必要とされるアクティブなビデオラインを超える少なくとも1つの追加のビデオラインを規定するビデオフレームフォーマット記述子を抽出するように構成される記述子抽出部を有する。
これは、レシーバが追加のビデオラインを容易に識別するのを可能にする。
本発明による送信システムは、本発明によるトランスミッタと本発明によるレシーバとを有する。システムにおいて本発明によるトランスミッタ及びレシーバを有することは、補助データがシステム全体で用いられるのを可能にする。既存のレシーバがシステムの部分であってもよい。補助データを送信するための追加のビデオラインの使用は、補助データが既存のレシーバにより安全に無視されることを保証するためである。
前記の説明がHDMI規格及びHDMIチャネルに言及しているが、本発明がHDMIと同じ問題からの他の伝送チャネルによって同様に用いられ得ることは当業者にとって明らかである。
本発明によるトランスミッタを示す。 本発明によるレシーバを示す。 補助データを保持する追加のビデオラインを有するビデオフレームを示す。
図1は、本発明のトランスミッタを示している。トランスミッタ1は、トランスミッタの入力部2から送信されるビデオフレームを受信するビデオプロセッサ5を有する。ビデオフレームは、追加のビデオラインAVL(Additional Video Line)をビデオフレームに挿入するように構成される挿入部6に伝えられる。挿入部6は、補助データ入力3からAVLに挿入される補助データを受信する。追加のビデオラインにおいて補助データを挿入することにより、アクティブなビデオライン及び追加のビデオラインの双方を有する拡張されたビデオフレームをビデオ出力部8を介してHDMIチャネル7におけるビデオチャネル10に送信することにより、補助データは、補助データが関連するビデオフレームと一緒にシステムを介して進行することが保証される。これは、補助データがHDMIインタフェースの現在のアーキテクチャを使用した既存のものを用いてビデオデータと同期して送信されることを保証する。ビデオデータと同期して送信される必要がない補助データは、非同期補助データ入力部4上で受信され、HDMIチャネルの非同期チャネル11を介して送信される非同期補助データ出力部9を介して受信される。2つの補助データ入力部3,4の組み合わせも可能であり、単一の入力をもたらす。この場合、トランスミッタは、追加のビデオラインAVLにおけるビデオフレームの部分として送信される補助データにおける補助データ及びHDMIチャネル7の非同期チャネル11を介して送信される非同期補助データを分割する(図示省略)。
図2は、本発明によるレシーバを示している。レシーバ12は、HDMIチャネル7のビデオチャネル10からビデオフレームを順次受信するトランスミッタの入力部16からビデオフレームを受信するバッファ15を有する。ビデオフレームは、入力部16から、受信したビデオフレームから追加のビデオラインAVLを抽出するように構成される抽出部20に伝えられる。抽出部20は、追加のビデオラインAVLから補助データを抽出し、補助データを第1の補助データ出力部18に供給する。また、追加のビデオラインから抽出される補助データが関連付けられたビデオフレームを処理するために必要とされる場合、抽出部20は、抽出された補助データを、レシーバ12におけるビデオプロセッサ14に伝える。それ故、補助データは、関連付けられたビデオフレームと同時にビデオバッファ内に存在し、それ故、補助データが使用のために遅れて到達するという危険を冒す、HDMIチャネル7の非同期チャネル11を介して補助データを受信しなければならない代わりに、システムにより適時に、用いられ得る。これは、補助データがHDMIインタフェースの現在のアーキテクチャを使用した既存のものを用いてビデオデータと同期して送信されることを保証する。示された実施形態において、抽出部20及びビデオプロセッサ14は、バッファメモリ15上で別々に作用する一方で、ビデオデータと補助データとの間の関係を維持する。代わりに、抽出部は、ビデオフレーム全体、即ち、アクティブなビデオライン及び追加のビデオラインをビデオバッファ15から取り出すことができ、追加のビデオラインを抽出することができ、追加のビデオラインから補助データを抽出することができ、アクティブなビデオライン及び抽出された補助データの双方をビデオプロセッサ14に供給することができる。
ビデオプロセッサ14は、いずれの場合においても、レシーバ出力部13上に示されるレシーバ出力データを生成するためにアクティブなビデオライン及び補助データを用いる。
直ちに必要とされない補助データは、HDMIチャネル7の非同期チャネル11を介して送信される。この補助データは、ビデオプロセッサ14にとって重要でない場合、別々の補助データ出力部19に直接送信され得るか、又は、同様にビデオプロセッサに供給され得る。
受信HDMIデバイスにおけるビデオ処理回路は、例えばHDMIチャネル7の非同期チャネル11を介して非同期InfoFrameシグナリングシステムを用いて、ビデオフレームがAVLを含むことに気付いてもよい。そして、ビデオ処理回路は、各ビデオフレームのための追加のビデオラインAVLに含まれるデータを抽出することができ、そのビデオフレームのためのビデオデータによりそのデータを処理することができる。
図3は、補助データを保持する追加のビデオラインAVLを有するビデオフレームを示している。
HDビデオデータを送受信する既存のHDMIトランスミッタ及び/又はレシーバ実装は、各々1920のビデオ画素を保持する1080のアクティブなビデオラインを有するビデオフレームを用いる。図3において、ビデオフレーム30は、1080のアクティブなビデオライン31,32,33を保持するように示される。ここで、第1のライン31及び最後の2つのライン、1079番目のビデオライン32及び1080番目のビデオライン33が示される。この例では、2つの追加のビデオライン34,35が示される。それ故、このビデオフレームのための記述子は、1082のラインを示す。同期して送信される補助データの帯域幅要求に依存して追加のビデオラインの他の数ももちろん可能である。図1のトランスミッタ1は、ビデオデータにより1080のライン31,32,33を満たし、補助データ37により2つの追加のビデオライン34,35を満たす。また、ヘッダ36が第1の追加のビデオライン34において与えられる。HDMIトランスミッタは、1082のラインを生成し、これらを単一のビデオフレームとしてHDMIチャネル7を介して送信するだろう。同様に、受信側において、図2のレシーバ12は、1082のビデオラインを受信し、これらをビデオバッファに供給するだろう。受信ビデオプロセッサは、バッファからビデオデータの1080のラインを読み取り、抽出部は、ビデオバッファの2つの追加のビデオラインから補助データを抽出するだろう。
AVLデータは、HDIチャネルの3つのTMDSチャネルの1又はそれ以上において伝送される。複数のチャネルが用いられる場合、AVLヘッダは、使用されるTMDSチャネルの1又はそれ以上の中にあってもよい。TMDSチャネルのうちどちらが用いられるかは、シグナリングデータの部分であってもよく、又は、トランスミッタにより選択され、レシーバにより何らかの方法で自動的に推測されてもよい。
ヘッダは、ペイロードタイプ識別子、どれくらいのラインがこのフレームにおいて用いられるか、このフレームのためのデータ長、及び、データコンテナに関連する他の情報のような情報を含む。また、ヘッダは、これらの追加のビデオラインに含まれるデータがビデオストリームにおけるビデオフレームと同期しているかどうか、又は、データが非同期かどうかに関する識別を含んでもよい。実際のペイロードデータは、追加のビデオラインにおいてそれ故生成されるフレーム同期データチャネルのユーザにより規定され、更なるペイロード識別子、チェックサム及び他の類似のデータを含んでもよい。
AVLデータの複数のセットが用いられる場合において、AVLヘッダは、追加のビデオライン内の種々のペイロードの位置を示すだろう。代替実施形態は、AVLヘッダが次のAVLヘッダを見つける基準(場所/方法)と一緒に1つのペイロードの特性及びその長さを示すということである。次のAVLヘッダは、他のペイロードの特性及びその長さ、及び、更に他のAVLヘッダを見つける基準(場所/方法)を含む。
この特許はこれらのAVLがアクティブなビデオフレームの最後に追加されることを示しているが、他の実施形態において、フレームの最初に、又は、双方の位置において、又は、垂直及び/又は水平ブランキングエリアの1又は複数の他のエリアにおいて、これらを置くことも考えられる。
AVLに加えて、ビデオストリームがAVLを用いるという指標が存在してもよい。前に述べられたように、この指標は、ビデオストリームによって送信されるInfoFramesのうちの1つにおいて伝送され得る。しかしながら、本発明により生成されるフレーム同期データチャネルを実装しないデバイスに関する問題を回避するために、レシーバは、フレーム同期データチャネルを扱うことができることを示す必要がある。これは、CEA−861及びVESAにより規定されるレシーバのEEDID(Enhanced Extended Display Identification Data)における斯様な指標を含むことにより達成され得る。フレーム同期データチャネルは、ほぼ同期性のアプリケーションのために用いられてもよく、斯様なデータは、必要なときに予め送信される。即ち、補助データは、補助データが関連するビデオフレームの前のビデオフレームに含まれる。これは、ビデオ処理が多大な時間(例えば幾つかのフレーム)を要する場合に有利である。これは、関連したビデオフレームの処理が始まる前に補助データがビデオプロセッサに対して利用可能であることを保証する。代わりに、データは、将来適用されるべきである指標とともに先に述べた通りに送信される。例えば、この指標は、データが現在のフレームの後の多数のビデオフレームにおいて用いられるべきことを示すことができるか、又は、現在の又は次のビデオフレームに適用されるべきことを示すことができる。
全てのアプリケーションが、データが各ビデオフレームのために送信されることを必要とするというわけではない。例えば、データは、例えば映画における単一のシーンに対応し得るビデオフレームのセットに適用されてもよい。この状態では、データは、このデータが示された時間(即ち、現在フレーム又は将来のフレーム)から更なる指標まで継続的に適用されるべきという更なる指標とともに、現在のビデオフレームにおいて又は予め送信されてもよい。この手法において、データは、次の補助データが送信されて効力を生じるまで、ビデオ処理に適用されるだろう。補助データが最初に効果を生じる時から指定された数のビデオフレームのために適用するという指標が与えられ得る。
データがデータの各セットの識別子とともに予め送信されることも可能であり、データの斯様なセットの多数が送信及び識別され得る。また、いつデータが効力を生じるべきかという指標は、予めロードされた及び識別されたデータのどのセットが後にその時間から適用されなければならないかを含む。
また、データの異なるセットが指定された時間で適用されるべき場合に、スクリーンの領域は、(例えば、画素位置及びライン番号を用いて)規定され得る。例えば、データの1つのセットは、スクリーン全体にビデオを適用することができるが、例えばメニュー又は他のオンスクリーンディスプレイを含み得る特定の領域は、データの異なるセットを用いることができる。HDMIにおいて、ビデオデータは、いくらかのデータ保護メカニズム(8〜10及び10〜8の変換)を有し、これは、AVLにおいて伝送されるデータの充分な保護ではないかもしれない。伝送の間に例えばビットエラーに対する良好な保護を与えるために、追加の手段が利用されてもよく、例えば、送信されたデータにチェックサムを追加する、及び/又は、追加のエラー検出及び補正機能を供給する。1つの特定の例は、8のデータビットの24ビット(3バイト)へのマッピングを用いることであるだろう。これは、特定のビデオ画素のために伝送される。レシーバにおいて、24のビットは、8のデータビットにマッピングされる。また、斯様なマッピングは、特定の意味を有する画素値を回避する(又は、"制限された範囲"を用いるときに0及び255のように、禁止される)ことに対処する。他の実施形態は、より複雑なエラー検出/補正方法を用いることができる。
本発明は、全てのHDMIバージョン、とりわけ、新たな製品(HDMI1.4b及びHDMI2.0)を開発するために現在利用可能なバージョンに適用され得るが、本発明は、(以前のHDMIバージョンを用いるときでさえ)ソフトウェアアップデートを用いた既存のHDMI製品に適用されることが想像され得る。

Claims (5)

  1. データストリームを送信するために設けられたトランスミッタであって、
    前記データストリームは、ビデオ画素ストリーム及び補助データチャネルを有し、
    前記ビデオ画素ストリームは、ビデオフレームフォーマットに従うビデオフレームを有し、
    前記ビデオフレームは、アクティブなビデオラインを有し、
    前記ビデオラインは、ビデオ画素を有し、当該トランスミッタは、前記ビデオ画素ストリームに関連した補助データを前記補助データチャネルを介して前記ビデオ画素ストリームと同期させて送信するように構成され、
    当該トランスミッタは、前記ビデオフレームフォーマットに従うビデオフレームのために必要とされるアクティブなビデオラインを超えて、前記ビデオフレームにおいて追加のビデオラインを挿入するための挿入部を有し、
    前記ビデオフレームに関する補助データは、前記ビデオフレームの前記追加のビデオラインにおいて挿入され、
    前記補助データは、前記補助データが関連するビデオフレームの前のビデオフレームの追加のビデオラインに関連付けられる、又は、前記補助データが関連するビデオフレームの前のビデオフレームの追加のビデオラインにある、トランスミッタ。
  2. 前記ビデオフレームフォーマットに従うビデオフレームのために必要とされるアクティブなビデオラインを超える少なくとも1つの追加のビデオラインを規定するビデオフレームフォーマット記述子を挿入するように構成される挿入部を有する、請求項1に記載のトランスミッタ。
  3. データストリームを受信するために設けられたレシーバであって、
    前記データストリームは、ビデオ画素ストリーム及び補助データチャネルを有し、
    前記ビデオ画素ストリームは、ビデオフレームフォーマットに従うビデオフレームを有し、
    前記ビデオフレームは、アクティブなビデオラインを有し、
    前記ビデオラインは、ビデオ画素を有し、
    当該レシーバは、前記ビデオ画素ストリームと同期送信された前記ビデオ画素ストリームに関する補助データを前記補助データチャネルを介して受信するように構成され、
    当該レシーバは、前記ビデオフレームフォーマットに従うビデオフレームのために必要とされるアクティブなビデオラインを超える、前記ビデオフレームにおける追加のビデオラインから補助データを抽出するための抽出部を有し、
    前記ビデオフレームに関連する補助データは、前記ビデオフレームの前記追加のビデオラインから抽出され、
    前記補助データは、前記補助データが関連するビデオフレームの前のビデオフレームの追加のビデオラインに関連付けられる、又は、前記補助データが関連するビデオフレームの前のビデオフレームの追加のビデオラインからのものである、レシーバ。
  4. 前記ビデオフレームフォーマットに従うビデオフレームのために必要とされるアクティブなビデオラインを超える少なくとも1つの追加のビデオラインを規定するビデオフレームフォーマット記述子を抽出するように構成される記述子抽出部を有する、請求項3に記載のレシーバ。
  5. 補助データチャネルにおける補助データとビデオ画素を有するビデオラインを有するビデオフレームを有するビデオ画素ストリームとを送信するための送信システムであって、
    請求項1又は2に記載のトランスミッタと、請求項3又は4に記載のレシーバとを有する、システム。
JP2016555283A 2014-03-26 2015-03-11 Hdmiインタフェースを介して補助データフレームを同期送信するためのトランスミッタ、レシーバ、及び、システム Active JP6449318B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
EP14161817 2014-03-26
EP14161817.3 2014-03-26
EP14174997.8 2014-06-30
EP14174997 2014-06-30
PCT/EP2015/055014 WO2015144432A1 (en) 2014-03-26 2015-03-11 A transmitter, receiver, system and signal for transmitting auxiliary data frame synchronously across an hdmi interface

Publications (3)

Publication Number Publication Date
JP2017516329A JP2017516329A (ja) 2017-06-15
JP2017516329A5 JP2017516329A5 (ja) 2017-11-30
JP6449318B2 true JP6449318B2 (ja) 2019-01-09

Family

ID=52633289

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016555283A Active JP6449318B2 (ja) 2014-03-26 2015-03-11 Hdmiインタフェースを介して補助データフレームを同期送信するためのトランスミッタ、レシーバ、及び、システム

Country Status (7)

Country Link
US (1) US9877068B2 (ja)
EP (1) EP3123712B1 (ja)
JP (1) JP6449318B2 (ja)
CN (1) CN106464831B (ja)
BR (1) BR112016021816B1 (ja)
RU (1) RU2016141695A (ja)
WO (1) WO2015144432A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022010130A1 (ko) * 2020-07-10 2022-01-13 삼성전자(주) 전자장치 및 그의 제어방법

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10477141B1 (en) * 2018-05-17 2019-11-12 Futurewei Technologies, Inc. Frame synchronous packet switching for high-definition multimedia interface (HDMI) video transitions
CN112616030A (zh) * 2020-11-27 2021-04-06 西安诺瓦星云科技股份有限公司 图像帧数据处理方法、装置及***和显示控制***
CN115918064A (zh) * 2021-01-29 2023-04-04 华为技术有限公司 一种数据传输方法及装置

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3329076B2 (ja) 1994-06-27 2002-09-30 ソニー株式会社 ディジタル信号伝送方法、ディジタル信号伝送装置、ディジタル信号受信方法及びディジタル信号受信装置
US6834083B1 (en) 1999-04-16 2004-12-21 Sony Corporation Data transmitting method and data transmitter
US6690428B1 (en) 1999-09-13 2004-02-10 Nvision, Inc. Method and apparatus for embedding digital audio data in a serial digital video data stream
US8819723B1 (en) * 2000-04-27 2014-08-26 The Directv Group, Inc. System and method for brokering auxiliary data broadcasting services
US6694518B1 (en) 2000-05-30 2004-02-17 Hughes Electronics Corporation Method and apparatus for carrying data across high definition analog component video interfaces
US7057666B2 (en) 2000-10-24 2006-06-06 Harris Corporation System and method for encoding information into a video signal
US7356051B2 (en) * 2001-01-24 2008-04-08 Broadcom Corporation Digital visual interface with audio and auxiliary data cross reference to related applications
US7091980B2 (en) 2003-08-28 2006-08-15 Evans & Sutherland Computer Corporation System and method for communicating digital display data and auxiliary processing data within a computer graphics system
US8724023B2 (en) * 2004-09-09 2014-05-13 Texas Instruments Incorporated System and method for transporting an ancillary data packet in the active area of a video stream
KR100766496B1 (ko) * 2005-07-08 2007-10-15 삼성전자주식회사 에이치디엠아이 전송 시스템
JP5162845B2 (ja) * 2006-05-16 2013-03-13 ソニー株式会社 伝送方法、伝送システム、送信方法、送信装置、受信方法及び受信装置
JP5242111B2 (ja) 2007-10-02 2013-07-24 株式会社ソニー・コンピュータエンタテインメント 送信装置、画像データ送信方法、受信装置および受信装置における画像表示方法
US8443413B2 (en) 2007-12-14 2013-05-14 Texas Instruments Incorporated Low-latency multichannel video port aggregator
KR101964993B1 (ko) 2007-12-18 2019-04-03 코닌클리케 필립스 엔.브이. 디스플레이 인터페이스를 통한 입체 이미지 데이터의 전송
JP5428186B2 (ja) * 2008-04-04 2014-02-26 ソニー株式会社 電子機器
WO2010073299A1 (en) * 2008-12-25 2010-07-01 Thomson Licensing Transmitting apparatus, receiving apparatus, system, and method used therein
US9131215B2 (en) 2009-09-29 2015-09-08 Samsung Electronics Co., Ltd. Method and apparatus for transmitting and receiving uncompressed three-dimensional video data via digital data interface
JP5372687B2 (ja) 2009-09-30 2013-12-18 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
CN101697577A (zh) * 2009-10-27 2010-04-21 中兴通讯股份有限公司 视频发送/接收装置和方法
JP2011146929A (ja) * 2010-01-14 2011-07-28 Sony Corp 情報処理装置、情報処理方法、およびプログラム
IT1397789B1 (it) 2010-01-22 2013-01-24 Sisvel Technology Srl Metodo per il trasporto di dati informativi e/o applicativi all'interno di un flusso video digitale e relativi dispositivi per la generazione e la fruizione di tale flusso video.

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022010130A1 (ko) * 2020-07-10 2022-01-13 삼성전자(주) 전자장치 및 그의 제어방법

Also Published As

Publication number Publication date
US20170019705A1 (en) 2017-01-19
JP2017516329A (ja) 2017-06-15
EP3123712B1 (en) 2018-05-16
US9877068B2 (en) 2018-01-23
EP3123712A1 (en) 2017-02-01
CN106464831B (zh) 2020-08-11
WO2015144432A1 (en) 2015-10-01
BR112016021816A2 (pt) 2017-08-15
BR112016021816B1 (pt) 2024-01-02
RU2016141695A (ru) 2018-04-27
CN106464831A (zh) 2017-02-22

Similar Documents

Publication Publication Date Title
US10897594B2 (en) Frame synchronous packet switching for high-definition multimedia interface (HDMI) video transitions
US9807363B2 (en) Transmitting apparatus, stereo image data transmitting method, receiving apparatus, and stereo image data receiving method
US10412338B2 (en) Method and apparatus for transmitting and receiving data by using HDMI
US20190342517A1 (en) Communication device, communication method, and computer program
EP1990992A2 (en) Communication system, video signal transmission method, transmitter, transmitting method, receiver, and receiving method
WO2014203869A1 (ja) 送信装置、ハイダイナミックレンジ画像データ送信方法、受信装置、ハイダイナミックレンジ画像データ受信方法およびプログラム
US20110141232A1 (en) Image data transmitting apparatus, control method, and program
US10255875B2 (en) Transmission device, transmission method, reception device, reception method, and transmission/reception system
EP2388688B1 (en) Data transmission device, data reception device, data transmission method, and data reception method for transmitting/receiving closed caption packets using HDMI
US9769417B1 (en) Metadata transfer in audio video systems
JP6449318B2 (ja) Hdmiインタフェースを介して補助データフレームを同期送信するためのトランスミッタ、レシーバ、及び、システム
EP2995080B1 (en) Devices and methods for communicating sideband data with non-compressed video
US20170311031A1 (en) Sending device, method of sending high dynamic range image data, receiving device, method of receiving high dynamic range image data, and program
KR101411107B1 (ko) 미디어 싱크 디바이스 및 그 제어방법

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171019

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20171019

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20171019

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180126

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20180205

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180208

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180316

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20180607

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180913

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20180925

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181129

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181205

R150 Certificate of patent or registration of utility model

Ref document number: 6449318

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250