JP2015216524A - 受信装置、および送信装置、並びにデータ処理方法 - Google Patents
受信装置、および送信装置、並びにデータ処理方法 Download PDFInfo
- Publication number
- JP2015216524A JP2015216524A JP2014098664A JP2014098664A JP2015216524A JP 2015216524 A JP2015216524 A JP 2015216524A JP 2014098664 A JP2014098664 A JP 2014098664A JP 2014098664 A JP2014098664 A JP 2014098664A JP 2015216524 A JP2015216524 A JP 2015216524A
- Authority
- JP
- Japan
- Prior art keywords
- ttml
- data
- subtitle
- mode
- time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims description 17
- 230000011664 signaling Effects 0.000 claims abstract description 134
- 238000013500 data storage Methods 0.000 claims abstract description 25
- 238000012545 processing Methods 0.000 claims description 229
- 230000005540 biological transmission Effects 0.000 claims description 96
- 238000004891 communication Methods 0.000 claims description 38
- 230000011218 segmentation Effects 0.000 claims description 20
- 238000000034 method Methods 0.000 abstract description 51
- 230000008569 process Effects 0.000 description 37
- 230000006835 compression Effects 0.000 description 11
- 238000007906 compression Methods 0.000 description 11
- 239000012634 fragment Substances 0.000 description 10
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 8
- 230000010365 information processing Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 230000001360 synchronised effect Effects 0.000 description 4
- 238000002716 delivery method Methods 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 239000000203 mixture Substances 0.000 description 3
- 238000013519 translation Methods 0.000 description 3
- 239000000284 extract Substances 0.000 description 2
- 238000013467 fragmentation Methods 0.000 description 2
- 238000006062 fragmentation reaction Methods 0.000 description 2
- 208000032041 Hearing impaired Diseases 0.000 description 1
- 230000002730 additional effect Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002250 progressing effect Effects 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/488—Data services, e.g. news ticker
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
- H04N21/2353—Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/2362—Generation or processing of Service Information [SI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
- H04N21/43074—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of additional data with content streams on the same device, e.g. of EPG data or interactive icon with a TV program
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4345—Extraction or processing of SI, e.g. extracting service information from an MPEG stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/488—Data services, e.g. news ticker
- H04N21/4884—Data services, e.g. news ticker for displaying subtitles
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/488—Data services, e.g. news ticker
- H04N21/4886—Data services, e.g. news ticker for displaying a ticker, e.g. scrolling banner for news, stock exchange, weather data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/643—Communication protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8543—Content authoring using a description language, e.g. Multimedia and Hypermedia information coding Expert Group [MHEG], eXtensible Markup Language [XML]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8547—Content authoring involving timestamps for synchronizing content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/278—Subtitling
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Library & Information Science (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Studio Circuits (AREA)
Abstract
【解決手段】TTML字幕データをMMTフォーマットにおいて規定されるMMTパケットのペイロードとして格納したTTML字幕データ格納パケットと、TTML字幕データに対応する字幕対応情報をシグナリング・メッセージとして送信装置から受信装置に送信する。シグナリング・メッセージは、字幕表示タイミングの制御モードであるタイムモード(TMD)や、字幕の即時表示やTTML記述に従った表示等を選択的に実行させる動作モード(OPM)を規定しており、受信装置はモード指定に応じた表示制御が可能となる。
【選択図】図24
Description
なお、TTMLについては、例えば特許文献1(特開2012−169885号公報)に記載がある。
TTML(Timed Text Markup Language)字幕データをMMT(MPEG Media Transport)フォーマットにおいて規定されるMMTパケットのペイロードとして格納したTTML字幕データ格納パケットと、
前記TTML字幕データに対応する字幕対応情報をシグナリング・メッセージとして受信する通信部と、
前記TTML字幕データと、前記シグナリング・メッセージを適用した字幕表示制御を実行するデータ処理部を有する受信装置にある。
TTML(Timed Text Markup Language)字幕データをMMT(MPEG Media Transport)フォーマットにおいて規定されるMMTパケットのペイロードとして格納したTTML字幕データ格納パケットと、
前記TTML字幕データに対応する字幕対応情報を含むシグナリング・メッセージを生成するデータ処理部と、
前記TTML字幕データ格納パケットと、前記シグナリング・メッセージを送信する通信部を有する送信装置にある。
受信装置において実行するデータ処理方法であり、
通信部が、TTML(Timed Text Markup Language)字幕データをMMT(MPEG Media Transport)フォーマットにおいて規定されるMMTパケットのペイロードとして格納したTTML字幕データ格納パケットと、
前記TTML字幕データに対応する字幕対応情報をシグナリング・メッセージとして受信し、
データ処理部が、前記TTML字幕データと、前記シグナリング・メッセージを適用した字幕表示制御を実行するデータ処理方法にある。
送信装置において実行するデータ処理方法であり、
データ処理部が、TTML(Timed Text Markup Language)字幕データをMMT(MPEG Media Transport)フォーマットにおいて規定されるMMTパケットのペイロードとして格納したTTML字幕データ格納パケットと、
前記TTML字幕データに対応する字幕対応情報を含むシグナリング・メッセージを生成し、
通信部が、前記TTML字幕データ格納パケットと、前記シグナリング・メッセージを送信するデータ処理方法にある。
具体的には、TTML字幕データをMMTフォーマットにおいて規定されるMMTパケットのペイロードとして格納したTTML字幕データ格納パケットと、TTML字幕データに対応する字幕対応情報をシグナリング・メッセージとして送信装置から受信装置に送信する。シグナリング・メッセージは、字幕表示タイミングの制御モードであるタイムモード(TMD)や、字幕の即時表示やTTML記述に従った表示等を選択的に実行させる動作モード(OPM)を規定しており、受信装置はモード指定に応じた表示制御が可能となる。
本構成により、TTML字幕データの確実な表示制御を実現する装置、方法が実現される。
なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。
1.通信システムの構成例について
2.送信装置、受信装置の構成と、MMT(MPEG Media Transport)について
3.MMTフォーマットの詳細について
4.MPT(MMTパッケージテーブル)について
5.送信装置から受信装置に送信されるデータとTTML字幕データの概要について
6.MPT(MMTパッケージテーブル)に記録される字幕対応情報について
7.タイムモード(TMD)の各モード対応の具体的処理について
7−1.TMD=1:TTML記述+EIT starttimeのモード設定時の処理について
7−2.TMD=2:TTML記述+NPTのモード設定時の処理について
7−3.TMD=3:TTML記述+絶対時刻のモード設定時の処理について
7−4a.TMD=4:TTML記述+reference starttimeのモード設定時の処理について(例1)
7−4b.TMD=4:TTML記述+reference starttimeのモード設定時の処理について(例2)
7−5.TMD=5:TTML記述+MPU timestampのモード設定時の処理について
7−6.TMD=8:MPU timestampのモード設定時の処理について
7−7.TMD=15:時刻制御なしのモード設定時の処理について
8.動作モード(OPM)の各モード対応の具体的処理について
8−1.OPM=0:ライブモードのモード設定時の処理について
8−2.OPM=1:セグメンテーションモードのモード設定時の処理について
8−3.OPM=2:プログラムモードのモード設定時の処理について
9.送信装置と受信装置の実行する処理の処理シーケンスについて
10.送信装置と受信装置の構成例について
11.本開示の構成のまとめ
まず、図1を参照して本開示の処理を実行する通信システムの一構成例について説明する。
図1に示すように、通信システム10は、画像データや音声データ、さらに字幕データ、さらに各種の制御情報等のデータを送信する通信装置である送信装置20と、送信装置20の送信するデータを受信する通信装置である受信装置30を有する。
一方、受信装置30は、一般ユーザのクライアント装置であり、具体的には、例えばテレビ31、PC32、携帯端末33等によって構成される。
MMTフォーマットは、画像(Video)、音声(Audio)、字幕(Subtitle)等、コンテンツ構成データである符号化データを放送波やネットワークを介して伝送する際のデータ転送方式(トランンスポートフォーマット)を規定したものである。
上述したように、送信装置20から受信装置30に対するデータ送信は、主にMMT(MPEG Media Transport)フォーマットに従って実行される。
図2以下を参照して、送信装置、受信装置の構成と、MMT(MPEG Media Transport)についてMMTフォーマットを利用したデータ送受信処理の詳細について説明する。
図2に示すMMTスタック・モデルにおいて、最下層には、物理レイヤ(PHY)がある。物理レイヤは、放送系の処理を行なうブロードキャスト(Broadcasting)レイヤと、ネットワーク系の処理を行なうブロードバンド(Broadband)レイヤに分割されている。
MMTは放送系、ネットワーク系の2つの通信網を利用した処理を可能としている。
TLBレイヤで処理が生成されるTLVパケットに格納されるシグナリング・メッセージがTLV−SIであり、MMTパケットに格納されるシグナリング・メッセージは最上位レイヤに示すMMT−SIである。
UDP/IPレイヤは、詳細にはIPレイヤとUDPレイヤに分割可能であるが、IPパケットのペイロードにUDPパケットを格納する伝送を規定するレイヤである。
UDP/IPレイヤ上にMMTレイヤ、およびFile delivary methodレイヤ が設定される。
MMTパケットをIPパケットに格納して送信する場合と、MMTパケットを用いないデータ伝送方式であるFile delivary methodを利用してIPパケットとしてデータ送信する方式が併用可能な設定となっている。
画像コーデックとしてのHEVC、その上位に画像(Video)データ、
音声コーデックとしてのAAC、その上位に音声(Audio)データ、
MMTパケットを利用して送信されるシグナリング・メッセージ(MMT−SI)、
字幕(Subtitle)データ、
番組情報であるEPG(Electronic Program Guide)。
これらの各データがMMTパケットに格納されて送信される。
その他のデータ配信を行うデータサービス(Data service)、コンテンツダウンロード等(Contentdownload,etc.)がMMTと異なるファイル配信メソッド(File delivary method)を利用して配信可能な構成を有している。
図3に示すように、送信装置20は、コンテンツ提供部51、情報処理部52、クロック信号生成部(NTP)53、画像データ処理部54、音声データ処理部55、字幕データ処理部56、主にMMTパケット格納のシグナリング・メッセージに対する処理を行なうシグナリング・メッセージ処理部57、TLVパケット格納のシグナリング・メッセージに対する処理を行なうTLVシグナリング・メッセージ処理部58、IPサービスマルチプレクサ(MUX)59、TLVマルチプレクサ(MUX)60、通信部(変調・送信部)61を有する。
コンテンツ提供部51は、画像、音声、字幕等のコンテンツをそれぞれ画像データ処理部54、音声データ処理部55、字幕データ処理部56に出力する。
なお、字幕データは、情報処理部52において生成される場合もある。
情報処理部52の生成した字幕データは字幕データ処理部56に提供される。シグナリング・メッセージは、シグナリング・メッセージ処理部57、TLVシグナリング・メッセージ処理部58に提供される。
さらに、クロック信号生成部53の生成したクロック信号は、画像データ処理部54、音声データ処理部55、字幕データ処理部56にも出力され、画像データ処理部54、音声データ処理部55、字幕データ処理部56では、クロック情報を設定したIPパケットを生成する。
なお、本開示の構成では、字幕データは表示領域や表示タイミング等の制御を可能としたXML(Extensible Markup Language)形式の字幕データであるTTML(Timed Text Markup Language)を用いる。
TTML字幕データの詳細については後段で説明する。
さらに、クロック信号生成部78、画像データ処理部79、音声データ処理部80、字幕データ処理部81、制御部82、重畳部83を有する。
(1)IPバケットに格納されたNTP時刻情報をクロック信号生成部78に出力する。
(2)MMTパケットに格納された画像データを画像データ処理部79に出力する。
(3)MMTパケットに格納された音声データを音声データ処理部80に出力する。
(4)MMTパケットに格納された字幕データを字幕データ処理部81に出力する。
(5)MMTパケットまたはTリヒパケットに格納されたシグナリング・メッセージを制御部82に出力する。
シグナリング・メッセージは、繰り返し、同じメッセージが送信されるので、各フィルタは、パケットに設定されたバージョンを確認して、既に取得済みのものは取得せず、新規のバージョンのシグナリング・メッセージを選択取得して制御部82に出力する。
制御部82が取得したシグナリング・メッセージは、画像データ処理部79、音声データ処理部80、字幕データ処理部81のそれぞれに入力され、各データ処理部における処理に適用される。
なお、クロック信号生成部78の生成したクロック信号は、画像データ処理部79、音声データ処理部80、字幕データ処理部81のそれぞれに入力され、各データ処理部の生成データの同期出力が可能となる。
なお、字幕データ処理部81は、字幕の表示タイミングや表示領域等を決定する字幕出力制御を行い、決定した表示タイミングで字幕を重畳部83に出力する。
この表示制御処理の詳細については後段で説明する。
なお、前述したように、本開示の構成では、字幕データは表示領域や表示タイミング等の制御を可能としたXML(Extensible Markup Language)形式の字幕データであるTTML(Timed Text Markup Language)を用いる。
TTML字幕データの詳細については後段で説明する。
図1に示した通信システム10では、送信装置20から受信装置30へ放送信号を伝送する際のトランスポート方式として、主にMMTを適用することを想定している。
トランスポート方式としてMMTを利用する場合、データはMMTパケットに格納して送信することになる。
MMTパケットは、MMTプロトコルを用いて伝送されるようにフォーマットされたメディア・データのユニットである。
パケット・カウンタ・フラグ「C」に1が代入されていると、Cからの矢印として示すパケット・カウンタのフィールドがこのMMTパケット内に存在することが表される。パケット・カウンタは、MMTパケットをカウントした整数値を書き込む32ビット長のフィールドであり、MMTパケットを送信する度に1ずつインクリメントされる。
0x00:MPU
0x01 Generic object
0x02:signaling message
0x00:repair symbol
なお、1MPUは、必要に応じて複数のメディアフラグメントユニット(MFU:Media Fragment unit)に分割されてMMTパケットに格納される。
その他のタイプについては本開示の処理とは、直接関係しないので説明を省略する。
パケット識別子(packet_id)と、アセット識別子(asset_id)のマッピングは、シグナリング・メッセージの一部であるMPT(MMTパッケージテーブル)で示されている。
MPTの詳細については後段で説明する。
なお、字幕の種類とは、日本語や英語等の言語種類のみならず、字幕タイプや、字幕の表示タイミングを規定したタイムモード等、様々な要素によって区別され、これら各要素が同一要素からなるTTML字幕データを1つのアセットとする。
32ビット長のpacket_sequence_numberフィールドには、同一のpacket_idを持つパケットを識別するための整数値(MMT伝送路上でのシーケンス番号)が記載される。
32ビット長のpacket_counterフィールドには、MMTパケットの通し番号が記載される。
0:MPUメタデータ
1:ムービーフラグメントメタデータ
2:MFU
Timed(T)フラグは、MPUがタイムド・メディアであるかノンタイムド・メディアであるかを識別するフラグである。
0: 整数個のデータユニット(MPU)を格納している。
1:データユニット(MPU)の最初のフラグメント(MFU)を格納している。
2:データユニット(MPU)の中間のフラグメント(MFU)を格納している。
3:データユニット(MPU)の最後のフラグメント(MFU)を格納している。
16ビット長のDU_lengthフィールドには、当該フィールドに続くデータ(DU:Data Unit)の長さが記載される。但し、Aフラグが0のときは、DU_lengthフィールドはない。
DU_payloadには、MPUやその分割データであるMFUが格納される。具体的には、画像や音声、字幕等の符号化データである。字幕データの場合、本開示の構成では、TTML(Timed Text Markup Language)を用いる。TTML字幕データの詳細については後段で説明する。
type=0x00の場合のペイロードは、画像、音声、字幕等によって構成されるメディアプレゼンテーションユニット(MPU:Media presentation unit)である。
type=0x02の場合のペイロードは、シグナリング・メッセージ(signzling message)である。
(A)画像データ(MPU)
(B)字幕データ(MPU)
(C)シグナリンクデータ
これらのパケット構成例を示している。
1つのMPUは、必要に応じて複数のメディアフラグメントユニット(MFU:Media Fragment unit)に分割されてMMTパケットに格納される。
MMTパケットはUDPパケットに格納され、さらに、UDPパケットはIPパケットに格納される。
さらに、図示していないがIPパケットは、TLVパケットに格納されて送信される。
シグナリング・メッセージは、MPU/MFUといったユニット設定とはならず、例えばシーケンス番号等によって順番が規定されてMMTパケットに格納される。
MMTパケットはUDPパケットに格納され、さらに、UDPパケットはIPパケットに格納される。
さらに、図示していないがIPパケットは、TLVパケットに格納されて送信される。
TTMLファイルは、画像データに比較するとデータ量が小さいため、分割(フラグメント)する必要がない場合が多い。したがって、例えば図8に示すように、TTML字幕データを含む1つのTTMLファイルを1MPUとして、このMPUをそのままMMTパケットに格納して送信することが多い、
本開示において、MMTパケットを適用して送信する字幕データは、TTMLと字幕データであり、この字幕データに対する表示制御等の制御情報をシグナリング・メッセージとして送信する。
字幕データに対する制御情報を含むシグナリング・メッセージとしてMPT(MMTパッケージテーブル)がある。
MMTプロトコルで使用されるシグナリング・メッセージは、データの伝送制御や受信装置側でのデータ復号、再生処理等に必要な情報を含む。
図9を参照して、字幕データに対する制御情報を含むシグナリング・メッセージであるMPT(MMTパッケージテーブル)を含むPAメッセージについて説明する。
message_idは、各種シグナリング情報において、PAメッセージを識別する16ビットの固定値である。
versionは、PAメッセージのバージョンを示す、8ビットの整数値のパラメーターである。例えばMPTを構成する一部のパラメーターでも更新した場合には、versionは+1だけインクリメントされる。lengthは、このフィールドの直後からカウントされる、当該PAメッセージのサイズをバイト単位で示す、32ビット長のパラメーターである。
MPT(MMTパッケージテーブル)の詳細情報もここに記録される。
次に、図10〜図13を参照してMPT(MMTパッケージテーブル)のデータ構造について説明する。
MPT先頭部分の構成について、図10を参照して説明する。
table_idは、各種シグナリング情報においてMPTであることを識別する8ビットの固定値である。
versionは、MPTのバージョンを示す8ビットの整数値である。例えば、MPTを構成する一部のパラメーターでも更新した場合には、versionは+1だけインクリメントされる。lengthは、このフィールドの直後からカウントされる、MPTのサイズをバイト単位で示す、32ビット長のパラメーターである。
MMT_package_id_lengthは、そのテキスト情報のサイズをバイト単位で示す。
MPT_table_descriptor_lengthは、そのフィールドのサイズN2をバイト単位で示す、16ビット長のパラメーターである。そして、MP_table_descriptorは、様々な目的の記述子を規定した上で、N2バイト分(1つ又は複数配置)することを想定している。
number_of_assetsは、パッケージを構成する要素としてのアセット(信号、ファイル)の数を示す、8ビットのパラメーターである。number_of_assetの数分(N3)だけ、以下のループ(Asset loop)が配置される。
asset_id_lenは、asset_idのサイズをバイト単位で示す。
asset_timescaleは、アセットの参照するクロクッIDを記録する。
MMT_general_loc_infoは、アセットの取得先のロケーションを示す情報である。本実施形態では、アセットの取得先となる伝送路上のpacket idの形式で記述される。したがって、MPT上でasset_idを引いて、MMT伝送路上の該当するpacket IDを取り出すことができる。
ここに、アセット対応の制御情報が記録される。
アセットがTTML字幕データである場合、TTML字幕データの表示制御情報が記述される。
字幕の種類とは、日本語や英語等の言語種類のみならず、字幕タイプや、字幕の表示タイミングを規定したタイムモード等、様々な要素によって区別され、これら各要素が同一要素からなるTTML字幕データを1つのアセットとする。
PMTに記録される字幕対応の制御情報と、その利用態様については、後段で詳細に説明する。
次に、図1に示す送信装置20から受信装置30に対して送信されるデータとTTML字幕データの概要について図13以下を参照して説明する。
図13には、送信装置20が受信装置30に対して送信するデータの種類を示している。送信装置20が受信装置30に対して送信するデータには以下のデータがある。
(a)画像(Video)MPU91
(b)音声(Audio)MPU92
(c)字幕(Subtitle)MPU93〜95
(d)シグナリング・メッセージ96
これらの各データはいずれもMMTフォーマットで規定されるMMTパケットのペイロードとしてMMTパケットに格納して送信する。
字幕データはTTML字幕データであり、アセット単位で送信される。図に示す#1〜#3はアセット識別子に相当する。
アセットは前述したように字幕の種類ごとに設定され、例えば日本語、英語等の言語種別や、通常字幕や難聴者向け等の種類に応じた異なるデータ態様の字幕ごとに設定される。
以下、図14以下を参照して字幕データに関する処理について説明する。
送信装置20から受信装置30に対して送信する字幕関連データには以下のデータがある。
字幕データ本体であるTTML字幕データを含む字幕MPU93、
TTML字幕データに対応する制御情報等を格納したシグナリング・メッセージ96、
これらのデータが、受信装置30側で字幕を表示する際に必要となるデータを含んでいる。
なお、1つのTTML字幕ファイルを1つのMPU(メディアプレゼンテーションユニット)として設定するが、このMPUを複数に分割したMFUを生成してMFU単位でMMTパケットに格納して送信する場合もある。
MH−EIT(Envent Information Table)は、コンテンツ(番組)のタイトル、放送日時、放送の内容などの情報を記録したテーブルである。
シグナリング・メッセージ96には、これらのデータの他、受信装置30において利用可能な様々な通知データ等が含まれる。
例えば図13、図14を参照して説明した(A)字幕MPU71には、図15(B)に示すようにTTML字幕データが格納されている。
TTML字幕データは、例えば、図15(C)に示すようなXML形式のデータであり、実際に表示される文字列の他、表示領域、表示タイミング等の情報を記述可能なとした構成を持つ。
受信装置30は、このようなTTML字幕データを解釈して、図15(D)に示すような表示データ、すなわち、他のMMTパケットから取得して復号した画像データに字幕を重畳した表示データを生成して表示部に表示する処理を行う。
次に、MPT(MMTパッケージテーブル)に記録される字幕対応情報について説明する。
MPT(MMTパッケージテーブル)は、先に、図9〜図12を参照して説明したように、シグナリング・メッセージの1つであるPAメッセージを構成する1つのテーブルである。
図16は、MPTに記録される字幕情報記述子(suntitle dexcroptor)を示している。すなわちMPUとして設定されたTTML字幕データに対応する属性情報や制御情報である。
asset_descriptor_byte
以下のフィールドに記録されるアセット単位の情報である。
(1)言語コード(ISO_639_language_code)
(2)字幕タイプ(Type)
(3)タイムモード(TMD)
(4)表示モード(DMF)
(5)動作モード(OPM)
(6)表示書式(Format)
(7)圧縮モード(Compression_mode)
以下、これらの情報の詳細について、順次、説明する。
言語コード(ISO_639_language_code)は、言語種類をISO639−2で規定される言語コードとして示したデータである。
例えば日本語の場合は、
jpn(01101010 01110000 01101110)
となる。
字幕タイプ(Type)は、字幕のタイプを示す情報である。
図17に具体例を示す。
00=字幕基本情報
01=字幕拡張情報
10=文字スーパー
これらの字幕タイプを識別する情報を記録する。
なお、字幕基本情報は、基本的な字幕データであることを示す。字幕拡張情報は、文字の表示形式を変更したリッチな表現を行う場合などに用いられる。ただし、受信装置側で理科できる場合にのみ利用される。文字スーパーは、ニュース速報等の文字であることなどを識別させるためのデータである。
タイムモード(TMD)は、字幕の表示タイミングの制御に用いる時刻制御モードを示す。具体的には、図18に示すように、以下の各モードのいずれかが記録される。
0001=TTML記述+EIT starttime
0010=TTML記述+NPT
0011=TTML記述+絶対時刻
0100=TTML記述+reference starttime
0101=TTML記述+MPU timestamp
1000=MPU timestamp
1111=提示制御なし(受信時、即時表示等)
図15(c)に示すTTML字幕データには、以下の表示タイミング制御情報が記録されている。
<p begin "427s"dur="1s">
このTTML記述は、番組開始から427秒の時点から1秒間「こんにちは」という文字を表させるための表示タイミングに関する記述である。
MPTに記録されたタイムモード(TMD)は、どのような場合でも、確実に映像に合わせた表示タイミングで字幕の表示を可能とするために用いられるデータである。
なお、タイムモード(TMD)に記録可能な4つのモードの具体的な処理態様については、後段で説明する。
表示モード(DMF)は、
字幕の表示モードを示す情報である。具体例を図19に示す。
表示モード(DMF)は4ビット構成であり、
上位2ビット(Bit3〜2)が受信時処理態様、
下位2ビット(Bit1〜0)が記録再生時処理態様、
を示す。
00=受信時自動表示、
01=受信時自動非表示、
10=受信時選択表示
これらの各表示モードの何れかを規定する。
01=受信時自動非表示は、TTMLを格納したMPUの受信時に受信したTTML字幕データに記録された字幕は非表示とすることを規定したモードである。
10=受信時選択表示は、例えばユーザによるリモコン設定などにより、TTMLを格納したMPUの受信時に受信したTTML字幕データの字幕を表示または非表示とすることを可能としたモードである。
00=記録再生時自動表示、
01=記録再生時自動非表示、
10=記録再生時選択表示
これらの各表示モードの何れかを規定する。
01=記録再生時自動非表示は、TTMLを格納したMPUを含むコンテンツの再生時にTTML字幕データに記録された字幕は非表示とすることを規定したモードである。
10=記録再生時選択表示は、コンテンツ再生時に例えばユーザによるリモコン設定などにより、TTML字幕データの字幕を表示または非表示とすることを可能としたモードである。
動作モード(OPM)は、字幕の表示制御に適用する動作モード規定情報である。具体例を図20に示す。動作モード(OPM)としては以下の各モードの設定が可能である。
00=ライブモード(Live mode)
01=セグメンテーションモード(Segmentation mode)
10=プログラムモード(Program mode)
なお、動作モード(OPM)の各モード設定時の処理の具体例については、後段で詳細に説明する。
表示書式(Format)は、字幕データを表示する表示画面の表示書式を規定する記述子である。具体的には、図21に示すように、以下の各書式の設定がなされる。
0000=1920×1080(HD)
0001=3840×2160(4K)
0010=7860×4320(8K)
例えば、これらの表示画面に対応する字幕データであることを示す。
圧縮モード(Compression_mode)は、TTML字幕データの圧縮モードを示す記述子である。具体的には、図22に示すように以下の各アッシュクモードのいずれかが設定される。
000=圧縮なし
001=EXIによる圧縮
010=BIMによる圧縮
011=ZIPによる圧縮
例えば、TTML字幕データが上記のいずれの圧縮処理がなされたデータであるかを示す情報を設定する。
次に、MPTに記録される字幕情報記述子(Subtitle descriptot)の1つであるタイムモード(TMD)の各モード対応の具体的処理について説明する。
0001=TTML記述+EIT starttime
0010=TTML記述+NPT
0011=TTML記述+絶対時刻
0100=TTML記述+reference starttime
0101=TTML記述+MPU timestamp
1000=MPU timestamp
1111=提示制御なし(受信時、即時表示等)
まず、タイムモード(TMD)が、TMD=1、すなわち、
0001=TTML記述+EIT starttime
上記設定である場合の字幕表示制御について図23、図24を参照して説明する。
このTMD=1のモード設定は、受信装置30に、TTMLに記述された字幕表示時間と、MH−EIT(Envent Information Table)の記録情報を適用して表示タイミングを制御させるモードである。
図23に示すようにMH−EITには、以下の各データが記録される。
(a)番組のID(event_id)
(b)番組開始時刻(start_time)
(c)番組時間長(duration)
例えばこれらの情報が含まれる。
(b)番組開始時刻(start_time)
を用いてTTML字幕データの字幕表示タイミングを決定する。
受信装置30の実行するTTML字幕データの表示タイミング制御処理について図24を参照して説明する。
(a)MH−EIT
(b)MPT
(c)MPUのTTML
(d)字幕の表示された画像例
これらの各データを示している。
受信装置30は、MPTと、MH−EITをシグナリング・メッセージの送信チャンネルから取得し、TTML字幕データを含むMPUは字幕アセットチャンネルから取得する。
さらに、図24の最上段には、時間軸(t)を示している。
start_time=t0
上記情報が記録されている。
これは、番組が開始される絶対時刻を示す情報である。
TMD=1(=0001)
上記データが記録されている。
これは、先に図18を参照して説明したように、
TMD=0001=TTML記述+EIT starttime
この設定であり、TTML記述とEITのスタートタイム記述に従って字幕の表示タイミングを決定する処理を実行するコンテンツであることを示している。
<p begin="427s" dur="1s">
上記データがある。
これは、番組開始時間から427秒後にTTMLに記録された字幕データ「こんにちは」を1秒間表示することを行わせるための記述データである。
なお、
<div region="r1">
このデータは、字幕「こんにちは」の表示領域の指定情報である。
TMD=0001=TTML記述+EIT starttime
この設定であることを確認する。
すなわち、TTML記述とEITのスタートタイム記述に従って字幕の表示タイミングを決定する処理を実行するコンテンツであることを確認する。
MPUのTTMLには、字幕表示タイミング情報として
<p begin="427s" dur="1s">
上記データが記録されている。
EITには、番組開始時刻情報として、
start_time=t0
上記情報が記録されている。
EITに番組開始時刻情報として記録された、
start_time=t0
この番組開始の絶対時刻情報を確認し、この絶対時刻t0から、受信装置30の保持する時計に基づいて、
MPUのTTMLの字幕表示タイミング情報、
<p begin="427s" dur="1s">
上記情報に記録された427秒をカウントする。
この表示結果が図24(d)に示す表示データである。
次に、タイムモード(TMD)が、TMD=2、すなわち、
0002=TTML記述+NPT
上記設定である場合の字幕表示制御について図25、図26を参照して説明する。
このTMD=2のモード設定は、受信装置30に、TTMLに記述された字幕表示時間と、NPT参照情報[NPT(Normal Play Time)−reference/EMT]の記録情報を適用して表示タイミングを制御させるモードである。
UTC(コーディネィテッド・ユニバーサルタイム)の時間情報(st)と、
NPT(ノーマルプレイタイム)の時間情報(nt)と、
これら2つの時間情報の対応データを持つ。UTCは絶対時刻情報である。
このNPTは、送信装置20から
受信装置30に順次、更新データが送信される。
図25に示すようにNPT−reference/EMTには、以下の各データが記録される。
(a)UTC時間情報(UTC_Reference)
(b)NPT時間情報(NPT_Reference)
例えばこれらの情報が含まれる。
NPTは、番組開始からの時間情報であり、例えばCM等、番組が中断した時点で停止され、番組の進行に従ってカウントされる時間情報である。
すなわち、UTC時間情報(UTC_Reference)は、常時、進行するが、NPT時間情報(NPT_Reference)は、番組が進行している時間のみ進行し、CM等の中断時には進行しない。
(a)UTC時間情報(UTC_Reference)は、時間の経過と同じ経過を示すデータに更新されるが、
(b)NPT時間情報(NPT_Reference)は、番組が中断している場合は更新されず、放送された番組時間に相当する時間のみを示す時間情報となる。
(a)UTC時間情報(UTC_Reference)=t0
(b)NPT時間情報(NPT_Reference)=0
上記のように、
NPT時間のカウントが開始されるが、その後の時間情報の増加は等しく進む。
なお、上記2つの時間情報は64ビットのNTPフォーマットで記述され、秒以下が32ビットで表現されるが、現実の運用では秒以下16ビット程度の精度で用いられることも想定される。その場合には下位16ビットは0を代入して利用する。
しかし、番組開始後、CM等の番組中断事由が発生すると、上記2つの時間情報の増加はずれたものとなる。
すなわち、
(a)UTC時間情報(UTC_Reference)=u1
(b)NPT時間情報(NPT_Reference)=n1
(a)UTC時間情報(UTC_Reference)=u1
(b)NPT時間情報(NPT_Reference)=n1
これらの2つの時間の対応情報を用いてTTML字幕データの字幕表示タイミングを決定する。
受信装置30の実行するTTML字幕データの表示タイミング制御処理について図26を参照して説明する。
(a)MPT
(b)MPUのTTML
(c)NPT−reference/EMT
(d)字幕の表示された画像例
これらの各データを示している。
受信装置30は、MPTと、NPT−reference/EMTをシグナリング・メッセージの送信チャンネルから取得し、TTML字幕データを含むMPUは字幕アセットチャンネルから取得する。
さらに、図23の最上段には、NPTとUTC対応の時間軸(t)を示している。
TMD=2(=0010)
上記データが記録されている。
これは、先に図18を参照して説明したように、
TMD=0010=TTML記述+NPT
この設定であり、TTML記述とNPT記述に従って字幕の表示タイミングを決定する処理を実行するコンテンツであることを示している。
<p begin="276392t" dur="1s">
上記データがある。
さらに、
<tt ttp:tickrate="65536">
上記データがある。
図21を参照して説明したTTMLでは秒(s)単位のデータとして字幕の表示タイミングを記述していたが、この図26に示す例では、NTPフォーマットで示している。
なお、
<div region="r1">
このデータは、字幕「こんにちは」の表示領域の指定情報である。
(a)UTC時間情報(UTC_Reference)=ux
(b)NPT時間情報(NPT_Reference)=nx
これらの2つの時間の対応情報が記録されている。
なお、NPT−reference/EMTは逐次更新されており、受信装置30は最も新しいNPT−reference/EMTを利用する。
TMD=0010=TTML記述+NPT
この設定であることを確認する。
すなわち、TTML記述とNPT−reference/EMTの記述に従って字幕の表示タイミングを決定する処理を実行するコンテンツであることを確認する。
MPUのTTMLには、字幕表示タイミング情報として
<p begin="276392t" dur="1s">
NPT−reference/EMTには、
(a)UTC時間情報(UTC_Reference)=u1
(b)NPT時間情報(NPT_Reference)=n1
これらの2つの時間の対応情報が記録されている。
なお、NPTは逐次更新されており、受信装置30は最も新しいNPT−reference/EMTを利用する。
例えばNTPで示される絶対時刻がC84F3804230A0000(16進数)の時刻にNPT参照情報を取得したとする。
取得したNPT参照情報には、例えば、以下の2つの時間情報の対尾合うデータが記録されている。
(a)UTC時間情報(UTC_Reference)=u1=C84F380314260000(16進数)
(b)NPT時間情報(NPT_Reference)=n1=0000000122370000(16進数)
NPT時間情報(n1)は、番組の実放送時間をカウントした値であり、CMが挿入された場合等ではUTC時間情報(s1)より進みが遅くなる。
<p begin="276392t" dur="1s">
上記字幕表示開始時刻であるNPT時間値276392tを絶対時刻ut1に換算する。
すなわち、最新のNPT参照情報におけるNPTの差分をNTPフォーマットの絶対時刻に加算して、字幕表示タイミングとなる修正STCの値を算出する。
(a)UTC時間情報(UTC_Reference)=u1=
C84F380314260000(16進数)
(b)NPT時間情報(NPT_Reference)=n1=
0000000122370000(16進数)
この表示結果が図26(d)に示す表示データである。
次に、タイムモード(TMD)が、TMD=3、すなわち、
0011=TTML記述+絶対時刻
上記設定である場合の字幕表示制御について図27を参照して説明する。
このTMD=3のモード設定は、受信装置30に、TTMLに記述された字幕表示時間と、絶対時刻を適用して表示タイミングを制御させるモードである。
受信装置30の実行するTTML字幕データの表示タイミング制御処理について図27を参照して説明する。
(a)MPT
(b)MPUのTTML
(c)字幕の表示された画像例
これらの各データを示している。
受信装置30は、MPTをシグナリング・メッセージの送信チャンネルから取得し、TTML字幕データを含むMPUは字幕アセットチャンネルから取得する。
さらに、図27の最上段には、時間軸(t)を示している。
TMD=3(=0011)
上記データが記録されている。
これは、先に図18を参照して説明したように、
TMD=0011=TTML記述+絶対時刻
この設定であり、TTML記述と絶対時刻に従って字幕の表示タイミングを決定する処理を実行するコンテンツであることを示している。
<p begin="13:40:11" dur="1s">
上記データがある。
これは、絶対時刻=13:40:11にTTMLに記録された字幕データ「こんにちは」を1秒間表示することを行わせるための記述データである。
なお、
<div region="r1">
このデータは、字幕「こんにちは」の表示領域の指定情報である。
TMD=0001=TTML記述+絶対時刻
この設定であることを確認する。
すなわち、TTML記述と絶対時刻に従って字幕の表示タイミングを決定する処理を実行するコンテンツであることを確認する。
MPUのTTMLには、字幕表示タイミング情報として
<p begin="13:40:11s" dur="1s">
上記データが記録されている。
この表示結果が図27(c)に示す表示データである。
次に、タイムモード(TMD)が、TMD=4、すなわち、
0100=TTML記述+reference starttime
上記設定である場合の字幕表示制御について図28を参照して説明する。
このTMD=4のモード設定は、受信装置30に、TTMLに記述された字幕表示時間と、MH−EIT(Envent Information Table)の記録情報である参照スタートタイム(reference starttime)を適用して表示タイミングを制御させるモードである。
受信装置30は、このMH−EITに記録された高精度のms単位の時間情報=reference starttimeを起点(t0)として、MPU(TTML)に記録された表示時間情報に従った時間計測を行う。
図28には、
(a)MH−EIT
(b)MPT
(c)MPUのTTML
(d)字幕の表示された画像例
これらの各データを示している。
受信装置30は、MPTと、MH−EITをシグナリング・メッセージの送信チャンネルから取得し、TTML字幕データを含むMPUは字幕アセットチャンネルから取得する。
さらに、図28の最上段には、時間軸(t)を示している。
start_time=t0、
さらに、
precice_starttime=t0
上記情報が記録されている。
これは、番組が開始される絶対時刻を示す情報である。
本例では、精度の高い例えばms単位の時間情報としてprecice starttimeが記録されている。
TMD=4(=0100)
上記データが記録されている。
これは、先に図18を参照して説明したように、
TMD=0100=TTML記述+reference starttime
この設定であり、TTML記述とEITの高精度のprecice starttime記述に従って字幕の表示タイミングを決定する処理を実行するコンテンツであることを示している。
<p begin="427153ms" dur="1s">
上記データがある。
これは、番組開始時間から427153ミリ秒(ms)後にTTMLに記録された字幕データ「こんにちは」を1秒間表示することを行わせるための記述データである。
なお、
<div region="r1">
このデータは、字幕「こんにちは」の表示領域の指定情報である。
TMD=0001=TTML記述+reference starttime
この設定であることを確認する。
すなわち、TTML記述とEITのスタートタイム記述(precice starttime)に従って字幕の表示タイミングを決定する処理を実行するコンテンツであることを確認する。
MPUのTTMLには、字幕表示タイミング情報として
<p begin="427153ms" dur="1s">
上記データが記録されている。
これはms単位の高精度な時間情報である。
EITには、番組開始時刻情報として、
precice starttime=t0
上記情報が記録されている。
これもms単位の高精度な時間情報である
EITに、番組開始時刻情報として記録された、
precice starttime=t0(ms)
この番組開始の絶対時刻情報を確認し、この絶対時刻t0(ms)から、受信装置30の保持するシステムクロックのクロックカウントに基づいて、
MPUのTTMLの字幕表示タイミング情報、
<p begin="427153s" dur="1s">
上記情報に記録された427153ミリ秒(ms)をカウントする。
この表示結果が図28(d)に示す表示データである。
本例では、先に図24を参照して説明したTMD=1の例と同様MH−EITを利用しているが、このTMD=4の構成では、MH−EHTの時間情報と、TTMLの時間情報がいずれもミリ秒(ms)単位の高精度な時間情報であり、より精度の高い字幕表示制御が可能となる。
次に、タイムモード(TMD)が、TMD=4、すなわち、
0100=TTML記述+reference starttime
上記設定である場合の字幕表示制御のもう1つの例(例2)について図29を参照して説明する。
このTMD=4のモード設定(例2)では、MH−EIT(Envent Information Table)を用いず、MPTにreference starttimeを記録してMPTとTTML記述に従って表示タイミングを制御させる。
受信装置30は、このMPTに記録された高精度のms単位の時間情報=reference starttimeを起点(t0)として、MPU(TTML)に記録された表示時間情報に従った時間計測を行う。
図29には、
(a)MPT
(b)MPUのTTML
(c)字幕の表示された画像例
これらの各データを示している。
受信装置30は、MPTをシグナリング・メッセージの送信チャンネルから取得し、TTML字幕データを含むMPUは字幕アセットチャンネルから取得する。
さらに、図29の最上段には、時間軸(t)を示している。
TMD=4(=0100)
上記データが記録されている。
これは、先に図18を参照して説明したように、
TMD=0100=TTML記述+reference starttime
この設定であり、TTML記述とEITの高精度のprecice starttime記述に従って字幕の表示タイミングを決定する処理を実行するコンテンツであることを示している。
さらに、MPTには、番組開始時刻情報として、
precice_starttime=t0
上記情報が記録されている。
これは、番組が開始される絶対時刻を示す情報である。
本例では、精度の高い例えばms単位の時間情報としてprecice starttimeが記録されている。
<p begin="427153ms" dur="1s">
上記データがある。
これは、番組開始時間から427153ミリ秒(ms)後にTTMLに記録された字幕データ「こんにちは」を1秒間表示することを行わせるための記述データである。
なお、
<div region="r1">
このデータは、字幕「こんにちは」の表示領域の指定情報である。
TMD=0001=TTML記述+reference starttime
この設定であることを確認する。
すなわち、TTML記述とMPTのスタートタイム記述(precice starttime)に従って字幕の表示タイミングを決定する処理を実行するコンテンツであることを確認する。
MPUのTTMLには、字幕表示タイミング情報として
<p begin="427153ms" dur="1s">
上記データが記録されている。
これはms単位の高精度な時間情報である。
MPTには、番組開始時刻情報として、
precice starttime=t0
上記情報が記録されている。
これもms単位の高精度な時間情報である
MPTに、番組開始時刻情報として記録された、
precice starttime=t0(ms)
この番組開始の絶対時刻情報を確認し、この絶対時刻t0(ms)から、受信装置30の保持するシステムクロックのクロックカウントに基づいて、
MPUのTTMLの字幕表示タイミング情報、
<p begin="427153s" dur="1s">
上記情報に記録された427153ミリ秒(ms)をカウントする。
この表示結果が図29(c)に示す表示データである。
本例でも、先に図28を参照して説明したTMD=4(例1)の場合と同様、MPTの時間情報と、TTMLの時間情報がいずれもミリ秒(ms)単位の高精度な時間情報であり、より精度の高い字幕表示制御が可能となる。
次に、タイムモード(TMD)が、TMD=5、すなわち、
0100=TTML記述+MPU timestamp
上記設定である場合の字幕表示制御例について図30、図31を参照して説明する。
このTMD=5のモード設定では、MPTに記録されたMPUタイムスタンプを用いて、このMPUタイムスタンプとTTML記述に従って表示タイミングを制御させる。
このタイムスタンプは、精度の高い例えばms単位の時間情報として記録される。
図30に、MPTに記録されるMPUタイムスタンプ記述子のデータ構造を示す。
MPTに記録されるMPUタイムスタンプ記述子には、図に示すように、このタイムスタンプの適用されるMPUを示すMPUシーケンスナンバート、そのシーケンスナンバーに対応するMPUに対応する時間情報としてのMPU対応タイムスタンプ(MPU_presentation_timestamp)が記録される。
このタイムスタンプは、精度の高い例えばms単位の時間情報である。
図31には、
(a)MPT
(b)MPUのTTML
(c)字幕の表示された画像例
これらの各データを示している。
受信装置30は、MPTをシグナリング・メッセージの送信チャンネルから取得し、TTML字幕データを含むMPUは字幕アセットチャンネルから取得する。
さらに、図31の最上段には、時間軸(t)を示している。
TMD=5(=0101)
上記データが記録されている。
これは、先に図18を参照して説明したように、
TMD=0101=TTML記述+MPU timestamp
この設定であり、TTML記述とMPTに記録されたMPUタイムスタンプに従って字幕の表示タイミングを決定する処理を実行するコンテンツであることを示している。
図31(a)MPTに示すように、MPTには、MPU対応のタイムスタンプとして、
mpu_presentation_timestamp=t0
上記情報が記録されている。
これは、処理対象となるTTMLに相当するMPUに対応して設定されたMPUの処理時間等を示す時間情報である。
このタイムスタンプは、精度の高い例えばms単位の時間情報として記録されている。
<p begin="120234ms">
上記データがある。
これは、タイムスタンプによって指定される起点時間(t0)から120243ミリ秒(ms)後にTTMLに記録された字幕データ「こんにちは」を表示することを行わせるための記述データである。
なお、
<div region="r1">
このデータは、字幕「こんにちは」の表示領域の指定情報である。
TMD=0101=TTML記述+MPU timestamp
この設定であることを確認する。
すなわち、TTML記述とMPTに記録されたMPUタイムスタンプに従って字幕の表示タイミングを決定する処理を実行するコンテンツであることを確認する。
MPUのTTMLには、字幕表示タイミング情報として
<p begin="120234ms">
上記データが記録されている。
これはms単位の高精度な時間情報である。
MPTには、起点時間情報として、
MPUタイムスタンプ(mpu_presentation_timestamp)=t0
上記情報が記録されている。
これもms単位の高精度な時間情報である
MPTに、起点時間情報として記録された、
MPUタイムスタンプ=t0(ms)
この起点時間情報を確認し、この時刻t0(ms)から、受信装置30の保持するシステムクロックのクロックカウントに基づいて、
MPUのTTMLの字幕表示タイミング情報、
<p begin="120234s">
上記情報に記録された120234ミリ秒(ms)をカウントする。
この表示結果が図31(c)に示す表示データである。
本例でも、先に図28、図29を参照して説明したTMD=4の場合と同様、MPTの時間情報と、TTMLの時間情報がいずれもミリ秒(ms)単位の高精度な時間情報であり、より精度の高い字幕表示制御が可能となる。
次に、タイムモード(TMD)が、TMD=8、すなわち、
1000=MPU timestamp
上記設定である場合の字幕表示制御例について図32を参照して説明する。
このTMD=6のモード設定では、MPTに記録されたMPUタイムスタンプのみを用いて、このMPUタイムスタンプに従って表示タイミングを制御させる。
このタイムスタンプは、精度の高い例えばms単位の時間情報として記録される。
図32には、
(a)MPT
(b)MPUのTTML
(c)字幕の表示された画像例
これらの各データを示している。
受信装置30は、MPTをシグナリング・メッセージの送信チャンネルから取得し、TTML字幕データを含むMPUは字幕アセットチャンネルから取得する。
さらに、図32の最上段には、時間軸(t)を示している。
TMD=8(=1000)
上記データが記録されている。
これは、先に図18を参照して説明したように、
TMD=1000=MPU timestamp
この設定であり、MPTに記録されたMPUタイムスタンプに従って字幕の表示タイミングを決定する処理を実行するコンテンツであることを示している。
図32(a)MPTに示すように、MPTには、MPU対応のタイムスタンプとして、
mpu_presentation_timestamp=t0
上記情報が記録されている。
これは、処理対象となるTTMLに相当するMPUに対応して設定されたMPUの処理時間等を示す時間情報である。
このタイムスタンプは、精度の高い例えばms単位の時間情報として記録されている。
(b)MPUのTTMLには、字幕表示タイミング情報は記録されていない。
なお、TTML字幕データに記録された、
<div region="r1">
このデータは、字幕「こんにちは」の表示領域の指定情報である。
TMD=1000=MPU timestamp
この設定であることを確認する。
すなわち、MPTに記録されたMPUタイムスタンプに従って字幕の表示タイミングを決定する処理を実行するコンテンツであることを確認する。
MPTには、しけ膜表示時刻情報として、
MPUタイムスタンプ(mpu_presentation_timestamp)=t1
上記情報が記録されている。
これはms単位の高精度な時間情報である
MPTに記録された、
MPUタイムスタンプ=t1(ms)
この時間情報を確認し、この時刻t1(ms)において、TTML字幕データに記録された「こんにちは」を表示する。
この表示結果が図32(c)に示す表示データである。
本例でも、MPTの時間情報(タイムスタンプ)はミリ秒(ms)単位の高精度な時間情報であり、より精度の高い字幕表示制御が可能となる。
次に、タイムモード(TMD)が、TMD=15、すなわち、
1111=時刻制御なし
上記設定である場合の字幕表示制御について図33を参照して説明する。
このTMD=15のモード設定は、受信装置30に、時刻制御なしで字幕を表示させるモードである。例えばTTML字幕データを格納したMPUの受信後、速やかに表示を行う。例えば、ライブの字幕翻訳データの表示や、ニュース速報の表示などにおいて適用される。
図33には、
(a)MPT
(b)MPUのTTML
(c)字幕の表示された画像例
これらの各データを示している。
受信装置30は、MPTをシグナリング・メッセージの送信チャンネルから取得し、TTML字幕データを含むMPUは字幕アセットチャンネルから取得する。
さらに、図33の最上段には、時間軸(t)を示している。
TMD=15(=1111)
上記データが記録されている。
これは、先に図18を参照して説明したように、
TMD=1111=時刻制御なし
この設定であり、字幕の表示タイミングの制御情報がないコンテンツであることを示している。
なお、
<div region="r1">
このデータは、字幕「こんにちは」の表示領域の指定情報である。
TMD=1111=時刻制御なし
この設定であることを確認する。
すなわち、字幕の表示タイミングの制御のないコンテンツであることを確認する。
MPUのTTMLには、字幕表示タイミング情報が記録されていない。
この表示結果が図33(c)に示す表示データである。これは、例えば同時通訳の翻訳文の字幕表示などである。
次に、MPTに記録される字幕情報記述子(Subtitle descriptot)の1つである動作モード(OPM)の各モード対応の具体的処理について説明する。
00=ライブモード(Live mode)
01=セグメンテーションモード(Segmentation mode)
10=プログラムモード(Program mode)
まず、動作モード(OPM)が、OPM=0、すなわち、
OPM=00=ライブモード
上記設定である場合の字幕表示制御について図34を参照して説明する。
このOPM=0のモード設定は、受信装置30に、受信したTTML字幕データを、受信時に即時表示させるモードである。例えば同時通訳等の字幕データの表示などの際に利用されるモードである。
(a)MPT
(b)〜(e)TTML字幕データを格納したMPU
これらの各データを示している。
受信装置30は、MPTをシグナリング・メッセージの送信チャンネルから取得し、TTML字幕データを含むMPUは字幕アセットチャンネルから取得する。
さらに、図34の下段には、時間軸(t)と、時間経過に従って適用されるTTML字幕データと字幕表示例を示している。
OPM=0(=00)
上記データが記録されている。
これは、先に図20を参照して説明したように、
OPM=00=ライブモード
この設定であり、受信したTTML字幕データを、受信時に即時表示させるモードであることを示している。
なお、
<div region="r1">
<div region="r2">
<div region="r3">
これらのデータは、各TTML字幕データに含まれる字幕の表示領域の指定情報である。r1,r2,r3は異なる領域の指定情報である。
OPM=00=ライブモード
この設定であることを確認する。
すなわち、字幕の表示を、TTML字幕データの受信時に即時実行するモードであることを確認する。
受信装置30は、受信したMPUからTTML字幕データを取り出してTTML字幕データに記録された表示制御情報(表示領域指定のみ)に従って、字幕データを表示する。
受信装置は、まず、(b)MPU(TTML1)を受信し、このMPUに格納されたTTML1に従った字幕表示を行う。
画像(p)は、(b)MPU(TTML1)に格納されたTTML1に従って表示される字幕重畳画像である。
TTML1に格納された字幕データ「ありがとう」を、TTML1に記録された領域指定情報の指定領域(r1)に表示する。表示タイミングは時間(t1)となる。この時間(t1)は、受信装置30がTTML1を格納したMPUを受信して必要な処理を実行後、表示可能な最短のタイミングである。
画像(q)は、(c)MPU(TTML2)に格納されたTTML2に従って表示される字幕重畳画像である。
TTML2に格納された字幕データ「どういたしまして」を、TTML2に記録された領域指定情報の指定領域(r2)に表示する。表示タイミングは時間(t2)となる。この時間(t2)は、受信装置30がTTML2を格納したMPUを受信して必要な処理を実行後、表示可能な最短のタイミングである。
画像(r)は、(d)MPU(TTML3)に格納されたTTML3に従って表示される字幕重畳画像である。
TTML3に格納された字幕データ「例の件ですが」を、TTML3に記録された領域指定情報の指定領域(r2)に表示する。表示タイミングは時間(t3)となる。この時間(t3)は、受信装置30がTTML3を格納したMPUを受信して必要な処理を実行後、表示可能な最短のタイミングである。
画像(s)は、(e)MPU(TTML4)に格納されたTTML4に従って表示される字幕重畳画像である。
TTML4に格納された字幕データ「○△×*・・・」を、TTML4に記録された領域指定情報の指定領域(r2)に表示する。
さらに、TTML4に格納されたもう1つの字幕データ「(バタン ドアの音)」を、TTML4に記録された領域指定情報の指定領域(r3)に表示する。ここで、TTML2、TTML3、TTML4における指定領域r2は同一の領域を示す。本例では示していないがいわゆるロールアップモードの指定がある場合にはTTML3においても、TTML2の指定領域r2で指定された文字列の後半を残してTTML3の指定領域r2で指定された文字列を加えて表示することが想定される。そのようなケースを想定するとライブモードの場合、各TTMLを独立して処理することはできない。
この処理により、例えば生中継の会話における翻訳文の表示などを遅滞なく実行することが可能となる。またこの動作モードの場合には以前のTTML字幕データとの依存関係が発生しうる。
次に、動作モード(OPM)が、OPM=1、すなわち、
OPM=01=セグメンテーションモード
上記設定である場合の字幕表示制御について図35を参照して説明する。
このOPM=1のモード設定は、映画コンテンツのように、予め字幕データが準備されたコンテンツに適用されるモードであり、受信装置30に、MPTとTTML字幕データの制御情報に規定された表示タイミングに従った表示を実行させるモードである。
(a)MPT
(b)〜(c)TTML字幕データを格納したMPU
これらの各データを示している。
受信装置30は、MPTをシグナリング・メッセージの送信チャンネルから取得し、TTML字幕データを含むMPUは字幕アセットチャンネルから取得する。
さらに、図35の下段には、時間軸(t)と、時間経過に従って適用されるTTML字幕データと字幕表示例を示している。
OPM=1(=01)
上記データが記録されている。
これは、先に図20を参照して説明したように、
OPM=01=セグメンテーションモード
この設定であり、受信したTTML字幕データを、MPTとTTML字幕データの制御情報に規定された表示タイミングに従った表示を実行させるモードであることを示している。
(b)MPU(TTML1)には、
<p begin="156s" duration="5s">
上記字幕表示タイミング情報が記録されている。
<p begin="170s">
上記字幕表示タイミング情報が、字幕「どういたしまして」に対応付けて記録されている。
さらに、
<p begin="175s">
上記字幕表示タイミング情報が、字幕「例の件ですが」・・・「○△×*」・・に対応付けて記録されている。
これらはいずれも表示領域(r2)に対応する字幕データの表示タイミング情報として記録されている。
<p begin="180s">
上記字幕表示タイミング情報が、字幕「バタン ドアの音」に対応付けて記録されている。
これは表示領域(r3)に対応する字幕データの表示タイミング情報として記録されている。
<div region="r1">
<div region="r2">
<div region="r3">
これらのデータは、各TTML字幕データに含まれる字幕の表示領域の指定情報である。r1,r2,r3は異なる領域の指定情報である。
まず、受信装置30は、MPTを参照して、動作モードの確認を行う。
OPM=01=セグメンテーションモード
この設定であることを確認する。
すなわち、字幕表示を、MPTとTTML字幕データの制御情報に規定された表示タイミングに従って表示するモードであることを確認する。
受信装置30は、受信したMPUからTTML字幕データを取り出してTTML字幕データに記録された表示制御情報に従って、字幕データを表示する。
受信装置は、まず、(b)MPU(TTML1)を受信し、このMPUに格納されたTTML1に従った字幕表示を行う。
画像(p)は、(b)MPU(TTML1)に格納されたTTML1に従って表示される字幕重畳画像である。
TTML1に格納された字幕データ「ありがとう」を、TTML1に記録された領域指定情報の指定領域(r1)に表示する。表示タイミングは時間(t1)となる。
この時間(t1)は、TTML1に記録された字幕表示時間情報、すなわち、
<p begin="156s" duration="5s">
上記字幕表示タイミング情報に対応する時間である。
画像(q)〜(s)は、(c)MPU(TTML2)に格納されたTTML2に従って表示される字幕重畳画像である。
この画像が画像(q)となる。
表示タイミングは時間(t2)となる。この時間(t2)は、TTML2に記録された「どういたしまして」に対応する字幕表示時間情報、すなわち、
<p begin="170s">
上記字幕表示タイミング情報に対応する時間である。
この画像が画像(r)となる。
表示タイミングは時間(t3)となる。この時間(t3)は、TTML2に記録された「例の件ですが」に対応する字幕表示時間情報、すなわち、
<p begin="175s">
上記字幕表示タイミング情報に対応する時間である。
この画像が画像(s)となる。
表示タイミングは時間(t3)となる。
この字幕データ「○△×*・・・」については、TTML2に記録された「例の件ですが」に続く字幕であり、指定領域(r2)に入りきらないため、古い字幕を消去して上書きして表示される。したがって表示タイミングが指定時間(t2)からずれて表示される。なお、前述したようにロールアップ表示を行う構成としてもよい。
この画像が画像(s)となる。
表示タイミングは時間(t3)となる。この時間(t3)は、TTML2に記録された「(バタン ドアの音)」に対応する字幕表示時間情報、すなわち、
<p begin="180s">
上記字幕表示タイミング情報に対応する時間である。
この処理により、例えば映画等のコンテンツの画像のシーンと同期した字幕表示を実行することが可能となる。またこの動作モードの場合には各TTML字幕データの処理を独立して行うことができる。よって新たなTTML字幕データの処理を行う場合には以前のTTML字幕データの影響なく処理することが可能である。
次に、動作モード(OPM)が、OPM=2、すなわち、
OPM=10=プログラムモード
上記設定である場合の字幕表示制御について図36を参照して説明する。
このOPM=2のモード設定は、例えば1つの番組単位の字幕の全てを記録したTTMLファイルを準備して、送信装置から受信装置に繰り返し送信し、受信装置が1つのTTMLファイルを利用して1番組の字幕表示を実行するモードである。
(a)MPT
(b)MPUから抽出したTTML字幕データ(TTML1)
(c)MPT
これらの各データを示している。
受信装置30は、MPTをシグナリング・メッセージの送信チャンネルから取得し、TTML字幕データを含むMPUまたはMFUは字幕アセットチャンネルから取得する。
さらに、図36の下段には、時間軸(t)と、時間経過に従って適用されるTTML字幕データと字幕表示例を示している。
OPM=2(=10)
上記データが記録されている。
これは、先に図20を参照して説明したように、
OPM=10=プログラムモード
この設定であり、例えば1つの番組単位の字幕の全てを記録したTTMLファイルを利用して1つの番組の字幕表示を実行するモードである。
なお、MPUを1回伝送するだけでは伝送した後にこの放送サービスを選局した場合に字幕表示ができないので、本モードにおいては同じTTML字幕データファイルのMPUを繰り返し送信する。
字幕「ありがとう」に対して、
<p begin="156s" duration="5s">
上記字幕表示タイミング情報が記録され、
<div region="r1">
上記表示領域情報が記録されている。
<p begin="170s">
上記字幕表示タイミング情報が記録され、
<div region="r2">
上記表示領域情報が記録されている。
<p begin="175s">
上記字幕表示タイミング情報が記録されている。
<p begin="180s">
上記字幕表示タイミング情報が記録され、
<div region="r3">
上記表示領域情報が記録されている。
まず、受信装置30は、MPTを参照して、動作モードの確認を行う。
OPM=10=プログラムモード
この設定であることを確認する。
すなわち、字幕表示を、1つの番組対応の字幕をすべて記録したTTML字幕データファイルに従って表示するモードであることを確認する。
受信装置30は、番組対応のTTML字幕データを取り出してTTML字幕データに記録された表示制御情報に従って、字幕データを表示する。
受信装置は、再構築したTTML1に従った字幕表示を行う。
画像(p)は、TTML1に従って表示される字幕重畳画像である。
TTML1に格納された字幕データ「ありがとう」を、TTML1に記録された領域指定情報の指定領域(r1)に表示する。表示タイミングは時間(t1)となる。
この時間(t1)は、TTML1に記録された字幕表示時間情報、すなわち、
<p begin="156s" duration="5s">
上記字幕表示タイミング情報に対応する時間である。
画像(q)〜(s)は、TTML1に従って表示される字幕重畳画像である。
TTML1に格納された字幕データ「どういたしまして」を、TTML1に記録された領域指定情報の指定領域(r2)に表示する。
この画像が画像(q)となる。
表示タイミングは時間(t2)となる。この時間(t2)は、TTML1に記録された「どういたしまして」に対応する字幕表示時間情報、すなわち、
<p begin="170s">
上記字幕表示タイミング情報に対応する時間である。
この画像が画像(r)となる。
表示タイミングは時間(t3)となる。この時間(t3)は、TTML1に記録された「例の件ですが」に対応する字幕表示時間情報、すなわち、
<p begin="175s">
上記字幕表示タイミング情報に対応する時間である。
この画像が画像(s)となる。
表示タイミングは時間(t3)となる。
この字幕データ「○△×*・・・」については、TTML1に記録された「例の件ですが」に続く字幕であり、指定領域(r2)に入りきらないため、古い字幕を消去して上書きして表示される。したがって表示タイミングが指定時間(t2)からずれて表示される。なお、前述したようにロールアップ表示を行う構成としてもよい。
この画像が画像(s)となる。
表示タイミングは時間(t3)となる。この時間(t3)は、TTML1に記録された「(バタン ドアの音)」に対応する字幕表示時間情報、すなわち、
<p begin="180s">
上記字幕表示タイミング情報に対応する時間である。
この処理により、例えば映画等のコンテンツについて、コンテンツ表示期間内にMPUの受信、解析処理を並列に実行する必要がなくなり、受信装置の処理負荷を軽減することが可能となる。またこの動作モードの場合にも各TTML字幕データの処理を独立して行うことができる。よって新たなTTML字幕データの処理を行う場合には以前のTTML字幕データの影響なく処理することが可能である。
先に説明したように、MPTに記録される動作モード(OPM)は、
00=ライブモード(Live mode)
01=セグメンテーションモード(Segmentation mode)
10=プログラムモード(Program mode)
これらのモード設定が可能な構成となっている。
01=セグメンテーションモード(Segmentation mode)は、映画コンテンツのように、予め字幕データが準備されたコンテンツに適用されるモードであり、MPTとTTML字幕データの制御情報に規定された表示タイミングに従った表示を実行させる場合のモードである。
10=プログラムモード(Program mode)は、例えば1つの番組単位の字幕の全てを記録したTTMLファイルを準備して、送信装置から受信装置に送信し、受信装置が1つのTTMLファイルを利用して1番組の字幕表示を実行するモードである。
OPM=00=受信TTMLに従った字幕の即時表示を行う、
OPM=01=受信TTMLに記録されたタイミングに基づいて字幕表示を行う、
これらの差異である。
従って、受信TTMLに字幕の表示タイミングの記述が含まれない場合は即時表示を行うというルールに従う設定とした場合、すべてOPM=01とすることも可能である。
ただし、前述した通りOPM=00の場合には、以前受信したTTML字幕データと独立して処理できないケースが存在する。一方でOPM=01の場合には各TTML字幕データは独立して処理することが可能である。受信装置における処理としては、新たに受信したTTML字幕データを直前のTTML字幕データ表示用データ格納用メモリ領域に上書きしてよいか、あるいは一旦別の領域に格納して関係性を確認すべきか判断する情報が必要である。つまり先行受信したTTML字幕データに基づく字幕表示と独立処理の可否を示すフラグ(独立処理可否フラグ)を、MPTに設定する構成としてもよい。
次に、図37、図38に示すフローチャートを参照して、送信装置と受信装置の実行する処理シーケンスについて説明する。
まず、図37に示すフローチャートを参照して送信装置20の実行する処理について説明する。図37に示すフローに従った処理は、送信装置20のデータ処理部において実行される。例えばデータ処理部内のプログラム実行機能を有するCPUの制御の下、記憶部に格納されたプログラムに従って実行される。
なお、図37に示すフローは、字幕に対する処理を中心として説明するフローである。
MPUは、TTML字幕データを格納した字幕種類に応じたアセット対応のユニットである。MPUは、字幕種類ごとに規定されるアセット単位のデータとして生成する。
字幕種類とは、言語の種類のみならず、字幕チャンネルタグや、字幕タイプ等によっても区別される。
MPTには、アセット単位で制御情報や属性情報が記録され、同一アセットに属するTTML文字データは、同一の制御がなされることになる。
MPTは、先に図9〜図12、図16〜図22を参照して説明した複数の字幕関連の制御情報や属性情報を格納したテーブルである。
前述したようにMPTの字幕情報記述子[subtitle descriptor]記録フィールドには、以下の記述子が記録される。
(1)言語コード(ISO_639_language_code)
(2)字幕タイプ(Type)
(3)タイムモード(TMD)
(4)表示モード(DMF)
(5)動作モード(OPM)
(6)表示書式(Format)
(7)圧縮モード(Compression_mode)
なお、送信装置20は、この他、画像、音声を格納したパケットや、その他の制御情報を格納したパケットも生成して送信する。
なお、図30に示すフローは、字幕に対する処理を中心として説明するフローである。
ステップS202において、受信パケットのアセット識別子(MMTパケットのパケットID)に基づいて、データ種類ごと(画像、音声、字幕等)のパケットに分類する。
図39は、送信装置20、受信装置30として適用可能な通信装置のハードウェア構成例を示している。
以上、特定の実施例を参照しながら、本開示の実施例について詳解してきた。しかしながら、本開示の要旨を逸脱しない範囲で当業者が実施例の修正や代用を成し得ることは自明である。すなわち、例示という形態で本発明を開示してきたのであり、限定的に解釈されるべきではない。本開示の要旨を判断するためには、特許請求の範囲の欄を参酌すべきである。
(1) TTML(Timed Text Markup Language)字幕データをMMT(MPEG Media Transport)フォーマットにおいて規定されるMMTパケットのペイロードとして格納したTTML字幕データ格納パケットと、
前記TTML字幕データに対応する字幕対応情報をシグナリング・メッセージとして受信する通信部と、
前記TTML字幕データと、前記シグナリング・メッセージを適用した字幕表示制御を実行するデータ処理部を有する受信装置。
(a)TTML字幕データを受信後、即時表示させるライブモード、
(b)TTML字幕データを、TTML記述に従って表示させるセグメンテーションモード、
(c)番組単位のTTML字幕データを利用した字幕表示処理を実行させるプログラムモード、
上記(a)〜(c)のモードを指定可能な構成を有し、
前記データ処理部は、MPTに記録された動作モード指定情報に従った表示制御を実行する前記(12)に記載の受信装置。
前記TTML字幕データに対応する字幕対応情報を含むシグナリング・メッセージを生成するデータ処理部と、
前記TTML字幕データ格納パケットと、前記シグナリング・メッセージを送信する通信部を有する送信装置。
(a)EIT(Envent Information Table)、
(b)NPT(Normal Play Time)、
(c)絶対時刻、
(d)コンテンツ開始時間を示す高精度な参照スタートタイム(reference_starttime)、
(e)TTML字幕データの処理時間を規定したMPUタイムスタンプ、
上記(a)〜(e)のいずれかの情報を選択的に適用して字幕表示タイミングを決定させるタイムモード(TMD)指定情報を含むシグナリング・メッセージを生成する前記(14)〜(16)ていずれかに記載の送信装置。
通信部が、TTML(Timed Text Markup Language)字幕データをMMT(MPEG Media Transport)フォーマットにおいて規定されるMMTパケットのペイロードとして格納したTTML字幕データ格納パケットと、
前記TTML字幕データに対応する字幕対応情報をシグナリング・メッセージとして受信し、
データ処理部が、前記TTML字幕データと、前記シグナリング・メッセージを適用した字幕表示制御を実行するデータ処理方法。
データ処理部が、TTML(Timed Text Markup Language)字幕データをMMT(MPEG Media Transport)フォーマットにおいて規定されるMMTパケットのペイロードとして格納したTTML字幕データ格納パケットと、
前記TTML字幕データに対応する字幕対応情報を含むシグナリング・メッセージを生成し、
通信部が、前記TTML字幕データ格納パケットと、前記シグナリング・メッセージを送信するデータ処理方法。
具体的には、TTML字幕データをMMTフォーマットにおいて規定されるMMTパケットのペイロードとして格納したTTML字幕データ格納パケットと、TTML字幕データに対応する字幕対応情報をシグナリング・メッセージとして送信装置から受信装置に送信する。シグナリング・メッセージは、字幕表示タイミングの制御モードであるタイムモード(TMD)や、字幕の即時表示やTTML記述に従った表示等を選択的に実行させる動作モード(OPM)を規定しており、受信装置はモード指定に応じた表示制御が可能となる。
本構成により、TTML字幕データの確実な表示制御を実現する装置、方法が実現される。
20 送信装置
21 放送局
30 受信装置
31 TV
32 PC
33 携帯端末
51 コンテンツ提供部
52 情報処理部
53 クロック信号生成部
54 画像データ処理部
55 音声データ処理部
56 字幕データ処理部
57 シグナリングデータ処理部
58 TLVシグナリングデータ処理部
59 IPサービスマルチプレクサ
60 TLVマルチプレクサ
61 通信部
71 通信部
72 デマルチフレクサ
73 TLV処理部
74 UDP/IP処理部
75 MMT処理部
76 MMT−SIフィルタ
77 TLV=SIフィルタ
78 クロック信号生成部
79 画像データ処理部
80 音声データ処理部
81 字幕データ処理部
82 制御部
83 重畳部
91 画像MPU
92 音声MPU
93〜95 字幕MPU
96 シグナリング・メッセージ
401 CPU
402 ROM
403 RAM
404 バス
405 入出力インタフェース
406 入力部
407 出力部
408 記憶部
409 通信部
410 ドライブ
411 リムーバブルメディア
Claims (20)
- TTML(Timed Text Markup Language)字幕データをMMT(MPEG Media Transport)フォーマットにおいて規定されるMMTパケットのペイロードとして格納したTTML字幕データ格納パケットと、
前記TTML字幕データに対応する字幕対応情報をシグナリング・メッセージとして受信する通信部と、
前記TTML字幕データと、前記シグナリング・メッセージを適用した字幕表示制御を実行するデータ処理部を有する受信装置。 - 前記TTML字幕データ格納パケットは、1つのTTML字幕データファイルを、MMTフォーマットにおいて規定されるMPU(Media presentation unit)として設定したMMTパケットである請求項1に記載の受信装置。
- 前記シグナリング・メッセージは、MMTフォーマットにおいて規定されるMPT(MMTパッケージテーブル)に字幕対応情報が記録されたメッセージである請求項1に記載の受信装置。
- 前記MPTは、字幕種類単位で設定されるアセット単位の字幕表示制御情報を含み、
前記データ処理部は、
前記MPTに記録されたアセット単位の字幕表示制御情報に従って字幕表示制御を行う請求項3に記載の受信装置。 - 前記MPTは、字幕表示タイミングを規定したタイムモード(TMD)の設定情報を含み、
前記データ処理部は、MPTに記録されたタイムモード(TMD)の設定モードに応じた字幕表示タイミングの制御を実行する請求項3に記載の受信装置。 - 前記MPTのタイムモード(TMD)は、TTML記述とEIT(Envent Information Table)を利用したモードを指定可能な構成を有し、
前記データ処理部は、MPTのタイムモードの設定が、TTML記述とEITの利用を指定するモードである場合、TTML字幕データに記述された表示タイミング制御情報と、EITから得られるコンテンツ開始時間情報を利用して字幕表示タイミングを決定する請求項5に記載の受信装置。 - 前記MPTのタイムモード(TMD)は、TTML記述とNPT(Normal Play Time)を利用したモードを指定可能な構成を有し、
前記データ処理部は、MPTのタイムモードの設定が、TTML記述とNPTの利用を指定するモードである場合、TTML字幕データに記述された表示タイミング制御情報と、NPT参照情報から得られるNPT時間情報とUTC(コーディネィテッド・ユニバーサルタイム)時間情報との対応データを利用して字幕表示タイミングを決定する請求項5に記載の受信装置。 - 前記MPTのタイムモード(TMD)は、TTML記述と絶対時刻を利用したモードを指定可能な構成を有し、
前記データ処理部は、MPTのタイムモードの設定が、TTML記述と絶対時刻の利用を指定するモードである場合、TTML字幕データに記述された表示タイミング制御情報と、絶対時刻を利用して字幕表示タイミングを決定する請求項5に記載の受信装置。 - 前記MPTのタイムモード(TMD)は、TTML記述と、EITまたはMPTに記録されたコンテンツ開始時間を示す高精度な時間情報である参照スタートタイム(reference_starttime)を利用したモード指定可能な構成を有し、
前記データ処理部は、MPTのタイムモードの設定が、TTML記述と、EITまたはMPTに記録された時間情報(reference starttime)の利用指定モードである場合、TTML字幕データに記述された表示タイミング制御情報と、EITまたはMPTに記録された時間情報(reference starttime)を利用して字幕表示タイミングを決定する請求項5に記載の受信装置。 - 前記MPTのタイムモード(TMD)は、MPTに記録されたMPUタイムスタンプを利用したモードを指定可能な構成を有し、
前記データ処理部は、MPTのタイムモードの設定が、MPUタイムスタンプの利用を指定するモードである場合、MPTに記録されたMPUタイムスタンプを利用して字幕表示タイミングを決定する請求項5に記載の受信装置。 - 前記MPTのタイムモード(TMD)は、TTML字幕データの表示タイミング制御なしを示すモードを指定可能な構成を有し、
前記データ処理部は、MPTのタイムモードの設定が、TTML字幕データの表示タイミング制御なしを示すモードである場合、TTML字幕データを即時表示する字幕表示タイミング制御を行う請求項5に記載の受信装置。 - 前記MPTは、字幕表示制御情報を規定した動作モード(OPM)の設定情報を含み、
前記データ処理部は、MPTに記録された動作モード(OPM)の設定モードに応じた字幕表示制御を実行する請求項3に記載の受信装置。 - 前記MPTの動作モード(OPM)は、
(a)TTML字幕データを受信後、即時表示させるライブモード、
(b)TTML字幕データを、TTML記述に従って表示させるセグメンテーションモード、
(c)番組単位のTTML字幕データを利用した字幕表示処理を実行させるプログラムモード、
上記(a)〜(c)のモードを指定可能な構成を有し、
前記データ処理部は、MPTに記録された動作モード指定情報に従った表示制御を実行する請求項12に記載の受信装置。 - TTML(Timed Text Markup Language)字幕データをMMT(MPEG Media Transport)フォーマットにおいて規定されるMMTパケットのペイロードとして格納したTTML字幕データ格納パケットと、
前記TTML字幕データに対応する字幕対応情報を含むシグナリング・メッセージを生成するデータ処理部と、
前記TTML字幕データ格納パケットと、前記シグナリング・メッセージを送信する通信部を有する送信装置。 - 前記TTML字幕データ格納パケットは、1つのTTML字幕データファイルを、MMTフォーマットにおいて規定されるMPU(Media presentation unit)として設定したMMTパケットである請求項14に記載の送信装置。
- 前記データ処理部は、MMTフォーマットにおいて規定されるMPT(MMTパッケージテーブル)に、字幕種類単位で設定されるアセット単位の字幕表示制御情報を記録したシグナリング・メッセージを生成する請求項14に記載の送信装置。
- 前記データ処理部は、
(a)EIT(Envent Information Table)、
(b)NPT(Normal Play Time)、
(c)絶対時刻、
(d)コンテンツ開始時間を示す高精度な参照スタートタイム(reference_starttime)、
(e)TTML字幕データの処理時間を規定したMPUタイムスタンプ、
上記(a)〜(e)のいずれかの情報を選択的に適用して字幕表示タイミングを決定させるタイムモード(TMD)指定情報を含むシグナリング・メッセージを生成する請求項14に記載の送信装置。 - 前記データ処理部は、TTML字幕データの即時表示、またはTTML記述に従った表示を選択的に実行させる動作モード(OPM)指定情報を含むシグナリング・メッセージを生成する請求項14に記載の送信装置。
- 受信装置において実行するデータ処理方法であり、
通信部が、TTML(Timed Text Markup Language)字幕データをMMT(MPEG Media Transport)フォーマットにおいて規定されるMMTパケットのペイロードとして格納したTTML字幕データ格納パケットと、
前記TTML字幕データに対応する字幕対応情報をシグナリング・メッセージとして受信し、
データ処理部が、前記TTML字幕データと、前記シグナリング・メッセージを適用した字幕表示制御を実行するデータ処理方法。 - 送信装置において実行するデータ処理方法であり、
データ処理部が、TTML(Timed Text Markup Language)字幕データをMMT(MPEG Media Transport)フォーマットにおいて規定されるMMTパケットのペイロードとして格納したTTML字幕データ格納パケットと、
前記TTML字幕データに対応する字幕対応情報を含むシグナリング・メッセージを生成し、
通信部が、前記TTML字幕データ格納パケットと、前記シグナリング・メッセージを送信するデータ処理方法。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014098664A JP6331670B2 (ja) | 2014-05-12 | 2014-05-12 | 受信装置、および送信装置、並びにデータ処理方法 |
EP14892054.9A EP3145205B1 (en) | 2014-05-12 | 2014-12-05 | Reception device, transmission device, and data processing method |
US15/308,518 US9807448B2 (en) | 2014-05-12 | 2014-12-05 | Reception device, transmission device, and data processing method |
CN201480078642.1A CN106464961B (zh) | 2014-05-12 | 2014-12-05 | 接收装置、发送装置以及数据处理方法 |
KR1020167027793A KR102256350B1 (ko) | 2014-05-12 | 2014-12-05 | 수신 장치, 및 송신 장치, 및 데이터 처리 방법 |
PCT/JP2014/082260 WO2015173986A1 (ja) | 2014-05-12 | 2014-12-05 | 受信装置、および送信装置、並びにデータ処理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014098664A JP6331670B2 (ja) | 2014-05-12 | 2014-05-12 | 受信装置、および送信装置、並びにデータ処理方法 |
Related Child Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014246865A Division JP5713141B1 (ja) | 2014-12-05 | 2014-12-05 | 受信装置、およびデータ処理方法 |
JP2014246866A Division JP5713142B1 (ja) | 2014-12-05 | 2014-12-05 | 受信装置、およびデータ処理方法 |
JP2014246864A Division JP5713140B1 (ja) | 2014-12-05 | 2014-12-05 | 受信装置、およびデータ処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015216524A true JP2015216524A (ja) | 2015-12-03 |
JP6331670B2 JP6331670B2 (ja) | 2018-05-30 |
Family
ID=54479548
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014098664A Expired - Fee Related JP6331670B2 (ja) | 2014-05-12 | 2014-05-12 | 受信装置、および送信装置、並びにデータ処理方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US9807448B2 (ja) |
EP (1) | EP3145205B1 (ja) |
JP (1) | JP6331670B2 (ja) |
KR (1) | KR102256350B1 (ja) |
CN (1) | CN106464961B (ja) |
WO (1) | WO2015173986A1 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016006958A (ja) * | 2014-05-30 | 2016-01-14 | 日本放送協会 | 送信装置および受信装置、ならびにプログラム |
CN108702529A (zh) * | 2016-01-19 | 2018-10-23 | 索尼公司 | 发送设备、发送方法、接收设备和接收方法 |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3226566B1 (en) * | 2014-11-26 | 2022-03-30 | Sony Group Corporation | Transmission device, transmission method, reception device, and reception method |
US10085051B2 (en) * | 2015-02-13 | 2018-09-25 | Samsung Electronics Co., Ltd. | Method and apparatus for converting MMTP stream to MPEG-2TS |
KR101743441B1 (ko) * | 2015-02-13 | 2017-06-05 | 에스케이텔레콤 주식회사 | 기지국 연동 노드를 통한 스트리밍 데이터 제공 방법, 이를 위한 기지국 연동 노드 |
CN107735996A (zh) * | 2015-05-11 | 2018-02-23 | 诺基亚通信公司 | 利用单个udp数据报发送多个g‑pdu |
US10230812B1 (en) * | 2016-01-29 | 2019-03-12 | Amazon Technologies, Inc. | Dynamic allocation of subtitle packaging |
EP3573341B1 (en) * | 2017-03-29 | 2022-07-13 | Samsung Electronics Co., Ltd. | Device and method for transmitting and receiving signal in multimedia system |
CN110708148A (zh) * | 2018-07-09 | 2020-01-17 | 华为技术有限公司 | 一种信令字段指示方法及装置 |
JP7113427B2 (ja) | 2018-09-26 | 2022-08-05 | 横河電機株式会社 | 測定装置、および測定方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012169885A (ja) * | 2011-02-15 | 2012-09-06 | Sony Corp | 表示制御方法、記録媒体、表示制御装置 |
JP2012203683A (ja) * | 2011-03-25 | 2012-10-22 | Toshiba Corp | 情報処理装置及び方法 |
WO2013088986A1 (ja) * | 2011-12-16 | 2013-06-20 | ソニー株式会社 | 受信装置及びその制御方法、配信装置及び配信方法、プログラム、並びに配信システム |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3577794B2 (ja) * | 1995-07-18 | 2004-10-13 | ソニー株式会社 | データ復号化装置 |
US20030093790A1 (en) * | 2000-03-28 | 2003-05-15 | Logan James D. | Audio and video program recording, editing and playback systems using metadata |
JP2003284010A (ja) | 2002-03-26 | 2003-10-03 | Mitsubishi Electric Corp | 符号化装置及びメディアデータ同期方法 |
US7519274B2 (en) * | 2003-12-08 | 2009-04-14 | Divx, Inc. | File format for multiple track digital data |
CN102857796B (zh) * | 2004-02-04 | 2015-05-27 | 爱立信电视公司 | Itv环境中的同步和自动化 |
JP2006238147A (ja) * | 2005-02-25 | 2006-09-07 | Toshiba Corp | コンテンツ再生装置、字幕再生方法及びプログラム |
JP2007179611A (ja) * | 2005-12-27 | 2007-07-12 | Toshiba Corp | 動画像再生装置及び動画像再生方法 |
CN100411431C (zh) * | 2006-03-15 | 2008-08-13 | 华为技术有限公司 | 一种视频节目中字幕的显示方法及*** |
US8914826B2 (en) * | 2008-12-23 | 2014-12-16 | Verizon Patent And Licensing Inc. | Method and system for creating a chapter menu for a video program |
JP5409082B2 (ja) | 2009-04-01 | 2014-02-05 | キヤノン株式会社 | 映像処理装置およびその制御方法 |
JP5533162B2 (ja) * | 2010-04-08 | 2014-06-25 | ソニー株式会社 | 情報処理装置、情報処理システム、および情報処理方法、並びにプログラム |
KR20110115103A (ko) * | 2010-04-14 | 2011-10-20 | 삼성전자주식회사 | 디지털 자막 방송을 위한 방송 비트스트림을 생성하는 방법 및 그 장치, 디지털 자막 방송을 위한 방송 비트스트림을 수신하는 방법 및 그 장치 |
CN102098455A (zh) * | 2011-01-21 | 2011-06-15 | 四川长虹电器股份有限公司 | 一种在电视机上支持多种格式字幕显示的*** |
US20130169762A1 (en) * | 2011-07-15 | 2013-07-04 | Hitachi Consumer Electronics, Ltd. | Receiving apparatus, receiving method and transmitting apparatus |
CN103688532B (zh) * | 2011-07-29 | 2018-05-04 | 索尼公司 | 流式传输分发装置和方法、流式传输接收装置和方法、流式传输*** |
HUE062523T2 (hu) * | 2011-08-24 | 2023-11-28 | Saturn Licensing Llc | Vevõberendezés, vételi eljárás, program és információ feldolgozó rendszer |
US9883247B2 (en) * | 2012-08-13 | 2018-01-30 | Saturn Licensing Llc | Reception apparatus, reception method, transmission apparatus, and transmission method |
US20160014482A1 (en) * | 2014-07-14 | 2016-01-14 | The Board Of Trustees Of The Leland Stanford Junior University | Systems and Methods for Generating Video Summary Sequences From One or More Video Segments |
-
2014
- 2014-05-12 JP JP2014098664A patent/JP6331670B2/ja not_active Expired - Fee Related
- 2014-12-05 CN CN201480078642.1A patent/CN106464961B/zh active Active
- 2014-12-05 WO PCT/JP2014/082260 patent/WO2015173986A1/ja active Application Filing
- 2014-12-05 US US15/308,518 patent/US9807448B2/en active Active
- 2014-12-05 EP EP14892054.9A patent/EP3145205B1/en active Active
- 2014-12-05 KR KR1020167027793A patent/KR102256350B1/ko active IP Right Grant
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012169885A (ja) * | 2011-02-15 | 2012-09-06 | Sony Corp | 表示制御方法、記録媒体、表示制御装置 |
JP2012203683A (ja) * | 2011-03-25 | 2012-10-22 | Toshiba Corp | 情報処理装置及び方法 |
WO2013088986A1 (ja) * | 2011-12-16 | 2013-06-20 | ソニー株式会社 | 受信装置及びその制御方法、配信装置及び配信方法、プログラム、並びに配信システム |
Non-Patent Citations (4)
Title |
---|
GLENN ADAMS, COX COMMUNICATIONS, INC., TIMED TEXT MARKUP LANGUAGE 1 (TTML1) (SECOND EDITION) , [ONLINE], JPN6014055361, 24 September 2013 (2013-09-24), ISSN: 0003698589 * |
KYUNGMO PARK, YOUNGKWON LIM, SHUICHI AOKI, GERARD FERNANDO, JIN YOUNG LEE, TEXT OF ISO/IEC 2ND CD 23008-1 MPEG MEDIA TRANSPORT, [ONLINE], JPN6014055362, January 2013 (2013-01-01), pages 46 - 52, ISSN: 0003698590 * |
デジタル放送におけるデータ放送符号化方式と伝送方式 ARIB STD−B24, vol. 5.6版, JPN6014055360, 25 September 2012 (2012-09-25), JP, pages 170 - 180, ISSN: 0003698588 * |
一般社団法人電波産業会デジタル放送システム開発部会, 超高精細度テレビジョン放送システムに関する中間報告(多重化方式), [ONLINE], JPN6014055363, 25 November 2013 (2013-11-25), ISSN: 0003698591 * |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016006958A (ja) * | 2014-05-30 | 2016-01-14 | 日本放送協会 | 送信装置および受信装置、ならびにプログラム |
JP6444015B1 (ja) * | 2014-05-30 | 2018-12-26 | 日本放送協会 | 送信装置および受信装置、ならびにプログラム |
JP2019009818A (ja) * | 2014-05-30 | 2019-01-17 | 日本放送協会 | 送信装置および受信装置、ならびにプログラム |
CN108702529A (zh) * | 2016-01-19 | 2018-10-23 | 索尼公司 | 发送设备、发送方法、接收设备和接收方法 |
EP3407611A4 (en) * | 2016-01-19 | 2018-11-28 | Sony Corporation | Transmission device, transmission method, reception device, and reception method |
US11290785B2 (en) | 2016-01-19 | 2022-03-29 | Sony Corporation | Transmission apparatus, transmission method, reception apparatus, and reception method for transmitting subtitle text information |
Also Published As
Publication number | Publication date |
---|---|
CN106464961A (zh) | 2017-02-22 |
US20170064371A1 (en) | 2017-03-02 |
EP3145205A4 (en) | 2018-01-17 |
WO2015173986A1 (ja) | 2015-11-19 |
KR20170007246A (ko) | 2017-01-18 |
JP6331670B2 (ja) | 2018-05-30 |
US9807448B2 (en) | 2017-10-31 |
CN106464961B (zh) | 2019-12-13 |
KR102256350B1 (ko) | 2021-05-27 |
EP3145205A1 (en) | 2017-03-22 |
EP3145205B1 (en) | 2019-08-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6331670B2 (ja) | 受信装置、および送信装置、並びにデータ処理方法 | |
KR101946861B1 (ko) | 멀티미디어 방송 서비스의 미디어 데이터 동기화 방법 및 장치 | |
KR101828639B1 (ko) | 멀티미디어 흐름을 동기화시키기 위한 방법 및 대응하는 장치 | |
JP5713140B1 (ja) | 受信装置、およびデータ処理方法 | |
KR20140093763A (ko) | 미디어 파일 송수신 방법 및 그를 이용한 송수신 장치 | |
JP6323536B2 (ja) | 受信装置および受信方法 | |
JP2018182677A (ja) | 情報処理装置、情報処理方法、プログラム、および記録媒体製造方法 | |
JP5713142B1 (ja) | 受信装置、およびデータ処理方法 | |
JP2018182617A (ja) | 情報処理装置、情報処理方法、プログラム、および記録媒体製造方法 | |
JP5713141B1 (ja) | 受信装置、およびデータ処理方法 | |
JP5874870B1 (ja) | 受信装置、および送信装置、並びにデータ処理方法 | |
JP6303969B2 (ja) | 受信装置並びに受信方法 | |
JP6551558B2 (ja) | 受信装置並びに受信方法 | |
JP6988974B2 (ja) | 送信方法及び送信装置 | |
JP2022019878A (ja) | 受信方法及び受信装置 | |
JP2020053999A (ja) | 送信装置及び送信方法、並びに受信装置及び受信方法 | |
JP2019161677A (ja) | 受信装置及び受信方法、並びに送信方法 | |
KR20190125967A (ko) | 멀티미디어 시스템에서 신호를 송신 및 수신하는 장치 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170111 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20171212 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180208 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180403 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180416 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6331670 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |