JP7037598B2 - Video transmitter - Google Patents

Video transmitter Download PDF

Info

Publication number
JP7037598B2
JP7037598B2 JP2020077499A JP2020077499A JP7037598B2 JP 7037598 B2 JP7037598 B2 JP 7037598B2 JP 2020077499 A JP2020077499 A JP 2020077499A JP 2020077499 A JP2020077499 A JP 2020077499A JP 7037598 B2 JP7037598 B2 JP 7037598B2
Authority
JP
Japan
Prior art keywords
unit
video signal
video
uncompressed
transmission
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020077499A
Other languages
Japanese (ja)
Other versions
JP2020120409A (en
Inventor
展明 甲
晃 柴田
嘉章 水橋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Maxell Ltd
Original Assignee
Maxell Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Maxell Ltd filed Critical Maxell Ltd
Priority to JP2020077499A priority Critical patent/JP7037598B2/en
Publication of JP2020120409A publication Critical patent/JP2020120409A/en
Priority to JP2021202422A priority patent/JP7352611B2/en
Application granted granted Critical
Publication of JP7037598B2 publication Critical patent/JP7037598B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、デジタル映像信号の伝送方法と、例えばデジタル放送信号を受信するための
STB(Set top box)や、テレビジョン表示装置などの映像処理装置に関する。
The present invention is a method for transmitting a digital video signal and, for example, for receiving a digital broadcast signal.
Related to video processing devices such as STBs (Set top boxes) and television display devices.

地上波デジタル放送によるHD(High Definition)放送の普及とHD放送を録画できる
Blu-ray(登録商標)レコーダの発売により、高画質なHD映像を画質劣化無くT
Vへ伝送できるデジタル映像インターフェースへのニーズが高まってきている。非圧縮映
像信号伝送のインターフェースとしては、DDWGが策定したDVI(Digital Visual I
nterface)やHDMI,LLCがライセンスするHDMI(High Definition Multimedia
Interface、登録商標)がある。また、MPEG等で圧縮された映像信号伝送のインター
フェースとしては、IEEE1394やLAN等がある。非圧縮映像信号伝送のインター
フェースをテレビジョン機器に適用する従来技術として、例えば非特許文献1に記載され
ている。これは、パケット化されていない非圧縮映像信号に映像のフォーマット情報をパ
ケット化して多重伝送することを開示する。またHDMIでは音声データもパケット化し
て伝送している。圧縮映像信号伝送のインターフェースをテレビジョン機器に適用する従
来技術としては、例えば非特許文献2に記載されている。また、これらに使用される著作
権保護技術の例として、非圧縮映像についてはHDCP(High-bandwidth Digital Conte
nt Protection System)が、圧縮映像についてはDTCP(Digital Transmission Conte
nt Protection)がある。
With the spread of HD (High Definition) broadcasting by terrestrial digital broadcasting and the release of the Blu-ray (registered trademark) recorder that can record HD broadcasting, high-definition HD video can be recorded without deterioration.
There is an increasing need for a digital video interface that can transmit to V. As an interface for uncompressed video signal transmission, DVI (Digital Visual I) formulated by DDWG
HDMI (High Definition Multimedia) licensed by nterface), HDMI, and LLC
Interface (registered trademark). Further, as an interface for transmitting a video signal compressed by MPEG or the like, there are IEEE1394, LAN and the like. As a conventional technique for applying an interface for uncompressed video signal transmission to a television device, for example, Non-Patent Document 1 is described. This discloses that the format information of the video is packetized and multiplex transmitted to the uncompressed video signal which is not packetized. In HDMI, voice data is also transmitted in packets. As a conventional technique for applying a compressed video signal transmission interface to a television device, for example, Non-Patent Document 2 is described. As an example of the copyright protection technology used for these, HDCP (High-bandwidth Digital Conte) is used for uncompressed video.
nt Protection System), but for compressed video, DTCP (Digital Transmission Conte)
nt Protection).

また、非圧縮映像信号と圧縮映像信号をそれぞれパケット化して同時にシリアル伝送す
るSDDI(Serial Digital Data Interface)方式が、例えば特許文献1に記載されて
いる。
Further, for example, Patent Document 1 describes an SDDI (Serial Digital Data Interface) method in which an uncompressed video signal and a compressed video signal are packetized and serially transmitted at the same time.

特開平8-307455号公報Japanese Unexamined Patent Publication No. 8-307455

規格書「CEA-861-B」米国CEA 2002年Standard "CEA-861-B" US CEA 2002 規格書「CEA-775-B」米国CEA 2004年Standard "CEA-775-B" US CEA 2004

今後、信号ソースの種類が増加することが予想され、TVは非圧縮映像信号と圧縮映像
信号の入力インターフェースが要求される場合が増えてくる。しかしながら、コネクタの
異なる2種のインターフェースをテレビジョン機器(テレビジョン受信機等)に設ける場
合は、コネクタスペースの確保や2種類のケーブルの用意が必要である。特許文献1は、
非圧縮映像信号と圧縮映像信号とを同時に伝送する方式を開示するが、これは放送局に適
した伝送方式である。すなわち特許文献1に記載の伝送方式は、非圧縮映像信号がパケッ
ト化されているため、これを一般家庭向けのテレビジョン機器に適用することは困難であ
る。
It is expected that the types of signal sources will increase in the future, and TVs will increasingly be required to have input interfaces for uncompressed video signals and compressed video signals. However, when two types of interfaces with different connectors are provided in a television device (television receiver or the like), it is necessary to secure a connector space and prepare two types of cables. Patent Document 1
A method of simultaneously transmitting an uncompressed video signal and a compressed video signal is disclosed, which is a transmission method suitable for a broadcasting station. That is, in the transmission method described in Patent Document 1, since the uncompressed video signal is packetized, it is difficult to apply it to television equipment for general households.

また取り扱うインターフェースの種類に応じて、使用される著作権保護技術の種類も増
加する。このような場合でも、適切に著作権保護技術に対応することが必要となる。
Also, the types of copyright protection technology used will increase depending on the type of interface handled. Even in such a case, it is necessary to appropriately deal with copyright protection technology.

本発明は、上記の課題に鑑みて為されたものであり、その目的は、非圧縮映像信号と圧
縮映像信号の両方を伝送可能なインターフェースに関する技術を提供することにある。ま
た本発明は、好適に著作権の保護が可能な技術を提供すること別の目的とするものである
The present invention has been made in view of the above problems, and an object of the present invention is to provide a technique relating to an interface capable of transmitting both an uncompressed video signal and a compressed video signal. Another object of the present invention is to provide a technique capable of suitably protecting copyright.

上記目的を解決するために、本発明の一態様は、映像送信装置であって、所定の圧縮符号化方式で圧縮符号化された圧縮映像信号と非圧縮映像信号とを多重化処理して多重化映像信号を生成する多重化部と、前記多重化映像信号における前記非圧縮映像信号に対し、複数種類の暗号化処理のなかから選択された前記非圧縮映像信号に対応した所定の暗号化処理を施す暗号化処理部と、前記暗号化処理された非圧縮映像信号が多重された前記多重化映像信号を外部機器へ出力するための出力部と、前記暗号化処理部において選択される前記所定の暗号化処理に応じて、前記出力される非圧縮映像信号の画質を制限するための手段と、を備えることを特徴とする。 In order to solve the above object, one aspect of the present invention is a video transmission device, in which a compressed video signal compressed and encoded by a predetermined compression coding method and an uncompressed video signal are multiplexed and multiplexed. A predetermined encryption process corresponding to the uncompressed video signal selected from a plurality of types of encryption processes for the multiplexed unit that generates the decrypted video signal and the uncompressed video signal in the multiplexed video signal. An encryption processing unit for performing the above, an output unit for outputting the multiplexed video signal to which the encrypted uncompressed video signal is multiplexed, and the predetermined object selected by the encryption processing unit. It is characterized by comprising means for limiting the image quality of the output uncompressed video signal according to the encryption process of the above.

また本発明の一態様は、上記映像送信装置において、前記圧縮映像信号は、前記非圧縮映像信号の帰線期間に重畳されるようにしてもよい。 Further, in one aspect of the present invention, in the video transmission device, the compressed video signal may be superimposed on the blanking interval of the uncompressed video signal .

本発明によれば、非圧縮映像信号と圧縮映像信号に共通なインターフェースを提供でき
る。また、好適な著作権の保護が可能となる。
According to the present invention, it is possible to provide an interface common to uncompressed video signals and compressed video signals. In addition, suitable copyright protection is possible.

本発明に係る映像処理装置の第1実施例を示すブロック図The block diagram which shows the 1st Embodiment of the image processing apparatus which concerns on this invention. 映像処理装置の送信部と受信部の一構成例を示すブロック図A block diagram showing an example of a configuration of a transmitter and a receiver of a video processing device. 圧縮映像のパケット構造の一例を示す図Diagram showing an example of the packet structure of compressed video 本発明に係る映像処理装置の第2実施例を示すブロック図A block diagram showing a second embodiment of the video processing apparatus according to the present invention. 本発明に係る映像処理装置の第3実施例を示すブロック図A block diagram showing a third embodiment of the video processing apparatus according to the present invention. 第3実施例における映像処理装置の映像信号の流れを示すブロック図Block diagram showing the flow of the video signal of the video processing device in the third embodiment 第3実施例における出力回路と入力回路の一構成例を示す図The figure which shows one configuration example of an output circuit and an input circuit in 3rd Example 映像処理装置の出力回路と入力回路の基本的な構成例を示す図A diagram showing a basic configuration example of an output circuit and an input circuit of a video processing device. 本発明に係る映像処理装置の第4実施例を示すブロック図The block diagram which shows the 4th Embodiment of the image processing apparatus which concerns on this invention. 第4実施例における出力回路と入力回路の一構成例を示す図The figure which shows one configuration example of an output circuit and an input circuit in 4th Embodiment

以下、本発明の最良の実施液体について、図面を参照しつつ以下に説明する。本発明は
、非圧縮映像信号と圧縮映像信号とを共通の(同一の)インターフェースで同時に伝送す
るものである。そしてこのような伝送を、普及し始めたDVIやHDMIなどの非圧縮デ
ジタルインターフェースとの相互接続性を維持しつつ実現したものである。尚、いかに説
明される実施例において、映像処理装置は、例えばデジタルチューナを内蔵するSTBや
、テレビジョン表示装置等(以下、「TV」と称す)を含むものである。勿論、以下の実
施例は、これらの機器以外にも適用できる。
Hereinafter, the best working liquid of the present invention will be described below with reference to the drawings. The present invention simultaneously transmits an uncompressed video signal and a compressed video signal through a common (same) interface. And such transmission is realized while maintaining interoperability with uncompressed digital interfaces such as DVI and HDMI which have begun to spread. In the embodiment described above, the video processing device includes, for example, an STB having a built-in digital tuner, a television display device, and the like (hereinafter referred to as “TV”). Of course, the following examples can be applied to devices other than these devices.

図1は、本発明に係る第1実施例のブロック図であり、映像処理装置の一例であるST
B(Set Top Box)11と、映像処理装置の他の例であるTV12、及び外出先で映像を
視聴可能なモバイルビューワ13を含んで構成される。以下、それらの動作例を説明する
FIG. 1 is a block diagram of a first embodiment according to the present invention, and is an example of an image processing apparatus ST.
It includes a B (Set Top Box) 11, a TV 12 which is another example of a video processing device, and a mobile viewer 13 which allows video to be viewed on the go. An example of these operations will be described below.

STB11は、デジタル放送やケーブルなどから供給されるRF信号101を受け、デ
ジタルチューナ111で圧縮映像のトランスポート・ストリーム(以下TSと略す)を復
調する。復調されたTSはTS/PS変換部112でプログラム・ストリーム(以下PS
と略す)を抽出し、復号部113で非圧縮映像信号を得る。この非圧縮映像信号とOSD
部115で生成されたOSD画面とを映像合成部114で合成する。この非圧縮映像信号
は、パケット化されずに送信部117から映像信号インターフェース103を経由してT
V11の受信部127に伝送される。受信部127で受信された非圧縮映像信号は、映像
合成部124を介して表示部129へ送られる。表示部129は、この非圧縮映像信号に
基づいてリアルタイムな映像画面を表示し、ユーザへ提供する。制御部116と126は
、それぞれ送信部117と受信部127の多重化や通信状況を制御するだけでなく、TV
12の表示能力(映像の表示に関する特性や仕様)をSTB11へ伝え、STB11から
送出する映像信号をTV12の表示特性に合わせる動作を行う。また、相互にリモコン制
御コードなどをやりとりしてSTB11とTV12との連携動作が可能になるように、双
方向通信制御もできる。
The STB 11 receives an RF signal 101 supplied from a digital broadcast, a cable, or the like, and demodulates a compressed video transport stream (hereinafter abbreviated as TS) with a digital tuner 111. The demodulated TS is a program stream (hereinafter referred to as PS) by the TS / PS conversion unit 112.
(Abbreviated as) is extracted, and an uncompressed video signal is obtained by the decoding unit 113. This uncompressed video signal and OSD
The video composition unit 114 synthesizes the OSD screen generated by the unit 115. This uncompressed video signal is not packetized and is T from the transmission unit 117 via the video signal interface 103.
It is transmitted to the receiving unit 127 of V11. The uncompressed video signal received by the receiving unit 127 is sent to the display unit 129 via the video combining unit 124. The display unit 129 displays a real-time video screen based on this uncompressed video signal and provides it to the user. The control units 116 and 126 not only control the multiplexing and communication status of the transmission unit 117 and the reception unit 127, respectively, but also the TV.
The display capability (characteristics and specifications related to video display) of 12 is transmitted to STB11, and the video signal transmitted from STB11 is matched with the display characteristics of TV12. In addition, bidirectional communication control is also possible so that the STB11 and the TV12 can cooperate with each other by exchanging a remote control control code or the like.

一方、デジタルチューナ111のTS出力とOSD部115のOSD出力は送信部11
7へも送られる。送信部117は、TSとOSDのパケット・データを非圧縮映像信号に
多重化して多重化映像信号を生成し、インターフェース103を経由して受信部127に
伝送する。受信部127は、受信した多重化映像信号から非圧縮映像信号とTS及びOS
Dとを分離する。受信部127で分離もしくは抽出されたTS及びOSDは、蓄積部12
8に蓄積される。この蓄積部128は、例えばハードディスクで構成される。フラッシュ
メモリなどの半導体メモリで構成してもよい。これによりTSに基づく映像の録画が行わ
れる。録画されたTSは、ユーザの指示により蓄積部128より読み出され、TS/PS
変換部122でPSを抽出し、復号部123で非圧縮映像信号を得る。同時に、必要に応
じてOSDデータも蓄積部128から読み出され、OSD部125で非圧縮のOSD映像
信号を形成する。このOSD映像信号は、映像合成部124において復号部123から出
力された非圧縮映像信号と映像合成される。録画映像とOSDが合成された非圧縮映像信
号は表示部129により表示され、ユーザが希望する時間帯で視聴(タイムシフト視聴)
することができる。
On the other hand, the TS output of the digital tuner 111 and the OSD output of the OSD unit 115 are the transmission unit 11.
It is also sent to 7. The transmission unit 117 multiplexes the packet data of the TS and OSD into an uncompressed video signal to generate a multiplexed video signal, and transmits the multiplexed video signal to the reception unit 127 via the interface 103. The receiving unit 127 includes the uncompressed video signal, the TS, and the OS from the received multiplexed video signal.
Separate from D. The TS and OSD separated or extracted by the receiving unit 127 are stored in the storage unit 12.
Accumulate in 8. The storage unit 128 is composed of, for example, a hard disk. It may be configured by a semiconductor memory such as a flash memory. As a result, video recording based on TS is performed. The recorded TS is read out from the storage unit 128 according to the user's instruction, and is TS / PS.
The conversion unit 122 extracts PS, and the decoding unit 123 obtains an uncompressed video signal. At the same time, OSD data is also read from the storage unit 128 as needed, and the OSD unit 125 forms an uncompressed OSD video signal. This OSD video signal is video-synthesized with the uncompressed video signal output from the decoding unit 123 in the video synthesis unit 124. The uncompressed video signal, which is a combination of the recorded video and the OSD, is displayed on the display unit 129 and is viewed in the time zone desired by the user (time-shifted viewing).
can do.

尚、TV12がデジタルチューナ121を搭載していれば、STB11と同様にデジタ
ル放送などを受信して、そのTSを蓄積部128で録画してタイムシフト視聴できる。さ
らに、TS/PS変換部122と復号部123を通して得られた非圧縮映像信号と、ST
B11より送られてきた非圧縮映像信号とを映像合成部124で合成して表示部129で
2画面同時表示することもできる。デジタルチューナ111と121が異なるチャネルを
受信して2画面合成してもよい。また、地上波デジタルチューナで受信したチャネルの映
像と、ケーブルテレビチューナが受信したチャネルの映像とを2画面合成してもよい。S
TB11が、デジタルチューナ付TV12に内蔵されるデジタルチューナとは異なるデジ
タルチューナ111(すなわちTV12のデジタルチューナで受信できないチャネルを受
信可能なデジタルチューナ)を備えていれば、TV12が受信できないチャネルのリアル
タイム視聴やタイムシフト視聴が実現できる効果もある。また、STB11をTV12か
ら取り外した後も、STBで受信して蓄積部128に残っている映像を視聴できる効果も
ある。
If the TV 12 is equipped with the digital tuner 121, the TS can be recorded by the storage unit 128 for time-shifted viewing by receiving a digital broadcast or the like as in the STB11. Further, the uncompressed video signal obtained through the TS / PS conversion unit 122 and the decoding unit 123, and ST.
It is also possible to combine the uncompressed video signal sent from B11 with the video synthesis unit 124 and display the two screens simultaneously on the display unit 129. The digital tuners 111 and 121 may receive different channels and synthesize two screens. Further, the video of the channel received by the terrestrial digital tuner and the video of the channel received by the cable TV tuner may be combined on two screens. S
If the TB 11 has a digital tuner 111 (that is, a digital tuner capable of receiving a channel that cannot be received by the digital tuner of the TV 12) different from the digital tuner built in the TV 12 with a digital tuner, real-time viewing of the channel that the TV 12 cannot receive is provided. There is also the effect of realizing time-shifted viewing. Further, even after the STB 11 is removed from the TV 12, there is an effect that the video received by the STB and remaining in the storage unit 128 can be viewed.

デジタルチューナ111が、複数のチャネルの同時受信ができるものであれば、送信部
117で多重化される圧縮映像信号と非圧縮映像信号とは、異なる番組であってもよいの
は明らかである。また、送信部117が多重する圧縮映像データはTSではなく、TS/
PS変換後のPSであってもよい。TSに比べてPSはデータ伝送量が少なくなる利点が
ある。
It is clear that the compressed video signal and the uncompressed video signal multiplexed by the transmission unit 117 may be different programs as long as the digital tuner 111 can simultaneously receive a plurality of channels. Further, the compressed video data multiplexed by the transmission unit 117 is not TS, but TS /
It may be PS after PS conversion. Compared to TS, PS has the advantage that the amount of data transmission is small.

蓄積部128に録画された圧縮映像信号は、符号変換部130でさらなる高圧縮化や伝
送形式などの符号変換が為された後、USBやIEEE1394などのインターフェース
部131、インターフェース104、及びインターフェース部132を通して、蓄積部1
38へ転送され得る。映像信号の転送後、モバイルビューワ14はインターフェース10
4から切り離され、任意の場所に持ち運びが可能となる。そしてモバイルビューワ14は
、ユーザの指示に応じて、蓄積部138に記憶された映像を復号部133で復号化して表
示部139で表示する。これにより、ユーザは、モバイルビューワ14を使用して任意の
場所で所望の映像を視聴することができる。
The compressed video signal recorded in the storage unit 128 is further compressed by the code conversion unit 130 and code conversion such as a transmission format is performed, and then the interface unit 131 such as USB or IEEE 1394, the interface 104, and the interface unit 132. Through the storage unit 1
Can be transferred to 38. After transferring the video signal, the mobile viewer 14 is the interface 10.
It is separated from 4 and can be carried anywhere. Then, the mobile viewer 14 decodes the video stored in the storage unit 138 by the decoding unit 133 and displays it on the display unit 139 in response to the user's instruction. This allows the user to view the desired video at any location using the mobile viewer 14.

図2は、送信部117と受信部127の一構成例を示すブロック図である。以下その動
作例を説明する。映像合成部114(図1)からの非圧縮映像に対応する音声データ20
2、デジタルチューナ111(図1)からのTS出力203、及びOSD部115(図1
)のOSDデータ204は、それぞれ送信部117のパケット生成部211、212及び
213に入力される。パケット生成部211~213は、それぞれ入力された信号に基づ
いて、非圧縮映像信号に多重するために適したパケットを形成する。バッファ部214は
、パケット生成部211~213からのパケットを受け取って、パケット送出の優先順位
に従って並べかえ、非圧縮映像信号の帰線期間に合わせて順番に送出する。バッファ部2
14で並べかえたパケットは、ECC符号部215でエラー訂正用のコードが挿入される
。そして、インタリーブ部216でビット単位のインタリーブ処理が施されてバーストエ
ラーへの耐性が高められ、多重符号部217へ送られる。多重符号部217は、映像合成
部114(図1)からの非圧縮映像信号出力201に、上記インタリーブ化されたパケッ
トを多重化する多重化部401と、非圧縮映像信号のためのコピー制御フラグを付与する
コピーフラグ付与部402と、映像信号を暗号化する暗号化処理部403と、そして伝送
用の符号化を行う伝送用符号化部404とを含む。多重符号部217の出力は、出力回路
218を経由して、多重化映像信号207として受信部127の入力回路228に送信さ
れる。
FIG. 2 is a block diagram showing a configuration example of the transmitting unit 117 and the receiving unit 127. An operation example thereof will be described below. Audio data 20 corresponding to the uncompressed video from the video compositing unit 114 (FIG. 1)
2. TS output 203 from digital tuner 111 (FIG. 1) and OSD unit 115 (FIG. 1).
) OSD data 204 is input to the packet generation units 211, 212 and 213 of the transmission unit 117, respectively. The packet generation units 211 to 213 form packets suitable for multiplexing with the uncompressed video signal based on the input signals, respectively. The buffer unit 214 receives the packets from the packet generation units 211 to 213, rearranges them according to the priority of packet transmission, and transmits them in order according to the return period of the uncompressed video signal. Buffer part 2
A code for error correction is inserted in the ECC code unit 215 into the packets rearranged in 14. Then, the interleaving unit 216 is subjected to bit-wise interleaving processing to increase the resistance to burst errors, and is sent to the multiplex coding unit 217. The multiplexing unit 217 includes a multiplexing unit 401 for multiplexing the interleaved packet on the uncompressed video signal output 201 from the video compositing unit 114 (FIG. 1), and a copy control flag for the uncompressed video signal. It includes a copy flag adding unit 402 for imparting a copy flag, an encryption processing unit 403 for encrypting a video signal, and a transmission coding unit 404 for encoding for transmission. The output of the multiplexing code unit 217 is transmitted to the input circuit 228 of the receiving unit 127 as a multiplexed video signal 207 via the output circuit 218.

入力回路228が受信した多重化映像信号は、多重復号部227へ送られる。多重復号
部227は、伝送用符号化を復号する伝送用復号部411と、映像信号の暗号化を解く暗
号解読部412と、コピーフラグを抽出するコピーフラグ抽出部413と、非圧縮映像信
号291と他のパケット・データを分離する分離部414とを含む。パケット・データは
、デ・インタリーブ回路226でインタリーブ処理されて元の信号に復元され、ECC復
号部225でエラー訂正が為された後に、バッファ部224に送信される。バッファ部2
24は、パケット・データを一旦保持してパケット復号部221~223にそれぞれ出力
する。パケット復号部221~223は、バッファ部224からのパケット・データを復
号し、非圧縮映像信号の音声データ292と、TS293、及びOSDデータ294を得
る。これらは図1において、受信部127から蓄積部128へ送られるデータである。
The multiplexed video signal received by the input circuit 228 is sent to the multiplex decoding unit 227. The multiplex decoding unit 227 includes a transmission decoding unit 411 that decodes the transmission coding, a decryption / decryption unit 412 that decrypts the video signal, a copy flag extraction unit 413 that extracts the copy flag, and an uncompressed video signal 291. And a separator 414 that separates other packet data. The packet data is interleaved by the deinterleaved circuit 226, restored to the original signal, error-corrected by the ECC decoding unit 225, and then transmitted to the buffer unit 224. Buffer part 2
24 temporarily holds the packet data and outputs the packet data to the packet decoding units 221 to 223, respectively. The packet decoding units 221 to 223 decode the packet data from the buffer unit 224 to obtain the audio data 292 of the uncompressed video signal, the TS293, and the OSD data 294. These are the data sent from the receiving unit 127 to the accumulating unit 128 in FIG.

能力伝達部229は、TVの持つ表示能力(表示仕様及び/または表示特性)に関する
情報を、能力識別部219へ通信線208を介して伝える。能力識別部219は、上記表
示能力に関する情報に基づいて、TV12の表示能力を識別して識別結果205を出力す
る。識別結果205は、制御部116(図1)へ送信される。そして制御部116は、接
続されたTV12に適した映像フォーマットを送出するようにSTB11内の映像処理ま
たは映像出力に関する要素を制御するとともに、TV12側の表示能力を確認した上で、
本実施例に係る多重化映像信号を送出する。このような構成によって、多重化映像信号を
入力可能な構成を備えていない(すなわち従来のインターフェースを持つTV)へは多重
映像信号を伝送せず、非圧縮映像信号のみを送出する。このため、従来のインターフェー
スを持つTVとの相互接続性が確保される。このようなTV12側の能力を伝達する構成
としては、例えば、VESAが規定するEDIDシステムを用いることが好ましい。本実
施例において、上記TVの表示能力に関する情報は、例えば表示部129の水平及び垂直
解像度、色再現範囲、ガンマ特性等を含む。更に、本実施例を有効に利用するためには、
上記TVの表示能力に関する情報として、上記以外に、例えば多重化映像信号の表示タイ
ミングを示す映像フォーマット、圧縮映像のビットレート、復号可能な符号化方式の一覧
、蓄積部128の蓄積容量、空き容量、最大録画速度などの能力を追加して送ると良い。
The capability transmission unit 229 transmits information regarding the display capability (display specification and / or display characteristic) of the TV to the capability identification unit 219 via the communication line 208. The ability identification unit 219 identifies the display ability of the TV 12 based on the information regarding the display ability and outputs the identification result 205. The identification result 205 is transmitted to the control unit 116 (FIG. 1). Then, the control unit 116 controls the elements related to the video processing or the video output in the STB 11 so as to send out the video format suitable for the connected TV 12, and after confirming the display capability on the TV 12 side, the control unit 116
The multiplexed video signal according to this embodiment is transmitted. With such a configuration, the multiplexed video signal is not transmitted to a configuration that does not have a configuration capable of inputting a multiplexed video signal (that is, a TV having a conventional interface), and only an uncompressed video signal is transmitted. Therefore, interoperability with a TV having a conventional interface is ensured. As a configuration for transmitting the capability on the TV12 side, for example, it is preferable to use the EDID system specified by VESA. In this embodiment, the information regarding the display capability of the TV includes, for example, the horizontal and vertical resolutions of the display unit 129, the color reproduction range, the gamma characteristics, and the like. Furthermore, in order to make effective use of this embodiment,
In addition to the above, as information on the display capability of the TV, for example, a video format indicating the display timing of the multiplexed video signal, a bit rate of the compressed video, a list of decodable coding methods, a storage capacity of the storage unit 128, and a free capacity. , It is good to add capabilities such as maximum recording speed and send.

能力伝達部229と能力識別部219は、上記の他、機器認証や暗号処理の能力確認に
も使われる。例えばDVIやHDMIでは、この暗号処理として、Digital Content Prot
ection, LLCがライセンスするHDCPがある。今後、コンテンツの多様化と共に、コン
テンツ又は国別に複数の暗号処理を管理することが必要になる可能性がある。このような
場合、本実施例において、映像信号の受信側に、複数種類の機器認証や暗号処理のための
要素を設け、送信側からの機器認証開始のプロトコルを参照してどの処理が適当かを判別
して選択するための自働判別・選択回路を設けてもよい。一方、送信側は、コンテンツの
種類や使用される国などを判別し、それに適した暗号処理を選択して切換える自働判別・
選択回路を設けてもよい。例えば、DVDのディスクに記録されているリージョンコード
を読み出し、そのリージョンコードで暗号処理を選択すればよい。また、テレビジョン放
送においては、その放送局を判別して暗号処理を選択しても良い。
In addition to the above, the capacity transmission unit 229 and the capacity identification unit 219 are also used for device authentication and capacity confirmation of encryption processing. For example, in DVI and HDMI, Digital Content Prot is used as this encryption process.
There is an HDCP licensed by ection, LLC. In the future, with the diversification of content, it may be necessary to manage multiple cryptographic processes by content or country. In such a case, in this embodiment, elements for device authentication and encryption processing are provided on the receiving side of the video signal, and which processing is appropriate by referring to the protocol for starting device authentication from the transmitting side. An automatic discrimination / selection circuit may be provided for discriminating and selecting. On the other hand, the sender determines the type of content, the country in which it is used, etc., and selects and switches the appropriate encryption process.
A selection circuit may be provided. For example, the region code recorded on the DVD disc may be read out, and the encryption process may be selected based on the region code. Further, in television broadcasting, the broadcasting station may be identified and encryption processing may be selected.

国や事業者の規制により、暗号処理の固定化が必要になる場合もある。このような場合
、専用の映像処理装置を新たに準備すると、開発コストが高くなり得る。よって、映像処
理装置に複数種類の暗号処理を実行可能な暗号処理部を複数設け、暗号の種類を判別し、
その判別結果に対応した暗号処理部を選択する判別・選択回路を設けてもよい。このとき
、判別・選択回路は、暗号の種類を自動的に判別し選択動作するようにしてもよい。また
、暗号処理の種類をユーザにより設定可能とするための設定回路を設けてもよい。また、
この設定回路によって、複数の暗号処理のうち一つを、出荷時において予め設定して固定
しておくようにしてもよい。この場合、この設定回路によって暗号処理の種類をユーザが
勝手に設定変更できないように、暗号処理の設定変更に係る手続(例えばSTB11やT
V12に対するコマンドまたはパスワードの入力等)をユーザに対し秘匿するようにして
おくとよい。出荷後において暗号化処理の設定を変更する場合は、特定の条件下(例えば
ユーザからの料金の課金)において、例えば放送及び/またはインターネット等から上記
設定変更に係る手続をダウンロード可能とするようにしてもよい。このようにして、秘匿
された上記設定変更に手続が特定の条件下においてユーザに開示され、ユーザによる暗号
処理の変更が有効となる。本例を実施するに際して、そのようなサービスを提供するよう
にしてもよい。更にまた、上記設定変更に係る手続をDVDなどの記憶メディアに記憶し
ておき、これを設定変更用DVDとしてユーザに配布するようにしてもよい。
Cryptographic processing may need to be fixed due to national and business regulations. In such a case, if a dedicated video processing device is newly prepared, the development cost may increase. Therefore, the video processing device is provided with a plurality of encryption processing units capable of executing a plurality of types of encryption processing, and the type of encryption is determined.
A discrimination / selection circuit for selecting the encryption processing unit corresponding to the discrimination result may be provided. At this time, the discrimination / selection circuit may automatically discriminate the type of encryption and perform the selection operation. Further, a setting circuit may be provided so that the type of encryption processing can be set by the user. again,
By this setting circuit, one of a plurality of cryptographic processes may be set and fixed in advance at the time of shipment. In this case, the procedure for changing the setting of the encryption process (for example, STB11 or T) so that the user cannot change the setting of the encryption processing type by this setting circuit.
It is advisable to keep the command or password input for V12 secret from the user. When changing the encryption processing settings after shipping, make it possible to download the procedure related to the above setting changes from, for example, broadcasting and / or the Internet under specific conditions (for example, billing from the user). You may. In this way, the procedure for the concealed setting change is disclosed to the user under specific conditions, and the change of the encryption process by the user becomes effective. In implementing this example, such a service may be provided. Furthermore, the procedure related to the above setting change may be stored in a storage medium such as a DVD and distributed to the user as a setting change DVD.

更にまた、各種の暗号処理が使用される場合に、暗号処理のグレードによって、解像度
や圧縮映像信号のビットレートなどに制限を設けて画質を変えることもできる。
Furthermore, when various types of encryption processing are used, the image quality can be changed by limiting the resolution, the bit rate of the compressed video signal, and the like depending on the grade of the encryption processing.

通信回路220と230は、通信路209を介して双方向通信を行い、図1の制御部1
16と126との間で制御情報を送受信するものである。例えば、本実施例における双方
向通信として、例えばHDMIが規定するCECなどの双方向通信の構成を適用できる。
また、ECC復号部225で訂正できないエラーが発生した場合、TV12が本通信路2
09を通してSTBへ再送要求を送信し、STB11はその再送要求に応答してエラーを
生じた圧縮映像信号を再送するようにしてもよい。これにより、誤りの無い録画が可能と
なる。圧縮/非圧縮映像信号多重化信号207に含まれる圧縮映像信号パケットには、タ
イムスタンプ等の識別番号や記号を付与しておくことにより、エラーパケットの番号や記
号を再送要求とともにTV12がSTB11へ送信するようにしてもよい。これにより、
再送要求が発生した場合、STB11はエラーパケットの番号や記号を参照してエラーパ
ケットのみを再送できる。このため、STB11はエラーの無いパケットを再送する必要
が無いので、転送効率が高まる。
The communication circuits 220 and 230 perform bidirectional communication via the communication path 209, and the control unit 1 in FIG. 1
Control information is transmitted and received between 16 and 126. For example, as the bidirectional communication in this embodiment, a bidirectional communication configuration such as CEC specified by HDMI can be applied.
Further, when an error that cannot be corrected occurs in the ECC decoding unit 225, the TV 12 is set to the main communication path 2.
A retransmit request may be transmitted to the STB through 09, and the STB 11 may retransmit the compressed video signal that has caused an error in response to the retransmission request. This enables recording without errors. By assigning an identification number or symbol such as a time stamp to the compressed video signal packet included in the compressed / uncompressed video signal multiplexing signal 207, the TV 12 sends the error packet number or symbol to the STB11 together with a retransmission request. You may send it. This will result in
When a retransmission request occurs, STB11 can retransmit only the error packet by referring to the error packet number or symbol. Therefore, the STB 11 does not need to retransmit the error-free packet, so that the transfer efficiency is improved.

前述したバッファ部214におけるパケット送出の処理、すなわち優先順位に従ったパ
ケット並べかえ処理について以下に説明する。非圧縮映像信号に多重化して送信されるパ
ケットの伝送容量には限界がある。最優先して送るべきパケットは、映像と同期してリア
ルタイムに再生が必要な、非圧縮映像信号の音声である。従って、この非圧縮映像信号の
音声パケットの優先順位を最も高くして、その配置を最優先して決定する。残った領域に
は、圧縮映像パケットとOSDパケットを配置する。圧縮映像パケットとOSDパケット
の優先順位は、任意に定められるが、OSDが非圧縮映像信号に関連する(またはその関
連性が高い)場合は、OSDパケットの優先順位を圧縮映像パケットよりも高くしてもよ
い。TV12における圧縮映像の利用の必要性が高い場合は、圧縮映像パケットの優先順
位をOSDパケットよりも高くしてもよい。
The packet transmission process in the buffer unit 214 described above, that is, the packet rearrangement process according to the priority order will be described below. There is a limit to the transmission capacity of packets that are multiplexed and transmitted to uncompressed video signals. The packet that should be sent with the highest priority is the audio of an uncompressed video signal that needs to be reproduced in real time in synchronization with the video. Therefore, the priority of the audio packet of this uncompressed video signal is set to the highest priority, and the arrangement thereof is determined with the highest priority. Compressed video packets and OSD packets are placed in the remaining area. The priority of the compressed video packet and the OSD packet is arbitrarily determined, but if the OSD is related to (or highly related to) the uncompressed video signal, the priority of the OSD packet is set higher than that of the compressed video packet. You may. When there is a high need to use the compressed video in the TV 12, the priority of the compressed video packet may be higher than that of the OSD packet.

圧縮映像を蓄積部128に送る場合は、該蓄積部128の最大録画速度を超えないよう
にパケットを配置することが必要である。又は、通信路209によってフロー制御を行い
、パケット送出量を制御してもよい。圧縮映像をTV12でほぼリアルタイムに再生する
場合は、圧縮映像の符号化速度に合わせたパケット送出量制御が必要となる。
When sending the compressed video to the storage unit 128, it is necessary to arrange the packets so as not to exceed the maximum recording speed of the storage unit 128. Alternatively, the flow control may be performed by the communication path 209 to control the packet transmission amount. When the compressed video is reproduced on the TV 12 in almost real time, it is necessary to control the packet transmission amount according to the coding speed of the compressed video.

尚、非圧縮映像信号のフォーマットによっては、圧縮映像信号を多重化するためのパケ
ット伝送能力が不足する場合がある。この場合は非圧縮映像信号の画素クロックをn倍化
(nは2以上)、または非圧縮映像信号の帰線期間を広げたフォーマットを用いればよい
。このようにすれば、圧縮映像信号のパケット伝送能力を向上させることができる。
Depending on the format of the uncompressed video signal, the packet transmission capacity for multiplexing the compressed video signal may be insufficient. In this case, a format may be used in which the pixel clock of the uncompressed video signal is multiplied by n (n is 2 or more) or the return period of the uncompressed video signal is extended. By doing so, it is possible to improve the packet transmission capacity of the compressed video signal.

図3は、圧縮映像のパケット構造の一例を示す図である。図3に示されるように、TS
のパケットは、4バイトのヘッダと184バイトのアダプテーション(又はペイロード)
の合計188バイトで構成される。一方、非圧縮映像信号の隙間(例えば帰線期間)にT
Sを多重化するためには、パケットサイズが小さい方が良い。図3では3バイトのヘッダ
と28バイトのペイロードでパケットを構成した場合を示している。TSパケット188
バイトを7個の圧縮映像パケットのペイロードに分割して伝送すると良い。
FIG. 3 is a diagram showing an example of the packet structure of the compressed video. TS as shown in FIG.
Packets have a 4-byte header and 184-byte adaptation (or payload).
It is composed of a total of 188 bytes. On the other hand, T in the gap of the uncompressed video signal (for example, blanking interval)
In order to multiplex S, it is better that the packet size is small. FIG. 3 shows a case where a packet is composed of a 3-byte header and a 28-byte payload. TS packet 188
It is preferable to divide the bytes into the payloads of seven compressed video packets and transmit them.

ヘッダの構成の一例を以下に説明する。1バイト目は、圧縮映像や音声などのパケット
種別を表す。2バイト目と3バイト目の合計16ビットは、7分割されたTSパケットの
順番(3ビット)、TSパケット番号(11ビット)、及びコピー制御フラグ(2ビット
)に配分すると良い。TS自体にもタイムスタンプが入っており、これを流用することに
よってヘッダ内の上記TSパケット番号の11ビットを省略しても良いが、ヘッダ部に記
載しておいた方が使いやすい。このTSパケット番号を、パケットを識別するための識別
番号として用いて、前述した伝送エラー発生時の再送要求パケット指定を行う。
An example of the header configuration will be described below. The first byte represents a packet type such as compressed video or audio. A total of 16 bits of the second byte and the third byte may be allocated to the order of the TS packets divided into 7 (3 bits), the TS packet number (11 bits), and the copy control flag (2 bits). The TS itself also contains a time stamp, and by diverting this, the 11 bits of the above TS packet number in the header may be omitted, but it is easier to use if it is described in the header part. This TS packet number is used as an identification number for identifying the packet, and the retransmission request packet is specified when the transmission error occurs as described above.

例えば20MbpsでHD映像を伝送する場合、188バイトのTSパケットを1秒間
に10.6万個伝送することになる。伝送エラー発生時に送信側に再生要求を行う場合に
おいて、通信路209の速度が遅く(すなわち転送レートが低く)、エラー情報の伝送に
100mS必要とすると、少なくとも1万個のTSパケットを判別するTSパケット番号
が必要である。すなわち、TSパケット番号のために14ビットが必要であり、ヘッダ部
の11ビットでは不十分である。一方、図示したように、7番目の圧縮映像パケットのペ
イロードには8バイトの空きがある。従って、この空き領域のうち1バイトを、不足した
TSパケット番号の記載に用いてもよい。もちろん、必要に応じて2~3バイトを用いて
もよい。また、コピーフラグもヘッダでなくこの空き領域に記載してもよい。領域に余裕
がある場合は、コピー回数、伝送後タイムシフト視聴を許可する蓄積制限時間、及び/ま
たはCGMS-Dなども記載できる。さらに多くの情報記載が必要であれば,7個ではな
く8個の圧縮映像パケットをTSパケット1個に当ててもよい。
For example, when transmitting HD video at 20 Mbps, 106,000 TS packets of 188 bytes are transmitted per second. When a reproduction request is made to the transmitting side when a transmission error occurs, if the speed of the communication path 209 is slow (that is, the transfer rate is low) and 100 mS is required for the transmission of error information, TS that discriminates at least 10,000 TS packets. Packet number is required. That is, 14 bits are required for the TS packet number, and 11 bits in the header portion are not sufficient. On the other hand, as shown in the figure, the payload of the 7th compressed video packet has 8 bytes free. Therefore, one byte of this free area may be used to describe the missing TS packet number. Of course, 2 to 3 bytes may be used if necessary. Further, the copy flag may be described in this free area instead of the header. If there is room in the area, the number of copies, the storage time limit for permitting time-shifted viewing after transmission, and / or CGMS-D can also be described. If more information is required, eight compressed video packets instead of seven may be applied to one TS packet.

図4は、本発明の他の実施例を示すブロック図である。本実施例は、図1に示されたシ
ステム構成のうち、送信部117と受信部127を、それぞれ図4の送信部230と受信
部250に変更したものである。本実施例は、送信部230と受信部250は、映像信号
を送信する3本のデータ線271、272、273と、クロック信号を送信するクロック
線274を含むインターフェースで互いに接続されているものとする。3本のデータ線は
、例えば赤、緑、青それぞれの非圧縮映像信号の伝送に用いられる。クロック線はデータ
受信のための基準クロックを伝送するものである。またデータ線は、クロック線を通るク
ロック周期の間に10個のデータを送るものとする。多重符号化部231~233及び2
35、出力回路241~244、入力回路251~254、多重復号部261~264は
、それぞれ図2の多重符号化部217、出力回路218、入力回路228、多重復号部2
27に相当するものであり、その詳細な説明は省略する。尚、図2に示された他のブロッ
クは、ここではその説明を省略している。
FIG. 4 is a block diagram showing another embodiment of the present invention. In this embodiment, in the system configuration shown in FIG. 1, the transmitting unit 117 and the receiving unit 127 are changed to the transmitting unit 230 and the receiving unit 250 of FIG. 4, respectively. In this embodiment, the transmitting unit 230 and the receiving unit 250 are connected to each other by an interface including three data lines 271, 272, 273 for transmitting a video signal and a clock line 274 for transmitting a clock signal. do. The three data lines are used, for example, for transmitting red, green, and blue uncompressed video signals. The clock line transmits a reference clock for receiving data. Further, the data line shall send 10 pieces of data during the clock period passing through the clock line. Multiple coding units 231 to 233 and 2
35, output circuits 241 to 244, input circuits 251 to 254, and multiple decoding units 261 to 264 are the multiple coding unit 217, output circuit 218, input circuit 228, and multiple decoding unit 2 of FIG. 2, respectively.
It corresponds to 27, and a detailed description thereof will be omitted. The explanation of the other blocks shown in FIG. 2 is omitted here.

スイッチ245がクロック供給部234を選択した場合が、図2の実施例に相当する。
本実施例では、映像データ伝送の高速化が必要な場合、スイッチ245を多重符号化部2
35へ切換えて、クロック線もデータ線として用い、映像データ伝送量を4/3倍化する
ものである。この場合、入力データをTV12側で再生する為の基準クロックは、クロッ
ク線で送信されるクロック信号ではなく、各データ線の信号から基準クロックを抽出して
用いれば良い。このために、各入力回路251~254の受信信号の全てもしくは少なく
とも一つをPLL256へ導き、入力データからクロック成分を抽出すればよい。クロッ
ク成分の抽出にはバンドパスフィルタなどをPLLなどと組み合わせればよい。勿論、P
LLはDLLで置き換えてもよい。
The case where the switch 245 selects the clock supply unit 234 corresponds to the embodiment of FIG.
In this embodiment, when it is necessary to increase the speed of video data transmission, the switch 245 is set to the multiplex coding unit 2.
By switching to 35, the clock line is also used as the data line, and the video data transmission amount is multiplied by 4/3. In this case, the reference clock for reproducing the input data on the TV 12 side may be used by extracting the reference clock from the signal of each data line instead of the clock signal transmitted by the clock line. For this purpose, all or at least one of the received signals of each input circuit 251 to 254 may be guided to the PLL 256, and the clock component may be extracted from the input data. A bandpass filter or the like may be combined with a PLL or the like to extract the clock component. Of course, P
LL may be replaced with DLL.

さて、映像データには各種のフォーマットがあり、基準クロックが数多くある。上記の
ようにデータ線からクロック抽出してそれを基準クロックとして用いる場合、基準クロッ
ク周期を正確に検出する必要があり、そのために多大な時間を要する。本実施例では、初
期状態ではスイッチ245はクロック供給部235を選択し、クロック供給部235から
の基準クロックをクロック線274により受信部250へ伝送する。これにより、容易に
基準クロック周期を受信部250へ伝えることができる。従って、本実施例によれば、基
準クロックの周期に係る初期設定のための時間を短縮できる効果がある。
By the way, there are various formats for video data, and there are many reference clocks. When the clock is extracted from the data line and used as the reference clock as described above, it is necessary to accurately detect the reference clock period, which requires a large amount of time. In this embodiment, the switch 245 selects the clock supply unit 235 in the initial state, and transmits the reference clock from the clock supply unit 235 to the reception unit 250 by the clock line 274. As a result, the reference clock cycle can be easily transmitted to the receiving unit 250. Therefore, according to this embodiment, there is an effect that the time for initial setting related to the cycle of the reference clock can be shortened.

図2の形態で説明された、TV12の表示能力に関する情報をSTB11に伝達するた
めの構成みを用いれば、受信部250が、クロック線をデータ線として使うモードを持っ
ているかどうかを送信部230へ伝えることができる。初期設定のクロック周期抽出に必
要な時間も同様に伝えることができる。また、図2に示された双方向通信路209を用い
れば、初期設定が終了したことを受信部250から送信部230に伝えることもできる。
Using the configuration for transmitting information regarding the display capability of the TV 12 to the STB 11 described in the form of FIG. 2, the transmission unit 230 determines whether or not the reception unit 250 has a mode in which the clock line is used as a data line. Can be told to. The time required for the default clock cycle extraction can be conveyed in the same manner. Further, by using the bidirectional communication path 209 shown in FIG. 2, it is possible to notify the transmitting unit 230 from the receiving unit 250 that the initial setting has been completed.

図5は、本発明の他の実施例を示すブロック図である。本実施例は、図1に示されたシ
ステム構成のうち、送信部117と受信部127を、それぞれ図4の送信部240と受信
部260に変更したものである。図4に示された実施例と同じ構成要素については、同一
の番号を付している。本実施例は、図4に示されたPLL部も構成要素として必要である
が、図面の簡略化のために記載を省略している。そして本実施例では、図4に示された実
施例に対し、入力回路255、多重復号部265、多重符号化部258、そして出力回路
257が追加されている。
FIG. 5 is a block diagram showing another embodiment of the present invention. In this embodiment, in the system configuration shown in FIG. 1, the transmitting unit 117 and the receiving unit 127 are changed to the transmitting unit 240 and the receiving unit 260 of FIG. 4, respectively. The same components as those in the embodiment shown in FIG. 4 are numbered the same. In this embodiment, the PLL portion shown in FIG. 4 is also required as a component, but the description is omitted for the sake of simplification of the drawings. Then, in this embodiment, an input circuit 255, a multiple decoding unit 265, a multiplex coding unit 258, and an output circuit 257 are added to the embodiment shown in FIG.

図5では、クロック線を使ってデータを送る際に、STB11からTV12ではなく、
逆にTV12からSTB11へデータを伝送する機能を持っていることを特徴とする。初
期状態では、出力回路257はOFF状態となっており、図4に示された実施例と同様に
、STB11の送信部240から受信部260へデータとクロックを伝送する。各データ
のクロック抽出動作の開始後は、クロック線でもデータを伝送できる状態になる。このタ
イミングで、出力回路244をOFF状態とした後、出力回路257の動作を開始させ、
受信部260から送信部240へデータを逆送りさせる。このとき、クロック周期を初期
状態と同一のクロック周期としておけば、この逆送させたクロック線でもクロックの抽出
を他のデータ線と同様にすることができる。もちろん、クロック線でデータを逆送させて
いる間、データ線では送信部240から受信部260への映像データを送り続けている。
In FIG. 5, when data is transmitted using the clock line, the STB 11 does not move to the TV 12 but the data is sent from the STB 11 to the TV 12.
On the contrary, it is characterized by having a function of transmitting data from the TV 12 to the STB 11. In the initial state, the output circuit 257 is in the OFF state, and data and a clock are transmitted from the transmitting unit 240 of the STB 11 to the receiving unit 260, as in the embodiment shown in FIG. After the clock extraction operation of each data is started, the data can be transmitted even on the clock line. At this timing, after turning off the output circuit 244, the operation of the output circuit 257 is started.
Data is sent back from the receiving unit 260 to the transmitting unit 240. At this time, if the clock period is set to the same clock period as the initial state, the clock extraction can be performed in the same way as other data lines even with this back-fed clock line. Of course, while the data is back-transmitted on the clock line, the video data is continuously transmitted from the transmitting unit 240 to the receiving unit 260 on the data line.

図6は、図1に示されたシステム構成において、この逆方向のデータ伝送の機能を用い
る場合の、映像信号の流れの一例を示したものである。TV12は蓄積部128に録画さ
れた圧縮映像信号をこのクロック線による逆方向のデータ伝送でSTB11へ送り、ST
B11の持つTS/PS変換部112と復号部113で非圧縮映像信号に復号する。そし
て、データ線を通してTV12へ送り返し、表示部129でその復号された映像信号に基
づく映像を表示することができる。また、蓄積部に録画されたOSDも表示させる必要が
あるならば、同様にクロック線でSTB11のOSD回路に送り、映像合成部114で非
圧縮映像信号と映像合成してTV12へ送ればよい。
FIG. 6 shows an example of the flow of a video signal when the function of data transmission in the reverse direction is used in the system configuration shown in FIG. The TV 12 sends the compressed video signal recorded in the storage unit 128 to the STB 11 by data transmission in the reverse direction by this clock line, and ST.
The TS / PS conversion unit 112 and the decoding unit 113 of the B11 decode the uncompressed video signal. Then, it can be sent back to the TV 12 through the data line, and the video based on the decoded video signal can be displayed on the display unit 129. If it is necessary to display the OSD recorded in the storage unit, the OSD may be similarly sent to the OSD circuit of the STB 11 by a clock line, and the video synthesis unit 114 may synthesize the video with the uncompressed video signal and send it to the TV 12.

この機能により、復号部を持たないTVでも、蓄積部に録画した映像信号を再生表示し
て視聴することができる。復号部を持っているTVでも、その復号部が圧縮映像に使われ
ている符号化方式に対応していない場合も同様である。更に、TV発売時点で存在しなか
った新符号化方式を使った高圧縮放送などが始まった場合にも、TVの録画機能やタイム
シフト視聴の機能が使える利点もある。また、符号化だけではなく、TVで対応していな
い著作権保護の方式が採用されている圧縮映像をTVで録画した場合であっても、STB
がその方式に対応していれば、録画された圧縮映像信号をSTBへ送って著作権保護処理
と復号処理を行うようにしてもよい。そして上記と同様に、著作権保護処理と復号処理が
なされた映像信号をTV側へ非圧縮映像信号として送り返すことにより、当該映像信号に
基づく映像の表示が可能となる。
With this function, even a TV having no decoding unit can reproduce and display the video signal recorded in the storage unit for viewing. The same applies to a TV having a decoding unit when the decoding unit does not support the coding method used for the compressed video. Further, there is an advantage that the TV recording function and the time-shifted viewing function can be used even when high-compression broadcasting using a new coding method that did not exist at the time of TV release has started. In addition to coding, even when a compressed video that uses a copyright protection method that is not supported by the TV is recorded on the TV, the STB
However, if the method is compatible with the method, the recorded compressed video signal may be sent to the STB to perform copyright protection processing and decoding processing. Then, in the same manner as described above, by sending back the video signal to which the copyright protection processing and the decoding processing have been performed as an uncompressed video signal, it is possible to display the video based on the video signal.

次に、図5に示された入力回路254、255と出力回路244、257の回路構成の
一例を図7に示す。図7の説明の前に、入力回路と出力回路の基本的な構成例を図8に示
しその動作を説明する。出力回路31は、出力制御部311とトランジスタ312、31
3、定電流源314で、入力回路32は終端抵抗336、337、差動判別部338とを
含む。
Next, an example of the circuit configuration of the input circuits 254 and 255 and the output circuits 244 and 257 shown in FIG. 5 is shown in FIG. Prior to the description of FIG. 7, a basic configuration example of the input circuit and the output circuit is shown in FIG. 8, and the operation thereof will be described. The output circuit 31 includes an output control unit 311 and transistors 312, 31.
3. In the constant current source 314, the input circuit 32 includes a terminating resistor 336, 337, and a differential discriminator 338.

出力制御部311はトランジスタ312と313のON/OFF動作を、(ON-OF
F)又は(OFF-ON)の組み合わせとなるように切換える。(ON-OFF)時は信
号線321に定電流源314と同じ電流が流れて終端抵抗336の両端に電圧が発生し、
信号線322には電流が流れないので終端抵抗337の両端電圧は0となる。(OFF-
ON)時は信号線321に電流が流れないので終端抵抗336の両端電圧は0、信号線3
22には定電流源314と同じ電流が流れて終端抵抗337の両端に電圧が発生する。い
わゆる差動伝送である。この終端抵抗の電位差を差動判別部338で検出して論理レベル
を決定する。
The output control unit 311 controls the ON / OFF operation of the transistors 312 and 313 (ON-OF).
It is switched so that it becomes a combination of F) or (OFF-ON). At (ON-OFF), the same current as the constant current source 314 flows through the signal line 321 and a voltage is generated across the terminating resistor 336.
Since no current flows through the signal line 322, the voltage across the terminating resistor 337 becomes 0. (OFF-
When (ON), no current flows through the signal line 321 so that the voltage across the terminating resistor 336 is 0 and the signal line 3
The same current as that of the constant current source 314 flows through 22, and a voltage is generated across the terminating resistor 337. This is so-called differential transmission. The potential difference of this terminating resistor is detected by the differential discrimination unit 338 to determine the logic level.

図7の構成は、図8に示した入力回路と出力回路の構成をそのまま使って並列に接続し
た構成となっている。並列に接続された2つの出力回路は同時に動作させられないので、
動作状態ではない出力回路の出力制御部331(又は311)がトランジスタ312及び
313(またはトランジスタ332及び333)を(OFF-OFF)となるように制御
する。入力回路は双方とも動作状態としてもよいし、使用しない側の終端抵抗316、3
17(又は336、337)を切り離しても良い。また、差動判別部318(又は338
)の動作を停止させて低消費電力化しても良い。
The configuration of FIG. 7 is a configuration in which the input circuit and the output circuit shown in FIG. 8 are connected in parallel using the configuration as it is. Since two output circuits connected in parallel cannot be operated at the same time,
The output control unit 331 (or 311) of the output circuit that is not in the operating state controls the transistors 312 and 313 (or the transistors 332 and 333) to be (OFF-OFF). Both input circuits may be in the operating state, or the terminating resistors 316 and 3 on the unused side.
17 (or 336, 337) may be separated. Further, the differential discrimination unit 318 (or 338)
) May be stopped to reduce power consumption.

図9は、本発明の他の実施例を示すブロック図で、映像処理装置として2つのTV15
及び16を使用している。すなわち、本実施例は、図1に示されたSTB11が表示部を
持ちTVとなった例である。図1に示された実施例と同様に、映像インターフェース10
4を通して、TV15からTV16へ非圧縮映像信号と圧縮映像信号を多重化した多重化
映像信号を送り、非圧縮映像信号はTV16の表示部129で表示される。一方、圧縮映
像は蓄積部128で録画され、ユーザの希望する時間に再生されて表示部129で表示さ
れる。
FIG. 9 is a block diagram showing another embodiment of the present invention, in which two TVs 15 are used as video processing devices.
And 16 are used. That is, this embodiment is an example in which the STB 11 shown in FIG. 1 has a display unit and becomes a TV. Similar to the embodiment shown in FIG. 1, the video interface 10
A multiplexed video signal in which an uncompressed video signal and a compressed video signal are multiplexed is sent from the TV 15 to the TV 16 through 4, and the uncompressed video signal is displayed on the display unit 129 of the TV 16. On the other hand, the compressed video is recorded by the storage unit 128, reproduced at a time desired by the user, and displayed on the display unit 129.

送受信部157と167の一構成例を図10に示す。この例では、データ線271とク
ロック線274の双方とも双方向伝送を可能としている。具体的な入力回路と出力回路の
構成は図7と同様としてもよい。送受信部157から167へデータを伝送する場合、デ
ータは多重符号化部231から出力回路241を経て入力回路251及び多重復号部26
1へ供給される。一方、クロック信号はクロック供給部235から出力回路244を経て
入力回路254及びPLL283へ供給される。逆に、送受信部167から157へデー
タを伝送する場合、データは多重符号化部282から出力回路281を経て入力回路27
1及び多重復号部272へ供給される。一方、クロック信号はクロック供給部284から
出力回路257を経て入力回路255及びPLL274へ伝送される。
FIG. 10 shows an example of the configuration of the transmission / reception units 157 and 167. In this example, both the data line 271 and the clock line 274 are capable of bidirectional transmission. The specific configuration of the input circuit and the output circuit may be the same as in FIG. 7. When data is transmitted from the transmission / reception unit 157 to 167, the data is transmitted from the multiplex coding unit 231 through the output circuit 241 to the input circuit 251 and the multiplex decoding unit 26.
It is supplied to 1. On the other hand, the clock signal is supplied from the clock supply unit 235 to the input circuit 254 and the PLL 283 via the output circuit 244. On the contrary, when data is transmitted from the transmission / reception unit 167 to 157, the data is transmitted from the multiplex coding unit 282 to the input circuit 27 via the output circuit 281.
It is supplied to 1 and the multiple decoding unit 272. On the other hand, the clock signal is transmitted from the clock supply unit 284 to the input circuit 255 and the PLL 274 via the output circuit 257.

このように、TV15または16に、映像信号を逆に伝送する機能を持たせれば次のよ
うに動作される。すなわち、図9の破線で示すように、TV16の蓄積部128で録画し
た圧縮映像をTV15へ送り、TV15のTS/PS変換部152と復号部153で非圧
縮映像信号を形成し、表示部159で表示することができる。もちろん、TV16のTS
/PS変換部122と復号部123で非圧縮映像信号を形成した後にTV15へ伝送し、
表示部159に表示させても良い。
As described above, if the TV 15 or 16 has a function of transmitting a video signal in the reverse direction, the operation is as follows. That is, as shown by the broken line in FIG. 9, the compressed video recorded by the storage unit 128 of the TV 16 is sent to the TV 15, the TS / PS conversion unit 152 and the decoding unit 153 of the TV 15 form an uncompressed video signal, and the display unit 159. It can be displayed with. Of course, the TS of TV16
After the uncompressed video signal is formed by the / PS conversion unit 122 and the decoding unit 123, it is transmitted to the TV15.
It may be displayed on the display unit 159.

本実施例によれば、デジタルチューナや蓄積部、復号部、著作権保護の各種のリソース
を、互いに接続した2台のTV(映像処理装置)の間で融通しあうことができる。
According to this embodiment, various resources such as a digital tuner, a storage unit, a decoding unit, and copyright protection can be exchanged between two TVs (video processing devices) connected to each other.

以上の実施例では、映像処理装置としてSTBとTVの例を示したが、レコーダやDV
Dプレーヤなどの映像信号源や、モニタなどの組み合わせでも同様な効果が期待できる。
In the above examples, STB and TV are shown as video processing devices, but recorders and DVs have been shown.
Similar effects can be expected with a combination of a video signal source such as a D player or a monitor.

上記詳細に説明された本発明の実施形態を利用すれば、1つのインターフェースに、パ
ケット化されていないリアルタイム非圧縮映像信号とパケット化された圧縮映像信号とを
同時に伝送することができる。すなわち、1つのインターフェースで、互いに異なる規格
に従った複数のデジタル映像信号を伝送することが可能となる。これを用いたTVなどの
映像処理装置においては、STB等の信号源からの非圧縮映像信号をTVの表示部にリア
ルタイムに表示しながら、同時に伝送される圧縮映像信号をTVに内蔵されたHDD等の
記憶装置に録画して別の時間で視聴することが可能となる。つまり、ある映像コンテンツ
のリアルタイムの映像とタイムシフトされた映像の両方を一画面上に同時に表示すること
が可能となり、当該映像コンテンツについてリアルタイム視聴とタイムシフト視聴の両方
が可能となる。
By utilizing the embodiment of the present invention described in detail above, it is possible to simultaneously transmit an unpacketized real-time uncompressed video signal and a packetized compressed video signal to one interface. That is, one interface can transmit a plurality of digital video signals according to different standards. In a video processing device such as a TV using this, the uncompressed video signal from a signal source such as STB is displayed in real time on the display unit of the TV, and the compressed video signal transmitted at the same time is a built-in HDD in the TV. It is possible to record in a storage device such as, etc. and watch it at another time. That is, it is possible to simultaneously display both the real-time video of a certain video content and the time-shifted video on one screen, and both real-time viewing and time-shifted viewing of the video content are possible.

さらには、非圧縮映像伝送インターフェースの高速伝送可能な物理層をデータ伝送に使
うことで、非圧縮映像信号の伝送が不要な場合は、多数の圧縮映像信号の伝送や、短時間
での映像転送が可能になる効果もある。
Furthermore, by using the physical layer capable of high-speed transmission of the uncompressed video transmission interface for data transmission, if transmission of uncompressed video signals is unnecessary, transmission of a large number of compressed video signals and video transfer in a short time There is also an effect that makes it possible.

さらに、上記の実施形態によれば、各種の著作権保護技術へ適切に対応することが可能
となり、フェアユース条件内での良好な視聴を実現できる効果もある。
Further, according to the above embodiment, it is possible to appropriately cope with various copyright protection technologies, and there is also an effect that good viewing within fair use conditions can be realized.

本発明は、一つのインターフェースで非圧縮映像信号と圧縮映像信号を多重化して伝送
するための映像信号の伝送方法に適用される。特に、映像処理装置間、例えばSTB等の
映像信号源とTV等の映像表示装置との間で映像信号の送受信を行う場合に有効である。
The present invention is applied to a video signal transmission method for multiplexing and transmitting an uncompressed video signal and a compressed video signal with one interface. In particular, it is effective when transmitting and receiving video signals between video processing devices, for example, between a video signal source such as an STB and a video display device such as a TV.

11…STB、12…TV、14…モバイルビューワ、31…出力回路、32…入力回
路、33~34…入出力回路、101~102…RF信号、103~104…映像信号イ
ンターフェース、111~121…デジタルチューナ、112~122…TS/PS変換
部、113、123、133…復号部、114、124…映像合成部、115、125…
OSD部、116、126…制御部、117、230、240…送信部、127、250
、260…受信部、128、138…蓄積部、129、139…表示部、130…符号変
換部、131、132…インターフェース部、211、212、213…パケット生成部
、214、224…バッファ、215…ECC符号化部、216…インタリーブ部、21
7…多重符号化部、218…出力回路、219…能力識別部、220、230…通信回路
、221~223…パケット復号部、225…ECC復号部、226…デ・インタリーブ
部、227…多重復号部、228…入力回路、229…能力伝達部、231~234、2
58、282…多重符号化部、241~244、257…出力回路、235、284…ク
ロック供給部、251~255…入力回路、256、274、283…PLL部、261
~265、272…多重復号部、311、331…出力制御部、312~313、332
~333…トランジスタ、314、334…電流源、316~317、337~336…
終端抵抗、318、338…差動判別部、401…多重化部、402…コピーフラグ付与
部、403…暗号処理部、404…伝送用符号化部、411…伝送用符号復号部 412
…暗号解読部、413…コピーフラグ抽出部、414…分離部
11 ... STB, 12 ... TV, 14 ... Mobile viewer, 31 ... Output circuit, 32 ... Input circuit, 33-34 ... Input / output circuit, 101-102 ... RF signal, 103-104 ... Video signal interface, 111-121 ... Digital tuner, 112 to 122 ... TS / PS conversion unit, 113, 123, 133 ... Decoding unit, 114, 124 ... Video composition unit, 115, 125 ...
OSD unit, 116, 126 ... Control unit 117, 230, 240 ... Transmission unit 127, 250
260 ... Receiving unit, 128, 138 ... Storage unit, 129, 139 ... Display unit, 130 ... Code conversion unit, 131, 132 ... Interface unit, 211, 212, 213 ... Packet generation unit, 214, 224 ... Buffer, 215 ... ECC coding unit, 216 ... Interface unit, 21
7 ... Multiple coding unit, 218 ... Output circuit, 219 ... Capability identification unit, 220, 230 ... Communication circuit, 221 to 223 ... Packet decoding unit, 225 ... ECC decoding unit, 226 ... Deinterleaved unit, 227 ... Multiple decoding Unit, 228 ... Input circuit, 229 ... Capacity transmission unit, 231 to 234, 2
58, 282 ... Multiple coding section, 241 to 244, 257 ... Output circuit, 235, 284 ... Clock supply section, 251 to 255 ... Input circuit, 256, 274, 283 ... PLL section, 261
~ 265, 272 ... Multiple decoding unit, 311, 331 ... Output control unit, 312 to 313, 332
333 ... Transistor, 314, 334 ... Current source, 316 to 317, 337 to 336 ...
Termination resistor, 318, 338 ... Differential discrimination unit, 401 ... Multiplexing unit, 402 ... Copy flag addition unit, 403 ... Encryption processing unit, 404 ... Transmission coding unit 411 ... Transmission code decoding unit 412
... Cryptanalysis unit, 413 ... Copy flag extraction unit, 414 ... Separation unit

Claims (1)

映像送信装置であって、
所定の圧縮符号化方式で圧縮符号化された圧縮映像信号と非圧縮映像信号とを多重化処理して多重化映像信号を生成する多重化部と、
前記多重化映像信号における前記非圧縮映像信号に対し、複数種類の暗号化処理のなかから選択された前記非圧縮映像信号に対応した所定の暗号化処理を施す暗号化処理部と、
前記暗号化処理された非圧縮映像信号が多重された前記多重化映像信号を外部機器へ出力するための出力部と
前記暗号化処理部において選択される前記所定の暗号化処理に応じて、前記出力される非圧縮映像信号の画質を制限するための手段と、
を備えることを特徴とする映像送信装置。
It ’s a video transmitter,
A multiplexing unit that generates a multiplexed video signal by multiplexing a compressed video signal and an uncompressed video signal compressed and encoded by a predetermined compression coding method .
An encryption processing unit that performs a predetermined encryption process corresponding to the uncompressed video signal selected from a plurality of types of encryption processes on the uncompressed video signal in the multiplexed video signal.
An output unit for outputting the multiplexed video signal to which the encrypted uncompressed video signal is multiplexed, and an output unit for outputting the multiplexed video signal to an external device.
A means for limiting the image quality of the output uncompressed video signal according to the predetermined encryption process selected by the encryption processing unit.
A video transmission device characterized by being provided with.
JP2020077499A 2020-04-24 2020-04-24 Video transmitter Active JP7037598B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2020077499A JP7037598B2 (en) 2020-04-24 2020-04-24 Video transmitter
JP2021202422A JP7352611B2 (en) 2020-04-24 2021-12-14 Video signal processing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020077499A JP7037598B2 (en) 2020-04-24 2020-04-24 Video transmitter

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2019103695A Division JP6775636B2 (en) 2019-06-03 2019-06-03 Display device

Related Child Applications (2)

Application Number Title Priority Date Filing Date
JP2020175990A Division JP7065165B2 (en) 2020-10-20 2020-10-20 Video transmitter
JP2021202422A Division JP7352611B2 (en) 2020-04-24 2021-12-14 Video signal processing device

Publications (2)

Publication Number Publication Date
JP2020120409A JP2020120409A (en) 2020-08-06
JP7037598B2 true JP7037598B2 (en) 2022-03-16

Family

ID=71891406

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020077499A Active JP7037598B2 (en) 2020-04-24 2020-04-24 Video transmitter

Country Status (1)

Country Link
JP (1) JP7037598B2 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002125207A (en) 2000-07-21 2002-04-26 Matsushita Electric Ind Co Ltd Signal transmitter and signal receiver
JP2002300578A (en) 2001-03-29 2002-10-11 Hitachi Kokusai Electric Inc Image transmitter
JP2004312489A (en) 2003-04-09 2004-11-04 Nippon Television Network Corp Digital television signal multiplex transmitting system, and multiplex processor, separation processor and digital television signal multiplex transmitting method used in the system
JP2005514849A (en) 2001-12-24 2005-05-19 シリコン・イメージ・インク Method and system for transmitting video and packetized audio data in multiple formats using serial link

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002125207A (en) 2000-07-21 2002-04-26 Matsushita Electric Ind Co Ltd Signal transmitter and signal receiver
JP2002300578A (en) 2001-03-29 2002-10-11 Hitachi Kokusai Electric Inc Image transmitter
JP2005514849A (en) 2001-12-24 2005-05-19 シリコン・イメージ・インク Method and system for transmitting video and packetized audio data in multiple formats using serial link
JP2004312489A (en) 2003-04-09 2004-11-04 Nippon Television Network Corp Digital television signal multiplex transmitting system, and multiplex processor, separation processor and digital television signal multiplex transmitting method used in the system

Also Published As

Publication number Publication date
JP2020120409A (en) 2020-08-06

Similar Documents

Publication Publication Date Title
US11863812B2 (en) Video processing system for demultiplexing received compressed and non-compressed video signals and transmitting demultiplexed signals
JP7065165B2 (en) Video transmitter
JP5380473B2 (en) Video processing apparatus and video processing method
JP6171065B2 (en) Display device and display method
JP7037598B2 (en) Video transmitter
JP6775635B2 (en) Display device
JP6775636B2 (en) Display device
JP6039707B2 (en) Video signal processing apparatus and method
JP7352611B2 (en) Video signal processing device
JP6695465B2 (en) Display device
JP7307513B2 (en) Display device
JP6286082B2 (en) Display device
JP6534757B2 (en) Display device
JP6534720B2 (en) Display device
JP6249311B2 (en) Output device
JP5926767B2 (en) Sending method
JP5695226B2 (en) Video transmission method by video transmission device
JP2013102453A (en) Image processing apparatus

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200424

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200424

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20201218

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210105

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20210304

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210428

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20210914

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20211020

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211214

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20211214

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20211222

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20220105

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220215

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220304

R150 Certificate of patent or registration of utility model

Ref document number: 7037598

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150