WO2021187292A1 - 送信装置、送信方法および受信装置 - Google Patents

送信装置、送信方法および受信装置 Download PDF

Info

Publication number
WO2021187292A1
WO2021187292A1 PCT/JP2021/009717 JP2021009717W WO2021187292A1 WO 2021187292 A1 WO2021187292 A1 WO 2021187292A1 JP 2021009717 W JP2021009717 W JP 2021009717W WO 2021187292 A1 WO2021187292 A1 WO 2021187292A1
Authority
WO
WIPO (PCT)
Prior art keywords
data
raw data
uncompressed
uncompressed raw
transmission
Prior art date
Application number
PCT/JP2021/009717
Other languages
English (en)
French (fr)
Inventor
学 久保
邦裕 江崎
亜貴代 福田
克明 横溝
Original Assignee
ソニーグループ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニーグループ株式会社 filed Critical ソニーグループ株式会社
Priority to US17/906,168 priority Critical patent/US20230114790A1/en
Priority to EP21772141.4A priority patent/EP4106317A4/en
Publication of WO2021187292A1 publication Critical patent/WO2021187292A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/10—Adaptations for transmission by electrical cable
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43632—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • H04N21/43635—HDMI
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/135—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on four or more different wavelength filter elements

Definitions

  • the present technology relates to a transmitting device, a transmitting method and a receiving device, and more particularly to a transmitting device for transmitting uncompressed RAW data to an external device.
  • YC data as image data for example, YcbCr 4: 2: 2 system image data is transmitted from a source device to a sink device via an HDMI (High-Definition Multimedia Interface) transmission line. It is disclosed that it is transmitted in compression.
  • HDMI High-Definition Multimedia Interface
  • the RAW data when transmitting image data from an imaging device as a source device to a receiving device as a sink device, considering that processing such as editing and image quality adjustment is performed on the receiving device side, the RAW data is not in the YC data format. It is desirable to send it in a format and save it in the format of its RAW data.
  • RAW data the image data output from the imager that has not been converted into YC data.
  • This RAW data may be the output image data of the imager itself as long as the arrangement relationship of the color filter of the imager such as the Bayer array is maintained, and the output image data includes noise reduction, defect correction, and auto. It may be processed such as white balance.
  • the purpose of this technology is to enable good transmission of uncompressed RAW data between devices.
  • the concept of this technology is it is in a transmission device including a transmission unit that transmits uncompressed RAW data to an external device via an HDMI transmission line.
  • the transmission unit transmits uncompressed RAW data to an external device via the HDMI transmission line.
  • the uncompressed RAW data may be uncompressed RAW data of a Bayer array.
  • the number of bits for each pixel of the uncompressed RAW data is 16 bits, and the transmission unit may transmit the uncompressed RAW data using the YC 12-bit transfer mode.
  • the transmission unit may transmit the metadata related to the uncompressed RAW data together with the uncompressed RAW data.
  • This metadata includes information such as image size, parameters for development (brightness at the time of imaging, gain, etc.).
  • the transmission unit may add metadata to each frame of uncompressed RAW data and transmit it.
  • the transmission unit stores the uncompressed RAW data in the active video section of the TMDS (Transition Minimized Differential Signaling) transmission data including the active video section and the vertical blanking section, and stores the uncompressed RAW data in the vertical blanking section.
  • the metadata may be stored in the payload part of the inserted data packet and transmitted.
  • the data packet may be a VSIF (VendorSpecificInfoFrame) packet.
  • the metadata is composed of a high update frequency metadata having a first update frequency and a low update frequency metadata having a second update frequency lower than the first update frequency.
  • the payload unit may have a first area for storing high update frequency metadata and a second area for storing low update frequency metadata.
  • the second area may include a page number area for storing page number information, and metadata corresponding to this page number may be stored.
  • the second area may further include a total number of pages area for storing information on the total number of pages. Further, in that case, for example, the transmission frequency of the metadata corresponding to each page stored and transmitted in the second area may be changed according to the priority of each metadata.
  • the transmission unit stores uncompressed RAW data in the active video section of the TMDS (Transition Minimized Differential Signaling) transmission data including the active video section, and stores the uncompressed RAW data in the active video section. Metadata may be stored and transmitted in an area that is not available.
  • TMDS Transition Minimized Differential Signaling
  • the transmission unit may transmit the identification information indicating that the uncompressed RAW data is transmitted together with the uncompressed RAW data.
  • the identification information indicating that the uncompressed RAW data is transmitted together with the uncompressed RAW data in this way, the receiving side can easily identify that the uncompressed RAW data is transmitted, and perform appropriate processing. It becomes possible to do.
  • the transmission unit stores the uncompressed RAW data in the active video section of the TMDS (Transition Minimized Differential Signaling) transmission data including the active video section and the vertical blanking section, and stores the uncompressed RAW data in the vertical blanking section.
  • the identification information may be inserted and transmitted.
  • the transmission unit may insert a predetermined data packet into the vertical blanking section as identification information.
  • the metadata related to the uncompressed RAW data may be stored in the payload portion of the predetermined data packet.
  • an imager that outputs uncompressed RAW data may be further provided.
  • the transmission unit may further have a function of transmitting the YC data obtained by developing the uncompressed RAW data to an external device via the HDMI transmission line.
  • the uncompressed RAW data is transmitted to the external device via the HDMI transmission line, and the uncompressed RAW data can be satisfactorily transmitted between the devices.
  • the receiving device includes a processing unit that processes the uncompressed RAW data received by the receiving unit.
  • uncompressed RAW data is received from an external device by the receiving unit via the HDMI transmission line. Then, the processing unit processes the uncompressed RAW data received by the receiving unit.
  • uncompressed RAW data is received and processed from an external device via the HDMI transmission line, and image data editing processing, image quality adjustment processing, and the like can be performed satisfactorily. ..
  • TMDS transmission data When using the YC 12-bit transfer mode to output uncompressed YC data with a resolution of 3840 x 2160 pixels (pixels) as a normal HDMI output, and using the YC 12-bit transfer mode as an HDMI output, a maximum of 4700 x 2600 It is a figure which shows the case which outputs the uncompressed RAW data of the resolution of a pixel (pixel).
  • FIG. 1 shows a configuration example of the imaging system 10 as an embodiment.
  • the imaging system 10 is configured by connecting an imaging device 100 as a source device and a receiving device 200 as a sink device.
  • the imaging device 100 and the receiving device 200 are connected via an HDMI cable 300, which is a digital interface cable.
  • the imaging device 100 has an HDMI transmission unit 102 and a control unit 103.
  • the control unit 103 controls the entire image pickup apparatus 100.
  • the image pickup apparatus 100 is provided with a receptacle 101 as an HDMI connector to which the HDMI transmission unit 102 is connected.
  • the receiving device 200 has an HDMI receiving unit 202 and a control unit 203.
  • the control unit 203 controls the entire receiving device 200.
  • the receiving device 200 is provided with a receptacle 201 as an HDMI connector to which the HDMI receiving unit 202 is connected.
  • the HDMI cable 300 constitutes an HDMI transmission line.
  • a plug 301 forming an HDMI connector is provided at one end of the HDMI cable 300, and a plug 302 forming an HDMI connector is provided at the other end.
  • the plug 301 at one end of the HDMI cable 300 is connected to the receptacle 101 of the imaging device 100, and the plug 302 at the other end of the HDMI cable 300 is connected to the receptacle 201 of the receiving device 200.
  • the imaging device 100 supports, for example, uncompressed RAW data when the receiving device 200 corresponds to uncompressed RAW data and it is selected to output uncompressed RAW data.
  • the data is transmitted to the receiving device 200 via the HDMI cable 300 by HDMI-compliant communication.
  • the imaging device 100 is selected not to output RAW data even if the receiving device 200 supports uncompressed RAW data, and outputs YC data.
  • the uncompressed YC data obtained by developing the uncompressed RAW data is transmitted to the receiving device 200 via the HDMI cable 300 by HDMI-compliant communication.
  • the imaging device 100 is not used, for example, when the receiving device 200 does not support uncompressed RAW data and it is selected to output YC data.
  • the uncompressed YC data obtained by developing the compressed RAW data is transmitted to the receiving device 200 via the HDMI cable 300 by HDMI-compliant communication.
  • the imaging device 100 is selected not to output RAW data and does not output YC data even if the receiving device 200 supports uncompressed RAW data, for example. If is selected, or if the receiver 200 does not support uncompressed RAW data and is selected not to output YC data, the receiver 200 will also receive uncompressed RAW data. The uncompressed YC data obtained by developing the uncompressed RAW data is also not transmitted.
  • FIG. 2 shows a configuration example of the HDMI transmitting unit 102 of the imaging device 100 and the HDMI receiving unit 202 of the receiving device 200 in the imaging system 10 of FIG.
  • the HDMI transmission unit 102 is a valid image section (hereinafter, appropriately, "active video section") which is a section excluding the horizontal blanking section and the vertical blanking section from the section from one vertical synchronization signal to the next vertical synchronization signal.
  • active video section a valid image section
  • the differential signal corresponding to the pixel data of the image of one uncompressed screen is transmitted in one direction to the HDMI receiving unit 202 by a plurality of channels, and a horizontal blanking section or a vertical blanking section.
  • differential signals corresponding to at least audio data, control data, other auxiliary data, etc. associated with the image are transmitted in one direction to the HDMI receiving unit 202 by a plurality of channels.
  • the HDMI transmitter 102 has an HDMI transmitter (HDMI Transmitter) 121.
  • the HDMI transmitter 121 converts, for example, pixel data of an uncompressed image into a differential signal, and is connected via an HDMI cable 300 with three TMDS channels # 0, # 1, and # 2, which are a plurality of channels. Serial transmission is performed in one direction to the HDMI receiving unit 202.
  • the HDMI transmitter 121 converts audio data accompanying the uncompressed image, necessary control data and other auxiliary data into differential signals, and uses three TMDS channels # 0, # 1 and # 2. Serial transmission is performed in one direction to the HDMI receiving unit 202 connected via the HDMI cable 300.
  • the HDMI transmitter 121 connects the pixel clock synchronized with the pixel data transmitted through the three TMDS channels # 0, # 1 and # 2 via the HDMI cable 300 to the HDMI receiver 202 on the TMDS clock channel. Send to.
  • TMDS coding is 8-bit / 10-bit conversion coding that converts 8-bit data into 10-bit data, and suppresses adverse effects such as unnecessary radiation by reducing the number of transition points from comparison with the previous data. It is a coding that maintains the DC balance above. Therefore, since the run length of coding cannot be guaranteed theoretically, DC coupling and separate clock transmission are indispensable.
  • the HDMI receiving unit 202 receives the differential signal corresponding to the pixel data transmitted in one direction from the HDMI transmitting unit 102 on a plurality of channels, and also receives a horizontal blanking section or a vertical blanking section.
  • a plurality of channels receive differential signals corresponding to voice data and control data transmitted in one direction from the HDMI transmission unit 102.
  • the HDMI receiving unit 202 has an HDMI receiver (HDMI Receiver) 221.
  • the HDMI receiver 221 is a differential signal corresponding to pixel data transmitted in one direction from the HDMI transmission unit 102 connected via the HDMI cable 300 on TMDS channels # 0, # 1, and # 2.
  • the differential signal corresponding to the voice data and the control data is received in synchronization with the pixel clock transmitted from the HDMI transmission unit 102 via the TMDS clock channel.
  • the transmission channel of the HDMI system including the HDMI transmission unit 102 and the HDMI reception unit 202 also includes a transmission channel called DDC (Display Data Channel).
  • DDC Display Data Channel
  • This DDC is composed of two signal lines (not shown) included in the HDMI cable 300, and performs IIC (Inter-Integrated Circuit) communication between the HDMI transmitting unit 102 and the HDMI receiving unit 202.
  • the HDMI transmission unit 102 has an IIC master block (IIC Master Block) 122. Further, the HDMI receiving unit 202 has a memory unit 222.
  • the memory unit 222 includes an EDID ROM (Extended Display Identification Data ROM) 231 and an SCDC (Status and Control Data Channel) register unit 232.
  • the EDID ROM 231 is realized by a rewritable memory such as an EEPROM (Electrically Erasable Programmable Read-Only Memory) or a flash memory, but may be a RAM (Random access memory) and can be realized by any other storage medium.
  • EEPROM Electrically Erasable Programmable Read-Only Memory
  • flash memory but may be a RAM (Random access memory) and can be realized by any other storage medium.
  • the SCDC register unit 232 includes a register group for storing SCDCS (SCDC Structure).
  • the image pickup apparatus 100 can read and write the SCDCS data stored in the SCDC register unit 232 by the IIC master block 122 through the DDC.
  • the SCDCS data includes data related to the current link state, data for controlling the operation of the source device, and the like.
  • the HDMI system transmission channel includes a transmission channel called a CEC line (Consumer Electronics Control Line) in addition to the above-mentioned TMDS channels # 0 to # 2 and the TMDS clock channel and DDC.
  • This CEC line consists of one signal line included in the HDMI cable 300, and is used for bidirectional communication of control data between the HDMI transmitting unit 102 and the HDMI receiving unit 202.
  • This CEC line constitutes a control data line.
  • the HDMI cable 300 includes an HPD line (Hot Plug Detect Line).
  • HPD line Hot Plug Detect Line
  • the source device can use this HPD line to detect the connection of the sink device.
  • an arrow is attached to the HPD line to indicate one direction from the sink device to the source device.
  • this HPD line is also used as a HEAC (HDMI Ethernet and Audio return Channel) -line that constitutes a bidirectional communication path, and in that case, it becomes a bidirectional line.
  • HEAC HDMI Ethernet and Audio return Channel
  • the HDMI cable 300 includes a power supply line (+ 5V Power Line) used for supplying power from the source device to the sink device. Further, the HDMI cable 300 includes a utility line. The utility line is also used as a HEAC (HDMI Ethernet and Audio return Channel) + line that constitutes a bidirectional communication path.
  • HEAC HDMI Ethernet and Audio return Channel
  • FIG. 3 shows a structural example of TMDS transmission data.
  • FIG. 3 shows various transmission data sections when, for example, image data of 3840 pixels ⁇ 2160 lines in width ⁇ length, so-called 4K resolution image data, is transmitted in TMDS channels # 0 to # 2. ing.
  • the video field section is a section from the rising edge of a vertical synchronization signal (active edge) to the rising edge of the next vertical synchronization signal.
  • This video field section is divided into a horizontal blanking interval (horizontal blanking interval), a vertical blanking interval (vertical blanking interval), and an active video section (Active Video interval).
  • This active video section is a section obtained by excluding the horizontal blanking section and the vertical blanking section from the video field section.
  • the video data section is assigned to the active video section. In this video data section, data of 3840 pixels (pixels) ⁇ 2160 lines of active pixels (Active pixels) constituting uncompressed image data for one screen is transmitted.
  • the data island section and control section are assigned to the horizontal blanking section and the vertical blanking section.
  • Auxiliary data is transmitted in the data island section and the control section. That is, the data island section is assigned to a part of the horizontal blanking section and the vertical blanking section.
  • data island section among auxiliary data, data that is not related to control, for example, an audio data packet or the like is transmitted.
  • the control section is assigned to the horizontal blanking section and other parts of the vertical blanking section. In this control section, data related to control among auxiliary data, for example, a vertical synchronization signal, a horizontal synchronization signal, a control packet, and the like are transmitted.
  • the HDMI transmission unit 102 packs the uncompressed RAW data into each of the TMDS channels # 0 to # 2 and transmits the uncompressed RAW data.
  • the uncompressed RAW data is uncompressed RAW data in a Bayer layout, as shown in FIG. 4.
  • the uncompressed RAW data is image data in which horizontal ⁇ vertical is “Hsize” pixels ⁇ “Vsize” lines and has a maximum resolution of 4700 ⁇ 2600 pixels. Further, it is assumed that the bit length of the data of each pixel is 16 bits.
  • the frame rate of uncompressed RAW data is 59.94 fps, 29.97 fps, 23.98 fps, 50.00 fps, 25.00 fps, and the like.
  • the uncompressed RAW data is transmitted using the YC 12-bit transfer mode.
  • the left side of FIG. 5 shows a case where uncompressed YC data having a resolution of 3840 ⁇ 2160 pixels (pixels) is output as a normal HDMI output using the YC 12-bit transfer mode.
  • the uncompressed YC data is YCbCr 4: 2: 2 system image data.
  • each line is a series of pixels of "Y: 12 bits + Cb: 12 bits” and pixels of "Y: 12 bits + Cr: 12 bits” alternately.
  • 24-bit (Y: 12 bits + C: 12 bits) data of 1 pixel of YC data is packed for 1 pixel clock.
  • the data of each pixel of the uncompressed YC data is sequentially mapped to the memory, and then the data of each pixel is sequentially read from the memory.
  • the packing format is packed in each of the TMDS channels # 0 to # 2 to obtain an HDMI output.
  • the lower 4 bits of the C data are the upper 4 bit data of the TMDS channel
  • the upper 8 bits of the C data are the 8 bit data of the TMDS channel 2
  • the lower 4 bits of the Y data Is the lower 4 bit data of the TMDS channel 0
  • the upper 8 bits of the Y data is the 8 bit data of the TMDS channel 1.
  • the right side of FIG. 5 shows a case where uncompressed RAW data having a maximum resolution of 4700 ⁇ 2600 pixels (pixels) is output as HDMI output using the YC 12-bit transfer mode.
  • the uncompressed RAW data is in a Bayer array as described above, and the bit length of the data of each pixel is 16 bits.
  • For output coding for odd lines (R / Gr lines), pixels of "R: 16 bits” and pixels of "Gr: 16 bits” are alternately continuous, and even lines (B / Gb).
  • the pixels of "Gb: 16 bits” and the pixels of "B: 16 bits” are alternately continuous.
  • data packing 48-bit data of 3 pixels of uncompressed RAW data is packed with a 2 pixel clock.
  • FIG. 7A shows a continuous 2-pixel clock
  • the data of each pixel of the uncompressed RAW data is sequentially written to the memory, and then the data of each pixel is sequentially read from the memory.
  • FIGS. 7 (b1) and 7 (b2) each of the TMDS channels # 0 to # 2 is packed to obtain an HDMI output.
  • FIG. 7 (b1) shows a packing format for odd-numbered lines (R / Gr lines)
  • FIG. 7 (b2) shows a packing format for even-numbered lines (B / Gb lines).
  • a continuous 2-pixel clock is the packing cycle.
  • the odd line (R / Gr line) in the first 2 pixel clock, it is packed as follows. That is, in the first pixel clock, the lower 4 bits of the R0 data are the upper 4 bits of the TMDS channel 0, the middle 8 bits of the R0 data are the 8 bits of the TMDS channel 2, and the upper 4 bits of the R0 data. The 4 bits are the lower 4 bit data of the TMDS channel 0, and the lower 8 bits of the Gr0 data are the 8 bit data of the TMDS channel 1.
  • the middle 4 bits of the Gr0 data are the upper 4 bits of the TMDS channel 0
  • the upper 4 bits of the Gr0 data are the lower 4 bits of the TMDS channel 2
  • the R1 data are the lower 4 bits of the data.
  • the lower 4 bits of the data are the upper 4 bits of the TMDS channel 2
  • the middle 4 bits of the R1 data are the lower 4 bits of the TMDS channel 0
  • the upper 8 bits of the R1 data are the 8 bit data of the TMDS channel 1. It is said that.
  • the even line (B / Gb line) in the first 2 pixel clock it is packed as follows. That is, in the first pixel clock, the lower 4 bits of the Gb0 data are the upper 4 bits of the TMDS channel 0, the middle 8 bits of the Gb0 data are the 8 bit data of the TMDS channel 2, and the upper 4 bits of the Gb0 data. The 4 bits are the lower 4 bit data of the TMDS channel 0, and the lower 8 bits of the B0 data are the 8 bit data of the TMDS channel 1.
  • the middle 4 bits of the B0 data are the upper 4 bits of the TMDS channel 0
  • the upper 4 bits of the B0 data are the lower 4 bits of the TMDS channel 2
  • the Gb1 data are the lower 4 bits of the data.
  • the lower 4 bits of the data are the upper 4 bits of the TMDS channel 2
  • the middle 4 bits of the Gb1 data are the lower 4 bits of the TMDS channel 0
  • the upper 8 bits of the Gb1 data are the 8 bit data of the TMDS channel 1. It is said that.
  • FIG. 8 shows an active video section (see FIG. 3) of TMDS transmission data in the case of transmitting uncompressed YC 12-bit image data of 3840 pixels ⁇ 2160 lines in width ⁇ length.
  • the uncompressed RAW data has a maximum resolution of 4700 ⁇ 2600 pixels, and the maximum data size of one frame of the uncompressed RAW data is smaller than the data size of the active video section, 24300 [Kbyte].
  • the maximum data size of one frame of the uncompressed RAW data is smaller than the data size of the active video section, 24300 [Kbyte].
  • the metadata related to the uncompressed RAW data is transmitted together with the uncompressed RAW data.
  • metadata is added to each frame of uncompressed RAW data and transmitted.
  • the metadata is stored in the payload portion of the data packet inserted in the vertical blanking section of the TMDS transmission data, and is transmitted in a state of being added to each frame of the uncompressed RAW data.
  • the data packet is a VSIF (Vendor Specific Infoframe) packet.
  • the data packet is a VSIF packet.
  • FIG. 9 shows an example of the data structure of the VSIF packet.
  • the 3 bytes of HB0 to HB2 constitute a packet header which is a header part of the VSIF packet.
  • a PacketType (0x81) indicating a VSIF packet is defined in the 0th byte (HB0).
  • the VSIF packet version (0x01) is defined in the first byte (HB1).
  • the data length Length (L) of the payload portion of the VSIF packet is defined in the 4th to 0th bits of the second byte (HB2). In the illustrated example, the data length Length (L) shows 27 [Byte].
  • PB0 to PB26 constitute the packet content which is the payload part of the VSIF packet.
  • a data checksum is defined in the 0th byte (PB0).
  • the 24-bit IEEE OUI (Organizationally Unique Identifier) of the product vendor is arranged in the first byte (PB1) to the third byte (PB3).
  • the fourth byte (PB4) defines a version (eg, 0x02) indicating that it is a new VSIF packet for transmitting metadata related to uncompressed RAW data.
  • the 12 bytes of the 5th byte (PB5) to the 16th byte (PB16) are regarded as the real-time (RT) metadata area. Since this real-time metadata area can be updated every frame, real-time metadata that is frequently updated, such as time code, Rec trigger, brightness information, and color conversion matrix, is stored.
  • the 17th byte (PB17) constitutes a total number of pages area, and information "ST Metadata Number of Pages" of the total number of pages is stored. In this case, a value from 0 to 255 indicates the total number of pages from 1 to 256.
  • the 18th byte (PB18) constitutes a page number area, and page number information "ST Metadata Page #" is stored.
  • the 8 bytes from the 19th byte (PB19) to the 26th byte (PB26) constitute a static (ST) metadata area, which is static that corresponds to the page number and is updated less frequently than the above-mentioned real-time metadata. Metadata such as camera model name, lens brightness, image size, data bit length, etc. are stored.
  • the maximum number of static metadata that can be transmitted per page is 8 [Byte]
  • FIG. 10 shows another example of the data structure of the VSIF packet.
  • the size ratio of the real-time (RT) metadata area and the static (ST) metadata area is changed with respect to the example of the data structure of the VSIF packet shown in FIG.
  • 4 bytes from the 5th byte (PB5) to the 8th byte (PB8) are used as the real-time (RT) metadata area
  • 16 bytes from the 11th byte (PB11) to the 26th byte (PB26) are static (PB26).
  • ST) It is a metadata area.
  • the maximum number of static metadata that can be transmitted per page is 16 [Byte]
  • the transmission frequency of pages 0 to 1 is high. May be higher than the transmission frequency of pages 2-9.
  • the metadata of each page is always transmitted in the order of 0, 1, 0, 1, ..., And by chance, the metadata of each page is transmitted in the order of 0, 1, ..., 9. Will be sent.
  • the receiving side can appropriately and easily associate the metadata related to the uncompressed RAW data with the uncompressed RAW data. It can be obtained.
  • Transmission identification information of uncompressed RAW data When the uncompressed RAW data is transmitted from the imaging device 100 to the receiving device 200, the identification information indicating that the uncompressed RAW data is transmitted is transmitted together with the uncompressed RAW data.
  • the VSIF packet in which the uncompressed RAW data is stored in the payload portion also has a function of identification information indicating that the uncompressed RAW data is transmitted. The presence of this VSIF packet allows the receiving side to easily identify that the transmission is uncompressed RAW data, and enables appropriate processing.
  • the control unit 103 of the imaging device 100 transmits uncompressed RAW data to the receiving device 200 or uncompressed YC data to the receiving device 200 based on information such as whether the receiving device 200 supports uncompressed RAW data. Controls whether to send or nothing.
  • the HDMI receiving unit 202 of the receiving device 200 has a memory unit 222 as described above, and the memory unit 222 includes an EDID ROM 231 in which information regarding the configuration and possible functions of the receiving device 200 is set (FIG. FIG. 2).
  • the receiving device 200 corresponds to the uncompressed RAW data in the VSVDB (Vendor-Specific Video Data Block) recorded in the EDID ROM 231. It contains identification information indicating that it is present.
  • FIG. 11A shows the basic structure of EDID.
  • This EDID consists of a 128-byte basic block (Base block) and a 128-byte extension block (CTA Extension).
  • Base block basic block
  • CTA Extension 128-byte extension block
  • FIG. 11B there are several types of data blocks in the expansion block, and a data block called VSVDB is defined in the expansion block.
  • FIG. 11C shows an example of the structure of VSVDB including identification information indicating that it corresponds to uncompressed RAW data.
  • “Vendor-Special tag code (0x7)” is defined in the 7th to 5th bits of the 1st byte, and the subsequent data length Length (0x06) is defined in the 4th to 0th bits of the 1st byte. Is defined. Further, “Extended tag code (0x01)” is defined in the second byte.
  • the 24-bit IEEE OUI (Organizationally Unique Identifier) of the product vendor is arranged in the 3rd byte (PB1) to the 5th byte (PB3).
  • This information constitutes identification information indicating that the receiving device 200 corresponds to uncompressed RAW data.
  • the sequence diagram of FIG. 12 shows an example of the output processing of the imaging device 100 based on the EDID read from the EDID ROM 231 of the receiving device 200 at the initial stage of connection.
  • EDID Read access is sent from the image pickup device 100 to the receiver device 200.
  • the EDID is read from the EDID ROM 231 and the EDID is sent to the image pickup apparatus 100.
  • the imaging device 100 receives the EDID sent from the receiving device 200, performs output determination processing based on this EDID, and determines whether to output RAW data, YC data, or nothing. decide. Then, when the imaging device 100 decides to output the RAW data, it transmits the uncompressed RAW data to the receiving device 200, and when it decides to output the YC data, the uncompressed YC data is sent to the receiving device 200. If it is determined to transmit and further output nothing, nothing is output to the receiving device 200.
  • the flowchart of FIG. 13 shows an example of the output determination process in the control unit 103 of the image pickup apparatus 100.
  • the control unit 103 analyzes the EDID in step ST1.
  • the control unit 103 determines whether the receiving device 200 supports RAW reception, that is, whether the receiving device 200 supports uncompressed RAW data.
  • the EDID includes VSVDB including identification information indicating that the receiving device 200 corresponds to the uncompressed RAW data
  • the control unit 103 determines that the receiving device 200 supports RAW reception.
  • step ST2 When it is determined in step ST2 that RAW reception is supported, the control unit 103 puts the inside of the system into a RAW output permitted state in step ST3. Then, in step ST4, the control unit 103 displays the HDMI output selection menu on the display unit as shown in FIG. 14A.
  • the HDMI output selection menu the user can select whether or not to output RAW. In the illustrated example, RAW output is selected.
  • the selection of whether to output YC is invalid.
  • control unit 103 determines whether or not RAW output is selected in step ST5. When it is determined that RAW output is selected, the control unit 103 decides to output RAW in step ST6.
  • step ST5 When it is determined in step ST5 that the user does not output RAW, the control unit 103 puts the inside of the system into a RAW output disallowed state in step ST7.
  • step ST8 the control unit 103 displays the HDMI output selection menu on the display unit as shown in FIG. 14B.
  • this HDMI output selection menu the user can select whether or not to output YC. In the illustrated example, "No YC output" is selected.
  • step ST10 the control unit 103 displays the HDMI output selection menu on the display unit as shown in FIG. 14 (c).
  • this HDMI output selection menu the user can select whether or not to output YC.
  • YC output is selected.
  • the selection of whether or not to output RAW is invalid.
  • step ST8 the control unit 103 determines whether or not YC output is selected in step ST11.
  • the control unit 103 decides to output YC in step ST12.
  • the control unit 103 determines in step ST13 that nothing is output.
  • identification information indicating that the receiving device 200 is compatible with uncompressed RAW data included in the VSVDB recorded in the EDID ROM 231 is shown.
  • the identification information written in the manufacturing area of the SCDC register unit 232, that is, the manufacturing specific registers, indicating that the receiving device 200 corresponds to the uncompressed RAW data is provided. It is also possible to use it.
  • FIG. 15 shows an example of a data structure in a manufacturing specific register.
  • the company code "Manufacture_OUI” issued by applying to the IEEE is arranged in the three bytes of the offsets "0xD0" to "0xD2".
  • a character string "Device_ID_Sting” indicating the name of the device is arranged in 8 bytes of the offsets "0xD3" to "0xDA”.
  • Hardware_Major_Rev A major hardware revision "Hardware_Major_Rev” is arranged in the 4th bit of the 7th to 4th bits of the offset "0xDB”, and a minor revision of the hardware “Hardware_Major_Rev” is arranged in the 4th bit of the 3rd to 0th bits. "Hardware_Minor_Rev” is arranged.
  • a "Sink Vendor ID (for example, 0x01)" is arranged in one byte of the offset "0xDE", and a “Function Code (for example, 0x01)” is arranged in one byte of the offset "0xDF”.
  • This information constitutes identification information indicating that the receiving device 200 corresponds to uncompressed RAW data.
  • One byte of offset "0xE0" is, for example, an information area of status 1.
  • signal stop request information is arranged in the 7th bit, "1" indicates that the receiving device requests signal stop, and "0" means that the receiving device can receive the signal. Show that.
  • RAW reception request information is arranged in the 0th bit, "1" indicates that the receiving device requests RAW data, and "0” indicates that the receiving device requests YC data. Indicates that you are requesting.
  • one byte of the offset "0xE1" is set as, for example, the information area of the status 2.
  • the REC status information is arranged in the 0th bit, "1" indicates that the data received by the receiving device is being processed, that is, recording, and "0" is received by the receiving device. Indicates that the data is not being processed.
  • the sequence diagram of FIG. 16 shows an example of the output processing of the imaging device 100 based on the manufacturing area data read from the SCDC register unit 232 of the receiving device 200 at the initial stage of connection.
  • the SCDC Read access (Read access in the manufacturing area) from the image pickup device 100 to the receiver device 200. ) Is sent.
  • the manufacturing area data of the SCDC register unit 232 is read out, and the manufacturing area data is sent to the image pickup apparatus 100.
  • the imaging device 100 receives the manufacturing area data sent from the receiving device 200, performs output determination processing based on the manufacturing area data, and outputs RAW data or YC data. Or decide whether to output anything.
  • This output determination process is performed by determining that the receiving device 200 is compatible with RAW reception by including the identification information indicating that the receiving device 200 is compatible with uncompressed RAW data in the manufacturing area data. Except for this, it is the same as the output determination process (see FIG. 13) of the image pickup apparatus 100 in the sequence diagram of FIG.
  • the imaging device 100 determines to output RAW data, it transmits uncompressed RAW data to the receiving device 200, and when it determines to output YC data, it transmits uncompressed YC data to the receiving device 200. If it is determined that nothing is output, nothing is output to the receiving device 200.
  • the sequence diagram of FIG. 17 is an example of output processing of the imaging device 100 when the user performs a recording stop operation in the receiving device 200 while the imaging device 100 is transmitting uncompressed RAW data to the receiving device 200. Is shown.
  • the control unit 203 of the receiving device 200 sets the REC status information of the 0th bit of the offset “0xE1” of the manufacturing area of the SCDC register unit 232 to “1”. To "0". Then, a Read request is issued from the receiving device 200 to the imaging device 100.
  • SCDC Read access (Read access in the manufacturing area) is sent from the imaging device 100 to the receiving device 200.
  • the manufacturing area data of the SCDC register unit 232 is read out, and the manufacturing area data is sent to the image pickup apparatus 100.
  • the control unit 103 of the image pickup apparatus 100 analyzes the manufacturing region data in step ST21.
  • the control unit 103 grasps that the receiving device 200 has stopped recording because the REC status information of the 0th bit of the offset “0xE1” has been changed to “0”.
  • the control unit 103 decides to switch from the RAW output to the YC output in step ST23. Based on this determination, the image pickup apparatus 100 transmits uncompressed YC data instead of uncompressed RAW data.
  • the imaging device 100 can transmit the uncompressed RAW data to the receiving device 200.
  • the imaging device 100 transmits the uncompressed RAW data to the receiving device 200. May be made possible. In that case, the imaging device 100 determines whether or not the receiving device 200 requests the reception of uncompressed RAW data based on the RAW reception request information of the 0th bit of the offset "0xE0" of the manufacturing area data. It is possible to do.
  • the image pickup device 100 tells the receiving device 200 only when the receiving device 200 is in a signal receiving state. It may be possible to transmit uncompressed RAW data or uncompressed YC data. In that case, the imaging device 100 may determine whether or not the receiving device 200 is in a signal receivable state based on the signal stop request information of the 7th bit of the offset "0xE0" of the manufacturing area data. It is possible.
  • FIG. 18 shows a configuration example of the image pickup apparatus 100.
  • the image pickup device 100 includes a receptacle 101 as an HDMI connector, an HDMI transmission unit 102, a control unit 103, a user operation unit 104, an imager 105, a RAW data processing unit 106, a RAW data memory 107, and RAW data compression. It has a / decompression unit 108, a development processing unit 109, a YC data memory 110, a YC data compression / decompression unit 111, a recording / playback unit 112, and a display unit 113.
  • the control unit 103 includes a CPU (Central Processing Unit) and controls the entire image pickup apparatus 100.
  • the user operation unit 104 is connected to the control unit 103 and constitutes a user interface for the user to perform various operations.
  • the imager 105 is composed of, for example, a C-MOS image sensor or a CCD image sensor, and outputs uncompressed RAW data as captured image data.
  • This uncompressed RAW data is, for example, uncompressed RAW data of a Bayer array (see FIG. 4).
  • the RAW data processing unit 106 performs processing such as noise reduction, defect correction, and auto white balance on the uncompressed RAW data output from the imager 105.
  • the RAW data processing unit 106 may be omitted.
  • the RAW data memory 107 is, for example, a memory composed of a DRAM (Dynamic Random Access Memory) and temporarily storing uncompressed RAW data and compressed RAW data.
  • the RAW data compression / decompression unit 108 performs a process of compressing uncompressed RAW data to obtain compressed RAW data, or a process of decompressing compressed RAW data to obtain uncompressed RAW data.
  • the RAW data compression / decompression section 108 may be omitted.
  • the development processing unit 109 develops the uncompressed RAW data to obtain the uncompressed YC data.
  • the YC data memory 110 is, for example, a memory composed of DRAM and temporarily storing uncompressed YC data and compressed YC data.
  • the YC data compression / decompression unit 111 performs a process of compressing uncompressed YC data to obtain compressed YC data, or a process of decompressing compressed YC data to obtain uncompressed YC data.
  • the recording / reproducing unit 112 records and reproduces compressed RAW data and compressed YC data on a recording medium (not shown).
  • the recording medium is, for example, an optical disk, a hard disk, a semiconductor memory, or the like.
  • the display unit 113 is composed of, for example, a liquid crystal display, an organic EL display, or the like, and displays an image or a UI screen.
  • the HDMI transmission unit 102 transmits uncompressed RAW data or uncompressed YC data to the receiving device 200 via the receptacle 101 and the HDMI cable 300 via the HDMI cable 300 by HDMI-compliant communication.
  • the imager 105 outputs uncompressed RAW data of a Bayer array in which the bit length of each pixel is 16 bits.
  • This uncompressed RAW data is temporarily written to the RAW data memory 107 after being subjected to processing such as noise reduction, defect correction, and auto white balance by the RAW data processing unit 106.
  • the data of each pixel of the uncompressed RAW data is sequentially written to the RAW data memory 107 (see FIG. 7A).
  • the uncompressed RAW data sequentially written in the RAW data memory 107 is sequentially read from the RAW data memory 107 and supplied to the HDMI transmission unit 102.
  • the HDMI transmission unit 102 generates TMDS transmission data (see FIG. 3) in which uncompressed RAW data is stored in the active video section, and the TMDS transmission data is transmitted to the receiving device 200 through the receptacle 101 as an HDMI connector. ..
  • the HDMI transmission unit 102 uses the YC 12-bit transfer mode, and the uncompressed RAW data is packed in each of the TMDS channels # 0 to # 2 (see FIGS. 7 (b1) and 7 (b2)). .. Further, in the HDMI transmission unit 102, a VSIF packet (see FIGS. 9 and 10) is inserted into the vertical blanking section of the TMDS transmission data. Metadata related to uncompressed RAW data is stored in the payload part of this VSIF packet.
  • the recording / playback unit 112 converts the captured image data into compressed RAW data or compressed YC data according to the user operation. Recording is done in the format of.
  • the uncompressed RAW data written in the RAW data memory 107 is read from the RAW data memory 107 and supplied to the RAW data compression / decompression unit 108.
  • the RAW data compression / decompression unit 108 the uncompressed RAW data is subjected to a compression process to obtain compressed RAW data. Then, the compressed RAW data thus obtained by the RAW data compression / decompression unit 108 is supplied to the recording / reproduction unit 112 and recorded.
  • the uncompressed RAW data written in the RAW data memory 107 is read from the RAW data memory 107 and supplied to the development processing unit 109.
  • the development processing unit 109 performs development processing on the uncompressed RAW data to obtain uncompressed YC data, for example, image data of the YCbCr 4: 2: 2 method.
  • the uncompressed YC data thus obtained by the developing processing unit 109 is temporarily written in the YC data memory 110.
  • the uncompressed YC data written in the YC data memory 110 is sequentially read from the YC data memory 110 and supplied to the YC data compression / decompression unit 111.
  • the YC data compression / decompression unit 111 the uncompressed YC data is subjected to a compression process to obtain the compressed YC data. Then, the compressed YC data thus obtained by the YC data compression / decompression unit 111 is supplied to the recording / reproduction unit 112 and recorded.
  • the uncompressed RAW data obtained by imaging with the imager 105 is transmitted to the receiving device 200, the captured image is displayed on the display unit 113.
  • the uncompressed RAW data written in the RAW data memory 107 is read from the RAW data memory 107 and supplied to the development processing unit 109.
  • uncompressed RAW data is subjected to development processing to obtain uncompressed YC data.
  • the uncompressed YC data thus obtained by the developing processing unit 109 is temporarily written in the YC data memory 110. Then, the uncompressed YC data written in the YC data memory 110 is supplied to the display unit 113 to display the captured image.
  • the imager 105 outputs uncompressed RAW data of a Bayer array in which the bit length of each pixel is 16 bits.
  • This uncompressed RAW data is subjected to processing such as noise reduction, defect correction, and auto white balance by the RAW data processing unit 106, and further compressed by the RAW data compression / decompression unit 108, and then stored in the RAW data memory 107. It is written temporarily.
  • the compressed RAW data written in the RAW data memory 107 is read from the RAW data memory 107 and supplied to the RAW data compression / decompression unit 108.
  • the compressed RAW data is decompressed to obtain uncompressed RAW data. This uncompressed RAW data is supplied to the development processing unit 109.
  • uncompressed RAW data is subjected to development processing, and uncompressed YC data, for example, YCbCr 4: 2: 2 system image data is obtained.
  • uncompressed YC data each line is a series of pixels of "Y: 12 bits + Cb: 12 bits” and pixels of "Y: 12 bits + Cr: 12 bits" alternately.
  • the uncompressed YC data thus obtained by the developing processing unit 109 is temporarily written in the YC data memory 110.
  • the data of each pixel of the uncompressed YC data is sequentially written to the YC data memory 110 (see FIG. 6A).
  • the uncompressed YC data sequentially written in the YC data memory 110 is sequentially read from the YC data memory 110 and supplied to the HDMI transmission unit 102.
  • the HDMI transmission unit 102 generates TMDS transmission data (see FIG. 3) in which YC data is stored in the active video section, and the TMDS transmission data is transmitted to the receiving device 200 through the receptacle 101 as an HDMI connector.
  • the HDMI transmission unit 102 uses the YC 12-bit transfer mode, and the YC data is packed in each of the TMDS channels # 0 to # 2 (see FIG. 6B).
  • the recording / playback unit 112 converts the captured image data into a compressed RAW according to the user operation. Recording is done in the form of data or compressed YC data.
  • the compressed RAW data written in the RAW data memory 107 is read from the RAW data memory 107 and supplied to the recording / playback unit 112 for recording.
  • the compressed RAW data written in the RAW data memory 107 is read from the RAW data memory 107 and supplied to the RAW data compression / decompression unit 108.
  • the compressed RAW data is decompressed to obtain uncompressed RAW data.
  • This uncompressed RAW data is supplied to the development processing unit 109.
  • the development processing unit 109 performs development processing on the uncompressed RAW data to obtain uncompressed YC data, for example, image data of the YCbCr 4: 2: 2 method.
  • the uncompressed YC data thus obtained by the developing processing unit 109 is temporarily written in the YC data memory 110.
  • the uncompressed YC data written in the YC data memory 110 is read from the YC data memory 110 and supplied to the YC data compression / decompression unit 111.
  • the YC data compression / decompression unit 111 the uncompressed YC data is subjected to a compression process to obtain the compressed YC data. Then, the compressed YC data thus obtained by the YC data compression / decompression unit 111 is supplied to the recording / reproduction unit 112 and recorded.
  • the captured image is displayed on the display unit 113.
  • the compressed RAW data written in the RAW data memory 107 is read from the RAW data memory 107 and supplied to the RAW data compression / decompression unit 108.
  • the compressed RAW data is decompressed to obtain uncompressed RAW data.
  • This uncompressed RAW data is supplied to the developing processing unit 109.
  • the development processing unit 109 performs development processing on the uncompressed RAW data to obtain uncompressed YC data, for example, image data of the YCbCr 4: 2: 2 method.
  • the uncompressed YC data thus obtained by the developing processing unit 109 is temporarily written in the YC data memory 110.
  • the uncompressed YC data written in the YC data memory 110 is supplied to the display unit 113 to display the captured image.
  • the compressed RAW data reproduced by the recording / reproducing unit 112 is supplied to the RAW data compression / decompression unit 108.
  • the compressed RAW data is decompressed to obtain uncompressed RAW data.
  • This uncompressed RAW data is temporarily written to the RAW data memory 107.
  • the data of each pixel of the uncompressed RAW data is sequentially written to the RAW data memory 107 (see FIG. 7A).
  • the uncompressed RAW data sequentially written in the RAW data memory 107 is sequentially read from the RAW data memory 107 and supplied to the HDMI transmission unit 102.
  • the HDMI transmission unit 102 generates TMDS transmission data (see FIG. 3) in which uncompressed RAW data is stored in the active video section, and the TMDS transmission data is transmitted to the receiving device 200 through the receptacle 101 as an HDMI connector. ..
  • the HDMI transmission unit 102 uses the YC 12-bit transfer mode, and the uncompressed RAW data is packed in each of the TMDS channels # 0 to # 2 (see FIGS. 7 (b1) and 7 (b2)). .. Further, in the HDMI transmission unit 102, a VSIF packet (see FIGS. 9 and 10) is inserted into the vertical blanking section of the TMDS transmission data. Metadata related to uncompressed RAW data is stored in the payload part of this VSIF packet.
  • the compressed RAW data reproduced by the recording / reproducing unit 112 is supplied to the RAW data compression / decompression unit 108.
  • the compressed RAW data is decompressed to obtain uncompressed RAW data.
  • This uncompressed RAW data is supplied to the developing processing unit 109.
  • the development processing unit 109 performs development processing on the uncompressed RAW data to obtain uncompressed YC data, for example, image data of the YCbCr 4: 2: 2 method.
  • each line is a series of pixels of "Y: 12 bits + Cb: 12 bits” and pixels of "Y: 12 bits + Cr: 12 bits” alternately.
  • the uncompressed YC data thus obtained by the developing processing unit 109 is temporarily written in the YC data memory 110.
  • the data of each pixel of the uncompressed YC data is sequentially written to the YC data memory 110 (see FIG. 6A).
  • the uncompressed YC data sequentially written in the YC data memory 110 is sequentially read from the YC data memory 110 and supplied to the HDMI transmission unit 102.
  • the HDMI transmission unit 102 generates TMDS transmission data (see FIG. 3) in which YC data is stored in the active video section, and the TMDS transmission data is transmitted to the receiving device 200 through the receptacle 101 as an HDMI connector.
  • the HDMI transmission unit 102 uses the YC 12-bit transfer mode, and the YC data is packed in each of the TMDS channels # 0 to # 2 (see FIG. 6B).
  • the compressed YC data reproduced by the recording / reproducing unit 112 is supplied to the YC data compression / decompression unit 111.
  • the compressed YC data is decompressed to obtain uncompressed YC data, for example, YCbCr 4: 2: 2 system image data.
  • each line is a series of pixels of "Y: 12 bits + Cb: 12 bits” and pixels of "Y: 12 bits + Cr: 12 bits" alternately.
  • the uncompressed YC data obtained by the YC data compression / decompression unit 111 in this way is temporarily written to the YC data memory 110.
  • the data of each pixel of the uncompressed YC data is sequentially written to the YC data memory 110 (see FIG. 6A).
  • the uncompressed YC data sequentially written in the YC data memory 110 is sequentially read from the YC data memory 110 and supplied to the HDMI transmission unit 102.
  • the HDMI transmission unit 102 generates TMDS transmission data (see FIG. 3) in which YC data is stored in the active video section, and the TMDS transmission data is transmitted to the receiving device 200 through the receptacle 101 as an HDMI connector.
  • the HDMI transmission unit 102 uses the YC 12-bit transfer mode, and the YC data is packed in each of the TMDS channels # 0 to # 2 (see FIG. 6B).
  • the compressed RAW data reproduced by the recording / reproducing unit 112 is supplied to the RAW data compression / decompression unit 108.
  • the compressed RAW data is decompressed to obtain uncompressed RAW data.
  • This uncompressed RAW data is supplied to the developing processing unit 109.
  • the development processing unit 109 performs development processing on the uncompressed RAW data to obtain uncompressed YC data, for example, image data of the YCbCr 4: 2: 2 method.
  • This uncompressed YC data is temporarily written to the YC data memory 110. Then, the uncompressed YC data written in the YC data memory 110 is supplied to the display unit 113, and the reproduced image is displayed.
  • the compressed YC data reproduced by the recording / reproducing unit 112 is supplied to the YC compression / decompression unit 111.
  • the compressed YC data is decompressed to obtain uncompressed YC data.
  • This uncompressed YC data is temporarily stored in the YC data memory 110.
  • the uncompressed YC data written in the YC data memory 110 is supplied to the display unit 113, and the reproduced image is displayed.
  • FIG. 19 shows a configuration example of the receiving device 200.
  • the receiving device 200 includes a receptacle 201 as an HDMI connector, an HDMI receiving unit 202, a control unit 203, a user operation unit 204, a RAW data memory 205, a RAW data compression / decompression unit 206, and a development processing unit 207. , YC data memory 208, YC data compression / decompression unit 209, recording / playback unit 210, and display unit 211.
  • the control unit 203 includes a CPU (Central Processing Unit) and controls the entire receiving device 200.
  • the user operation unit 204 is connected to the control unit 203, and constitutes a user interface for the user to perform various operations.
  • the HDMI receiving unit 202 receives uncompressed RAW data or uncompressed YC data from the image pickup apparatus 100 through the HDMI cable 300 and the receptacle 201 by HDMI-compliant communication.
  • the RAW data memory 205 is, for example, a memory configured by a DRAM (Dynamic Random Access Memory) and temporarily stores uncompressed RAW data and compressed RAW data.
  • the RAW data compression / decompression unit 206 performs a process of compressing uncompressed RAW data to obtain compressed RAW data, or a process of decompressing compressed RAW data to obtain uncompressed RAW data.
  • the development processing unit 207 develops the uncompressed RAW data to obtain the uncompressed YC data.
  • the YC data memory 208 is, for example, a memory composed of DRAM and temporarily storing uncompressed YC data and compressed YC data.
  • the YC data compression / decompression unit 209 performs a process of compressing uncompressed YC data to obtain compressed YC data, or a process of decompressing compressed YC data to obtain uncompressed YC data.
  • the recording / playback unit 210 records and reproduces compressed RAW data and compressed YC data on a recording medium (not shown).
  • the recording medium is, for example, an optical disk, a hard disk, a semiconductor memory, or the like.
  • the display unit 211 comprises, for example, a liquid crystal display, an organic EL display, or the like, and displays an image or a UI screen.
  • the HDMI receiving unit 202 receives the TMDS transmission data (see FIG. 3) in which the uncompressed RAW data is stored in the active video section, and the uncompressed RAW data is obtained.
  • a VSIF packet (see FIGS. 9 and 10) is inserted in the vertical blanking section of the TMDS transmission data, and metadata related to the uncompressed RAW data is stored in the payload portion of the VSIF packet.
  • the HDMI receiving unit 202 extracts the VSIF packet, and this VSIF packet is sent to the control unit 203.
  • the control unit 203 recognizes that the transmission of uncompressed RAW data is due to the transmission of this VSIF packet. Further, the control unit 203 acquires metadata related to the uncompressed RAW data from the payload unit of the VSIF packet, and controls processing of each part related to the uncompressed RAW data, for example, development processing, based on the metadata. ..
  • the uncompressed RAW data obtained by the HDMI receiving unit 202 is temporarily written to the RAW data memory 205.
  • the data of each pixel of the uncompressed RAW data is sequentially written to the RAW data memory 205 (see FIG. 7A).
  • the uncompressed RAW data sequentially written in the RAW data memory 205 is sequentially read from the RAW data memory 205 and supplied to the RAW data compression / decompression unit 206.
  • RAW data compression / decompression unit 206 uncompressed RAW data is subjected to compression processing to obtain compressed RAW data. Then, the compressed RAW data thus obtained by the RAW data compression / decompression unit 206 is supplied to the recording / reproduction unit 210 and recorded.
  • the uncompressed RAW data obtained by the HDMI receiving unit 202 is temporarily written to the RAW data memory 205.
  • the data of each pixel of the uncompressed RAW data is sequentially written to the RAW data memory 205 (see FIG. 7A).
  • the uncompressed RAW data sequentially written in the RAW data memory 205 is sequentially read from the RAW data memory 205 and supplied to the development processing unit 207.
  • the development processing unit 207 performs development processing on the uncompressed RAW data to obtain uncompressed YC data, for example, image data of the YCbCr 4: 2: 2 method.
  • the uncompressed YC data thus obtained by the development processing unit 207 is temporarily written in the YC data memory 208.
  • the uncompressed YC data written in the YC data memory 208 is read from the YC data memory 208 and supplied to the YC data compression / decompression unit 209.
  • YC data compression / decompression unit 209 uncompressed YC data is subjected to compression processing to obtain compressed YC data.
  • the compressed YC data thus obtained by the YC data compression / decompression unit 209 is supplied to the recording / reproduction unit 210 and recorded.
  • the image is displayed on the display unit 113.
  • the uncompressed RAW data written in the RAW data memory 205 is read from the RAW data memory 205 and supplied to the development processing unit 207.
  • this development processing unit 207 uncompressed RAW data is subjected to development processing, and uncompressed YC data is obtained.
  • the uncompressed YC data thus obtained by the development processing unit 207 is temporarily written in the YC data memory 208. Then, the uncompressed YC data written in the YC data memory 208 is supplied to the display unit 211 to display the captured image.
  • the HDMI receiving unit 202 receives the TMDS transmission data (see FIG. 3) in which the uncompressed YC data is stored in the active video section, and the uncompressed YC data, for example, the image data of the YCbCr 4: 2: 2 method. can get.
  • This uncompressed YC data is temporarily written to the YC data memory 208.
  • the uncompressed YC data written in the YC data memory 208 is read from the YC data memory 208 and supplied to the YC data compression / decompression unit 209.
  • YC data compression / decompression unit 209 uncompressed YC data is subjected to compression processing to obtain compressed YC data. Then, the compressed YC data thus obtained by the YC data compression / decompression unit 209 is supplied to the recording / reproduction unit 210 and recorded.
  • the compressed RAW data reproduced by the recording / reproducing unit 210 is supplied to the RAW data compression / decompression unit 206.
  • the compressed RAW data is decompressed to obtain uncompressed RAW data.
  • This uncompressed RAW data is supplied to the developing processing unit 207.
  • the development processing unit 207 performs development processing on the uncompressed RAW data to obtain uncompressed YC data, for example, image data of the YCbCr 4: 2: 2 method.
  • This uncompressed YC data is temporarily written to the YC data memory 208. Then, the uncompressed YC data written in the YC data memory 208 is supplied to the display unit 211, and the reproduced image is displayed.
  • the compressed YC data reproduced by the recording / reproducing unit 210 is supplied to the YC compression / decompression unit 209.
  • the compressed YC data is decompressed to obtain uncompressed YC data.
  • This uncompressed YC data is temporarily stored in the YC data memory 208.
  • the uncompressed YC data written in the YC data memory 208 is supplied to the display unit 211, and the reproduced image is displayed.
  • the imaging device 100 can transmit uncompressed RAW data to the receiving device 200 via the HDMI cable 300. Therefore, uncompressed RAW data can be satisfactorily transmitted between devices.
  • the processing unit is not shown in FIG. 19, the image data editing process and the image quality adjusting process can be performed satisfactorily.
  • the imaging device 100 transmits metadata related to the uncompressed RAW data to the receiving device 200 together with the uncompressed RAW data. Therefore, the receiving device 200 can appropriately and easily acquire the metadata related to the uncompressed RAW data in association with the uncompressed RAW data, and satisfactorily performs various processes on the uncompressed RAW data based on the metadata. be able to.
  • the imaging device 100 transmits uncompressed RAW data of the Bayer array having a bit length of 16 bits for each pixel via the HDMI cable 300 using the YC 12-bit transfer mode. It is transmitted to the receiving device 200. Therefore, the uncompressed RAW data of the Bayer array in which the bit length of each pixel is 16 bits can be satisfactorily transmitted by effectively utilizing the conventional HDMI transmission / reception system of the YC 12-bit transfer mode.
  • the uncompressed RAW data is the uncompressed RAW data of the Bayer sequence.
  • the uncompressed RAW data is not limited to the uncompressed RAW data of the Bayer sequence. No.
  • an example in which the bit length of each pixel of the uncompressed RAW data is 16 bits has been shown, but the bit length of each pixel is not limited to 16 bits in the present technology.
  • the metadata related to the uncompressed RAW data is stored in the payload part of the VSIF packet inserted in the vertical blanking section of the TMDS transmission data and transmitted.
  • the method of transmitting the metadata related to the uncompressed RAW data together with the uncompressed RAW data is not limited to this.
  • it may be transmitted using another data packet inserted in the vertical blanking section of the TMDS transmission data, and an area in which the uncompressed RAW data of the active video section is not stored (dummy data area in FIG. 8). It may be stored in and sent.
  • identification information indicating that the uncompressed RAW data is transmitted is inserted into the blanking section of the TMDS transmission data and transmitted.
  • a VSIF packet in which metadata related to uncompressed RAW data is stored in a payload unit also has a function of identification information indicating that the uncompressed RAW data is transmitted.
  • the identification information indicating that the uncompressed RAW data is transmitted may be transmitted by another method. For example, it is possible to notify the receiving device 200 from the imaging device 100 by communication using the CEC line.
  • the present technology can have the following configurations.
  • a transmission device including a transmission unit that transmits uncompressed RAW data to an external device via an HDMI transmission line.
  • the uncompressed RAW data is uncompressed RAW data of a Bayer array.
  • the bit length of each pixel of the uncompressed RAW data is 16 bits.
  • the transmission unit transmits the uncompressed RAW data using the YC 12-bit transfer mode.
  • the transmission unit transmits metadata related to the uncompressed RAW data together with the uncompressed RAW data.
  • the transmission device adds the metadata to each frame of the uncompressed RAW data and transmits the metadata.
  • the transmitter is The uncompressed RAW data is stored in the active video section of the TMDS (Transition Minimized Differential Signaling) transmission data including the active video section and the vertical blanking section.
  • the transmission device according to (5) above, wherein the metadata is stored in a payload portion of a data packet inserted in the vertical blanking section and transmitted.
  • the metadata includes a high update frequency metadata having a first update frequency and a low update frequency metadata having a second update frequency lower than the first update frequency.
  • the transmission device wherein the payload portion of the data packet has a first area for storing the high update frequency metadata and a second area for storing the low update frequency metadata.
  • the second area includes a page number area for storing page number information and stores metadata corresponding to the page number.
  • the second area further includes a total number of pages area for storing information on the total number of pages.
  • the transmission frequency of the metadata corresponding to each page stored and transmitted in the second area is changed according to the priority of each metadata according to the above (8) or (9). Transmitter.
  • the transmitting device according to any one of (6) to (10) above, wherein the data packet is a VSIF (Vendor Specific InfoFrame) packet.
  • the transmitter is The uncompressed RAW data is stored in the active video section of the TMDS (Transition Minimized Differential Signaling) transmission data including the active video section.
  • the transmission device according to (5) above, wherein the metadata is stored and transmitted in an area of the active video section in which the uncompressed RAW data is not stored.
  • the transmission unit transmits identification information indicating that the uncompressed RAW data is transmitted together with the uncompressed RAW data.
  • the transmitter is The uncompressed RAW data is stored in the active video section of the TMDS (Transition Minimized Differential Signaling) transmission data including the active video section and the vertical blanking section.
  • the transmission device according to (15) wherein metadata related to the uncompressed RAW data is stored in the payload portion of the predetermined data packet.
  • the transmission unit further includes a function of transmitting YC data obtained by developing the uncompressed RAW data to the external device via the HDMI transmission path (1) to (17).
  • the transmitter according to any of the above.
  • a transmission method including a procedure for transmitting uncompressed RAW data to an external device via an HDMI transmission line.
  • a receiving unit that receives uncompressed RAW data from an external device via an HDMI transmission line.
  • a receiving device including a processing unit that processes the uncompressed RAW data received by the receiving unit.
  • Imaging system 100 Imaging device 101 ... Receptacle (HDMI connector) 102: HDMI transmission unit 103: Control unit 104: User operation unit 105: Imager 106: RAW data processing unit 107: RAW data memory 108: RAW data compression / decompression unit 109 ⁇ ⁇ ⁇ Development processing unit 110 ⁇ ⁇ ⁇ YC data memory 111 ⁇ ⁇ ⁇ YC data compression / decompression unit 112 ⁇ ⁇ ⁇ Recording / playback unit 113 ⁇ ⁇ ⁇ Display unit 121 ⁇ ⁇ ⁇ HDMI transmitter 122 ⁇ ⁇ ⁇ IIC master Block 200 ... Receiver 201 ...

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Studio Devices (AREA)

Abstract

機器間における非圧縮ＲＡＷデータの伝送を良好に行い得るようにする。　送信部により、非圧縮ＲＡＷデータを、ＨＤＭＩ伝送路を介して、外部機器に送信する。例えば、非圧縮ＲＡＷデータは、ベイヤー配列の非圧縮ＲＡＷデータである。また、例えば、非圧縮ＲＡＷデータの画素毎のビット数は１６ビットであり、送信部は、非圧縮ＲＡＷデータを、ＹＣ１２ビット転送モードを用いて送信する。例えば、送信部は、非圧縮ＲＡＷデータと共に、この非圧縮ＲＡＷデータに関連したメタデータを送信する。

Description

送信装置、送信方法および受信装置
　本技術は、送信装置、送信方法および受信装置に関し、詳しくは、非圧縮ＲＡＷデータを外部機器に送信する送信装置等に関する。
　例えば、特許文献１には、ソース機器からシンク機器に、画像データとしてのＹＣデータ、例えばＹｃｂＣｒ　４：２：２方式の画像データを、ＨＤＭＩ（High-Definition Multimedia Interface）伝送路を介して、非圧縮で送信することが開示されている。なお、「ＨＤＭＩ」は、登録商標である。
　例えば、ソース機器としての撮像装置からシンク機器としての受信装置に画像データを送信する場合、受信装置側で編集や画質調整等の処理をすることを考慮すると、ＹＣデータの形式ではなくＲＡＷデータの形式で送り、そのＲＡＷデータの形式で保存しておくことが望まれる。
　ここで、イメージャから出力された画像データに対してＹＣデータに変換していないものをＲＡＷデータと呼ぶ。このＲＡＷデータは、ベイヤー配列などのイメージャのカラーフィルタの配置関係が維持されていればよく、イメージャの出力画像データそのものであってもよく、また、その出力画像データにノイズリダクション、欠陥補正、オートホワイトバランス等の処理がされたものであってもよい。
特開２０１０－０２８２６１号公報
　本技術の目的は、機器間における非圧縮ＲＡＷデータの伝送を良好に行い得るようにすることにある。
　本技術の概念は、
　非圧縮ＲＡＷデータを、ＨＤＭＩ伝送路を介して、外部機器に送信する送信部を備える
　送信装置にある。
　本技術において、送信部により、非圧縮ＲＡＷデータが、ＨＤＭＩ伝送路を介して、外部機器に送信される。例えば、非圧縮ＲＡＷデータは、ベイヤー配列の非圧縮ＲＡＷデータであってもよい。この場合、例えば、非圧縮ＲＡＷデータの画素毎のビット数は１６ビットであり、送信部は、非圧縮ＲＡＷデータを、ＹＣ１２ビット転送モードを用いて送信してもよい。
　また、例えば、送信部は、非圧縮ＲＡＷデータと共に、この非圧縮ＲＡＷデータに関連したメタデータを送信してもよい。このメタデータには、画像のサイズ、現像のためのパラメータ（撮像時における明るさ、ゲインなど）、などの情報が含まれる。このように非圧縮ＲＡＷデータに関連したメタデータを非圧縮ＲＡＷデータと共に送信することで、受信側では、非圧縮ＲＡＷデータに関連したメタデータを、非圧縮ＲＡＷデータに対応付けて適切かつ容易に取得可能となる。
　この場合、例えば、送信部は、非圧縮ＲＡＷデータの各フレームにメタデータを付加して送信してもよい。その場合、例えば、送信部は、アクティブビデオ区間と垂直ブランキング区間とを含むＴＭＤＳ（Transition Minimized Differential Signaling）伝送データのうちの、アクティブビデオ区間に非圧縮ＲＡＷデータを格納し、垂直ブランキング区間に挿入されるデータパケットのペイロード部にメタデータを格納して送信してもよい。例えば、データパケットは、ＶＳＩＦ（Vendor Specific InfoFrame）パケットであってもよい。
　その場合、例えば、メタデータは、第１の更新頻度の高更新頻度メタデータと、第１の更新頻度より低い更新頻度の第２の更新頻度の低更新頻度メタデータとからなり、データパケットのペイロード部は、高更新頻度メタデータを格納する第１の領域と、低更新頻度メタデータを格納する第２の領域を有していてもよい。その場合、例えば、第２の領域には、ページ番号の情報を格納するページ番号領域が含まれ、このページ番号に対応したメタデータが格納されてもよい。
　その場合、例えば、第２の領域には、総ページ数の情報を格納する総ページ数領域がさらに含まれていてもよい。また、その場合、例えば、第２の領域に格納されて送信される各ページに対応したメタデータの送信頻度は、それぞれのメタデータの優先度に応じて変更されてもよい。
　また、例えば、送信部は、アクティブビデオ区間を含むＴＭＤＳ（Transition Minimized Differential Signaling）伝送データのうちの、アクティブビデオ区間に非圧縮ＲＡＷデータを格納し、そのアクティブビデオ区間の非圧縮ＲＡＷデータが格納されていない領域にメタデータを格納して送信してもよい。
　また、例えば、送信部は、非圧縮ＲＡＷデータと共に、この非圧縮ＲＡＷデータの送信であることを示す識別情報を送信してもよい。このように非圧縮ＲＡＷデータの送信であることを示す識別情報を非圧縮ＲＡＷデータと共に送信することで、受信側では、非圧縮ＲＡＷデータの送信であることを容易に識別でき、適切な処理を行うことが可能となる。
　その場合、例えば、送信部は、アクティブビデオ区間と垂直ブランキング区間とを含むＴＭＤＳ（Transition Minimized Differential Signaling）伝送データのうちの、アクティブビデオ区間に非圧縮ＲＡＷデータを格納し、垂直ブランキング区間に識別情報を挿入して送信してもよい。その場合、例えば、送信部は、識別情報として、垂直ブランキング区間に所定データパケットを挿入してもよい。そして、その場合、例えば、その所定データパケットのペイロード部には非圧縮ＲＡＷデータに関連するメタデータが格納されてもよい。
　また、例えば、非圧縮ＲＡＷデータを出力するイメージャをさらに備えてもよい。また、例えば、送信部は、非圧縮ＲＡＷデータを現像して得られたＹＣデータを、ＨＤＭＩ伝送路を介して、外部機器に送信する機能をさらに備えていてもよい。
　このように本技術においては、非圧縮ＲＡＷデータを、ＨＤＭＩ伝送路を介して、外部機器に送信するものであり、機器間における非圧縮ＲＡＷデータの伝送を良好に行うことができる。
　また、本技術の他の概念は、
　外部機器から、ＨＤＭＩ伝送路を介して、非圧縮ＲＡＷデータを受信する受信部と、
　前記受信部で受信された前記非圧縮ＲＡＷデータを処理する処理部を備える
　受信装置にある。
　本技術において、受信部により、外部機器から、ＨＤＭＩ伝送路を介して、非圧縮ＲＡＷデータが受信される。そして、処理部により、受信部で受信された非圧縮ＲＡＷデータが処理される。
　このように本技術においては、外部機器から、ＨＤＭＩ伝送路を介して、非圧縮ＲＡＷデータを受信して処理するものであり、画像データの編集処理や画質調整処理などを良好に行うことができる。
実施の形態としての撮像システムの構成例を示すブロック図である。 撮像装置のＨＤＭＩ送信部と受信装置のＨＤＭＩ受信部の構成例を示すブロック図である。 ＴＭＤＳ伝送データの構造例を示す図である。 非圧縮ＲＡＷデータのイメージフォーマットを示す図である。 ＹＣ１２ビット転送モードを用いて、通常のＨＤＭＩ出力として、３８４０×２１６０ピクセル（画素）の解像度の非圧縮ＹＣデータを出力する場合と、ＹＣ１２ビット転送モードを用いて、ＨＤＭＩ出力として、最大４７００×２６００ピクセル（画素）の解像度の非圧縮ＲＡＷデータを出力する場合を示す図である。 非圧縮ＹＣデータを送信する場合におけるメモリマップと、パッキングフォーマットを示す図である。 非圧縮ＲＡＷデータを送信する場合におけるメモリマップと、パッキングフォーマットを示す図である。 横×縦が３８４０ピクセル×２１６０ラインの非圧縮ＹＣ１２ビットの画像データを伝送する場合のＴＭＤＳ伝送データのアクティブビデオ区間に、最大４７００×２６００ピクセルの解像度を持ち、画素毎のビット長が１６ビットである非圧縮ＲＡＷデータを格納した状態を説明するための図である。 ＶＳＩＦパケットのデータ構造の一例を示す図である。 ＶＳＩＦパケットのデータ構造の他の一例を示す図である。 ＥＤＩＤの基本構造と、その拡張ブロックに定義されるＶＳＶＤＢの構造の一例を示す図である。 接続当初における、受信装置のＥＤＩＤ　ＲＯＭから読み出されるＥＤＩＤに基づく、撮像装置の出力処理の一例を示すシーケンス図である。 撮像装置の制御部における出力判断処理の一例を示すフローチャートである。 撮像装置の表示部に表示されるＨＤＭＩ出力選択メニューを示す図である。 マニュファクチャ・スペシフィック・レジスタにおけるデータ構造の一例を示す図である。 接続当初における、受信装置のＳＣＤＣレジスタ部から読み出されるマニュファクチャ領域データに基づく、撮像装置の出力処理の一例を示すシーケンス図である。 撮像装置が受信装置に非圧縮ＲＡＷデータを送信している状態で、ユーザが受信装置における記録停止操作を行った場合における、撮像装置の出力処理の一例を示すシーケンス図である。 撮像装置の構成例を示すブロック図である。 受信装置の構成例を示すブロック図である。
　以下、発明を実施するための形態（以下、「実施の形態」とする）について説明する。なお、説明を以下の順序で行う。
　１．実施の形態
　２．変形例
　＜１．実施の形態＞
　［撮像システムの構成例］
　図１は、実施の形態としての撮像システム１０の構成例を示している。撮像システム１０は、ソース機器としての撮像装置１００とシンク機器としての受信装置２００が接続されて構成されている。撮像装置１００および受信装置２００は、デジタルインタフェースケーブルであるＨＤＭＩケーブル３００を介して接続されている。
　撮像装置１００は、ＨＤＭＩ送信部１０２と、制御部１０３を有している。制御部１０３は、撮像装置１００の全体を制御する。また、この撮像装置１００には、ＨＤＭＩ送信部１０２が接続された、ＨＤＭＩコネクタとしてのレセプタクル１０１が設けられている。受信装置２００は、ＨＤＭＩ受信部２０２と、制御部２０３を有している。制御部２０３は、受信装置２００の全体を制御する。また、この受信装置２００には、ＨＤＭＩ受信部２０２が接続された、ＨＤＭＩコネクタとしてのレセプタクル２０１が設けられている。
　ＨＤＭＩケーブル３００は、ＨＤＭＩ伝送路を構成している。このＨＤＭＩケーブル３００の一端にはＨＤＭＩコネクタを構成するプラグ３０１が設けられ、その他端にはＨＤＭＩコネクタを構成するプラグ３０２が設けられている。ＨＤＭＩケーブル３００の一端のプラグ３０１は撮像装置１００のレセプタクル１０１に接続され、このＨＤＭＩケーブル３００の他端のプラグ３０２は受信装置２００のレセプタクル２０１に接続されている。
　図１に示す撮像システム１０において、撮像装置１００は、例えば、受信装置２００が非圧縮ＲＡＷデータに対応しており、非圧縮ＲＡＷデータを出力することが選択されている場合には、非圧縮ＲＡＷデータを、ＨＤＭＩに準拠した通信により、ＨＤＭＩケーブル３００を介して、受信装置２００に送信する。
　また、図１に示す撮像システム１０において、撮像装置１００は、例えば、受信装置２００が非圧縮ＲＡＷデータに対応していても、ＲＡＷデータを出力しないことが選択され、かつＹＣデータを出力することが選択されている場合には、非圧縮ＲＡＷデータが現像されて得られた非圧縮ＹＣデータを、ＨＤＭＩに準拠した通信により、ＨＤＭＩケーブル３００を介して、受信装置２００に送信する。
　また、図１に示す撮像システム１０において、撮像装置１００は、例えば、受信装置２００が非圧縮ＲＡＷデータに対応しておらず、かつＹＣデータを出力することが選択されている場合には、非圧縮ＲＡＷデータが現像されて得られた非圧縮ＹＣデータを、ＨＤＭＩに準拠した通信により、ＨＤＭＩケーブル３００を介して、受信装置２００に送信する。
　また、図１に示す撮像システム１０において、撮像装置１００は、例えば、受信装置２００が非圧縮ＲＡＷデータに対応していても、ＲＡＷデータを出力しないことが選択され、かつＹＣデータを出力しないことが選択されている場合、あるいは受信装置２００が非圧縮ＲＡＷデータに対応しておらず、かつＹＣデータを出力しないことが選択されている場合には、受信装置２００に、非圧縮ＲＡＷデータも、その非圧縮ＲＡＷデータが現像されて得られた非圧縮ＹＣデータも送信しない。
　「ＨＤＭＩ送信部とＨＤＭＩ受信部の構成例」
　図２は、図１の撮像システム１０における、撮像装置１００のＨＤＭＩ送信部１０２と、受信装置２００のＨＤＭＩ受信部２０２の構成例を示している。
　ＨＤＭＩ送信部１０２は、一の垂直同期信号から次の垂直同期信号までの区間から、水平ブランキング区間および垂直ブランキング区間を除いた区間である有効画像区間（以下、適宜、「アクティブビデオ区間」ともいう）において、非圧縮の１画面分の画像の画素データに対応する差動信号を、複数のチャネルで、ＨＤＭＩ受信部２０２に一方向に送信するとともに、水平ブランキング区間または垂直ブランキング区間において、少なくとも画像に付随する音声データや制御データ、その他の補助データ等に対応する差動信号を、複数のチャネルで、ＨＤＭＩ受信部２０２に一方向に送信する。
　すなわち、ＨＤＭＩ送信部１０２は、ＨＤＭＩトランスミッタ（HDMI Transmitter）１２１を有する。ＨＤＭＩトランスミッタ１２１は、例えば、非圧縮の画像の画素データを差動信号に変換し、複数のチャネルである３つのＴＭＤＳチャネル＃０，＃１，＃２で、ＨＤＭＩケーブル３００を介して接続されているＨＤＭＩ受信部２０２に、一方向にシリアル伝送する。
　また、ＨＤＭＩトランスミッタ１２１は、非圧縮の画像に付随する音声データ、さらには、必要な制御データその他の補助データ等を差動信号に変換し、３つのＴＭＤＳチャネル＃０，＃１，＃２でＨＤＭＩケーブル３００を介して接続されているＨＤＭＩ受信部２０２に、一方向にシリアル伝送する。
　さらに、ＨＤＭＩトランスミッタ１２１は、３つのＴＭＤＳチャネル＃０，＃１，＃２で送信する画素データに同期したピクセルクロックを、ＴＭＤＳクロックチャネルで、ＨＤＭＩケーブル３００を介して接続されているＨＤＭＩ受信部２０２に送信する。ここで、１つのＴＭＤＳチャネル＃ｉ（ｉ=０，１，２）では、ピクセルクロックの１クロックの間に、１０ビットの画素データが送信される。
　ここで、ＴＭＤＳコーディングは、８ビットのデータを１０ビットのデータに変換する８ビット/１０ビット変換コーディングであり、前データとの比較から遷移点を少なくすることによって不要輻射等の悪影響を抑えた上でＤＣバランスを維持するコーディングとなっている。そのため、理論上コーディングのランレングスの保証ができないため、ＤＣ結合およびクロックの別送が必須となる。
　ＨＤＭＩ受信部２０２は、アクティブビデオ区間において、複数のチャネルで、ＨＤＭＩ送信部１０２から一方向に送信されてくる、画素データに対応する差動信号を受信するとともに、水平ブランキング区間または垂直ブランキング区間において、複数のチャネルで、ＨＤＭＩ送信部１０２から一方向に送信されてくる、音声データや制御データに対応する差動信号を受信する。
　すなわち、ＨＤＭＩ受信部２０２は、ＨＤＭＩレシーバ（HDMI Receiver）２２１を有する。ＨＤＭＩレシーバ２２１は、ＴＭＤＳチャネル＃０，＃１，＃２で、ＨＤＭＩケーブル３００を介して接続されているＨＤＭＩ送信部１０２から一方向に送信されてくる、画素データに対応する差動信号と、音声データや制御データに対応する差動信号を、同じくＨＤＭＩ送信部１０２からＴＭＤＳクロックチャネルで送信されてくるピクセルクロックに同期して受信する。
　ＨＤＭＩ送信部１０２とＨＤＭＩ受信部２０２とからなるＨＤＭＩシステムの伝送チャネルには、ＤＤＣ（Display Data Channel）と呼ばれる伝送チャネルもある。このＤＤＣは、ＨＤＭＩケーブル３００に含まれる図示しない２本の信号線からなり、ＨＤＭＩ送信部１０２とＨＤＭＩ受信部２０２との間でＩＩＣ（Inter-Integrated Circuit）通信をする。
　すなわち、ＨＤＭＩ送信部１０２は、ＩＩＣマスターブロック（IIC Master Block）１２２を有している。また、ＨＤＭＩ受信部２０２は、メモリ部２２２を有している。メモリ部２２２には、ＥＤＩＤ　ＲＯＭ（Extended Display Identification Data　ROM）２３１、ＳＣＤＣ（Status and Control Data Channel）レジスタ部２３２などが含まれている。
　ＥＤＩＤ　ＲＯＭ２３１には、受信装置２００の構成および可能な機能（Configuration/capability）に関する情報であるＥＤＩＤが設定され、ＤＤＣを通じて、ＩＩＣマスターブロック１２２によって、撮像装置１００側に読み込まれる。これにより、撮像装置１００は、受信装置２００の構成および可能な機能を認識する。なお、ＥＤＩＤ　ＲＯＭ２３１は、例えばＥＥＰＲＯＭ（Electrically Erasable Programmable Read-Only Memory）やフラッシュメモリ等の書き換え可能なメモリで実現されるが、ＲＡＭ（Random access memory）でもよく、その他のいかなる記憶媒体でも実現できる。
　ＳＣＤＣは、ソース機器とシンク機器とがデータを交換するポイント・ツー・ポイント（Point to Point）通信プロトコルに該当する。なお、このＳＣＤＣは、ＨＤＭＩ２．０以降に定義されている。ＳＣＤＣレジスタ部２３２は、ＳＣＤＣＳ（SCDC Structure）を格納するレジスタ群からなる。撮像装置１００（ＨＤＭＩ送信部１０２）は、ＳＣＤＣレジスタ部２３２に格納されるＳＣＤＣＳのデータの読み取りや書き込みを、ＤＤＣを通じて、ＩＩＣマスターブロック１２２によって行うことができる。ＳＣＤＣＳのデータには、現在のリンク状態に関するデータ、およびソース機器の動作を制御するデータ等がある。
　ＨＤＭＩシステムの伝送チャネルには、上述のＴＭＤＳチャネル＃０乃至＃２およびＴＭＤＳクロックチャネルやＤＤＣの他に、ＣＥＣライン（Consumer Electronics Control Line）と呼ばれる伝送チャネルがある。このＣＥＣラインは、ＨＤＭＩケーブル３００に含まれる１本の信号線からなり、ＨＤＭＩ送信部１０２とＨＤＭＩ受信部２０２との間で、制御データの双方向通信を行うために用いられる。このＣＥＣラインは、制御データラインを構成している。
　また、ＨＤＭＩケーブル３００には、ＨＰＤライン(Hot Plug Detect Line)が含まれている。ソース機器は、このＨＰＤラインを利用して、シンク機器の接続を検出することができる。なお、図２において、ＨＰＤラインにはシンク機器からソース機器への一方向を示すように矢印を付している。しかし、このＨＰＤラインは双方向通信路を構成するＨＥＡＣ(HDMI Ethernet and Audio return Channel)－ラインとしても使用され、その場合には双方向ラインとなる。
　また、ＨＤＭＩケーブル３００には、ソース機器からシンク機器に電源を供給するために用いられる電源ライン（＋５Ｖ Power Line）が含まれている。さらに、ＨＤＭＩケーブル３００には、ユーティリティライン（Utility Line）が含まれている。ユーティリティラインは双方向通信路を構成するＨＥＡＣ(HDMI Ethernet and Audio return Channel)+ラインとしても使用される。
　図３は、ＴＭＤＳ伝送データの構造例を示している。この図３は、ＴＭＤＳチャネル＃０～＃２において、例えば、横×縦が３８４０ピクセル×２１６０ラインの画像データ、いわゆる４Ｋ解像度の画像データが伝送される場合における、各種の伝送データの区間を示している。ＴＭＤＳチャネルで伝送データが伝送されるビデオフィールド区間（Video Field interval）には、伝送データの種類に応じて、３種類の区間が存在する。この３種類の区間は、ビデオデータ区間（Video Data period）、データアイランド区間（Data Island period）、およびコントロール区間（Control period）である。
　ここで、ビデオフィールド区間は、ある垂直同期信号の立ち上がりエッジ（active edge）から次の垂直同期信号の立ち上がりエッジまでの区間である。このビデオフィールド区間は、水平ブランキング区間（horizontal blanking interval）、垂直ブランキング区間（vertical blanking interval）、並びに、アクティブビデオ区間（Active Video interval）に分けられる。このアクティブビデオ区間は、ビデオフィールド区間から、水平ブランキング区間および垂直ブランキング区間を除いた区間である。ビデオデータ区間は、アクティブビデオ区間に割り当てられる。このビデオデータ区間では、非圧縮の１画面分の画像データを構成する３８４０ピクセル（画素）×２１６０ライン分の有効画素（Active pixel）のデータが伝送される。
　データアイランド区間およびコントロール区間は、水平ブランキング区間および垂直ブランキング区間に割り当てられる。このデータアイランド区間およびコントロール区間では、補助データ（Auxiliary data）が伝送される。すなわち、データアイランド区間は、水平ブランキング区間と垂直ブランキング区間の一部分に割り当てられている。このデータアイランド区間では、補助データのうち、制御に関係しないデータである、例えば、オーディオデータのパケット等が伝送される。コントロール区間は、水平ブランキング区間と垂直ブランキング区間の他の部分に割り当てられている。このコントロール区間では、補助データのうちの、制御に関係するデータである、例えば、垂直同期信号および水平同期信号、制御パケット等が伝送される。
　「ＲＡＷデータのパッキング方法」
　撮像装置１００が非圧縮ＲＡＷデータを受信装置２００に送信する場合、ＨＤＭＩ送信部１０２は、非圧縮ＲＡＷデータをＴＭＤＳチャネル＃０乃至＃２の各チャネルにパッキングして送信する。この実施の形態において、非圧縮ＲＡＷデータは、図４にイメージフォーマット（Image format）を示すように、ベイヤー配列（Bayer layout）の非圧縮ＲＡＷデータである。
　この実施の形態において、非圧縮ＲＡＷデータは、横×縦が「Ｈｓｉｚｅ」ピクセル×「Ｖｓｉｚｅ」ラインの画像データであって、最大４７００×２６００ピクセルの解像度であるとする。また、各ピクセル（画素）のデータのビット長は１６ビットであるとする。また、非圧縮ＲＡＷデータのフレームレートは、５９．９４ｆｐｓ、２９．９７ｆｐｓ、２３．９８ｆｐｓ、５０．００ｆｐｓ、２５．００ｆｐｓなどである。
　この実施の形態において、非圧縮ＲＡＷデータは、ＹＣ１２ビット転送モードを用いて送信される。図５の左側は、ＹＣ１２ビット転送モードを用いて、通常のＨＤＭＩ出力として、３８４０×２１６０ピクセル（画素）の解像度の非圧縮ＹＣデータを出力する場合について示している。ここで、非圧縮ＹＣデータは、ＹＣｂＣｒ ４：２：２方式の画像データである。出力コーディング（Output cording）は、各ラインが、「Ｙ：１２ビット＋Ｃｂ：１２ビット」のピクセルと「Ｙ：１２ビット＋Ｃｒ：１２ビット」のピクセルが交互に連続したものとなる。データパッキングに関しては、１ピクセルクロックに対してＹＣデータの１ピクセルの２４ビット（Ｙ：１２ビット+Ｃ：１２ビット）データがパッキングされる状態となる。
　この場合、図６（ａ）にメモリマップの一例を示すように、非圧縮ＹＣデータの各ピクセルのデータがメモリに順次マッピングされ、その後、当該メモリから各ピクセルのデータが順次読み出されて、図６（ｂ）にパッキングフォーマットを示すように、ＴＭＤＳチャネル＃０乃至＃２の各チャネルにパッキングされてＨＤＭＩ出力となる。ここで、各ピクセルクロックにおいて、Ｃデータの下位４ビットがＴＭＤＳチャネル０の上位４ビットデータとされ、そのＣデータの上位８ビットがＴＭＤＳチャネル２の８ビットデータとされ、Ｙデータの下位４ビットがＴＭＤＳチャネル０の下位４ビットデータとされ、そのＹデータの上位８ビットがＴＭＤＳチャネル１の８ビットデータとされる。
　図５の右側は、ＹＣ１２ビット転送モードを用いて、ＨＤＭＩ出力として、最大４７００×２６００ピクセル（画素）の解像度の非圧縮ＲＡＷデータを出力する場合について示している。ここで、非圧縮ＲＡＷデータは、上述したようにベイヤー配列のものであり、各ピクセル（画素）のデータのビット長は１６ビットである。出力コーディング（Output cording）は、奇数ライン（Ｒ/Ｇｒライン）については、「Ｒ：１６ビット」のピクセルと「Ｇｒ：１６ビット」のピクセルが交互に連続したものとなり、偶数ライン（Ｂ／Ｇｂライン）については、「Ｇｂ：１６ビット」のピクセルと「Ｂ：１６ビット」のピクセルが交互に連続したものとなる。データパッキングに関しては、２ピクセルクロックに対して非圧縮ＲＡＷデータの３ピクセルの４８ビットデータがパッキングされる状態となる。
　この場合、図７（ａ）にメモリマップの一例を示すように、非圧縮ＲＡＷデータの各ピクセルのデータがメモリに順次書き込まれ、その後、当該メモリから各ピクセルのデータが順次読み出されて、図７（ｂ１），（ｂ２）にパッキングフォーマットを示すように、ＴＭＤＳチャネル＃０乃至＃２の各チャネルにパッキングされてＨＤＭＩ出力となる。ここで、図７（ｂ１）は奇数ライン（Ｒ/Ｇｒライン）のパッキングフォーマットを示し、図７（ｂ２）は偶数ライン（Ｂ/Ｇｂライン）のパッキングフォーマットを示している。この場合、連続する２ピクセルクロックが、パッキングの周期となる。
　奇数ライン（Ｒ/Ｇｒライン）に関し、最初の２ピクセルクロックでは、以下のようにパッキングされる。つまり、第１のピクセルクロックにおいては、Ｒ０データの下位４ビットがＴＭＤＳチャネル０の上位４ビットデータとされ、Ｒ０データの中位８ビットがＴＭＤＳチャネル２の８ビットデータとされ、Ｒ０データの上位４ビットがＴＭＤＳチャネル０の下位４ビットデータとされ、Ｇｒ０データの下位８ビットがＴＭＤＳチャネル１の８ビットデータとされる。
　また、第２のピクセルクロックにおいては、Ｇｒ０データの中位４ビットがＴＭＤＳチャネル０の上位４ビットデータとされ、Ｇｒ０データの上位４ビットがＴＭＤＳチャネル２の下位４ビットのデータとされ、Ｒ１データの下位４ビットがＴＭＤＳチャネル２の上位４ビットのデータとされ、Ｒ１データの中位４ビットがＴＭＤＳチャネル０の下位４ビットデータとされ、Ｒ１データの上位８ビットがＴＭＤＳチャネル１の８ビットデータとされる。
　また、偶数ライン（Ｂ/Ｇｂライン）に関し、最初の２ピクセルクロックでは、以下のようにパッキングされる。つまり、第１のピクセルクロックにおいては、Ｇｂ０データの下位４ビットがＴＭＤＳチャネル０の上位４ビットデータとされ、Ｇｂ０データの中位８ビットがＴＭＤＳチャネル２の８ビットデータとされ、Ｇｂ０データの上位４ビットがＴＭＤＳチャネル０の下位４ビットデータとされ、Ｂ０データの下位８ビットがＴＭＤＳチャネル１の８ビットデータとされる。
　また、第２のピクセルクロックにおいては、Ｂ０データの中位４ビットがＴＭＤＳチャネル０の上位４ビットデータとされ、Ｂ０データの上位４ビットがＴＭＤＳチャネル２の下位４ビットのデータとされ、Ｇｂ１データの下位４ビットがＴＭＤＳチャネル２の上位４ビットのデータとされ、Ｇｂ１データの中位４ビットがＴＭＤＳチャネル０の下位４ビットデータとされ、Ｇｂ１データの上位８ビットがＴＭＤＳチャネル１の８ビットデータとされる。
　図８は、横×縦が３８４０ピクセル×２１６０ラインの非圧縮ＹＣ１２ビットの画像データを伝送する場合におけるＴＭＤＳ伝送データのアクティブビデオ区間（図３参照）を示している。この場合、アクティブビデオ区間のデータサイズは、２４３００[Kbyte]（＝３８４０×２１６０×（１２＋１２）[bit]）である。
　非圧縮ＲＡＷデータは上述したように最大４７００×２６００ピクセルの解像度を持つものであり、非圧縮ＲＡＷデータの１フレームの最大データサイズはアクティブビデオ区間のデータサイズである２４３００[Kbyte]よりは小さい。非圧縮ＲＡＷデータを送信する場合、上述したようにパッキングされることで、各フレームにおいて、１フレーム分の非圧縮ＲＡＷデータがアクティブビデオ区間に格納されて送信される。この場合、各フレームにおいて、アクティブビデオ区間の最初から１フレーム分の非圧縮ＲＡＷデータが詰め込まれていくが、この１フレーム分の非圧縮ＲＡＷデータが全部詰め込まれた後は、残りの区間にダミーデータが詰め込まれていく。
　「メタデータの転送方法」
　撮像装置１００から受信装置２００に非圧縮ＲＡＷデータを送信する場合、この非圧縮ＲＡＷデータと共に、この非圧縮ＲＡＷデータに関連したメタデータを送信する。この場合、例えば、非圧縮ＲＡＷデータの各フレームにメタデータを付加して送信する。例えば、メタデータは、ＴＭＤＳ伝送データの垂直ブランキング区間に挿入されるデータパケットのペイロード部に格納されることで、非圧縮ＲＡＷデータの各フレームに付加された状態で送信される。この実施の形態においては、データパケットは、ＶＳＩＦ（Vendor Specific Infoframe）パケットとされる。なお、本技術において、データパケットはＶＳＩＦパケットとされる。
　図９は、ＶＳＩＦパケットのデータ構造の一例を示している。ＨＢ０～ＨＢ２の３バイトは、ＶＳＩＦパケットのヘッダ部であるパケットヘッダを構成している。第０バイト（ＨＢ０）には、ＶＳＩＦパケットを示すＰａｃｋｅｔＴｙｐｅ（０ｘ８１）が定義されている。第１バイト（ＨＢ１）には、ＶＳＩＦパケットのバージョン（０ｘ０１）が定義されている。第２バイト（ＨＢ２）の第４ビットから第０ビットには、ＶＳＩＦパケットのペイロード部のデータ長Ｌｅｎｇｔｈ（Ｌ）が定義されている。図示の例では、データ長Ｌｅｎｇｔｈ（Ｌ）は２７[Byte]を示す。
　ＰＢ０～ＰＢ２６の２７バイトは、ＶＳＩＦパケットのペイロード部であるパケットコンテンツを構成している。第０バイト（ＰＢ０）には、データのチェックサムが定義されている。第１バイト（ＰＢ１）～第３バイト（ＰＢ３）には、製品ベンダーの２４ビットのＩＥＥＥ ＯＵＩ（Organizationally Unique Identifier）が配置される。第４バイト（ＰＢ４）には、非圧縮ＲＡＷデータに関連したメタデータを伝送するための新規なＶＳＩＦパケットであることを示すバージョン（例えば、０ｘ０２）が定義されている。
　第５バイト（ＰＢ５）～第１６バイト（ＰＢ１６）の１２バイトは、リアルタイム（ＲＴ）メタデータ領域とされる。このリアルタイムメタデータ領域は、毎フレーム更新が可能であるので、更新頻度の高いメタデータであるリアルタイムメタデータ、例えばタイムコード、Ｒｅｃトリガ、明るさ情報、色変換マトリクスなど、が格納される。
　第１７バイト（ＰＢ１７）～第２６バイト（ＰＢ２６）の１０バイトは、スタティック（ＳＴ）メタデータに係る領域とされる。第１７バイト（ＰＢ１７）は、総ページ数領域を構成し、総ページ数の情報“ST Metadata Number of Pages”が格納される。この場合、０～２５５の値によって１～２５６の総ページ数が示される。第１８バイト（ＰＢ１８）は、ページ番号領域を構成し、ページ番号の情報“ST Metadata Page #”が格納される。
　第１９バイト（ＰＢ１９）～第２６バイト（ＰＢ２６）までの８バイトはスタティック（ＳＴ）メタデータ領域を構成し、ページ番号に対応した、上述のリアルタイムメタデータより更新頻度の低いメタデータであるスタティックメタデータ、例えばカメラの機種名、レンズの明るさ、画像の大きさ、データビット長など、が格納される。
　この場合、１ページあたりで伝送し得るスタティックメタデータの最大は８[Byte]であり、総ページ数の最大は２５６ページであるので、このＶＳＩＦパケットにより伝送し得るスタティックメタデータの最大は、２０４８（＝２５６×８）[Byte]となる。
　図１０は、ＶＳＩＦパケットのデータ構造の他の一例を示している。この例は、図９に示すＶＳＩＦパケットのデータ構造の例に対して、リアルタイム（ＲＴ）メタデータ領域とスタティック（ＳＴ）メタデータ領域のサイズ比率が変更されたものである。この例において、第５バイト（ＰＢ５）～第８バイト（ＰＢ８）の４バイトがリアルタイム（ＲＴ）メタデータ領域とされ、第１１バイト（ＰＢ１１）～第２６バイト（ＰＢ２６）の１６バイトがスタティック（ＳＴ）メタデータ領域とされている。
　この場合、１ページあたりで伝送し得るスタティックメタデータの最大は１６[Byte]であり、総ページ数の最大は２５６ページであるので、このＶＳＩＦパケットにより伝送し得るスタティックメタデータの最大は、４０９６（＝２５６×１６）[Byte]となる。
　なお、上述のＶＳＩＦパケットでスタティックメタデータを送信する場合、フレーム毎に、ページ番号を０，１，２，・・・と規則的にインクリメントして送信することが想定されるが、各ページに対応したメタデータの送信頻度を、それぞれのメタデータの優先度に応じて変更することも考えられる。
　例えば、０～９ページまであるが、そのうちの２～９ページのメタデータの更新はほとんどなく、残りの０～１ページのメタデータの更新頻度が高い場合には、０～１ページの送信頻度は２～９ページの送信頻度に比べて高くされてもよい。この場合、例えば、常時は０，１，０，１，・・・の順に各ページのメタデータを送信しており、偶に、０，１，・・・，９の順に各ページのメタデータを送信するようにされる。
　このように非圧縮ＲＡＷデータに関連したメタデータを非圧縮ＲＡＷデータと共に送信することで、受信側では、非圧縮ＲＡＷデータに関連したメタデータを、非圧縮ＲＡＷデータに対応付けて適切かつ容易に取得可能となる。
　「非圧縮ＲＡＷデータの送信識別情報」
　撮像装置１００から受信装置２００に非圧縮ＲＡＷデータを送信する場合、この非圧縮ＲＡＷデータと共に、非圧縮ＲＡＷデータの送信であることを示す識別情報を送信する。この実施の形態においては、上述したようにペイロード部に非圧縮ＲＡＷデータが格納されたＶＳＩＦパケットは、非圧縮ＲＡＷデータの送信であることを示す識別情報の機能を合わせ持つ。受信側は、このＶＳＩＦパケットが存在することで、非圧縮ＲＡＷデータの送信であることを容易に識別でき、適切な処理を行うことが可能となる。
　「出力制御処理」
　撮像装置１００の制御部１０３は、受信装置２００が非圧縮ＲＡＷデータに対応しているか等の情報に基づいて、受信装置２００に非圧縮ＲＡＷデータを送信するか、受信装置２００に非圧縮ＹＣデータを送信するか、何も送信しないかを、制御する。
　受信装置２００のＨＤＭＩ受信部２０２は上述したようにメモリ部２２２を有し、そのメモリ部２２２には受信装置２００の構成および可能な機能に関する情報が設定されたＥＤＩＤ　ＲＯＭ２３１が含まれている（図２参照）。この実施の形態において、受信装置２００が非圧縮ＲＡＷデータに対応している場合、ＥＤＩＤ　ＲＯＭ２３１に記録されたＶＳＶＤＢ（Vendor-Specific Video Data Block）に、受信装置２００が非圧縮ＲＡＷデータに対応していることを示す識別情報が含まれる。
　図１１（ａ）は、ＥＤＩＤの基本構造を示している。このＥＤＩＤは、１２８バイトの基本ブロック（Base block）と１２８バイトの拡張ブロック（CTA Extension）からなっている。拡張ブロックには、図１１（ｂ）に示すように、いくつかの種類のデータブロックが存在し、その中にＶＳＶＤＢというデータブロックが定義されている。
　図１１（ｃ）は、非圧縮ＲＡＷデータに対応していることを示す識別情報を含むＶＳＶＤＢの構造の一例を示している。第１バイトの第７ビットから第５ビットには、“Ｖｅｎｄｏｒ－Ｓｐｅｃｉｆｉｃ　ｔａｇ　ｃｏｄｅ（０ｘ７）”が定義され、第１バイトの第４ビットから第０ビットには、以降のデータ長Ｌｅｎｇｔｈ（０ｘ０６）が定義されている。また、第２バイトには、“Ｅｘｔｅｎｄｅｄ　ｔａｇ ｃｏｄｅ（０ｘ０１）”が定義されている。第３バイト（ＰＢ１）～第５バイト（ＰＢ３）には、製品ベンダーの２４ビットのＩＥＥＥ ＯＵＩ（Organizationally Unique Identifier）が配置される。
　そして、第６バイトには、“Ｓｉｎｋ　Ｖｅｎｄｏｒ　ＩＤ（例えば０ｘ０１）”が配置され、第７バイトには、“Ｆｕｎｃｔｉｏｎ　Ｃｏｄｅ（例えば０ｘ０１）”が配置される。この情報が、受信装置２００が非圧縮ＲＡＷデータに対応していることを示す識別情報を構成している。
　図１２のシーケンス図は、接続当初における、受信装置２００のＥＤＩＤ　ＲＯＭ２３１から読み出されるＥＤＩＤに基づく、撮像装置１００の出力処理の一例を示している。
　撮像装置１００と受信装置２００のそれぞれの電源がオンとされた状態で、それぞれがＨＤＭＩケーブル３００で接続されると、撮像装置１００から受信装置２００に、ＥＤＩＤ　Ｒｅａｄアクセスが送られる。これに対して、ＥＤＩＤ　ＲＯＭ２３１からＥＤＩＤが読み出され、そのＥＤＩＤは撮像装置１００に送られる。
　撮像装置１００は、受信装置２００から送られてきたＥＤＩＤを受信し、このＥＤＩＤに基づき、出力判断処理を行って、ＲＡＷデータを出力するか、ＹＣデータを出力するか、何も出力しないかを決定する。そして、撮像装置１００は、ＲＡＷデータを出力すると決定した場合には、受信装置２００に非圧縮ＲＡＷデータを送信し、ＹＣデータを出力すると決定した場合には、受信装置２００に非圧縮ＹＣデータを送信し、さらには何も出力しないと決定した場合には、受信装置２００に何も出力しない。
　図１３のフローチャートは、撮像装置１００の制御部１０３における出力判断処理の一例を示している。まず、制御部１０３は、ステップＳＴ１において、ＥＤＩＤを解析する。次に、制御部１０３は、ステップＳＴ２において、受信装置２００がＲＡＷ受信対応であるか、つまり受信装置２００が非圧縮ＲＡＷデータに対応しているか否かを判断する。制御部１０３は、ＥＤＩＤに、受信装置２００が非圧縮ＲＡＷデータに対応していることを示す識別情報を含むＶＳＶＤＢが存在するときは、受信装置２００がＲＡＷ受信対応であると判断する。
　ステップＳＴ２でＲＡＷ受信対応であると判断するとき、制御部１０３は、ステップＳＴ３において、システム内部をＲＡＷ出力許可状態にする。そして、制御部１０３は、ステップＳＴ４において、図１４（ａ）に示すように、ＨＤＭＩ出力選択メニューを、表示部に表示する。このＨＤＭＩ出力選択メニューでは、ユーザはＲＡＷ出力をする/しないの選択が可能となっている。図示の例では、ＲＡＷ出力をする、が選択された状態を示している。なお、ここでは、ＹＣ出力をする/しないの選択は無効とされている。
　次に、制御部１０３は、ステップＳＴ５において、ＲＡＷ出力する、が選択されたか否かを判断する。ＲＡＷ出力する、が選択されたと判断するとき、制御部１０３は、ステップＳＴ６において、ＲＡＷ出力をすることに決定する。
　ステップＳＴ５でユーザがＲＡＷ出力しない、が選択されたと判断するとき、制御部１０３は、ステップＳＴ７において、システム内部をＲＡＷ出力非許可状態にする。次に、制御部１０３は、ステップＳＴ８において、図１４（ｂ）に示すように、ＨＤＭＩ出力選択メニューを、表示部に表示する。このＨＤＭＩ出力選択メニューでは、ユーザはＹＣ出力をする/しないの選択が可能となっている。図示の例では、ＹＣ出力をしない、が選択された状態を示している。
　ステップＳＴ２でＲＡＷ受信対応でないと判断するとき、制御部１０３は、ステップＳＴ９において、システム内部をＲＡＷ出力非許可状態にする。次に、制御部１０３は、ステップＳＴ１０において、図１４（ｃ）に示すように、ＨＤＭＩ出力選択メニューを、表示部に表示する。このＨＤＭＩ出力選択メニューでは、ユーザはＹＣ出力をする/しないの選択が可能となっている。図示の例では、ＹＣ出力をする、が選択された状態を示している。なお、ここでは、ＲＡＷ出力をする/しないの選択は無効とされている。
　ステップＳＴ８の処理の後、あるいはステップＳＴ１０の処理の後、制御部１０３は、ステップＳＴ１１において、ＹＣ出力する、が選択されたか否かを判断する。ＹＣ出力する、が選択されたと判断するとき、制御部１０３は、ステップＳＴ１２において、ＹＣ出力をすることに決定する。一方、ＹＣ出力しない、が選択されたと判断するとき、制御部１０３は、ステップＳＴ１３において、何も出力しないことに決定する。
　なお、上述では、ＥＤＩＤ　ＲＯＭ２３１に記録されたＶＳＶＤＢに含まれる、受信装置２００が非圧縮ＲＡＷデータに対応していることを示す識別情報を利用した例を示した。しかし、ＳＣＤＣレジスタ部２３２のマニュファクチャ領域、つまりマニュファクチャ・スペシフィック・レジスタ(Manufacturer Specific Registers)に書き込まれている、受信装置２００が非圧縮ＲＡＷデータに対応していることを示す識別情報を利用することも考えられる。
　図１５は、マニュファクチャ・スペシフィック・レジスタにおけるデータ構造の一例を示している。オフセット“０ｘＤ０”～“０ｘＤ２”の３バイトには、ＩＥＥＥに申請して発行された会社コードである「Ｍａｎｕｆａｃｔｕｒｅ＿ＯＵＩ」が配置される。オフセット“０ｘＤ３”～“０ｘＤＡ”の８バイトには、機器の名称を示す文字列「Ｄｅｖｉｃｅ＿ＩＤ＿Ｓｔｒｉｎｇ」が配置される。
　オフセット“０ｘＤＢ”の第７ビットから第４ビットの４ビットには、ハードウェアのメジャーリビジョン「Ｈａｒｄｗａｒｅ＿Ｍａｊｏｒ＿Ｒｅｖ」が配置され、その第３ビットから第０ビットの４ビットには、ハードウェアのマイナーリビジョン「Ｈａｒｄｗａｒｅ＿Ｍｉｎｏｒ＿Ｒｅｖ」が配置される。
　オフセット“０ｘＤＣ”の１バイトには、ソフトウェアのメジャーリビジョン「Ｓｏｆｔｗａｒｅ＿Ｍａｊｏｒ＿Ｒｅｖ」が配置される。オフセット“０ｘＤＤ”の１バイトには、ソフトウェアのマイナーリビジョン「Ｓｏｆｔｗａｒｅ＿Ｍｉｎｏｒ＿Ｒｅｖ」が配置される。
　オフセット“０ｘＤＥ”の１バイトには、“Ｓｉｎｋ　Ｖｅｎｄｏｒ　ＩＤ（例えば０ｘ０１）”が配置され、オフセット“０ｘＤＦ”の１バイトには、“Ｆｕｎｃｔｉｏｎ　Ｃｏｄｅ（例えば０ｘ０１）”が配置される。この情報が、受信装置２００が非圧縮ＲＡＷデータに対応していることを示す識別情報を構成している。
　オフセット“０ｘＥ０”の１バイトは、例えばステータス１の情報領域とされる。図示の例では、第７ビットには、信号停止要求情報が配置され、“１”は受信機器が信号停止を要求していることを示し、“０”は受信機器が受信可能な状態にあることを示す。また、図示の例では、その第０ビットには、ＲＡＷ受信要求情報が配置され、“１”は受信機器がＲＡＷデータを要求していることを示し、“０”は受信機器がＹＣデータを要求していることを示す。また、オフセット“０ｘＥ１” の１バイトは、例えばステータス２の情報領域とされる。図示の例では、第０ビットには、ＲＥＣステータス情報が配置され、“１”は受信機器が受信したデータを処理中、つまり記録中であることを示し、“０”は受信機器が受信したデータを処理していないことを示す。
　図１６のシーケンス図は、接続当初における、受信装置２００のＳＣＤＣレジスタ部２３２から読み出されるマニュファクチャ領域データに基づく、撮像装置１００の出力処理の一例を示している。
　撮像装置１００と受信装置２００のそれぞれの電源がオンとされた状態で、それぞれがＨＤＭＩケーブル３００で接続されると、撮像装置１００から受信装置２００に、ＳＣＤＣ　Ｒｅａｄアクセス（マニュファクチャ領域のＲｅａｄアクセス）が送られる。これに対して、ＳＣＤＣレジスタ部２３２のマニュファクチャ領域データが読み出され、そのマニュファクチャ領域データは撮像装置１００に送られる。
　撮像装置１００は、受信装置２００から送られてきたマニュファクチャ領域データを受信し、このマニュファクチャ領域データに基づき、出力判断処理を行って、ＲＡＷデータを出力するか、ＹＣデータを出力するか、何も出力しないかを決定する。この出力判断処理は、受信装置２００がＲＡＷ受信対応であるとの判断を、受信装置２００が非圧縮ＲＡＷデータに対応していることを示す識別情報がマニュファクチャ領域データに含まれることで行うことを除き、図１２のシーケンス図における撮像装置１００の出力判断処理（図１３参照）と同様である。
　撮像装置１００は、ＲＡＷデータを出力すると決定した場合には、受信装置２００に非圧縮ＲＡＷデータを送信し、ＹＣデータを出力すると決定した場合には、受信装置２００に非圧縮ＹＣデータを送信し、さらには何も出力しないと決定した場合には、受信装置２００に何も出力しない。
　図１７のシーケンス図は、撮像装置１００が受信装置２００に非圧縮ＲＡＷデータを送信している状態で、ユーザが受信装置２００における記録停止操作を行った場合における、撮像装置１００の出力処理の一例を示している。
　受信装置２００側でユーザが記録停止操作を行った場合、受信装置２００の制御部２０３は、ＳＣＤＣレジスタ部２３２のマニュファクチャ領域のオフセット“０ｘＥ１”の第０ビットのＲＥＣステータス情報を“１”から“０”に変更する。そして、受信装置２００から撮像装置１００にＲｅａｄリクエストが発行される。
　このＲｅａｄリクエストの発行があると、撮像装置１００から受信装置２００に、ＳＣＤＣ　Ｒｅａｄアクセス（マニュファクチャ領域のＲｅａｄアクセス）が送られる。これに対して、ＳＣＤＣレジスタ部２３２のマニュファクチャ領域データが読み出され、そのマニュファクチャ領域データは撮像装置１００に送られる。
　撮像装置１００の制御部１０３は、ステップＳＴ２１において、マニュファクチャ領域データを解析する。次に、制御部１０３は、ステップＳＴ２２において、オフセット“０ｘＥ１”の第０ビットのＲＥＣステータス情報が“０”に変更されていることから、受信装置２００側が記録停止したことを把握する。次に制御部１０３は、ステップＳＴ２３において、ＲＡＷ出力からＹＣ出力に切り替えることを決定する。この決定に基づいて、撮像装置１００は、非圧縮ＲＡＷデータに代えて、非圧縮ＹＣデータを送信する。
　なお、上述では、受信装置２００が非圧縮ＲＡＷデータに対応している場合に、撮像装置１００は、非圧縮ＲＡＷデータを受信装置２００に送信することが可能となるように説明した。しかし、受信装置２００が非圧縮ＲＡＷデータに対応しており、かつ受信装置２００が非圧縮ＲＡＷデータの受信を要求している場合に、撮像装置１００が受信装置２００に非圧縮ＲＡＷデータを送信することが可能となるようにされてもよい。その場合、撮像装置１００は、マニュファクチャ領域データのオフセット“０ｘＥ０”の第０ビットのＲＡＷ受信要求情報に基づいて、受信装置２００が非圧縮ＲＡＷデータの受信を要求しているか否かを判断することが可能である。
　また、上述では、受信装置２００が信号受信可能な状態にあるか否かについて言及していないが、受信装置２００が信号受信可能な状態にある場合のみ、撮像装置１００は、受信装置２００に、非圧縮ＲＡＷデータや非圧縮ＹＣデータを送信することが可能となるようにされてもよい。その場合、撮像装置１００は、マニュファクチャ領域データのオフセット“０ｘＥ０”の第７ビットの信号停止要求情報に基づいて、受信装置２００が信号受信可能な状態にあるか否かを判断することが可能である。
　「撮像装置の構成例」
　図１８は、撮像装置１００の構成例を示している。撮像装置１００は、ＨＤＭＩコネクタとしてのレセプタクル１０１と、ＨＤＭＩ送信部１０２と、制御部１０３と、ユーザ操作部１０４と、イメージャ１０５と、ＲＡＷデータ処理部１０６と、ＲＡＷデータメモリ１０７と、ＲＡＷデータ圧縮/伸長部１０８と、現像処理部１０９と、ＹＣデータメモリ１１０と、ＹＣデータ圧縮/伸長部１１１と、記録/再生部１１２と、表示部１１３を有している。
　制御部１０３は、ＣＰＵ（Central Processing Unit）を備えており、撮像装置１００の全体を制御する。ユーザ操作部１０４は、制御部１０３に接続されており、ユーザが種々の操作を行うためのユーザインタフェースを構成している。
　イメージャ１０５は、例えば、Ｃ－ＭＯＳ撮像素子、あるいはＣＣＤ撮像素子により構成され、撮像画像データとして非圧縮ＲＡＷデータを出力する。この非圧縮ＲＡＷデータは、例えば、ベイヤー配列の非圧縮ＲＡＷデータである（図４参照）。
　ＲＡＷデータ処理部１０６は、イメージャ１０５から出力された非圧縮ＲＡＷデータに対して、ノイズリダクション、欠陥補正、オートホワイトバランス等の処理をする。なお、このＲＡＷデータ処理部１０６は、無くてもよい。ＲＡＷデータメモリ１０７は、例えば、ＤＲＡＭ（Dynamic Random Access Memory）で構成され、非圧縮ＲＡＷデータや圧縮ＲＡＷデータを一時的に記憶するメモリである。ＲＡＷデータ圧縮/伸長部１０８は、非圧縮ＲＡＷデータを圧縮して圧縮ＲＡＷデータを得る処理、あるいは圧縮ＲＡＷデータを伸長して非圧縮ＲＡＷデータを得る処理をする。なお、このＲＡＷデータ圧縮/伸長部１０８は、無くてもよい。
　現像処理部１０９は、非圧縮ＲＡＷデータを現像して非圧縮ＹＣデータを得る処理をする。ＹＣデータメモリ１１０は、例えば、ＤＲＡＭで構成され、非圧縮ＹＣデータや圧縮ＹＣデータを一時的に記憶するメモリである。ＹＣデータ圧縮/伸長部１１１は、非圧縮ＹＣデータを圧縮して圧縮ＹＣデータを得る処理、あるいは圧縮ＹＣデータを伸長して非圧縮ＹＣデータを得る処理をする。
　記録/再生部１１２は、図示しない記録媒体対して、圧縮ＲＡＷデータや圧縮ＹＣデータの記録再生をする。記録媒体は、例えば、光ディスク、ハードディスク、半導体メモリなどである。表示部１１３は、例えば、液晶ディスプレイ、有機ＥＬディスプレイ等からなり、画像やＵＩ画面を表示する。ＨＤＭＩ送信部１０２は、ＨＤＭＩに準拠した通信により、ＨＤＭＩケーブル３００を介して、非圧縮ＲＡＷデータ、あるいは非圧縮ＹＣデータを、レセプタクル１０１およびＨＤＭＩケーブル３００を通じて、受信装置２００に送信する。
　次に、図１８に示す撮像装置１００の動作例を説明する。まず、イメージャ１０５で撮像して得られた非圧縮ＲＡＷデータを受信装置２００に送信する場合の動作例を説明する。
　イメージャ１０５からは、画素毎のビット長が１６ビットであるベイヤー配列の非圧縮ＲＡＷデータが出力される。この非圧縮ＲＡＷデータは、ＲＡＷデータ処理部１０６でノイズリダクション、欠陥補正、オートホワイトバランス等の処理が施された後にＲＡＷデータメモリ１０７に一時的に書き込まれる。この場合、非圧縮ＲＡＷデータの各ピクセルのデータがＲＡＷデータメモリ１０７に順次書き込まれる（図７（ａ）参照）。
　ＲＡＷデータメモリ１０７に順次書き込まれた非圧縮ＲＡＷデータは、このＲＡＷデータメモリ１０７から順次読み出されてＨＤＭＩ送信部１０２に供給される。ＨＤＭＩ送信部１０２では、アクティブビデオ区間に非圧縮ＲＡＷデータが格納されたＴＭＤＳ伝送データ（図３参照）が生成され、このＴＭＤＳ伝送データがＨＤＭＩコネクタとしてのレセプタクル１０１を通じて、受信装置２００に送信される。
　この場合、ＨＤＭＩ送信部１０２では、ＹＣ１２ビット転送モードが用いられて、非圧縮ＲＡＷデータは、ＴＭＤＳチャネル＃０乃至＃２の各チャネルにパッキングされる（図７（ｂ１），（ｂ２）参照）。また、ＨＤＭＩ送信部１０２では、ＴＭＤＳ伝送データの垂直ブランキング区間にＶＳＩＦパケット（図９、図１０参照）が挿入される。このＶＳＩＦパケットのペイロード部には、非圧縮ＲＡＷデータに関連したメタデータが格納される。
　なお、イメージャ１０５で撮像して得られた非圧縮ＲＡＷデータを受信装置２００に送信する場合、ユーザ操作に応じて、記録/再生部１１２で、撮像画像データを、圧縮ＲＡＷデータ、あるいは圧縮ＹＣデータの形式で記録することが行われる。
　圧縮ＲＡＷデータの形式で記録する場合について説明する。この場合、ＲＡＷデータメモリ１０７に書き込まれた非圧縮ＲＡＷデータは、このＲＡＷデータメモリ１０７から読み出されて、ＲＡＷデータ圧縮/伸長部１０８に供給される。このＲＡＷデータ圧縮/伸長部１０８では、非圧縮ＲＡＷデータに対して圧縮処理が施されて圧縮ＲＡＷデータが得られる。そして、このようにＲＡＷデータ圧縮/伸長部１０８で得られた圧縮ＲＡＷデータは記録/再生部１１２に供給されて記録される。
　圧縮ＹＣデータの形式で記録する場合について説明する。この場合、ＲＡＷデータメモリ１０７に書き込まれた非圧縮ＲＡＷデータは、このＲＡＷデータメモリ１０７から読み出されて、現像処理部１０９に供給される。この現像処理部１０９では、非圧縮ＲＡＷデータに対して現像処理が施されて、非圧縮ＹＣデータ、例えばＹＣｂＣｒ ４：２：２方式の画像データが得られる。
　このように現像処理部１０９で得られた非圧縮ＹＣデータは、ＹＣデータメモリ１１０に一時的に書き込まれる。ＹＣデータメモリ１１０に書き込まれた非圧縮ＹＣデータは、このＹＣデータメモリ１１０から順次読み出されてＹＣデータ圧縮/伸長部１１１に供給される。このＹＣデータ圧縮/伸長部１１１では、非圧縮ＹＣデータに対して圧縮処理が施されて圧縮ＹＣデータが得られる。そして、このようにＹＣデータ圧縮/伸長部１１１で得られた圧縮ＹＣデータは記録/再生部１１２に供給されて記録される。
　また、イメージャ１０５で撮像して得られた非圧縮ＲＡＷデータを受信装置２００に送信する場合、表示部１１３に、その撮像画像を表示することが行われる。この場合、ＲＡＷデータメモリ１０７に書き込まれた非圧縮ＲＡＷデータは、このＲＡＷデータメモリ１０７から読み出されて、現像処理部１０９に供給される。
　この現像処理部１０９では、非圧縮ＲＡＷデータに対して現像処理が施されて、非圧縮ＹＣデータが得られる。このように現像処理部１０９で得られた非圧縮ＹＣデータは、ＹＣデータメモリ１１０に一時的に書き込まれる。そして、ＹＣデータメモリ１１０に書き込まれた非圧縮ＹＣデータは表示部１１３に供給されて撮像画像が表示される。
　次に、イメージャ１０５からの非圧縮ＲＡＷデータを現像して得られた非圧縮ＹＣデータを受信装置２００に送信する場合の動作例を説明する。
　この場合、イメージャ１０５からは、画素毎のビット長が１６ビットであるベイヤー配列の非圧縮ＲＡＷデータが出力される。この非圧縮ＲＡＷデータは、ＲＡＷデータ処理部１０６でノイズリダクション、欠陥補正、オートホワイトバランス等の処理が施され、さらにＲＡＷデータ圧縮/伸長部１０８で圧縮処理が施された後にＲＡＷデータメモリ１０７に一時的に書き込まれる。
　ＲＡＷデータメモリ１０７に書き込まれた圧縮ＲＡＷデータは、このＲＡＷデータメモリ１０７から読み出されてＲＡＷデータ圧縮/伸長部１０８に供給される。このＲＡＷデータ圧縮/伸長部１０８では圧縮ＲＡＷデータに対して伸長処理が施されて、非圧縮ＲＡＷデータが得られる。この非圧縮ＲＡＷデータは現像処理部１０９に供給される。
　この現像処理部１０９では、非圧縮ＲＡＷデータに対して現像処理が施されて、非圧縮ＹＣデータ、例えばＹＣｂＣｒ ４：２：２方式の画像データが得られる。この非圧縮ＹＣデータは、各ラインが、「Ｙ：１２ビット＋Ｃｂ：１２ビット」のピクセルと「Ｙ：１２ビット＋Ｃｒ：１２ビット」のピクセルが交互に連続したものである。
　このように現像処理部１０９で得られた非圧縮ＹＣデータは、ＹＣデータメモリ１１０に一時的に書き込まれる。この場合、非圧縮ＹＣデータの各ピクセルのデータがＹＣデータメモリ１１０に順次書き込まれる（図６（ａ）参照）。ＹＣデータメモリ１１０に順次書き込まれた非圧縮ＹＣデータは、このＹＣデータメモリ１１０から順次読み出されてＨＤＭＩ送信部１０２に供給される。
　ＨＤＭＩ送信部１０２では、アクティブビデオ区間にＹＣデータが格納されたＴＭＤＳ伝送データ（図３参照）が生成され、このＴＭＤＳ伝送データがＨＤＭＩコネクタとしてのレセプタクル１０１を通じて、受信装置２００に送信される。この場合、ＨＤＭＩ送信部１０２では、ＹＣ１２ビット転送モードが用いられて、ＹＣデータは、ＴＭＤＳチャネル＃０乃至＃２の各チャネルにパッキングされる（図６（ｂ）参照）。
　なお、イメージャ１０５からの非圧縮ＲＡＷデータを現像して得られた非圧縮ＹＣデータを受信装置２００に送信する場合、ユーザ操作に応じて、記録/再生部１１２で、撮像画像データを、圧縮ＲＡＷデータ、あるいは圧縮ＹＣデータの形式で記録することが行われる。
　圧縮ＲＡＷデータの形式で記録する場合について説明する。この場合、ＲＡＷデータメモリ１０７に書き込まれた圧縮ＲＡＷデータは、このＲＡＷデータメモリ１０７から読み出されて記録/再生部１１２に供給されて記録される。
　次に、圧縮ＹＣデータの形式で記録する場合について説明する。この場合、ＲＡＷデータメモリ１０７に書き込まれた圧縮ＲＡＷデータは、このＲＡＷデータメモリ１０７から読み出されて、ＲＡＷデータ圧縮/伸長部１０８に供給される。このＲＡＷデータ圧縮/伸長部１０８では圧縮ＲＡＷデータに対して伸長処理が施されて、非圧縮ＲＡＷデータが得られる。この非圧縮ＲＡＷデータは現像処理部１０９に供給される。この現像処理部１０９では、非圧縮ＲＡＷデータに対して現像処理が施されて、非圧縮ＹＣデータ、例えばＹＣｂＣｒ ４：２：２方式の画像データが得られる。
　このように現像処理部１０９で得られた非圧縮ＹＣデータは、ＹＣデータメモリ１１０に一時的に書き込まれる。ＹＣデータメモリ１１０に書き込まれた非圧縮ＹＣデータは、このＹＣデータメモリ１１０から読み出されてＹＣデータ圧縮/伸長部１１１に供給される。このＹＣデータ圧縮/伸長部１１１では、非圧縮ＹＣデータに対して圧縮処理が施されて圧縮ＹＣデータが得られる。そして、このようにＹＣデータ圧縮/伸長部１１１で得られた圧縮ＹＣデータは記録/再生部１１２に供給されて記録される。
　また、イメージャ１０５からの非圧縮ＲＡＷデータを現像して得られた非圧縮ＹＣデータを受信装置２００に送信する場合、表示部１１３に、その撮像画像を表示することが行われる。この場合、ＲＡＷデータメモリ１０７に書き込まれた圧縮ＲＡＷデータは、このＲＡＷデータメモリ１０７から読み出されて、ＲＡＷデータ圧縮/伸長部１０８に供給される。このＲＡＷデータ圧縮/伸長部１０８では圧縮ＲＡＷデータに対して伸長処理が施されて、非圧縮ＲＡＷデータが得られる。
　この非圧縮ＲＡＷデータは現像処理部１０９に供給される。この現像処理部１０９では、非圧縮ＲＡＷデータに対して現像処理が施されて、非圧縮ＹＣデータ、例えばＹＣｂＣｒ ４：２：２方式の画像データが得られる。このように現像処理部１０９で得られた非圧縮ＹＣデータは、ＹＣデータメモリ１１０に一時的に書き込まれる。そして、ＹＣデータメモリ１１０に書き込まれた非圧縮ＹＣデータは表示部１１３に供給されて撮像画像が表示される。
　次に、記録/再生部１１２で再生された圧縮ＲＡＷデータに係る非圧縮ＲＡＷデータあるいは非圧縮ＹＣデータを受信装置２００に送信する場合の動作例を説明する。
　非圧縮ＲＡＷデータを送信する場合について説明する。この場合、記録/再生部１１２で再生された圧縮ＲＡＷデータは、ＲＡＷデータ圧縮/伸長部１０８に供給される。このＲＡＷデータ圧縮/伸長部１０８では圧縮ＲＡＷデータに対して伸長処理が施されて、非圧縮ＲＡＷデータが得られる。この非圧縮ＲＡＷデータは、ＲＡＷデータメモリ１０７に一時的に書き込まれる。この場合、非圧縮ＲＡＷデータの各ピクセルのデータがＲＡＷデータメモリ１０７に順次書き込まれる（図７（ａ）参照）。
　ＲＡＷデータメモリ１０７に順次書き込まれた非圧縮ＲＡＷデータは、このＲＡＷデータメモリ１０７から順次読み出されてＨＤＭＩ送信部１０２に供給される。ＨＤＭＩ送信部１０２では、アクティブビデオ区間に非圧縮ＲＡＷデータが格納されたＴＭＤＳ伝送データ（図３参照）が生成され、このＴＭＤＳ伝送データがＨＤＭＩコネクタとしてのレセプタクル１０１を通じて、受信装置２００に送信される。
　この場合、ＨＤＭＩ送信部１０２では、ＹＣ１２ビット転送モードが用いられて、非圧縮ＲＡＷデータは、ＴＭＤＳチャネル＃０乃至＃２の各チャネルにパッキングされる（図７（ｂ１），（ｂ２）参照）。また、ＨＤＭＩ送信部１０２では、ＴＭＤＳ伝送データの垂直ブランキング区間にＶＳＩＦパケット（図９、図１０参照）が挿入される。このＶＳＩＦパケットのペイロード部には、非圧縮ＲＡＷデータに関連したメタデータが格納される。
　次に、非圧縮ＹＣデータを送信する場合について説明する。この場合、記録/再生部１１２で再生された圧縮ＲＡＷデータは、ＲＡＷデータ圧縮/伸長部１０８に供給される。このＲＡＷデータ圧縮/伸長部１０８では圧縮ＲＡＷデータに対して伸長処理が施されて、非圧縮ＲＡＷデータが得られる。
　この非圧縮ＲＡＷデータは現像処理部１０９に供給される。この現像処理部１０９では、非圧縮ＲＡＷデータに対して現像処理が施されて、非圧縮ＹＣデータ、例えばＹＣｂＣｒ ４：２：２方式の画像データが得られる。この非圧縮ＹＣデータは、各ラインが、「Ｙ：１２ビット＋Ｃｂ：１２ビット」のピクセルと「Ｙ：１２ビット＋Ｃｒ：１２ビット」のピクセルが交互に連続したものである。
　このように現像処理部１０９で得られた非圧縮ＹＣデータは、ＹＣデータメモリ１１０に一時的に書き込まれる。この場合、非圧縮ＹＣデータの各ピクセルのデータがＹＣデータメモリ１１０に順次書き込まれる（図６（ａ）参照）。ＹＣデータメモリ１１０に順次書き込まれた非圧縮ＹＣデータは、このＹＣデータメモリ１１０から順次読み出されてＨＤＭＩ送信部１０２に供給される。
　ＨＤＭＩ送信部１０２では、アクティブビデオ区間にＹＣデータが格納されたＴＭＤＳ伝送データ（図３参照）が生成され、このＴＭＤＳ伝送データがＨＤＭＩコネクタとしてのレセプタクル１０１を通じて、受信装置２００に送信される。この場合、ＨＤＭＩ送信部１０２では、ＹＣ１２ビット転送モードが用いられて、ＹＣデータは、ＴＭＤＳチャネル＃０乃至＃２の各チャネルにパッキングされる（図６（ｂ）参照）。
　次に、記録/再生部１１２で再生された圧縮ＹＣデータに係る非圧縮ＹＣデータを受信装置２００に送信する場合の動作例を説明する。
　この場合、記録/再生部１１２で再生された圧縮ＹＣデータは、ＹＣデータ圧縮/伸長部１１１に供給される。このＹＣデータ圧縮/伸長部１１１では圧縮ＹＣデータに対して伸長処理が施されて、非圧縮ＹＣデータ、例えばＹＣｂＣｒ ４：２：２方式の画像データが得られる。この非圧縮ＹＣデータは、各ラインが、「Ｙ：１２ビット＋Ｃｂ：１２ビット」のピクセルと「Ｙ：１２ビット＋Ｃｒ：１２ビット」のピクセルが交互に連続したものである。
　このようにＹＣデータ圧縮/伸長部１１１で得られた非圧縮ＹＣデータは、ＹＣデータメモリ１１０に一時的に書き込まれる。この場合、非圧縮ＹＣデータの各ピクセルのデータがＹＣデータメモリ１１０に順次書き込まれる（図６（ａ）参照）。ＹＣデータメモリ１１０に順次書き込まれた非圧縮ＹＣデータは、このＹＣデータメモリ１１０から順次読み出されてＨＤＭＩ送信部１０２に供給される。
　ＨＤＭＩ送信部１０２では、アクティブビデオ区間にＹＣデータが格納されたＴＭＤＳ伝送データ（図３参照）が生成され、このＴＭＤＳ伝送データがＨＤＭＩコネクタとしてのレセプタクル１０１を通じて、受信装置２００に送信される。この場合、ＨＤＭＩ送信部１０２では、ＹＣ１２ビット転送モードが用いられて、ＹＣデータは、ＴＭＤＳチャネル＃０乃至＃２の各チャネルにパッキングされる（図６（ｂ）参照）。
　次に、記録/再生部１１２で再生された圧縮ＲＡＷデータあるいは圧縮ＹＣデータに係る画像を表示部１１３に表示する場合の動作例を説明する。
　圧縮ＲＡＷデータが再生される場合について説明する。この場合、記録/再生部１１２で再生された圧縮ＲＡＷデータは、ＲＡＷデータ圧縮/伸長部１０８に供給される。このＲＡＷデータ圧縮/伸長部１０８では圧縮ＲＡＷデータに対して伸長処理が施されて、非圧縮ＲＡＷデータが得られる。
　この非圧縮ＲＡＷデータは現像処理部１０９に供給される。この現像処理部１０９では、非圧縮ＲＡＷデータに対して現像処理が施されて、非圧縮ＹＣデータ、例えばＹＣｂＣｒ ４：２：２方式の画像データが得られる。この非圧縮ＹＣデータは、ＹＣデータメモリ１１０に一時的に書き込まれる。そして、ＹＣデータメモリ１１０に書き込まれた非圧縮ＹＣデータは表示部１１３に供給されて再生画像が表示される。
　次に、圧縮ＹＣデータが再生される場合について説明する。この場合、記録/再生部１１２で再生された圧縮ＹＣデータは、ＹＣ圧縮/伸長部１１１に供給される。このＹＣ圧縮/伸長部１１１では圧縮ＹＣデータに対して伸長処理が施されて、非圧縮ＹＣデータが得られる。この非圧縮ＹＣデータは、ＹＣデータメモリ１１０に一時的記憶される。そして、ＹＣデータメモリ１１０に書き込まれた非圧縮ＹＣデータは表示部１１３に供給されて再生画像が表示される。
　「受信装置の構成例」
　図１９は、受信装置２００の構成例を示している。受信装置２００は、ＨＤＭＩコネクタとしてのレセプタクル２０１と、ＨＤＭＩ受信部２０２と、制御部２０３と、ユーザ操作部２０４と、ＲＡＷデータメモリ２０５と、ＲＡＷデータ圧縮/伸長部２０６と、現像処理部２０７と、ＹＣデータメモリ２０８と、ＹＣデータ圧縮/伸長部２０９と、記録/再生部２１０と、表示部２１１を有している。
　制御部２０３は、ＣＰＵ（Central Processing Unit）を備えており、受信装置２００の全体を制御する。ユーザ操作部２０４は、制御部２０３に接続されており、ユーザが種々の操作を行うためのユーザインタフェースを構成している。
　ＨＤＭＩ受信部２０２は、ＨＤＭＩに準拠した通信により、非圧縮ＲＡＷデータ、あるいは非圧縮ＹＣデータを、ＨＤＭＩケーブル３００およびレセプタクル２０１を通じて、撮像装置１００から受信する。ＲＡＷデータメモリ２０５は、例えば、ＤＲＡＭ（Dynamic Random Access Memory）で構成され、非圧縮ＲＡＷデータや圧縮ＲＡＷデータを一時的に記憶するメモリである。ＲＡＷデータ圧縮/伸長部２０６は、非圧縮ＲＡＷデータを圧縮して圧縮ＲＡＷデータを得る処理、あるいは圧縮ＲＡＷデータを伸長して非圧縮ＲＡＷデータを得る処理をする。
　現像処理部２０７は、非圧縮ＲＡＷデータを現像して非圧縮ＹＣデータを得る処理をする。ＹＣデータメモリ２０８は、例えば、ＤＲＡＭで構成され、非圧縮ＹＣデータや圧縮ＹＣデータを一時的に記憶するメモリである。ＹＣデータ圧縮/伸長部２０９は、非圧縮ＹＣデータを圧縮して圧縮ＹＣデータを得る処理、あるいは圧縮ＹＣデータを伸長して非圧縮ＹＣデータを得る処理をする。
　記録/再生部２１０は、図示しない記録媒体に対して、圧縮ＲＡＷデータや圧縮ＹＣデータの記録再生をする。記録媒体は、例えば、光ディスク、ハードディスク、半導体メモリなどである。表示部２１１は、例えば、液晶ディスプレイ、有機ＥＬディスプレイ等からなり、画像やＵＩ画面を表示する。
　次に、図１９に示す受信装置２００の動作例を説明する。まず、非圧縮ＲＡＷデータを受信し、受信画像データを、圧縮ＲＡＷデータあるいは圧縮ＹＣデータの形式で記録する場合の動作例を説明する。
　この場合、ＨＤＭＩ受信部２０２では、アクティブビデオ区間に非圧縮ＲＡＷデータが格納されたＴＭＤＳ伝送データ（図３参照）が受信され、非圧縮ＲＡＷデータが得られる。このＴＭＤＳ伝送データの垂直ブランキング区間にＶＳＩＦパケット（図９、図１０参照）が挿入されており、このＶＳＩＦパケットのペイロード部には、非圧縮ＲＡＷデータに関連したメタデータが格納されている。
　ＨＤＭＩ受信部２０２ではＶＳＩＦパケットが抽出され、このＶＳＩＦパケットは、制御部２０３に送られる。制御部２０３では、このＶＳＩＦパケットが送られてくることで、非圧縮ＲＡＷデータの送信であることを認識する。また、制御部２０３は、このＶＳＩＦパケットのペイロード部から非圧縮ＲＡＷデータに関連したメタデータを取得し、非圧縮ＲＡＷデータに係る各部の処理、例えば現像処理などをそのメタデータに基づいて制御する。
　圧縮ＲＡＷデータの形式で記録する場合について説明する。この場合、ＨＤＭＩ受信部２０２で得られた非圧縮ＲＡＷデータは、ＲＡＷデータメモリ２０５に一時的に書き込まれる。この場合、非圧縮ＲＡＷデータの各ピクセルのデータがＲＡＷデータメモリ２０５に順次書き込まれる（図７（ａ）参照）。
　ＲＡＷデータメモリ２０５に順次書き込まれた非圧縮ＲＡＷデータは、このＲＡＷデータメモリ２０５から順次読み出されて、ＲＡＷデータ圧縮/伸長部２０６に供給される。このＲＡＷデータ圧縮/伸長部２０６では、非圧縮ＲＡＷデータに対して圧縮処理が施されて圧縮ＲＡＷデータが得られる。そして、このようにＲＡＷデータ圧縮/伸長部２０６で得られた圧縮ＲＡＷデータは記録/再生部２１０に供給されて記録される。
　次に、圧縮ＹＣデータの形式で記録する場合について説明する。この場合、ＨＤＭＩ受信部２０２で得られた非圧縮ＲＡＷデータは、ＲＡＷデータメモリ２０５に一時的に書き込まれる。この場合、非圧縮ＲＡＷデータの各ピクセルのデータがＲＡＷデータメモリ２０５に順次書き込まれる（図７（ａ）参照）。
　ＲＡＷデータメモリ２０５に順次書き込まれた非圧縮ＲＡＷデータは、このＲＡＷデータメモリ２０５から順次読み出されて、現像処理部２０７に供給される。この現像処理部２０７では、非圧縮ＲＡＷデータに対して現像処理が施されて、非圧縮ＹＣデータ、例えばＹＣｂＣｒ ４：２：２方式の画像データが得られる。
　このように現像処理部２０７で得られた非圧縮ＹＣデータは、ＹＣデータメモリ２０８に一時的に書き込まれる。ＹＣデータメモリ２０８に書き込まれた非圧縮ＹＣデータは、このＹＣデータメモリ２０８から読み出されてＹＣデータ圧縮/伸長部２０９に供給される。このＹＣデータ圧縮/伸長部２０９では、非圧縮ＹＣデータに対して圧縮処理が施されて圧縮ＹＣデータが得られる。そして、このようにＹＣデータ圧縮/伸長部２０９で得られた圧縮ＹＣデータは記録/再生部２１０に供給されて記録される。
　なお、非圧縮ＲＡＷデータを受信し、受信画像データを、圧縮ＲＡＷデータあるいは圧縮ＹＣデータの形式で記録する場合、表示部１１３に、画像表示をすることが行われる。この場合、ＲＡＷデータメモリ２０５に書き込まれた非圧縮ＲＡＷデータは、このＲＡＷデータメモリ２０５から読み出されて、現像処理部２０７に供給される。
　この現像処理部２０７では、非圧縮ＲＡＷデータに対して現像処理が施されて、非圧縮ＹＣデータが得られる。このように現像処理部２０７で得られた非圧縮ＹＣデータは、ＹＣデータメモリ２０８に一時的に書き込まれる。そして、ＹＣデータメモリ２０８に書き込まれた非圧縮ＹＣデータは表示部２１１に供給されて撮像画像が表示される。
　次に、非圧縮ＹＣデータを受信し、受信画像データを、圧縮ＹＣデータの形式で記録する場合の動作例を説明する。
　この場合、ＨＤＭＩ受信部２０２では、アクティブビデオ区間に非圧縮ＹＣデータが格納されたＴＭＤＳ伝送データ（図３参照）が受信され、非圧縮ＹＣデータ、例えばＹＣｂＣｒ ４：２：２方式の画像データが得られる。この非圧縮ＹＣデータは、ＹＣデータメモリ２０８に一時的に書き込まれる。
　ＹＣデータメモリ２０８に書き込まれた非圧縮ＹＣデータは、このＹＣデータメモリ２０８から読み出されてＹＣデータ圧縮/伸長部２０９に供給される。このＹＣデータ圧縮/伸長部２０９では、非圧縮ＹＣデータに対して圧縮処理が施されて圧縮ＹＣデータが得られる。そして、このようにＹＣデータ圧縮/伸長部２０９で得られた圧縮ＹＣデータは記録/再生部２１０に供給されて記録される。
　次に、記録/再生部２１０で再生された圧縮ＲＡＷデータあるいは圧縮ＹＣデータに係る画像を表示部１１３に表示する場合の動作例を説明する。
　圧縮ＲＡＷデータが再生される場合について説明する。この場合、記録/再生部２１０で再生された圧縮ＲＡＷデータは、ＲＡＷデータ圧縮/伸長部２０６に供給される。このＲＡＷデータ圧縮/伸長部２０６では圧縮ＲＡＷデータに対して伸長処理が施されて、非圧縮ＲＡＷデータが得られる。
　この非圧縮ＲＡＷデータは現像処理部２０７に供給される。この現像処理部２０７では、非圧縮ＲＡＷデータに対して現像処理が施されて、非圧縮ＹＣデータ、例えばＹＣｂＣｒ ４：２：２方式の画像データが得られる。この非圧縮ＹＣデータは、ＹＣデータメモリ２０８に一時的に書き込まれる。そして、ＹＣデータメモリ２０８に書き込まれた非圧縮ＹＣデータは表示部２１１に供給されて再生画像が表示される。
　次に、圧縮ＹＣデータが再生される場合について説明する。この場合、記録/再生部２１０で再生された圧縮ＹＣデータは、ＹＣ圧縮/伸長部２０９に供給される。このＹＣ圧縮/伸長部２０９では圧縮ＹＣデータに対して伸長処理が施されて、非圧縮ＹＣデータが得られる。この非圧縮ＹＣデータは、ＹＣデータメモリ２０８に一時的記憶される。そして、ＹＣデータメモリ２０８に書き込まれた非圧縮ＹＣデータは表示部２１１に供給されて再生画像が表示される。
　以上説明したように、図１に示す撮像システム１０において、撮像装置１００は、非圧縮ＲＡＷデータを、ＨＤＭＩケーブル３００を介して、受信装置２００に送信できる。そのため、機器間における非圧縮ＲＡＷデータの伝送を良好に行うことができる。そして、受信装置２００では、図１９には処理部の図示は省略しているが、画像データの編集処理や画質調整処理を良好に行うことができる。
　また、図１に示す撮像システム１０において、撮像装置１００は、非圧縮ＲＡＷデータと共に非圧縮ＲＡＷデータに関連したメタデータを受信装置２００に送信する。そのため、受信装置２００は、非圧縮ＲＡＷデータに関連したメタデータを、非圧縮ＲＡＷデータに対応付けて適切かつ容易に取得でき、このメタデータに基づき非圧縮ＲＡＷデータに対する種々の処理を良好に行うことができる。
　また、図１に示す撮像システム１０において、撮像装置１００は、画素毎のビット長が１６ビットであるベイヤー配列の非圧縮ＲＡＷデータを、ＹＣ１２ビット転送モードを用いて、ＨＤＭＩケーブル３００を介して、受信装置２００に送信するものである。そのため、画素毎のビット長が１６ビットであるベイヤー配列の非圧縮ＲＡＷデータを、従来のＹＣ１２ビット転送モードのＨＤＭＩの送受信系を有効に利用して良好に送信することができる。
　＜２．変形例＞
　なお、上述実施の形態においては、非圧縮ＲＡＷデータはベイヤー配列の非圧縮ＲＡＷデータである例を示したが、本技術において非圧縮ＲＡＷデータはベイヤー配列の非圧縮ＲＡＷデータに限定されるものではない。また、上述実施の形態においては、非圧縮ＲＡＷデータの画素毎のビット長が１６ビットである例を示したが、本技術において画素毎のビット長は１６ビットに限定されるものではない。
　また、上述実施の形態においては、非圧縮ＲＡＷデータに関連したメタデータを、ＴＭＤＳ伝送データの垂直ブランキング区間に挿入されるＶＳＩＦパケットのペイロード部に格納して送信する例を示した。しかし、本技術において、非圧縮ＲＡＷデータに関連したメタデータを非圧縮ＲＡＷデータと共に送信する方法は、これに限定されるものではない。例えば、ＴＭＤＳ伝送データの垂直ブランキング区間に挿入される他のデータパケットを利用して送信してもよく、アクティブビデオ区間の非圧縮ＲＡＷデータが格納されていない領域（図８のダミーデータ領域）に格納して送信してもよい。
　また、上述実施の形態においては、非圧縮ＲＡＷデータの送信であることを示す識別情報をＴＭＤＳ伝送データのブランキング区間に挿入して送信する例を示した。具体的には、非圧縮ＲＡＷデータに関連したメタデータをペイロード部に格納したＶＳＩＦパケットが、非圧縮ＲＡＷデータの送信であることを示す識別情報の機能を合わせ持つ例を示した。しかし、本技術において、非圧縮ＲＡＷデータの送信であることを示す識別情報を、他の手法で送信してもよい。例えば、ＣＥＣラインを使用した通信で、撮像装置１００から受信装置２００に通知することも可能である。
　また、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
　また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
　なお、本技術は、以下のような構成もとることができる。
　（１）非圧縮ＲＡＷデータを、ＨＤＭＩ伝送路を介して、外部機器に送信する送信部を備える
　送信装置。
　（２）前記非圧縮ＲＡＷデータは、ベイヤー配列の非圧縮ＲＡＷデータである
　前記（１）に記載の送信装置。
　（３）前記非圧縮ＲＡＷデータの画素毎のビット長は１６ビットであり、
　前記送信部は、前記非圧縮ＲＡＷデータを、ＹＣ１２ビット転送モードを用いて送信する
　前記（２）に記載の送信装置。
　（４）前記送信部は、前記非圧縮ＲＡＷデータと共に、該非圧縮ＲＡＷデータに関連したメタデータを送信する
　前記（１）から（３）のいずれかに記載の送信装置。
　（５）前記送信部は、前記非圧縮ＲＡＷデータの各フレームに前記メタデータを付加して送信する
　前記（４）に記載の送信装置。
　（６）前記送信部は、
　アクティブビデオ区間と垂直ブランキング区間とを含むＴＭＤＳ（Transition Minimized Differential Signaling）伝送データのうちの
　前記アクティブビデオ区間に前記非圧縮ＲＡＷデータを格納し、
　前記垂直ブランキング区間に挿入されるデータパケットのペイロード部に前記メタデータを格納して送信する
　前記（５）に記載の送信装置。
　（７）前記メタデータは、第１の更新頻度の高更新頻度メタデータと、前記第１の更新頻度より低い更新頻度の第２の更新頻度の低更新頻度メタデータとからなり、
　前記データパケットのペイロード部は、前記高更新頻度メタデータを格納する第１の領域と、前記低更新頻度メタデータを格納する第２の領域を有する
　前記（６）に記載の送信装置。
　（８）前記第２の領域には、ページ番号の情報を格納するページ番号領域が含まれ、該ページ番号に対応したメタデータが格納される
　前記（７）に記載の送信装置。
　（９）前記第２の領域には、総ページ数の情報を格納する総ページ数領域がさらに含まれる
　前記（８）に記載の送信装置。
　（１０）前記第２の領域に格納されて送信される各ページに対応したメタデータの送信頻度は、それぞれのメタデータの優先度に応じて変更される
　前記（８）または（９）に記載の送信装置。
　（１１）前記データパケットは、ＶＳＩＦ（Vendor Specific InfoFrame）パケットである
　前記（６）から（１０）のいずれかに記載の送信装置。
　（１２）前記送信部は、
　アクティブビデオ区間を含むＴＭＤＳ（Transition Minimized Differential Signaling）伝送データのうちの
　前記アクティブビデオ区間に前記非圧縮ＲＡＷデータを格納し、
　前記アクティブビデオ区間の前記非圧縮ＲＡＷデータが格納されていない領域に前記メタデータを格納して送信する
　前記（５）に記載の送信装置。
　（１３）前記送信部は、前記非圧縮ＲＡＷデータと共に、該非圧縮ＲＡＷデータの送信であることを示す識別情報を送信する
　前記（１）から（１２）のいずれかに記載の送信装置。
　（１４）前記送信部は、
　アクティブビデオ区間と垂直ブランキング区間とを含むＴＭＤＳ（Transition Minimized Differential Signaling）伝送データのうちの
　前記アクティブビデオ区間に前記非圧縮ＲＡＷデータを格納し、
　前記垂直ブランキング区間に前記識別情報を挿入して送信する
　前記（１３）に記載の送信装置。
　（１５）前記送信部は、前記識別情報として、前記垂直ブランキング区間に所定データパケットを挿入する
　前記（１４）に記載の送信装置。
　（１６）前記所定データパケットのペイロード部には、前記非圧縮ＲＡＷデータに関連するメタデータが格納される
　前記（１５）に記載の送信装置。
　（１７）前記非圧縮ＲＡＷデータを出力するイメージャをさらに備える
　前記（１）から（１６）のいずれかに記載の送信装置。
　（１８）前記送信部は、前記非圧縮ＲＡＷデータを現像して得られたＹＣデータを、前記ＨＤＭＩ伝送路を介して、前記外部機器に送信する機能をさらに備える
　前記（１）から（１７）のいずれかに記載の送信装置。
　（１９）非圧縮ＲＡＷデータを、ＨＤＭＩ伝送路を介して、外部機器に送信する手順を有する
　送信方法。
　（２０）外部機器から、ＨＤＭＩ伝送路を介して、非圧縮ＲＡＷデータを受信する受信部と、
　前記受信部で受信された前記非圧縮ＲＡＷデータを処理する処理部を備える
　受信装置。
　１０・・・・撮像システム
　１００・・・撮像装置
　１０１・・・レセプタクル（ＨＤＭＩコネクタ）
　１０２・・・ＨＤＭＩ送信部
　１０３・・・制御部
　１０４・・・ユーザ操作部
　１０５・・・イメージャ
　１０６・・・ＲＡＷデータ処理部
　１０７・・・ＲＡＷデータメモリ
　１０８・・・ＲＡＷデータ圧縮/伸長部
　１０９・・・現像処理部
　１１０・・・ＹＣデータメモリ
　１１１・・・ＹＣデータ圧縮/伸長部
　１１２・・・記録/再生部
　１１３・・・表示部
　１２１・・・ＨＤＭＩトランスミッタ
　１２２・・・ＩＩＣマスターブロック
　２００・・・受信装置
　２０１・・・レセプタクル（ＨＤＭＩコネクタ）
　２０２・・・ＨＤＭＩ受信部
　２０３・・・制御部
　２０４・・・ユーザ操作部
　２０５・・・ＲＡＷデータメモリ
　２０６・・・ＲＡＷデータ圧縮/伸長部
　２０７・・・現像処理部
　２０８・・・ＹＣデータメモリ
　２０９・・・ＹＣデータ圧縮/伸長部
　２１０・・・記録/再生部
　２１１・・・表示部
　２２１・・・ＨＤＭＩレシーバ
　２２２・・・メモリ部
　２３１・・・ＥＤＩＤ　ＲＯＭ
　２３２・・・ＳＣＤＣレジスタ部
　３００・・・ＨＤＭＩケーブル
　３０１，３０２・・・プラグ（ＨＤＭＩコネクタ）

Claims (20)

  1. 　非圧縮ＲＡＷデータを、ＨＤＭＩ伝送路を介して、外部機器に送信する送信部を備える
    　送信装置。
  2. 　前記非圧縮ＲＡＷデータは、ベイヤー配列の非圧縮ＲＡＷデータである
    　請求項１に記載の送信装置。
  3. 　前記非圧縮ＲＡＷデータの画素毎のビット長は１６ビットであり、
    　前記送信部は、前記非圧縮ＲＡＷデータを、ＹＣ１２ビット転送モードを用いて送信する
    　請求項２に記載の送信装置。
  4. 　前記送信部は、前記非圧縮ＲＡＷデータと共に、該非圧縮ＲＡＷデータに関連したメタデータを送信する
    　請求項１に記載の送信装置。
  5. 　前記送信部は、前記非圧縮ＲＡＷデータの各フレームに前記メタデータを付加して送信する
    　請求項４に記載の送信装置。
  6. 　前記送信部は、
    　アクティブビデオ区間と垂直ブランキング区間とを含むＴＭＤＳ（Transition Minimized Differential Signaling）伝送データのうちの
    　前記アクティブビデオ区間に前記非圧縮ＲＡＷデータを格納し、
    　前記垂直ブランキング区間に挿入されるデータパケットのペイロード部に前記メタデータを格納して送信する
    　請求項５に記載の送信装置。
  7. 　前記メタデータは、第１の更新頻度の高更新頻度メタデータと、前記第１の更新頻度より低い更新頻度の第２の更新頻度の低更新頻度メタデータとからなり、
    　前記データパケットのペイロード部は、前記高更新頻度メタデータを格納する第１の領域と、前記低更新頻度メタデータを格納する第２の領域を有する
    　請求項６に記載の送信装置。
  8. 　前記第２の領域には、ページ番号の情報を格納するページ番号領域が含まれ、該ページ番号に対応したメタデータが格納される
    　請求項７に記載の送信装置。
  9. 　前記第２の領域には、総ページ数の情報を格納する総ページ数領域がさらに含まれる
    　請求項８に記載の送信装置。
  10. 　前記第２の領域に格納されて送信される各ページに対応したメタデータの送信頻度は、それぞれのメタデータの優先度に応じて変更される
    　請求項８に記載の送信装置。
  11. 　前記データパケットは、ＶＳＩＦ（Vendor Specific InfoFrame）パケットである
    　請求項６に記載の送信装置。
  12. 　前記送信部は、
    　アクティブビデオ区間を含むＴＭＤＳ（Transition Minimized Differential Signaling）伝送データのうちの
    　前記アクティブビデオ区間に前記非圧縮ＲＡＷデータを格納し、
    　前記アクティブビデオ区間の前記非圧縮ＲＡＷデータが格納されていない領域に前記メタデータを格納して送信する
    　請求項５に記載の送信装置。
  13. 　前記送信部は、前記非圧縮ＲＡＷデータと共に、該非圧縮ＲＡＷデータの送信であることを示す識別情報を送信する
    　前記１に記載の送信装置。
  14. 　前記送信部は、
    　アクティブビデオ区間と垂直ブランキング区間とを含むＴＭＤＳ（Transition Minimized Differential Signaling）伝送データのうちの
    　前記アクティブビデオ区間に前記非圧縮ＲＡＷデータを格納し、
    　前記垂直ブランキング区間に前記識別情報を挿入して送信する
    　請求項１３に記載の送信装置。
  15. 　前記送信部は、前記識別情報として、前記垂直ブランキング区間に所定データパケットを挿入する
    　前記１４に記載の送信装置。
  16. 　前記所定データパケットのペイロード部には、前記非圧縮ＲＡＷデータに関連するメタデータが格納される
    　請求項１５に記載の送信装置。
  17. 　前記非圧縮ＲＡＷデータを出力するイメージャをさらに備える
    　請求項１に記載の送信装置。
  18. 　前記送信部は、前記非圧縮ＲＡＷデータを現像して得られたＹＣデータを、前記ＨＤＭＩ伝送路を介して、前記外部機器に送信する機能をさらに備える
    　請求項１に記載の送信装置。
  19. 　非圧縮ＲＡＷデータを、ＨＤＭＩ伝送路を介して、外部機器に送信する手順を有する
    　送信方法。
  20. 　外部機器から、ＨＤＭＩ伝送路を介して、非圧縮ＲＡＷデータを受信する受信部と、
    　前記受信部で受信された前記非圧縮ＲＡＷデータを処理する処理部を備える
    　受信装置。
PCT/JP2021/009717 2020-03-18 2021-03-11 送信装置、送信方法および受信装置 WO2021187292A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US17/906,168 US20230114790A1 (en) 2020-03-18 2021-03-11 Transmission device, transmission method, and reception device
EP21772141.4A EP4106317A4 (en) 2020-03-18 2021-03-11 Transmitter, transmission method, and receiver

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020048240A JP2021150790A (ja) 2020-03-18 2020-03-18 送信装置、送信方法および受信装置
JP2020-048240 2020-03-18

Publications (1)

Publication Number Publication Date
WO2021187292A1 true WO2021187292A1 (ja) 2021-09-23

Family

ID=77768241

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/009717 WO2021187292A1 (ja) 2020-03-18 2021-03-11 送信装置、送信方法および受信装置

Country Status (4)

Country Link
US (1) US20230114790A1 (ja)
EP (1) EP4106317A4 (ja)
JP (1) JP2021150790A (ja)
WO (1) WO2021187292A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024017125A1 (zh) * 2022-07-21 2024-01-25 华为技术有限公司 一种信号传输方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007221211A (ja) * 2006-02-14 2007-08-30 Matsushita Electric Ind Co Ltd 音声処理装置
JP2010028261A (ja) 2008-07-16 2010-02-04 Sony Corp 送信装置、立体画像データ送信方法、受信装置および立体画像データ受信方法
JP2010122743A (ja) * 2008-11-17 2010-06-03 Victor Co Of Japan Ltd Ｈｄｍｉ受信装置
JP2011146894A (ja) * 2010-01-14 2011-07-28 Sony Corp 映像伝送装置、映像表示装置、映像表示システム、映像伝送方法及びコンピュータプログラム

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3139620B1 (en) * 2014-05-01 2022-03-30 Sony Group Corporation Communication apparatus or communication method, and computer program
JP6440509B2 (ja) * 2015-01-28 2018-12-19 東芝映像ソリューション株式会社 送信装置、受信装置、送信方法及び受信方法
US10672098B1 (en) * 2018-04-05 2020-06-02 Xilinx, Inc. Synchronizing access to buffered data in a shared buffer

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007221211A (ja) * 2006-02-14 2007-08-30 Matsushita Electric Ind Co Ltd 音声処理装置
JP2010028261A (ja) 2008-07-16 2010-02-04 Sony Corp 送信装置、立体画像データ送信方法、受信装置および立体画像データ受信方法
JP2010122743A (ja) * 2008-11-17 2010-06-03 Victor Co Of Japan Ltd Ｈｄｍｉ受信装置
JP2011146894A (ja) * 2010-01-14 2011-07-28 Sony Corp 映像伝送装置、映像表示装置、映像表示システム、映像伝送方法及びコンピュータプログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP4106317A4

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024017125A1 (zh) * 2022-07-21 2024-01-25 华为技术有限公司 一种信号传输方法及装置

Also Published As

Publication number Publication date
US20230114790A1 (en) 2023-04-13
EP4106317A1 (en) 2022-12-21
EP4106317A4 (en) 2023-06-28
JP2021150790A (ja) 2021-09-27

Similar Documents

Publication Publication Date Title
US10015468B2 (en) Transmitting apparatus, stereo image data transmitting method, receiving apparatus, and stereo image data receiving method
JP6217813B2 (ja) 受信装置および受信方法
JP6479656B2 (ja) 送信装置、ハイダイナミックレンジ画像データ送信方法、受信装置、ハイダイナミックレンジ画像データ受信方法およびプログラム
JP5593596B2 (ja) 映像信号送信装置および映像信号送信方法
US9313437B2 (en) Transmission apparatus, reception apparatus, communication system, transmission method, reception method, and programs thereof
JP4844230B2 (ja) 通信システム、送信装置及び受信装置、通信方法、並びにプログラム
WO2021187292A1 (ja) 送信装置、送信方法および受信装置
JP6307856B2 (ja) 送信装置、広色域画像データ送信方法、受信装置、広色域画像データ受信方法およびプログラム
WO2021187295A1 (ja) 撮像装置および撮像装置の制御方法
US12051387B2 (en) Imaging device and method for controlling imaging device
JP6304417B2 (ja) 受信方法および受信装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21772141

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2021772141

Country of ref document: EP

Effective date: 20220914

NENP Non-entry into the national phase

Ref country code: DE