CN104365090A - 图像处理***、发送侧装置及接收侧装置 - Google Patents

图像处理***、发送侧装置及接收侧装置 Download PDF

Info

Publication number
CN104365090A
CN104365090A CN201380030444.3A CN201380030444A CN104365090A CN 104365090 A CN104365090 A CN 104365090A CN 201380030444 A CN201380030444 A CN 201380030444A CN 104365090 A CN104365090 A CN 104365090A
Authority
CN
China
Prior art keywords
data
color
unit
raw
color data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201380030444.3A
Other languages
English (en)
Inventor
林健吉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of CN104365090A publication Critical patent/CN104365090A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/646—Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/64—Systems for the transmission or the storage of the colour picture signal; Details therefor, e.g. coding or decoding means therefor
    • H04N1/648—Transmitting or storing the primary (additive or subtractive) colour signals; Compression thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/843—Demosaicing, e.g. interpolating colour pixel values
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/65—Circuits for processing colour signals for synchronous modulators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/793—Processing of colour television signals in connection with recording for controlling the level of the chrominance signal, e.g. by means of automatic chroma control circuits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/87—Regeneration of colour television signals
    • H04N9/873—Regeneration of colour television signals for restoring the colour component sequence of the reproduced chrominance signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Color Television Image Signal Generators (AREA)
  • Color Image Communication Systems (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Image Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Studio Devices (AREA)

Abstract

本发明提出了一种新的滤色器排列，在进行图像处理的情况下，为了得到良好的画质而需要根据滤色器排列进行最佳的处理。本发明还提供一种即使对于由新的滤色器排列得到的数据也能够应对并能够降低接收侧装置的性能差对画质产生的影响且能够充分地有效利用接收侧装置的性能的图像处理***。图像处理***(100)具备发送侧装置(101)和接收侧装置(102)。发送侧装置(101)对RAW数据进行前处理而生成中间数据，对该中间数据进行去马赛克算法处理而生成三面颜色数据，并输出该三面颜色数据和确定中间数据的对应像素位置的配置信息。接收侧装置(102)通过来自发送侧装置(101)的三面颜色数据和配置信息而对中间数据进行复原，根据复原后的中间数据生成三面颜色数据。

Description

图像处理***、发送侧装置及接收侧装置
技术领域
本发明涉及图像处理***、发送侧装置及接收侧装置，特别是涉及进行各种形式的图像数据(RAW数据等)的图像处理的技术。
背景技术
在利用数码相机、具有摄影装置的便携式终端等对被摄体进行摄影并进行图像处理的情况下，考虑将对摄像元件捕捉到的光量进行A/D转换后的数字图像数据(RAW数据)原样使用于图像处理的方法和对RAW数据施加某些加工(例如从RAW数据转换为RGB数据的加工)而使用的方法。
例如，专利文献1公开了根据所选择的显示模式对RGB数据或RAW数据进行切换而进行图像显示的图像读取显示装置。在该专利文献1的装置中，在对RAW数据进行校正而生成RGB数据时，在存在与RAW数据(摄像像素值)对应的颜色像素数据的情况下，将该RAW数据的像素值作为RGB数据而使用，在存在与RAW数据对应的颜色像素数据的情况下，根据周边的RAW数据的像素值求取RGB数据。
专利文献2公开了如下的白平衡处理方法：对附加有摄像条件信息的生图像文件(RAW数据)进行获取并对摄像机种进行确定，基于确定出的摄像机种而对图像数据的白平衡进行调整。
专利文献
专利文献1:日本特开2009－147875号公报
专利文献2:日本特开2010－226365号公报
发明内容
发明要解决的课题
近年来，提出了新的滤色器排列，但是在进行图像处理的情况下，为了得到更好的画质需要进行与滤色器排列对应的最佳处理。
另外，为了对经由新排列的滤色器而得到的数据进行处理，有时也需要与该新的滤色器排列对应的信号处理。在该情况下，需要准备能够进行与新的滤色器排列对应的信号处理的显影软件、接收侧设备类，那样的软件的安装、设备类的准备需要相应的负担。
另外，与以往的拜耳排列相比新的滤色器排列存在变得复杂的倾向，与此相应，与上述的新的滤色器排列对应的信号处理也容易复杂化。在该情况下，由于进行信号处理的装置的性能差而使画质改变，画质根据进行信号处理的装置而不同。
另外，尽管在数据接收侧能够进行RAW显影等，但是在利用发送侧传送例如RGB数据(JPEG、TIFF等)等的情况下，无法使用数据接收侧的性能。
本发明鉴于这种情形而提出，其目的在于提供对于由新的滤色器排列得到的数据也能够应对、能够降低接收侧装置的性能差对画质产生的影响并且能够充分地有效利用接收侧装置的性能的图像处理***和构成该图像处理***的装置。
用于解决课题的手段
为了达到上述的目的，本发明的一方式所涉及的图像处理***由发送侧装置及RAW显影对应的第一接收侧装置和RAW显影非对应的第二接收侧装置中的至少一方的接收侧装置构成，发送侧装置具备：RAW数据获取单元，从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取与滤色器排列对应的未处理的RAW数据；前处理单元，通过对RAW数据进行前处理而生成去马赛克算法处理前的中间数据；第一去马赛克算法处理单元，对中间数据进行去马赛克算法处理，生成第一三面颜色数据；及输出单元，向第一三面颜色数据赋予用于确定各色数据中的中间数据的像素位置的配置信息并输出，第一接收侧装置具备：第一输入单元，输入第一三面颜色数据和配置信息；中间数据提取单元，基于配置信息从第一三面颜色数据提取中间数据；第二去马赛克算法处理单元，对提取出的中间数据进行去马赛克算法处理，生成第二三面颜色数据；及第一后处理单元，通过对第二三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据，第二接收侧装置具备：第二输入单元，输入第一三面颜色数据；及第二后处理单元，通过对所输入的第一三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据。
由此，即使对于利用新的滤色器排列得到的数据，也能够进行合适的处理，能够降低接收侧装置的性能差对画质产生的影响，并能够充分地有效利用接收侧装置的性能。
本发明的其他方式所涉及的图像处理***由发送侧装置及RAW显影对应的第一接收侧装置和RAW显影非对应的第二接收侧装置中的至少一方的接收侧装置构成，发送侧装置具备：RAW数据获取单元，从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取与滤色器排列对应的未处理的RAW数据；第一前处理单元，通过对RAW数据进行前处理而生成去马赛克算法处理前的第一中间数据；复原信息获取单元，获取用于从第一中间数据向RAW数据复原的复原信息；第一去马赛克算法处理单元，对第一中间数据进行去马赛克算法处理，生成第一三面颜色数据；及输出单元，向第一三面颜色数据赋予用于确定各色数据中的第一中间数据的像素位置的配置信息和复原信息并输出，第一接收侧装置具备：第一输入单元，输入第一三面颜色数据、配置信息和复原信息；中间数据提取单元，基于配置信息从第一三面颜色数据提取第一中间数据；复原处理单元，基于复原信息从提取出的第一中间数据复原RAW数据；第二前处理单元，通过对由复原处理单元复原的RAW数据进行前处理而生成去马赛克算法处理前的第二中间数据；第二去马赛克算法处理单元，对第二中间数据进行去马赛克算法处理，生成第二三面颜色数据；及第一后处理单元，通过对第二三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据，第二接收侧装置具备：第二输入单元，输入第一三面颜色数据；及第二后处理单元，通过对所输入的第一三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据。
由此，即使对于利用新的滤色器排列得到的数据也能够进行适当的处理，能够降低接收侧装置的性能差对画质产生的影响，并能够充分地有效利用接收侧装置的性能。
优选为，发送侧装置的输出单元向第一三面颜色数据赋予配置信息和中间数据并输出，向第一接收侧装置的输入单元输入第一三面颜色数据、配置信息和中间数据，具备选择从发送侧装置发送来的中间数据或者从中间数据提取单元得到的中间数据的中间数据选择单元，第二去马赛克算法处理单元对由中间数据选择单元所选择的中间数据进行去马赛克算法处理，生成第二三面颜色数据。
另外，优选为，发送侧装置的输出单元向第一三面颜色数据赋予配置信息和RAW数据并输出，第一接收侧装置的输入单元输入第一三面颜色数据、配置信息和RAW数据，具备选择从发送侧装置发送来的RAW数据或者从复原处理单元得到的RAW数据的RAW数据选择单元，第二前处理单元通过由RAW数据选择单元选择的RAW数据而生成第二中间数据。
在本发明的其他方式所涉及的图像处理***中，由发送侧装置及RAW显影对应的第一接收侧装置和RAW显影非对应的第二接收侧装置中的至少一方的接收侧装置构成，发送侧装置具备：RAW数据获取单元，从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取与滤色器排列对应的未处理的RAW数据；第一前处理单元，通过对RAW数据进行前处理而生成去马赛克算法处理前的第一中间数据；第一去马赛克算法处理单元，对第一中间数据进行去马赛克算法处理而生成三面颜色数据，取代三面颜色数据中的中间数据而配置RAW数据，生成第一三面颜色数据；及输出单元，向第一三面颜色数据赋予用于确定各色数据中的RAW数据的像素位置的配置信息并输出，第一接收侧装置具备：输入单元，输入第一三面颜色数据和配置信息；RAW数据提取单元，基于配置信息从第一三面颜色数据提取RAW数据；第二前处理单元，对由RAW数据提取单元提取出的RAW数据进行前处理而生成第二中间数据；第二去马赛克算法处理单元，对第二中间数据进行去马赛克算法处理而生成第二三面颜色数据；及第一后处理单元，通过对第二三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据，第二接收侧装置具备：第二输入单元，输入第一三面颜色数据；及第二后处理单元，通过对所输入的第一三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据。
由此，即使对于利用新的滤色器排列得到的数据也能够进行适当的应对，能够降低接收侧装置的性能差对画质产生的影响，并能够充分地有效利用接收侧装置的性能。
在本发明的其他方式所涉及的图像处理***中，由发送侧装置及RAW显影对应的第一接收侧装置和RAW显影非对应的第二接收侧装置中的至少一方的接收侧装置构成，发送侧装置具备：RAW数据获取单元，从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取与滤色器排列对应的未处理的RAW数据；第一前处理单元，通过对RAW数据进行前处理而生成去马赛克算法处理前的第一中间数据；复原信息获取单元，获取用于从RAW数据向第一中间数据复原的复原信息；第一去马赛克算法处理单元，对第一中间数据进行去马赛克算法处理而生成三面颜色数据，取代三面颜色数据中的中间数据而配置RAW数据，生成第一三面颜色数据；及输出单元，向第一三面颜色数据赋予用于确定各色数据中的RAW数据的像素位置的配置信息和复原信息并输出，第一接收侧装置具备：第一输入单元，输入第一三面颜色数据、配置信息和复原信息；RAW数据提取单元，基于配置信息从第一三面颜色数据提取RAW数据；第一复原处理单元，基于复原信息对由RAW数据提取单元提取出的RAW数据进行前处理而生成第二中间数据；第二去马赛克算法处理单元，对第二中间数据进行去马赛克算法处理，生成第二三面颜色数据；及第一后处理单元，通过对第二三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据，第二接收侧装置具备：输入单元，输入第一三面颜色数据、配置信息、和复原信息；RAW数据提取单元，基于配置信息从第一三面颜色数据提取RAW数据；第二复原处理单元，基于复原信息对由RAW数据提取单元提取出的RAW数据进行前处理而生成第三中间数据；RAW像素校正处理单元，进行利用第三中间数据来置换第一三面颜色数据中的RAW像素的校正，生成第三三面颜色数据；及第二后处理单元，通过对第三三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据。
优选为，发送侧装置的输出单元具备向第一三面颜色数据赋予配置信息和RAW数据并输出的输出单元，第一接收侧装置的输入单元输入第一三面颜色数据、配置信息和RAW数据，具备选择RAW数据或者从RAW数据提取单元得到的RAW数据的RAW数据选择单元。
另外，优选为，发送侧装置的输出单元，具备向第一三面颜色数据赋予配置信息、复原信息和第一中间数据并输出的输出单元，第一接收侧装置的输入单元输入第一三面颜色数据、配置信息、复原信息和第一中间数据，具备选择第一中间数据或者第二中间数据的中间数据选择单元。
另外，优选为，发送侧装置的复原信息获取单元所获取的复原信息是RAW数据与第一中间数据的差数据或者是前处理的处理内容。
另外，优选为，第一接收侧装置具备第三后处理单元，通过对第一三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据，具备选择单元，选择从第一后处理单元得到的记录用的图像数据或显示用的图像数据或者从第三后处理单元得到的记录用的图像数据或显示用的图像数据。
另外，优选为，发送侧装置具备选择第一三面颜色数据和中间数据中的至少一个数据的选择单元，输出单元向由选择单元所选择的至少一个数据赋予配置信息并输出。
另外，优选为，发送侧装置具备选择第一三面颜色数据和RAW数据中的至少一个数据的选择单元，输出单元向由选择单元所选择的至少一个数据赋予配置信息和复原信息并输出。
另外，优选为，发送侧装置选择第一三面颜色数据和RAW数据中的至少一个数据，输出单元向由中间数据选择单元所选择的至少一个数据赋予配置信息并输出。
另外，优选为，发送侧装置具备选择第一三面颜色数据和第一中间数据中的至少一个数据的选择单元，输出单元向由选择单元所选择的至少一个数据赋予配置信息和复原信息并输出。
另外，优选为，第一接收侧装置具备：RAW像素校正处理单元，进行使用从第一复原处理单元得到的第二中间数据来置换第一三面颜色数据中的RAW像素的校正，生成第四三面颜色数据；第三后处理单元，通过对第四三面颜色数据进行第三后处理而生成记录用的图像数据或者显示用的图像数据；及选择单元，选择从第一后处理单元得到的记录用的图像数据或者显示用的图像数据或者从第三后处理单元得到的记录用的图像数据或者显示用的图像数据。
另外，为了达到上述的目的，本发明的一方式所涉及的发送侧装置输出将由摄像元件得到的数据处理为能够图像显示或者记录的数据用的数据和信息，发送侧装置具备：RAW数据获取单元，从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取与滤色器排列对应的未处理的RAW数据；前处理单元，通过对RAW数据进行前处理而生成去马赛克算法处理前的中间数据；去马赛克算法处理单元，对中间数据进行去马赛克算法处理，生成三面颜色数据；及输出单元，向三面颜色数据赋予用于确定各色数据中的中间数据的像素位置的配置信息并输出。
在本发明的其他方式所涉及的发送侧装置中，输出将由摄像元件得到的数据处理为能够图像显示或者记录的数据用的数据和信息，发送侧装置具备：RAW数据获取单元，从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取与滤色器排列对应的未处理的RAW数据；前处理单元，通过对RAW数据进行前处理而生成去马赛克算法处理前的中间数据；复原信息获取单元，获取用于从中间数据向RAW数据复原的复原信息；去马赛克算法处理单元，对中间数据进行去马赛克算法处理，生成三面颜色数据；及输出单元，向三面颜色数据赋予用于确定各色数据中的中间数据的像素位置的配置信息和复原信息并输出。
另外，在本发明的其他方式所涉及的发送侧装置中，输出将由摄像元件得到的数据处理为能够图像显示或者记录的数据用的数据和信息，发送侧装置具备：RAW数据获取单元，从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取与滤色器排列对应的未处理的RAW数据；前处理单元，通过对RAW数据进行前处理而生成去马赛克算法处理前的中间数据；去马赛克算法处理单元，对中间数据进行去马赛克算法处理而生成三面颜色数据，取代三面颜色数据中的中间数据而配置RAW数据，生成三面颜色数据；及输出单元，向三面颜色数据赋予用于确定各色数据中的RAW数据的像素位置的配置信息并输出。
另外，在本发明的其他方式所涉及的发送侧装置中，输出将由摄像元件得到的数据处理为能够图像显示或者记录的数据用的数据和信息，发送侧装置具备：RAW数据获取单元，从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取与滤色器排列对应的未处理的RAW数据；前处理单元，通过对RAW数据进行前处理而生成去马赛克算法处理前的中间数据；复原信息获取单元，获取用于从RAW数据向中间数据复原的复原信息；去马赛克算法处理单元，对中间数据进行去马赛克算法处理而生成三面颜色数据，取代三面颜色数据中的中间数据而配置RAW数据，生成三面颜色数据；及输出单元，向三面颜色数据赋予用于确定各色数据中的RAW数据的像素位置的配置信息和复原信息并输出。
另外，为了达到上述的目的，本发明的一方式所涉及的接收侧装置接收第一三面颜色数据及配置信息，第一三面颜色数据是如下得到的：通过对从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取的与滤色器排列对应的未处理的RAW数据进行前处理而生成去马赛克算法处理前的中间数据、通过对中间数据进行去马赛克算法处理而生成第一三面颜色数据，配置信息是向第一三面颜色数据赋予的用于确定各色数据中的中间数据的像素位置的信息，接收侧装置具备：第一输入单元，输入第一三面颜色数据和配置信息；中间数据提取单元，基于配置信息从第一三面颜色数据提取中间数据；第二去马赛克算法处理单元，对提取出的中间数据进行去马赛克算法处理，生成第二三面颜色数据；及后处理单元，通过对第二三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据。
另外，在本发明的其他方式所涉及的接收侧装置中，接收第一三面颜色数据、配置信息及复原信息，第一三面颜色数据是如下得到的：通过对从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取的与滤色器排列对应的未处理的RAW数据进行前处理而生成去马赛克算法处理前的第一中间数据、通过对第一中间数据进行去马赛克算法处理而生成第一三面颜色数据，配置信息是向第一三面颜色数据赋予的用于确定各色数据中的第一中间数据的像素位置的信息，复原信息是向第一三面颜色数据赋予的用于从第一中间数据向RAW数据复原的信息，接收侧装置具备：第一输入单元，输入第一三面颜色数据、配置信息和复原信息；中间数据提取单元，基于配置信息从第一三面颜色数据提取第一中间数据；复原处理单元，基于复原信息从提取出的第一中间数据复原RAW数据；第二前处理单元，通过对由复原处理单元复原的RAW数据进行前处理而生成去马赛克算法处理前的第二中间数据；第二去马赛克算法处理单元，对第二中间数据进行去马赛克算法处理，生成第二三面颜色数据；及后处理单元，通过对第二三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据。
另外，在本发明的其他方式所涉及的接收侧装置中，接收第一三面颜色数据及配置信息，第一三面颜色数据是如下得到的：通过对从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取的与滤色器排列对应的未处理的RAW数据进行前处理而生成去马赛克算法处理前的第一中间数据、通过对第一中间数据进行去马赛克算法处理而生成三面颜色数据、通过取代三面颜色数据中的中间数据而配置RAW数据从而得到第一三面颜色数据，配置信息是向第一三面颜色数据赋予的用于确定各色数据中的RAW数据的像素位置的信息，接收侧装置具备：输入单元，输入第一三面颜色数据和配置信息；RAW数据提取单元，基于配置信息从第一三面颜色数据提取RAW数据；第二前处理单元，对由RAW数据提取单元提取出的RAW数据进行前处理而生成第二中间数据；第二去马赛克算法处理单元，对第二中间数据进行去马赛克算法处理，生成第二三面颜色数据；及后处理单元，通过对第二三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据。
另外，在本发明的其他方式所涉及的接收侧装置中，接收第一三面颜色数据、配置信息及复原信息，第一三面颜色数据是如下得到的：通过对从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取的与滤色器排列对应的未处理的RAW数据进行前处理而生成去马赛克算法处理前的第一中间数据、通过对第一中间数据进行去马赛克算法处理而生成三面颜色数据、通过取代三面颜色数据中的中间数据而配置RAW数据而得到第一三面颜色数据，配置信息是向第一三面颜色数据赋予的用于确定各色数据中的RAW数据的像素位置的信息，复原信息是向第一三面颜色数据赋予的用于从RAW数据向第一中间数据复原的信息，接收侧装置具备：第一输入单元，输入第一三面颜色数据、配置信息和复原信息；RAW数据提取单元，基于配置信息从第一三面颜色数据提取RAW数据；第一复原处理单元，基于复原信息对由RAW数据提取单元提取出的RAW数据进行前处理而生成第二中间数据；第二去马赛克算法处理单元，对第二中间数据进行去马赛克算法处理，生成第二三面颜色数据；及后处理单元，通过对第二三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据。
另外，在本发明的其他方式所涉及的接收侧装置中，接收第一三面颜色数据、配置信息及复原信息，第一三面颜色数据是如下得到的：通过对从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取的与滤色器排列对应的未处理的RAW数据进行前处理而生成去马赛克算法处理前的第一中间数据、通过对第一中间数据进行去马赛克算法处理而生成三面颜色数据、通过取代三面颜色数据中的中间数据而配置RAW数据而得到第一三面颜色数据，配置信息是向第一三面颜色数据赋予的用于确定各色数据中的RAW数据的像素位置的信息，复原信息是向第一三面颜色数据赋予的用于从RAW数据向第一中间数据复原的信息，接收侧装置具备：输入单元，输入第一三面颜色数据、配置信息和复原信息；RAW数据提取单元，基于配置信息从第一三面颜色数据提取RAW数据；复原处理单元，基于复原信息对由RAW数据提取单元提取出的RAW数据进行前处理而生成第二中间数据；RAW像素校正处理单元，进行利用第二中间数据来置换第一三面颜色数据中的RAW像素的校正，生成第二三面颜色数据；及后处理单元，通过对第二三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据。
由此，在接收侧装置中，能够重新进行与用户的要求对应的画质的调整。
发明效果
根据本发明，由于能够在发送侧装置中以能够进行与接收侧装置的性能对应的图像处理的方式赋予信息而发送数据，因此即使对于利用新的滤色器排列得到的数据也能够进行适当的应对。另外，由于在接收侧装置中能够分别根据RAW显影对应或者RAW显影非对应的装置而对发送来的数据进行处理，因此能够降低接收侧装置的性能差对画质产生的影响，并能够充分地有效利用接收侧装置的性能。此外，在由本发明的发送侧装置和接收侧装置构成的***中，能够根据滤色器排列、接收侧的图像处理性能而获取良好画质的图像。
附图说明
图1A是用于对本发明所涉及的图像处理***的概念进行说明的图。
图1B是对新的滤色器的一个例子进行表示的示意图。
图1C是对新的滤色器的一个例子进行表示的示意图。
图1D是对去马赛克算法处理进行说明的图。
图2是本发明所涉及的第一实施方式中的发送侧装置的功能框图。
图3是对本发明所涉及的第一实施方式中的发送侧装置的处理顺序进行表示的流程图。
图4是本发明所涉及的第一实施方式中的第一接收侧装置的功能框图。
图5是对本发明所涉及的第一实施方式中的第一接收侧装置的处理顺序进行表示的流程图。
图6是本发明所涉及的第一实施方式中的第二接收侧装置的功能框图。
图7是对本发明所涉及的第一实施方式中的第二接收侧装置的处理顺序进行表示的流程图。
图8是本发明所涉及的第二实施方式中的发送侧装置的功能框图。
图9是对本发明所涉及的第二实施方式中的发送侧装置的处理顺序进行表示的流程图。
图10是本发明所涉及的第二实施方式中的第一接收侧装置的功能框图。
图11是对本发明所涉及的第二实施方式中的第一接收侧装置的处理顺序进行表示的流程图。
图12是本发明所涉及的第三实施方式中的发送侧装置的功能框图。
图13是对本发明所涉及的第三实施方式中的发送侧装置的处理顺序进行表示的流程图。
图14是本发明所涉及的第三实施方式中的第一接收侧装置的功能框图。
图15是对本发明所涉及的第三实施方式中的第一接收侧装置的处理顺序进行表示的流程图。
图16是本发明所涉及的第四实施方式中的发送侧装置的功能框图。
图17是对本发明所涉及的第四实施方式中的发送侧装置的处理顺序进行表示的流程图。
图18是本发明所涉及的第四实施方式中的第一接收侧装置的功能框图。
图19是对本发明所涉及的第四实施方式中的第一接收侧装置的处理顺序进行表示的流程图。
图20是本发明所涉及的第五实施方式中的发送侧装置的功能框图。
图21是对本发明所涉及的第五实施方式中的发送侧装置的处理顺序进行表示的流程图。
图22是本发明所涉及的第五实施方式中的第一接收侧装置的功能框图。
图23是对本发明所涉及的第五实施方式中的第一接收侧装置的处理顺序进行表示的流程图。
图24是本发明所涉及的第六实施方式中的发送侧装置的功能框图。
图25是对本发明所涉及的第六实施方式中的发送侧装置的处理顺序进行表示的流程图。
图26是本发明所涉及的第六实施方式中的第一接收侧装置的功能框图。
图27是对本发明所涉及的第六实施方式中的第一接收侧装置的处理顺序进行表示的流程图。
图28是本发明所涉及的第六实施方式中的第二接收侧装置的功能框图。
图29是对本发明所涉及的第六实施方式中的第二接收侧装置的处理顺序进行表示的流程图。
图30是本发明所涉及的第七实施方式中的发送侧装置的功能框图。
图31是本发明所涉及的第七实施方式中的第一接收侧装置的功能框图。
图32是对本发明所涉及的第七实施方式中的第一接收侧装置的处理顺序进行表示的流程图。
图33是本发明所涉及的第八实施方式中的发送侧装置的功能框图。
图34是本发明所涉及的第八实施方式中的第一接收侧装置的功能框图。
图35是对本发明所涉及的第八实施方式中的第一接收侧装置的处理顺序进行表示的流程图。
图36是本发明所涉及的第十实施方式中的第一接收侧装置的功能框图。
图37是本发明所涉及的第十一实施方式中的发送侧装置的功能框图。
图38是本发明所涉及的第十五实施方式中的发送侧装置的功能框图。
图39是对本发明所涉及的摄影装置的一实施方式进行表示的图。
图40是对图39所示的摄影装置的结构进行表示的框图。
具体实施方式
以下，按照附图对本发明所涉及的图像处理***的实施方式进行说明。另外，以下的说明是实施方式的一个例子，因此并非将本发明的实施方式限定于此。
[本发明所涉及的图像处理***的概念]
图1A表示包含本发明所涉及的图像处理***100的摄影装置的概念。将由透镜104捕捉到的光发送到摄像元件105，摄像元件105根据发送来的光而发出信号。摄像元件105由设置有预定排列的滤色器(例如拜耳排列、蜂窝排列、G条纹R/G完全棋盘式格纹等)的单板式的彩色摄像元件(CCD、CMOS等)构成。图像处理***100的发送侧装置101获取对应于该光而发出的信号作为RAW数据。另外，预定排列的滤色器能够设为完全新的滤色器。
例如，图1B是表示新的滤色器的基本排列图案的例子的图。另外，在图1B中，“R”表示Red(红色)滤光片，“G”表示Green(绿色)滤光片，“B”表示Blue(蓝色)滤光片。
由与M×N(6×6)像素对应的正方排列图案构成的基本排列图案P沿水平方向和垂直方向重复配置而构成图1B所示的滤色器。因此，在进行从摄像元件105读出的RGB的RAW数据(马赛克图像)的图像处理等时，能够按照重复图案而进行处理。这种滤色器排列中，红(R)、绿(G)、和蓝(B)各色滤光片(R滤光片、G滤光片、和B滤光片)以预定的周期性而排列。
在图1B所示的另一排列的滤色器中，成为由实线框围成的3×3像素的A排列和由虚线框围成的3×3像素的B排列沿水平方向和垂直方向交替地排列而成的排列。
A排列和B排列中，G滤光片分别配置于四角和中央，在两对角线上配置G滤光片。在A排列中，R滤光片隔着中央的G滤光片而沿水平方向排列，B滤光片隔着中央的G滤光片而沿垂直方向排列。另一方面，在B排列中，B滤光片隔着中央的G滤光片而沿水平方向排列，R滤光片隔着中央的G滤光片而沿垂直方向排列。即，A排列和B排列中，R滤光片和B滤光片的位置关系相反，但是其他配置相同。
另外，A排列和B排列的四角的G滤光片通过将A排列和B排列沿水平、垂直方向交替地配置而成为与2×2像素对应的正方排列的G滤光片。
图1C表示将图1B所示的基本排列图案的滤色器沿水平方向和垂直方向各两个并列配置而成的滤色器排列。在该滤色器排列中，通常与最有助于获得亮度信号的颜色(在该实施方式中为G色)对应的G滤光片在滤色器排列的水平、垂直、斜右上(NE)和斜左上(NW)方向的各行内配置一个以上。
NE表示斜右上方向，NW表示斜右下方向。例如，在正方形的像素的排列的情况下，斜右上和斜右下方向为分别相对于水平方向呈45°的方向，但是如果是长方形的像素的排列，则是长方形的对角线的方向，其角度能够根据长边/短边的长度而变化。
根据这种滤色器排列，与亮度系像素对应的G滤光片配置于滤色器排列的水平、垂直和倾斜(NE、NW)方向的各行内，因此无论成为高频的方向如何都能够提高高频区域中的去马赛克算法处理(称作去马赛克算法处理)的重现精度。
另外，图1C所示的滤色器排列中，与上述G色以外的两种颜色以上的其他颜色(在该实施方式中为R、B色)对应的R滤光片、B滤光片分别在基本排列图案的水平和垂直方向的各行内配置一个以上。
由于R滤光片、B滤光片配置于滤色器排列的水平和垂直方向的各行内，因此能够降低伪色(彩色莫尔条纹)的发生。由此，能够省略用于降低(抑制)伪色的发生的光学低通滤光器。另外，即使在适用光学低通滤光器的情况下也能够适用用于防止伪色发生的将高频成分截止的功能较弱的光学低通滤光器，能够不有损分辨率。
此外，图1C所示的滤色器排列的基本排列图案P中，与该基本排列图案内的R、G、B滤光片对应的R像素、G像素、B像素的像素数分别为8像素、20像素、8像素。即，RGB像素的各像素数的比率为2：5：2，最有助于获得亮度信号的G像素的像素数的比率大于其他颜色的R像素、B像素的像素数的比率。
如上述那样，在图1C所示的滤色器排列中，G像素的像素数与R、B像素的像素数的比率不同，特别是最有助于获得亮度信号的G像素的像素数的比率大于R、B像素的像素数的比率，因此能够抑制去马赛克算法处理时的混淆，另外，也能够改善高频重现性。
将从发送侧装置101输出的数据输入到RAW显影对应的第一接收侧装置102和RAW显影非对应的第二接收侧装置103中的至少一方。利用第一接收侧装置102和第二接收侧装置103中的至少一方，将图像显示用和/或记录用数据向图像显示和/或记录装置输出。在此，作为对被摄体进行摄影的装置，可以考虑各种各样的装置。例如，是数码相机、具有摄影功能的便携式终端装置。作为在此所说的便携式终端装置，例如能够列举出手机、智能电话、PDA(Personal DigitalAssistants)、便携式游戏机。
另外，本发明的图像处理***100能够以各种各样的方式埋入于装置。例如，可以考虑具有本发明的图像处理***100的数码相机、具有本发明的图像处理***100的发送侧装置101的数码相机等。另外，例如，可以考虑具有本发明的图像处理***100的个人计算机、便携式终端、具有本发明的图像处理***100的第一接收侧装置102和第二接收侧装置103中的至少一方的个人计算机、便携式终端。
[第一实施方式]
图2是本发明所涉及的第一实施方式的发送侧装置101的功能框图。
发送侧装置101主要包含RAW数据获取部202A、前处理部204A、第一去马赛克算法处理部206A、输出部208A、信息赋予部210A、发送部212A和控制部214A而构成。利用发送侧装置101的RAW数据获取部202A获取根据捕捉到的光由摄像元件105输出的未处理的信号即RAW数据。
由RAW数据获取部202A获取的RAW数据被发送到前处理部204A。在前处理部204A中，对RAW数据主要进行偏置校正、白平衡校正(WB校正)等。即，对从RAW数据获取部202A发送来的RAW数据进行使黑电平一致的偏置校正。并且，对偏置校正后的RAW数据进行白平衡校正。
在此，白平衡校正用的增益值Rg、Gg和Bg对RAW数据进行解析，例如对光源种类(太阳光、荧光灯、钨电灯泡等)进行确定，设定为与该光源种类对应而预先存储的增益值Rg、Gg和Bg，或设定为与在进行白平衡校正的菜单画面上利用手动而选择的光源种类、色温对应的增益值Rg、Gg和Bg。
如果由本发明的前处理部204A对RAW数据实施前处理，则能够得到去马赛克算法处理前的中间数据。
通过实施前处理而得到的中间数据被发送到第一去马赛克算法处理部206A，在第一去马赛克算法处理部206A中进行去马赛克算法处理。在此所谓的去马赛克算法处理是指对与单板式的滤色器排列相伴的颜色信号的空间性的偏差进行插值而将颜色信号转换为去马赛克算法式的处理，也可以称为去马赛克算法处理。另外，向去马赛克算法式的转换不限于一个方式。能够进行向进行了方向性、加权后的去马赛克算法式的转换，也能够根据用户所要求的画质和进行去马赛克算法处理的装置的性能而进行各种向去马赛克算法式的转换。
第一去马赛克算法处理部206A通过对中间数据进行去马赛克算法处理，而能够输出第一三面颜色数据(例如RGB数据)。关于去马赛克算法处理，利用图1D详细地进行说明。图1D(a)表示中间数据或者RAW数据中的排列。从图1D(b)到图1D(d)是R(红)、G(绿)和B(蓝)各色的数据。在进行去马赛克算法处理时，在中间数据或者RAW数据的排列存在像素值的部位使用该像素(从图1D(b)到图1D(d)附加了阴影的部分)，在中间数据不存在像素值的部位使用插值后的像素值(从图1D(b)到图1D(d)的白色部分)。
将该第一三面颜色数据向输出部208A发送。本发明的输出部208A主要由信息赋予部210A和发送部212A构成。在信息赋予部210A中向发送来的第一三面颜色数据赋予配置信息。所谓配置信息，是指能够对第一三面颜色数据中的各色的颜色数据上存在与中间数据对应的颜色的像素即原封不动地使用于第一三面颜色数据的像素进行确定的信息。例如，是滤色器排列的排列信息、或开头像素信息、或对在各色的颜色数据中的中间数据存在颜色的像素位置进行确定的信息。
被赋予了配置信息后的第一三面颜色数据被发送到发送部212A。在发送部212A中，输出赋予了配置信息后的第一三面颜色数据。所输出的赋予了配置信息后的三面颜色数据作为传送数据而向接收侧装置发送。在此，在发送侧装置101中，通过向三面颜色数据赋予配置信息，能够输出与RAW显影对应的第一接收侧装置102和RAW显影非对应的第二接收侧装置均能够对应的数据，能够输出能够在接收侧装置中再次进行去马赛克算法处理的数据。
另外，利用控制部214A对信息赋予部210A和发送部212A进行控制。
图3是表示本发明的发送侧装置101所进行的处理动作的流程图。
首先，获取从摄像元件105发送来的RAW数据(步骤S100A)，对该RAW数据进行前处理(步骤S102A)。其后，使用利用前处理输出的中间数据而进行第一去马赛克算法处理(步骤S104A)。对利用第一去马赛克算法处理输出的第一三面颜色数据(例如RGB数据)进行信息赋予(步骤S106A)。在该步骤中，进行能够对第一三面颜色数据上中间数据有颜色而原封不动地使用于第一三面颜色数据的像素进行确定的配置信息的赋予。通过发送赋予了配置信息后的三面颜色数据(步骤S108A)，由本发明的发送侧装置101所进行的处理动作结束。
图4是本发明的图像处理***100中的RAW显影对应的第一接收侧装置102的功能框图。
在本发明的第一接收侧装置102中，主要由第一输入部302A、中间数据提取部304A、第二去马赛克算法处理部306A、第一后处理部308A、图像数据记录部或者显示部310A、信息提取部312A和控制部314A构成。
从发送侧装置101输出的传送数据被输入到第一接收侧装置102的第一输入部302A。输入到第一输入部302A的数据是向第一三面颜色数据赋予了配置信息后的数据。所述配置信息由信息提取部312A所提取，并向控制部314A发送。
输入到第一输入部302A的第一三面颜色数据被发送到中间数据提取部304A。在中间数据提取部304A中，从第一三面颜色数据提取并生成由发送侧装置101进行的第一去马赛克算法处理中的原始数据即中间数据。即，在中间数据提取部304A中，基于所赋予的配置信息，提取第一三面颜色数据上原本作为中间数据而存在的像素即原封不动地将该数据使用于三面颜色数据的数据(从图1D(b)到图1D(d)上的附加了阴影的部分)，生成原始的中间数据。将所提取生成的中间数据发送到第二去马赛克算法处理部306A。
在第二去马赛克算法处理部306A中，基于由中间数据提取部304A生成的中间数据而进行第二去马赛克算法处理。即，进行对与单板式的滤色器排列相伴的颜色信号的空间性的偏差进行插值而将颜色信号转换为去马赛克算法式的处理。另外，向去马赛克算法式的转换不限于一个方式。能够进行向进行了方向性、加权后的去马赛克算法式的转换，也能够根据用户所要求的画质和进行去马赛克算法处理的装置的性能而进行各种向去马赛克算法式的转换。
由第二去马赛克算法处理部306A生成的第二三面颜色数据向第一后处理部308A发送。在第一后处理部308A中，对第二三面颜色数据进行后处理。在此所谓的后处理，也包含为了得到更高画质的图像而对三面颜色数据进行的校正及校正为适合于显示用和/或记录用数据的格式的情况。例如，进行RGB/YC转换处理。RGB/YC转换处理将R、G和B数据转换为亮度数据Y、色差数据Cr、Cb，并对亮度数据Y进行轮廓校正处理，对色差数据Cr、Cb进行色调校正处理。轮廓校正处理进行对亮度数据Y的轮廓部(亮度变化较大的部分)进行增强的处理。
色调校正处理进行所输入的色差信号Cr、Cb与2行×2列的颜色校正矩阵系数的矩阵运算，进行用于实现良好的颜色重现性的颜色校正。根据来自用户的颜色校正的指示输入，对颜色校正矩阵系数进行适当变更。另外，作为记录用的图像数据的格式，也可以考虑转换为JPEG、TIFF文件。
由第一后处理部308A得到的显示用和/或记录用数据被发送到图像数据记录部或者显示部310A。在此所说的图像数据记录部能够考虑各种各样的具体例子，只要能够保存数据即可，不特别限定。例如，能够考虑硬盘、CDROM等记录介质、USB、SD卡等记录介质等。另一方面，所谓图像数据显示部，只要能够显示图像即可，不特别限定，能够假定各种各样的具体例子。例如，是监视器、电视机等。另外，可以考虑将能够利用便携式终端显示图像数据的设备作为具体例子。
控制部314A对中间数据提取部304A、第二去马赛克算法处理部306A和第一后处理部308A进行控制。图5是表示在第一实施方式所涉及的第一接收侧装置102中进行的处理动作的流程图。
首先，获取从发送侧装置101传送来的第一三面颜色数据和配置信息的数据(步骤S200A)。基于获取的第一三面颜色数据生成中间数据(步骤S202A)。即，在中间数据提取处理(步骤S202A)中，基于所赋予的配置信息，提取第一三面颜色数据上原本作为中间数据而存在的像素即原封不动地将该数据使用于三面颜色数据的数据(从图1D(b)到图1D(d)上的附加了阴影的部分)，生成原始的中间数据。其后，利用得到的中间数据，进行第二去马赛克算法处理而得到第二三面颜色数据(步骤S204A)。对接下来得到的第二三面颜色数据实施第一后处理(步骤S206A)，最后进行图像数据的记录和/或显示(步骤S208A)。
图6是图像处理***100的第二接收侧装置103的功能框图。第二接收侧装置103主要由第二输入部402A、第二后处理部404A和图像数据记录或者显示部406A构成。将从发送侧装置101输出的传送数据输入到第二接收侧装置103的第二输入部402A。输入到第二输入部402A的数据被发送到第二后处理部404A。在第二后处理部404A中，对从发送侧装置101发送来的第一三面颜色数据进行后处理。在此所说的后处理与第一后处理实质上相同。
图7是表示在本发明的发送侧装置101进行的处理动作的流程图。
首先，获取从发送侧装置101传送来的第一三面颜色数据和配置信息的数据(步骤S300A)。其后，对所获取的第一三面颜色数据进行第二后处理(步骤S302A)。最后，进行图像数据记录和/或显示(步骤S304A)。
在第一实施方式中，特别是，利用第一接收侧装置102的中间数据提取部304A的处理，从第一三面颜色数据生成中间数据。由此，由于能够在第一接收侧装置102中再次进行去马赛克算法处理(第二去马赛克算法处理部306A)，因此能够充分地有效利用第一接收侧装置102的图像处理性能，能够与新的滤色器排列对应。
[第二实施方式]
图8是本发明所涉及的第二实施方式的发送侧装置101的功能框图。另外，对与第一实施方式共通的部分附加相同的附图标记，其详细的说明省略。
图8所示的第二实施方式的发送侧装置101与图2所示的第一实施方式的发送侧装置101相比，不同之处在于追加了第一前处理部502A和复原信息获取部504A且没有前处理部204A。
第一前处理部502A从RAW数据获取部202A接收RAW数据，将第一中间数据发送到复原信息获取部504A。第一前处理部502A实质上进行与第一实施方式中的前处理部204A同样的处理。
在复原信息获取部504A中，从第一前处理部502A接收第一中间数据，将第一中间数据向第一去马赛克算法处理部206A发送。在复原信息获取部504A中，根据RAW数据和第一中间数据，或者根据前处理的处理内容，获取用于从第一中间数据向RAW数据复原的复原信息。即，通过将RAW数据和第一中间数据进行比较，例如，获取差数据，获取为了从第一中间数据向RAW数据复原而使用的复原信息。另外，通过得到第一前处理的处理内容也能够从第一中间数据向RAW数据复原。
控制部214A利用信息赋予部210A将配置信息和复原信息向第一三面颜色数据赋予。在此，在发送侧装置101中，通过向三面颜色数据赋予配置信息和复原信息，能够输出与RAW显影对应的第一接收侧装置102和RAW显影非对应的第二接收侧装置均能够对应的数据，并能够输出能够在接收侧装置再次进行去马赛克算法处理据的数据。
图9是表示在第二实施方式的发送侧装置101进行的处理动作的流程图。另外，对与表示图3所示的第一实施方式的发送侧装置101的处理动作的流程图共通的处理附加相同的步骤编号，省略其详细的说明。
图9所示的第二实施方式的发送侧装置101的处理动作与图3所示的第一实施方式的发送侧装置101的处理动作相比，追加了第一前处理(步骤S402A)和复原信息获取(步骤S404A)。在第一前处理(步骤S402A)中，对发送来的RAW数据进行第一前处理，根据RAW数据生成第一中间数据。并且，在进行复原信息获取处理(步骤S404A)的情况下使用通过第一前处理生成的第一中间数据。通过该复原信息获取处理(步骤S404A)，得到为了从第一中间数据向RAW数据的复原处理而使用的信息。例如，从RAW数据和第一中间数据获取知晓第一前处理所进行的处理那样的数据。作为具体例子，能够列举出RAW数据与中间数据的差数据。另外，通过获取前处理的处理内容，能够对在第一前处理中进行的处理进行掌握，因此通过进行该处理的逆处理能够进行从第一中间数据向RAW数据的复原处理。
图10是第二实施方式所涉及的第一接收侧装置102的功能框图。另外，在与图4所示的第一实施方式共通的部分附加相同的附图标记，其详细的说明省略。
图10所示的第二实施方式所涉及的第一接收侧装置102与图4所示的第一实施方式所涉及的第一接收侧装置102的不同之处在于追加了复原处理部602A和第二前处理部604A。
将第一中间数据从中间数据提取部304A发送到复原处理部602A。在复原处理部602A中，使用复原信息根据发送来的第一中间数据生成RAW数据。例如，对第一中间数据进行由发送侧装置101的第一前处理部502A(参照图8)所进行的处理的逆处理，根据第一中间数据生成RAW数据。并且，将所得到的RAW数据发送到第二前处理部604A。在第二前处理部604A中，对从复原处理部602A发送来的RAW数据进行前处理。在第二前处理部604A中，实质上进行与第一实施方式的前处理部204A同样的处理。
如果利用本发明第二前处理部604A对RAW数据实施前处理，则能够得到去马赛克算法处理前的第二中间数据。
图11是表示本发明的第二所涉及的第一接收侧装置102所进行的处理动作的流程图。另外，与图5所示的第一实施方式所涉及的第一接收侧装置102共通的部分附加相同的步骤编号，其详细的说明省略。
图11所示的第一接收侧装置102与图5所示的第一接收侧装置102相比，不同之处在于追加了复原处理(步骤S502A)和第二前处理(步骤S504A)。
在复原处理(步骤S502A)中，进行将发送来的第一中间数据恢复为原始的RAW数据的处理。例如，通过进行与在发送侧进行的前处理相反的处理，能够将第一中间数据恢复为RAW数据。
通过复原处理(步骤S502A)得到的RAW数据使用于第二前处理(步骤S504A)。通过进行第二前处理，能够根据发送来的RAW数据生成第二中间数据。
第二实施方式所涉及的第二接收侧装置103与第一实施方式所涉及的第二接收侧装置103的装置结构及处理动作的流程相同(参照图6和图7)。
在第二实施方式中，特别是，利用第一接收侧装置102的复原处理部602A、第二前处理部604A和第二去马赛克算法处理部306A的处理对RAW数据进行再生。由此，能够由第一接收侧装置102再次进行前处理(第二前处理部604A)和去马赛克算法处理(第二去马赛克算法处理部306A)，因此能够充分地有效利用第一接收侧装置102的图像处理性能，能够与新的滤色器排列对应。
[第三实施方式]
图12是本发明所涉及的第三实施方式所涉及的发送侧装置101的功能框图。另外，对与第一实施方式共通的部分附加相同的附图标记，其详细的说明省略。
第三实施方式与第一实施方式相比不同之处在于：由发送侧装置101在三面颜色数据的基础上输出中间数据，在第一接收侧装置102的处理中利用该中间数据。
图12所记载的第三实施方式所涉及的发送侧装置101与图2所记载的第一实施方式所涉及的发送侧装置101的不同之处在于：将由前处理部204A生成的中间数据发送到中间数据赋予部702A而附加到第一三面颜色数据。
图13是表示第三实施方式所涉及的发送侧装置101的处理动作的流程图。另外，对与表示由图3所示的第一实施方式的发送侧装置101的处理动作的流程图共通的处理附记相同的步骤编号，省略其详细的说明。
图13所示的第三实施方式所涉及的发送侧装置101的处理动作与图3所示的第一实施方式的发送侧装置101的处理动作相比，不同之处在于增加了中间数据赋予(步骤S602A)。所谓中间数据的赋予，是指利用前处理(步骤S102A)生成中间数据而将该中间数据向第一三面颜色数据赋予。
图14是第三实施方式所涉及的第一接收侧装置102的功能框图。另外，对与图4所示的第一实施方式共通的部分附加相同的附图标记，其详细的说明省略。
将图14所示的第三实施方式所涉及的第一接收侧装置102的功能框图与图4所示的第一实施方式所涉及的第一接收侧装置102的功能框图相比，不同之处在于具有中间数据选择部305A。在中间数据选择部305A中，对从第一输入部302A发送来的中间数据、或者由中间数据提取部304A生成的中间数据进行选择。将由中间数据选择部305A选择的中间数据向第二去马赛克算法处理部306A发送。
图15表示第三实施方式所涉及的第一接收侧装置102的动作处理的流程图。另外，与表示由图5所示的第一实施方式的发送侧装置101的动作处理的流程图共通的处理附加相同的步骤编号，省略其详细的说明。
图15中记载的第三实施方式所涉及的第一接收侧装置102的动作处理与图5所示的第一实施方式的第一接收侧装置的动作处理相比，不同之处在于增加了中间数据选择的处理(步骤S702A)。所谓中间数据选择，是指对从发送侧装置101发送来的中间数据或者由中间数据提取部304A生成的中间数据进行选择。对所选择的中间数据进行第二去马赛克算法处理(步骤S204A)。
第三实施方式所涉及的第二接收侧装置103与第一实施方式所涉及的第二接收侧装置103的装置结构及处理动作的流程相同(参照图6和图7)。
在第三实施方式中，特别是，在发送侧装置101的输出部208A的处理中，输出第一三面颜色数据、配置信息和中间数据。由此，能够增加由第一接收侧装置102进行的处理的选择项，并能够充分地有效利用第一接收侧装置102的图像处理性能，能够与新的滤色器排列对应。
[第四实施方式]
图16是本发明所涉及的第四实施方式所涉及的发送侧装置101的功能框图。另外，对与第二实施方式(图8)共通的部分附加相同的附图标记，省略其详细的说明。
第四实施方式与第二实施方式相比不同之处在于：在发送侧装置101另行输出RAW数据，并将该数据在第一接收侧装置102的处理中利用。
图16所示的本发明所涉及的第四实施方式所涉及的发送侧装置101与图8所示的第二实施方式所涉及的发送侧装置101相比，不同之处在于图16的发送侧装置101具有RAW数据赋予部902A。在RAW数据赋予部902A中，将由RAW数据获取部202A获取的RAW数据向第一三面颜色数据赋予。
图17是表示由第四实施方式所涉及的发送装置进行的处理动作的流程图。另外，对与第二实施方式(图9)共通的部分附加相同的附图标记，省略其详细的说明。
图17所记载的第六实施方式所涉及的发送装置的处理动作与图9所示的第二实施方式相比，不同之处在于追加了RAW数据赋予(步骤S802A)的处理。
在RAW数据赋予(步骤S802A)中，对第一三面颜色数据赋予RAW数据。
图18是第四实施方式所涉及的第一接收侧装置102的功能框图。另外，对与作为第二实施方式所涉及的第一接收侧装置的功能框图的图10共通的部分附加相同的附图标记，省略其详细的说明。
将图18所示的第五实施方式所涉及的第一接收侧装置102的功能框图与图10所示的第二实施方式所涉及的第一接收侧装置102的功能框图相比，不同之处在于具有RAW数据选择部603A。在RAW数据选择部603A中，对从第一输入部302A发送来的RAW数据、或者由复原处理部602A生成的RAW数据进行选择。将由RAW数据选择部603A选择的RAW数据向第二前处理部604A发送。
图19表示第四实施方式所涉及的第一接收侧装置102的动作处理的流程图。另外，对与表示由图11所示的第一实施方式的发送侧装置101的动作处理的流程图共通的处理附加相同的步骤编号，省略其详细的说明。
图19所记载的第四实施方式所涉及的第一接收侧装置102的动作处理与图11中所示的第一实施方式的接收侧装置102的动作处理相比，不同之处在于增加了RAW数据选择(步骤S902A)的处理。所谓RAW数据选择，是指选择从第一输入部302A发送来的RAW数据或者通过复原处理而得到的RAW数据。将所选择的RAW数据向第二前处理(步骤S504A)发送。
第四实施方式所涉及的第二接收侧装置103与第一实施方式所涉及的第二接收侧装置103的装置结构和处理动作的流程相同(参照图6和图7)。
在第四实施方式中，特别是，在发送侧装置101的输出部208A的处理中输出第一三面颜色数据、配置信息和RAW数据。由此，增加能够由第一接收侧装置102进行的处理的选择项，并能够充分地有效利用第一接收侧装置102的图像处理性能，且能够与新的滤色器排列对应。
[第五实施方式]
图20是本发明所涉及的第五实施方式的发送侧装置101的功能框图。
发送侧装置101主要由RAW数据获取部202B、第一前处理部204B、第一去马赛克算法处理部206B、输出部208B、信息赋予部210B、发送部212B和控制部214B构成。利用第一发送侧装置101的RAW数据获取部202B获取根据从摄像元件105捕捉到的光而输出的未处理的信号即RAW数据。
将所获取的RAW数据发送到第一前处理部204B，并且也发送到第一去马赛克算法处理部206B。在第一前处理部204B中，进行与第一实施方式的发送侧装置101中的前处理部204A实质上同样的处理。
由第一前处理部204B得到的第一中间数据被发送到第一去马赛克算法处理部206B。
利用第一去马赛克算法处理部206B进行去马赛克算法处理。即，在第一去马赛克算法处理中，对第一中间数据进行去马赛克算法处理而生成三面颜色数据，并取代所述三面颜色数据中的中间数据而配置所述RAW数据，生成第一三面颜色数据。如果利用图1D进行说明，则在RAW数据的排列中存在像素值的部位使用该像素(从图1D(b)到图1D(d)中附加了阴影的部分)，在RAW数据中不存在像素值的部位使用插值后的像素值(从图1D(b)到图1D(d)中白色部分)。
将由第一去马赛克算法处理部206B得到的第一三面颜色数据向输出部208B发送。
本发明的输出部208B主要由信息赋予部210B和发送部212B构成。在信息赋予部210B中对发送来的第一三面颜色数据赋予配置信息。所谓配置信息，是能够对第一三面颜色数据中的各色的颜色数据上存在与RAW数据对应的颜色的像素即原封不动地使用于第一三面颜色数据的像素进行确定的信息。例如，是滤色器排列的排列信息、或是开头像素信息、或是对各色数据中的RAW数据的像素位置进行确定的信息。
赋予了配置信息后的第一三面颜色数据被发送到发送部212B。在发送部212B中，输出赋予了配置信息后的第一三面颜色数据。所输出的赋予了配置信息后的第一三面颜色数据作为传送数据而向接收侧装置发送。在此，在发送侧装置101中，通过向三面颜色数据赋予配置信息，能够输出与RAW显影对应的第一接收侧装置102和RAW显影非对应的第二接收侧装置均能够对应的数据，能够输出在接收侧装置能够再次进行去马赛克算法处理的数据。
另外，利用控制部214B对信息赋予部210B和发送部212B进行控制。
图21是表示由本发明的发送侧装置101进行的处理动作的流程图。
首先，获取从摄像元件105发送来的RAW数据(步骤S100B)，对该RAW数据进行第一前处理(步骤S102B)。其后，使用通过前处理输出的中间数据而进行第一去马赛克算法处理(步骤S104B)。并且，向通过第一去马赛克算法处理输出的第一三面颜色数据(例如RGB数据)进行信息赋予(步骤S106B)。在该情况下，进行能够对第一三面颜色数据上在RAW数据中存在颜色而原封不动地使用于第一三面颜色数据的像素进行确定的配置信息的赋予。通过发送赋予了配置信息后的第一三面颜色数据(步骤S108B)，在本发明的发送侧装置101中进行的处理动作结束。
图22是本发明的图像处理***100中的、RAW显影对应的第一接收侧装置102的功能框图。
本发明的第一接收侧装置102主要由第一输入部302B、RAW数据提取部303B、第二前处理部304B、第二去马赛克算法处理部306B、第一后处理部308B、图像数据记录部或者显示部310B、信息提取部312B和控制部314B构成。
从发送侧装置101输出的传送数据被输入到第一接收侧装置102的第一输入部302B。输入到第一输入部302B的数据是向第一三面颜色数据赋予了配置信息的数据。所述配置信息由信息提取部312B所提取，向控制部314B发送。
输入到第一输入部302B的第一三面颜色数据被发送到RAW数据提取部303B。在RAW数据提取部303B中，从三面颜色数据提取在发送侧装置101进行的第一去马赛克算法处理部206B中在RAW数据存在颜色而将RAW数据原样使用于三面颜色数据的部位的RAW数据，生成RAW数据。即，在RAW数据提取部303B中，基于所赋予的配置信息，提取三面颜色数据上原本作为RAW数据而存在的像素即原封不动地将该数据使用于三面颜色数据数据(从图1D(b)到图1D(d)上的附加了阴影的部分)，并生成原始的RAW数据。
在第二前处理部304B中，向利用RAW数据提取部303B得到的RAW数据实施基本上与第一前处理部204A同样的处理。可是，处理条件等也能够适当变更。通过第二前处理部304B，生成RAW数据作为第二中间数据。
并且，在第二去马赛克算法处理部306B中，基于由第二前处理部304B生成的第二中间数据进行第二去马赛克算法处理部306B。即，进行对与单板式的滤色器排列相伴的颜色信号的空间性的偏差进行插值而将颜色信号转换为去马赛克算法式的处理。另外，向去马赛克算法式的转换不限于一个方式。能够进行向进行了方向性、加权后的去马赛克算法式的转换，也能够根据用户所要求的画质和进行去马赛克算法处理的装置的性能进行各种向去马赛克算法式的转换。
将由第二去马赛克算法处理部306B生成的三面颜色数据向第一后处理部308B发送。在第一后处理部308B中，对得到的三面颜色数据进行后处理。在此所谓的后处理与第一后处理实质上相同。
由第一后处理部308B得到的显示用和/或记录用数据被发送到图像数据记录部或者显示部310B。在此所谓的图像数据记录部可以考虑各种各样的具体例子，只要能够对数据进行保存即可，不特别限定。例如，可以考虑硬盘、CDROM等记录介质、USB、SD卡等记录介质等。另一方面，所谓图像数据显示部，只要能够对图像进行显示即可，不特别限定，能够假定各种各样的具体例子。例如，是监视器、电视机等。另外，也可以考虑在便携式终端具备图像数据显示的器件。
控制部314B对RAW数据提取部303B、第二前处理部304B、第二去马赛克算法处理部306B和第一后处理部308B进行控制。
图23是表示本发明的第五实施方式的接收侧装置102所进行的处理动作的流程图。
首先，获取从发送侧装置101传送来的第一三面颜色数据和配置信息的数据(步骤S200B)。基于获取的配置信息，根据第一三面颜色数据生成RAW数据(步骤S202B)。即，在RAW数据提取处理(步骤S202B)中，基于所赋予的配置信息，提取在三面颜色数据上原本作为RAW数据而存在的颜色且原封不动地将该数据使用于三面颜色数据的数据，生成原始的RAW数据。其后，对所得到的RAW数据进行第一前处理(步骤S203B)。若对RAW数据进行第二前处理(步骤S203B)，则生成第二中间数据。其后，利用得到的第二中间数据，进行第二去马赛克算法处理(步骤S204B)而得到第二三面颜色数据。对接下来得到的第二三面颜色数据实施第一后处理(步骤S206B)，最后对图像数据进行记录和/或显示(步骤S208B)。
第五实施方式所涉及的第二接收侧装置103与第一实施方式所涉及的第二接收侧装置103的装置结构和处理动作的流程相同(参照图6和图7)。
在第五实施方式中，特别是，利用第一接收侧装置102的RAW数据提取部303B、第二前处理部304B和第二去马赛克算法处理部306B的处理，再次根据RAW数据生成第二三面颜色数据。由此，能够在第一接收侧装置102再次进行前处理(第二前处理部304B)、去马赛克算法处理(第二去马赛克算法处理部306B)，因此能够充分地有效利用第一接收侧装置102的图像处理性能，并能够与新的滤色器排列对应。
[第六实施方式]
图24是本发明所涉及的第六实施方式的发送侧装置101的功能框图。另外，对与第五实施方式共通的部分附加相同的附图标记，其详细的说明省略。
图24所示的本发明所涉及的第六实施方式的发送侧装置101与图20所示的第五实施方式的发送侧装置101相比，不同之处在于追加了复原信息获取部205B。
将由复原信息获取部205B得到的复原信息发送到控制部214B。并且，控制部214B通过信息赋予部210B将复原信息向第一三面颜色数据赋予。由复原信息获取部205B得到的复原信息是用于从RAW数据向第一中间数据复原的信息。在此，在发送侧装置101中，通过向三面颜色数据赋予配置信息和复原信息，能够输出与RAW显影对应的第一接收侧装置102和RAW显影非对应的第二接收侧装置103均能够对应的数据，并能够输出能够在接收侧装置中再次进行去马赛克算法处理的数据。
图25是表示第六实施方式的发送侧装置101中进行的处理动作的流程图。另外，对与表示图21所示的第一实施方式的发送侧装置101的处理动作的流程图共通的处理附加相同的步骤编号，其详细的说明省略。
图25所示的第六实施方式的发送侧装置101的处理动作与图21所示的第五实施方式的发送侧装置101的处理动作相比，追加了复原信息获取(步骤S302B)。通过复原信息获取处理(步骤S302B)，获取为了从RAW数据向第二中间数据的复原处理而使用的信息。
图26是第六实施方式所涉及的第一接收侧装置102的功能框图。另外，对与图22所示的第一实施方式共通的部分附加相同的附图标记，其详细的说明省略。
图26所示的第六实施方式所涉及的第一接收侧装置102与图22所示的第五实施方式所涉及的第一接收侧装置102的不同之处在于，追加了第一复原处理部305B且没有第二前处理部304B。
将RAW数据从RAW数据提取部303B发送到第一复原处理部305B。在第一复原处理部305B中，根据发送来的RAW数据使用复原信息而生成第二中间数据。例如，对RAW数据进行由发送侧装置101的第一前处理部204B进行的处理，根据RAW数据生成中间数据。并且，将所得到的中间数据发送到第二去马赛克算法处理部306B。
图27是表示本发明的第八所涉及的第一接收侧装置102进行的处理动作的流程图。另外，对与图23所示的第一实施方式所涉及的第一接收侧装置102共通的部分附加相同的步骤编号，其详细的说明省略。
图27所示的第一接收侧装置102与图23所示的第一接收侧装置102相比，不同之处在于追加了复原处理(步骤S502B)且没有第一前处理(步骤S203B)。
在复原处理(步骤S502B)中，进行根据发送来的RAW数据生成第二中间数据的处理。例如，通过进行与由发送侧进行的前处理同样的处理，能够根据RAW数据生成第二中间数据。
在复原处理(步骤S502B)中得到的第二中间数据被使用于第二去马赛克算法处理(步骤S204B)。
图28是第六实施方式所涉及的第二接收侧装置103的功能框图。另外，对与图26所示的第一实施方式共通的部分附加相同的附图标记，其详细的说明省略。
图28所示的第六实施方式所涉及的第二接收侧装置103与图26所示的第六实施方式所涉及的第一接收侧装置102的不同之处在于：追加了第二复原处理部403B、RAW像素校正处理部405B和第二后处理部407B且没有第一复原处理部305B、第二去马赛克算法处理部306B和第一后处理部308B。
将RAW数据从RAW数据提取部303B发送到第二复原处理部403B。在第二复原处理部403B中，根据发送来的RAW数据使用复原信息而生成第二中间数据。例如，对RAW数据进行在发送侧装置101的第一前处理部204B进行的处理，根据RAW数据生成第二中间数据。并且，将所得到的中间数据发送到RAW像素校正处理部405B。
在RAW像素校正处理部405B中，在从发送侧装置101发送来的三面颜色数据中，进行由中间数据置换RAW数据的像素的处理。在发送侧装置101中的第一去马赛克算法处理中，在三面颜色数据上，存在于RAW数据中的颜色使用该数据，不存在于RAW数据中的颜色使用对第一中间数据进行去马赛克算法处理而补充所得的数据，生成三面颜色数据。在第二接收侧装置103中的RAW像素校正处理部405B中，进行由利用第二复原处理得到的第三中间数据对存在于所述RAW数据的颜色使用该数据的部分进行置换的处理。即，在RAW像素校正处理部405B中，进行利用第三中间数据对处于第一RGB数据上的RAW像素进行置换的校正处理。根据利用这种处理得到的第三RGB数据，能够得到画质更优良的图像。将通过进行RAW像素校正处理而得到的三面颜色数据发送到第二后处理部407B。
图29所示的第二接收侧装置103与图27所示的第一接收侧装置102相比，不同之处在于追加了RAW像素校正处理(步骤S205B)且没有第二去马赛克算法处理(步骤S204B)(图27的204B)。
在RAW像素校正处理(步骤S205B)中，进行将从发送侧装置101发送来的第一三面颜色数据上的使用了RAW数据的部分置换为在复原处理(步骤S502B)中所得到的第二中间数据的处理。
在第六实施方式中，特别是，利用第一接收侧装置102的RAW数据提取部303B、第一复原处理部305B、第二去马赛克算法处理部306B的处理，再次根据RAW数据生成第二三面颜色数据。由此，能够在第一接收侧装置102再次进行去马赛克算法处理(第二去马赛克算法处理部306B)，因此能够充分地有效利用第一接收侧装置102的图像处理性能，并能够与新的滤色器排列对应。
另外，在第六实施方式中，特别是，利用第二接收侧装置103的RAW数据提取部303B、第二复原处理部403B、RAW像素校正处理部405B的处理生成画质更加完备的三面颜色数据。
[第七实施方式]
图30是本发明所涉及的第七实施方式所涉及的发送侧装置101的功能框图。另外，对与第五实施方式(参照图20)共通的部分附加相同的附图标记，其详细的说明省略。
第七实施方式与第五实施方式相比，不同之处在于由发送侧装置101另行输出RAW数据并将该数据利用于第一接收侧装置102的处理。
图30所示的本发明所涉及的第七实施方式所涉及的发送侧装置101与图20所示的第五实施方式所涉及的发送侧装置101相比，不同之处在于在图30中具有RAW数据赋予部502B。在RAW数据赋予部502B中，向第一三面颜色数据赋予由RAW数据获取部202B得到的RAW数据。
第七实施方式所涉及的发送装置中进行的处理动作流程与图21所示的流程基本上相同，因此详细的说明省略。
图31是第七实施方式所涉及的第一接收侧装置102的功能框图。另外，对与作为第五实施方式所涉及的第一接收侧装置的功能框图的图22共通的部分附加相同的附图标记，其详细的说明省略。
图31所示的第七实施方式所涉及的第一接收侧装置102的功能框图与图22所示的第五实施方式所涉及的第一接收侧装置102的功能框图相比，不同之处在于具有RAW数据选择部602B。在RAW数据选择部602B中，对从第一输入部302B发送来的RAW数据、或者由RAW数据提取部303B生成的RAW数据进行选择。将由RAW数据选择部602B选择的RAW数据向第二前处理部304B发送。
图32表示第七实施方式所涉及的第一接收侧装置102的动作处理的流程图。另外，对与表示图23所示的第五实施方式的发送侧装置101的动作处理的流程图共通的处理附加相同的步骤编号，其详细的说明省略。
图32记载的第七实施方式所涉及的第一接收侧装置102的动作处理与图23所示的第一实施方式的接收侧装置102的动作处理相比，不同之处在于增加了RAW数据选择(步骤S402B)的处理且没有第一前处理。所谓RAW数据选择(步骤S402B)，是指对从发送侧装置101发送来的RAW数据或者由复原处理得到的RAW数据进行选择。将所选择的RAW数据向第二去马赛克算法处理(步骤S204B)发送。
第七实施方式所涉及的第二接收侧装置103与第一实施方式所涉及的第二接收侧装置103的装置结构和处理动作的流程相同(参照图6和图7)。
在第七实施方式中，特别是，在发送侧装置101的输出部208B的处理中，输出三面颜色数据、配置信息和RAW数据。由此，增加能够由第一接收侧装置102进行的处理的选择项，并能够充分地有效利用第一接收侧装置102的图像处理性能，且能够与新的滤色器排列对应。
[第八实施方式]
图33是本发明所涉及的第八实施方式所涉及的发送侧装置101的功能框图。另外，对与第八实施方式共通的部分附加相同的附图标记，其详细的说明省略。
第八实施方式与第六实施方式相比不同之处在于：在发送侧装置101中另行输出中间数据，将该数据利用于第一接收侧装置102的处理。
图33记载的第八实施方式所涉及的发送侧装置101与图24记载的第六实施方式所涉及的发送侧装置101的不同之处在于：将由第一前处理部204B生成的第一中间数据发送到中间数据赋予部503B，并向第一三面颜色数据赋予。
第八实施方式所涉及的发送装置中进行的处理流程与图25的处理流程基本上相同，因此详细的说明省略。
图34表示第八实施方式所涉及的第一接收侧装置102的功能框图。另外，对与图26所示的第六实施方式共通的部分附加相同的附图标记，其详细的说明省略。
图34所示的第八实施方式所涉及的第一接收侧装置102的功能框图与图26所示的第六实施方式所涉及的第一接收侧装置102的功能框图相比，不同之处在于具有中间数据选择部603B。在中间数据选择部603B中，对从第一输入部302B发送来的第一中间数据、或者由第一复原处理部305B生成的第二中间数据进行选择。将由中间数据选择部603B选择的中间数据向第二去马赛克算法处理部306B发送。
图35表示第八实施方式所涉及的第一接收侧装置102的动作处理的流程图。另外，对与表示图27所示的第一实施方式的发送侧装置101的动作处理的流程图共通的处理附加相同的步骤编号，其详细的说明省略。
图35所记载的第八实施方式所涉及的第一接收侧装置102的动作处理与图27所示的第六实施方式的接收侧装置102的动作处理相比，不同之处在于增加了中间数据选择的处理(步骤S404B)。所谓中间数据选择，是指对从发送侧装置101发送来的第一中间数据或者由第一复原处理生成的第二中间数据进行选择。为了进行第二去马赛克算法处理(步骤S204B)而发送所选择的中间数据。
第八实施方式所涉及的第二接收侧装置103与第六实施方式所涉及的第二接收侧装置103的装置结构和处理动作的流程相同(参照图28和图29)，因此详细的说明省略。
在第八实施方式中，特别是，在发送侧装置101的输出部208B的处理中，输出三面颜色数据、配置信息和中间数据。由此，能够增加能够在第一接收侧装置102中进行的处理的选择项，能够充分地有效利用第一接收侧装置102的图像处理性能，并能够与新的滤色器排列对应。
[第九实施方式]
对本发明的第九实施方式所涉及的图像处理***100进行说明。第九实施方式与第二实施方式相比，将由复原信息获取单元获取的信息是RAW数据与中间数据的差数据这一方面更具体化。即，在第九实施方式中，发送侧装置101(参照图8)中的复原信息获取部504A所获取的信息是RAW数据与中间数据的差数据。能够通过对RAW数据和中间数据进行比较而获取差数据。通过该差数据，利用第一接收侧装置102中的复原处理部602A(参照图10)从中间数据向RAW数据转换。
在第九实施方式中，特别是，利用发送侧装置101的复原信息获取部205B的处理，获取RAW数据与中间数据的差数据。由此，由第一接收侧装置102进行的复原处理(复原处理部602A)能够高效地进行，能够充分地有效利用第一接收侧装置102的图像处理性能，并能够与新的滤色器排列对应。
另外，对本发明的第九其他实施方式所涉及的图像处理***100进行说明。第九实施方式与第二实施方式相比，将由复原信息获取单元获取的信息是前处理的处理内容这一方面更具体化。即，在第九实施方式中，发送侧装置101中的(参照图8)复原信息获取部504A所获取的信息是前处理的处理内容的数据。通过使用前处理的处理内容的数据，能够利用第一接收侧装置102中的复原处理部602A(参照图10)从中间数据向RAW数据转换。
另外，对本发明的第九其他实施方式所涉及的图像处理***100进行说明。在第九实施方式中，特别是，利用发送侧装置101的复原信息获取部205B的处理获取前处理的处理内容。由此，由第一接收侧装置102进行的复原处理(复原处理部602A)能够高效地进行，能够充分地有效利用第一接收侧装置102的图像处理性能，并能够与新的滤色器排列对应。
对本发明的第九实施方式所涉及的图像处理***100进行说明。第九实施方式与第六实施方式相比，将由复原信息获取单元获取的信息是RAW数据与中间数据的差数据这一方面更具体化。即，在第九实施方式中，发送侧装置101中的(参照图24)复原信息获取部205B所获取的信息是RAW数据与中间数据的差数据。能够通过对RAW数据与中间数据进行比较而获取差数据。利用该差数据，能够在第一接收侧装置102中的复原处理部305B(参照图26)和第二接收侧装置103中的第二复原处理部403B中根据RAW数据生成中间数据。
在第九实施方式中，特别是，利用发送侧装置101的复原信息获取部205B的处理获取RAW数据与中间数据的差数据。由此，第一和第二接收侧装置102和103中进行的第一复原处理部(305B)和第二复原处理部(403B)能够高效地进行，并能够充分地有效利用第一接收侧装置102的图像处理性能，能够与新的滤色器排列对应。
对本发明的第九其他实施方式所涉及的图像处理***100进行说明。第九实施方式与第六实施方式相比，将由复原信息获取单元获取的信息是第一前处理的处理内容这一方面更具体化。即，在第九实施方式中，发送侧装置101中的(参照图24)复原信息获取部205B所获取的信息是第一前处理的处理内容。利用该处理内容，能够在第一接收侧装置102中的复原处理部305B(参照图26)和第二接收侧装置103中的第二复原处理部403B中根据RAW数据生成中间数据。
在第九实施方式中，特别是，通过发送侧装置101的复原信息获取部205B的处理获取前处理的处理内容。由此，在第一和第二接收侧装置102和103中进行的第一复原处理部(305B)和第二复原处理部(403B)能够高效地运行，并能够充分地有效利用第一接收侧装置102的图像处理性能，能够与新的滤色器排列对应。
[第十实施方式]
图36是表示本发明的第十三实施方式的图像处理***100中的第一接收侧装置102的功能框图。另外，对与第一实施方式共通的部分附加相同的附图标记，其详细的说明省略。
图36所示的第一接收侧装置102的功能框图与图4所示的第一接收侧装置102的功能框图相比，不同之处在于增加了第三后处理部202C和图像数据选择部204C。
第三后处理部202C从第一输入部302A接收第一三面颜色数据。在第三后处理部202C中，对所得到的第一三面颜色数据进行后处理。在此所谓的后处理实质上与第一后处理相同。
在图像数据选择部204C中，对从第一后处理部308A得到的记录用或者显示用图像数据、或者从第三后处理部202C得到的记录用或者显示用图像数据进行选择。将由图像数据选择部204C所选择的数据向图像数据记录部或者显示部310B发送。
在第十实施方式中，特别是，利用第一接收侧装置102的、第三后处理部202C和图像数据选择部204C的处理进行两***的图像处理，并选择该结果。由此，在由第一接收侧装置102进行的处理中增加选择项，因此能够充分地有效利用第一接收侧装置102的图像处理性能，并能够与新的滤色器排列对应。
[第十一实施方式]
图37是表示本发明的第十一实施方式的图像处理***100中的发送侧装置101的功能框图的图。另外，对与第三实施方式共通的部分附加相同的附图标记，其详细的说明省略。
图37所示的发送侧装置101的功能框图与图12所示的发送侧装置101的功能框图相比，不同之处在于具有选择部302C且没有中间数据赋予部702A。在选择部302C中，对从第一去马赛克算法处理部206A得到的第一三面颜色数据、或者从前处理部204A得到的中间数据进行选择。其后，将所选择的数据发送到输出部208A。第十一实施方式能够适当适用于其他实施方式。例如，能够在第四实施方式的发送侧装置101设置与上述同样的选择部302C(第十二实施方式)，能够在第五实施方式的发送侧装置101设置选择部302C(第十三实施方式)，能够在第六实施方式的发送侧装置101设置选择部302C(第十四实施方式)。
在第十一到第十四实施方式中，特别是，通过在发送侧装置101设置选择部302C(第十四实施方式的情况下)，能够对由发送侧装置101输出的信息进行选择。由此，能够减少发送侧装置101的输出数据。
[第十五实施方式]
图38表示本发明的第十五实施方式的图像处理***100中的第一接收侧装置102。图38所示的第一接收侧装置102与图26所示的第一接收侧装置102相比，不同之处在于具备RAW像素校正处理部405C、第三后处理部306C和图像数据选择部204C。
RAW像素校正处理部405C在从发送侧装置101发送来的第一三面颜色数据中，进行由中间数据置换RAW数据的像素的处理。即，在RAW像素校正处理部405C中，进行如下处理：利用由第一复原处理部(305B)得到的中间数据对RAW数据中存在颜色而原封不动地使用于第一三面颜色数据的数据(像素)(从图1D(b)到图1D(d)中附加了阴影的部位)进行置换。将通过进行RAW像素校正处理而得到的第四三面颜色数据向第三后处理部306C发送。
在第三后处理部306C中，对所得到的三面颜色数据进行后处理。在此所谓的后处理实质上与第一后处理相同。
在图像数据选择部204C中，对从第一后处理部308B得到的图像数据、或者从第三后处理部306C得到的图像数据进行选择。将所选择的图像数据发送到图像数据记录部或者显示部310B。
在第十五实施方式中，特别是，在第一接收侧装置102，利用RAW像素校正处理部405C、第三后处理部306C和图像数据选择部204C的处理，从两***获取并选择图像数据。由此，由于在图像数据存在选择的余地，因此能够充分地有效利用第一接收侧装置102的图像处理性能，并能够与新的滤色器排列对应。
[构成图像***的装置]
作为本发明的其他实施方式，具有构成本发明的图像处理***100的发送侧装置101。另外，作为本发明的其他实施方式，具有构成本发明的图像处理***100的接收侧装置。据此，即使对由新的滤色器排列得到的数据也能够进行适当的处理，能够降低接收侧装置的性能差对画质产生的影响，并能够充分地有效利用接收侧装置的性能。
另外，附图中记载的控制部214A和214B表示最广泛的意思中的控制。
另外，存在控制部214A和214B利用预先规定的条件自动地对各部进行控制的情况、由用户输入条件并利用该条件对各部进行控制的情况等。
在附图和正文中存在以RGB和三面颜色数据的一个例子而记载的情况，但是三面颜色数据不限于RGB数据，只要是要对图像进行表现的数据即可。
在附图和正文中记载的选择和选择部中，也存在由用户进行选择的情况，但是也存在利用预先赋予的条件自动地进行的选择。
以上，作为本发明的摄影装置的实施方式，对数码相机进行了说明，但是摄影装置的结构不限于此。作为本发明的其他摄影装置，例如，能够设为内置型或者外附带型的PC用相机、或者以下所说明那样的具体摄影功能的便携式终端装置。
作为本发明的摄影装置的一实施方式即便携式终端装置，例如，能够列举出手机、智能电话、PDA(Personal Digital Assistants)、便携式游戏机。以下，以智能电话为例子进行列举，参照附图详细地进行说明。
图39是对作为本发明的摄影装置的一实施方式的智能电话1C的外观进行表示的图。图39所示的智能电话1C具备平板状的框体2C，并在框体2C的一面具备作为显示部的显示面板21C和作为输入部的操作面板22C成为一体的显示输入部20C。另外，所涉及的框体2C具备扬声器31C、麦克风32C、操作部40C和相机部41C。另外，框体2C的结构不限于此，例如，也能够采用显示部和输入部独立的结构，或者采用具有折叠构造、滑动机构的结构。
图40是对图39所示的智能电话1C的结构进行表示的框图。如图40所示，作为智能电话的主要的结构要素，具备无线通信部10C、显示输入部20C、通话部30C、操作部40C、相机部41C、存储部50C、外部输入输出部60C、GPS(Global Positioning System)接收部70C、移动传感器部80C、电源部90C和主控制部100C。另外，作为智能电话1C的主要的功能，具备进行经由基地站装置BS和移动通信网NW的移动无线通信的无线通信功能。
无线通信部10C按照主控制部100C的指示，对收纳于移动通信网NW的基地站装置BS进行无线通信。使用所涉及的无线通信，进行声音数据、图像数据等各种文件数据、电子邮件数据等的收发、Web数据、流数据等的接收。
显示输入部20C是利用主控制部100C的控制对图像(静止图像和动画图像)、文字信息等进行显示而视觉地向用户传递信息并且检测与所显示的信息对应的用户操作的所谓触摸面板，具备显示面板21C和操作面板22C。
显示面板21C使用LCD(Liquid Crystal Display：液晶显示器)，OELD(Organic Electro－Luminescence Display：有机电激光显示器)等作为显示装置。操作面板22C是对在显示面板21C的显示面上显示的图像能够视觉确认地进行载置并能够对由用户的手指、尖笔所操作的一个或者多个坐标进行检测的装置。如果由用户的手指、尖笔对所涉及的装置进行操作，则将由于操作而产生的检测信号输出到主控制部100C。接下来，主控制部100C基于接收到的检测信号，对显示面板21C上的操作位置(坐标)进行检测。
如图39所示，作为本发明的摄影装置的一实施方式而例示的智能电话1C的显示面板21C和操作面板22C成为一体而构成显示输入部20C，但是操作面板22C成为对显示面板21C完全地进行覆盖那样的配置。在采用所涉及的配置的情况下，操作面板22C对显示面板21C外的区域也具备检测用户操作的功能。换言之，操作面板22C也可以具备关于与显示面板21C重合的重叠部分的检测区域(以下，称作显示区域)和关于除此以外的与显示面板21C不重合的外缘部分的检测区域(以下，称作非显示区域)。
另外，虽然也可以使显示区域的大小和显示面板21C的大小完全一致，但是未必一定使两者一致。另外，操作面板22C也可以具备外缘部分和除此以外的内侧部分这两个感应区域。此外，根据框体2C的大小等而适当设计外缘部分的宽度。此外，另外，作为利用操作面板22C采用的位置检测方式，能够列举出矩阵开关方式、电阻膜方式、表面弹性波方式、红外线方式、电磁感应方式、静电电容方式等，也能够采用任一方式。
通话部30C具备扬声器31C、麦克风32C，将通过麦克风32C而输入的用户的声音转换为能够由主控制部100C处理的声音数据而输出到主控制部100C，或者通过对由无线通信部10C或外部输入输出部60C接收到的声音数据进行解码而从扬声器31C输出。另外，图39所示，例如，能够将扬声器31C搭载在与设置有显示输入部20C的面相同的面，将麦克风32C搭载在框体2C的侧面。
操作部40C是使用了键开关等的硬件键，接受来自用户的指示。例如，如图39所示，操作部40C是如下那样的按压按钮式的开关：搭载在智能电话1C的框体2C的侧面，若利用手指等按下则接通，若使手指离开则利用弹簧等的复原力而成为断开状态。
存储部50C对主控制部100C的控制程序、控制数据、应用软件、与通信对方的名称、电话号码等建立了对应关系的地址数据、所收发的电子邮件的数据、利用Web浏览下载的Web数据、已下载的内容数据进行存储，另外对流数据等暂时性地进行存储。另外，存储部50C由与智能电话内置的内部存储部51C和具有装卸自如的外部存储器插槽的外部存储部52C构成。另外，构成存储部50C的各个内部存储部51C和外部存储部52C使用闪存型(flash memory type)、硬盘型(harddisk type)、多媒体卡微型(multimedia card micro type)、卡型存储器(例如，MicroSD(注册商标)存储器等)、RAM(Random AccessMemory：随机存储器)、ROM(Read Only Memory：只读存储器)等存储介质而实现。
外部输入输出部60C起到与连接于智能电话1C的所有外部设备的接口的作用，用于通过通信等(例如通用串行总线(USB)、IEEE1394等)或者网络(例如互联网、无线LAN、蓝牙Bluetooth(注册商标)、RFID(Radio Frequency Identification：无线射频识别)、红外线通信(Infrared Data Association：IrDA)(注册商标)、UWB(Ultra Wideband：超宽带)(注册商标)、紫蜂(ZigBee)(注册商标)等)与其他外部设备直接或者间接地连接。
作为与智能电话1C连接的外部设备，例如具有：有/无线头戴式耳机、有/无线外部充电器、有/无线数据端口、经由卡插座而连接的存储卡(Memory card)、SIM(Subscriber Identity Module Card：用户识别模块卡)/UIM(User Identity Module Card：用户识别模块卡)卡、经由音频/视频I/O(Input/Output)端子而连接的外部音频/视频设备、无线连接的外部音频/视频设备、有/无线连接的智能电话、有/无线连接的个人计算机、有/无线连接的PDA、有/无线连接的个人计算机、耳机等。外部输入输出部能够将从这种外部设备接受了传送后的数据传递到智能电话1C的内部的各结构要素，或能够将智能电话1C的内部的数据传送到外部设备。
GPS接收部70C按照主控制部100C的指示，接收从GPS卫星ST1～STn发送的GPS信号，执行基于接收到的多个GPS信号的测位运算处理，对由该智能电话1C的纬度、经度、高度构成的位置进行检测。GPS接收部70C在能够从无线通信部10C、外部输入输出部60C(例如无线LAN)获取位置信息时，也能够使用该位置信息而对位置进行检测。
移动传感器部80C例如具备三轴的加速度传感器等，按照主控制部100C的指示，对智能电话1C的物理性的移动进行检测。通过对智能电话1C的物理性的移动进行检测，能够对智能电话1C的移动方向、加速度进行检测。将所涉及的检测结果输出到主控制部100C。
电源部90C按照主控制部100C的指示，向智能电话1C的各部供给蓄电池(未图示)所蓄积的电力。
主控制部100C具备微处理器，按照存储部50C所存储的控制程序、控制数据而动作，对智能电话1C的各部集中地进行控制。另外，主控制部100C为了通过无线通信部10C进行声音通信、数据通信，而具备对通信***的各部进行控制的移动通信控制功能和应用处理功能。
主控制部100C按照存储部50C所存储的应用软件进行动作从而实现应用处理功能。作为应用处理功能，例如，具有对外部输入输出部60C进行控制而与相向设备进行数据通信的红外线通信功能、进行电子邮件的收发的电子邮件功能、对Web网页进行阅览的Web浏览功能等。
另外，主控制部100C具备基于接收数据、已下载的流数据等图像数据(静止图像、动画图像的数据)将映像在显示输入部20C显示等的图像处理功能。所谓图像处理功能，是指主控制部100C对上述图像数据进行解码、对所涉及的解码结果实施图像处理且在显示输入部20C显示图像的功能。
此外，主控制部100C执行对显示面板21C的显示控制和对通过了操作部40C、操作面板22C的用户操作进行检测的操作检测控制。
通过显示控制的执行，主控制部100C对用于起动应用软件的图标、滚动条等软件键进行显示或对用于创建电子邮件的窗口进行显示。另外，所谓滚动条是指用于针对没有收纳在显示面板21C的显示区域的较大的图像等接受使图像的显示部分移动的指示的软件键。
另外，通过操作检测控制的执行，主控制部100C对通过了操作部40C的用户操作进行检测，或者通过操作面板22C接受对上述图标的操作、对上述窗口的输入栏的文字列的输入，或者接受通过了滚动条的显示图像的滚动要求。
此外，通过操作检测控制的执行，主控制部100C具备如下的触摸面板控制功能：判定对操作面板22C的操作位置是与显示面板21C重合的重叠部分(显示区域)还是除此以外的不与显示面板21C重合的外缘部分(非显示区域)，而对操作面板22C的感应区域、软件键的显示位置进行控制。
另外，主控制部100C也能够检测对操作面板22C的手势操作，根据检测出的手势操作来执行预先设定的功能。所谓手势操作，并非以往的单纯的触摸操作，而是利用手指等描绘轨迹或同时指定多个位置、或将它们组合而从多个位置对至少一个位置描绘轨迹的操作。
相机部41C是使用CMOS(Complementary Metal OxideSemiconductor)、CCD(Charge－Coupled Device)等摄像元件105进行电子摄影的数码相机。另外，相机部41C能够通过主控制部100C的控制将通过摄像而得到的图像数据转换为例如JPEG(JointPhotographic coding Experts Group：联合图像专家小组)等压缩后的图像数据并记录于存储部50C，或者通过输入输出部60C、无线通信部10C而输出。在图39所示的智能电话1C中，将相机部41C搭载在与显示输入部20C相同的面，但是相机部41C的搭载位置不限于此，也可以搭载于显示输入部20C的背面，或者也可以搭载多个相机部41C。另外，在搭载有多个相机部41C的情况下，也能够对用于摄影的相机部41C进行切换而单独地进行摄影，或者同时使用多个相机部41C而进行摄影。
另外，相机部41C能够利用于智能电话1C的各种功能。例如，能够在显示面板21C显示由相机部41C获取的图像、作为操作面板22C的操作输入之一而利用相机部41C的图像。另外，在GPS接收部70C对位置进行检测时，也能够参照来自相机部41C的图像对位置进行检测。此外，也能够参照来自相机部41C的图像，不使用三轴的加速度传感器，或者与三轴的加速度传感器并用，对智能电话1C的相机部41C的光轴方向进行判断，对当前的使用环境进行判断。不必说也能够在应用软件内利用来自相机部41C的图像。
此外，也能够向静止画面或者动画的图像数据附加由GPS接收部70C获取的位置信息、由麦克风32C获取的声音信息(也可以利用主控制部等进行声音文本转换而成为文本信息)、由移动传感器部80C获取的姿势信息等并记录于存储部50C，或者通过输入输出部60C、无线通信部10C而输出。
以上，对本发明所涉及的图像处理***和发送侧装置及接收侧装置的实施方式进行了说明，但是在此记载的内容不过是本发明的实施方式的例示，并非限于此。另外，在说明中，关于记载为部的内容，在概念上也包括单元。
100…图像处理***，101…发送侧装置，102…第一接收侧装置，103…第二接收侧装置，104…透镜，105…摄像元件，202A…RAW数据获取部，202B…RAW数据获取部，202C…第三后处理部，204A…前处理部，204B…第一前处理部，204C…图像数据选择部，205B…复原信息获取部，206A…第一去马赛克算法处理部，206B…第一去马赛克算法处理部，208A…输出部，208B…输出部，210A…信息赋予部，210B…信息赋予部，212A…发送部，212B…发送部，214A…控制部，214B…控制部，302A…输入部，302B…输入部，302C…选择部，303B…RAW数据提取部，304A…中间数据提取部，304B…第二前处理部，305A…中间数据选择部，305B…第一复原处理部，306A…第二去马赛克算法处理部，306B…第二去马赛克算法处理部，306C…第三后处理部，308A…第一后处理部，308B…第一后处理部，310A…显示部，310B…显示部，312A…信息提取部，312B…信息提取部，314A…控制部，314B…控制部，402A…输入部，403B…复原处理部，404A…第二后处理部，405B…RAW像素校正处理部，405C…RAW像素校正处理部，406A…显示部，407B…第二后处理部，502A…第一前处理部，502B…RAW数据赋予部，503B…中间数据赋予部，504A…复原信息获取部，602A…复原处理部，602B…RAW数据选择部，603A…RAW数据选择部，603B…中间数据选择部，604A…第二前处理部，702A…中间数据赋予部，902A…RAW数据赋予部，1C…智能电话，2C…框体，10C…无线通信部，20C…显示输入部，21C…显示面板，22C…操作面板，30C…通话部，31C…扬声器，32C…麦克风，40C…操作部，41C…相机部，50C…存储部，51C…内部存储部，52C…外部存储部，60C…输入输出部，60C…外部输入输出部，70C…接收部，70C…GPS接收部，80C…移动传感器部，90C…电源部，100C…主控制部

Claims (24)

1.一种图像处理***，由发送侧装置及RAW显影对应的第一接收侧装置和RAW显影非对应的第二接收侧装置中的至少一方的接收侧装置构成，
所述发送侧装置具备：
RAW数据获取单元，从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取与所述滤色器排列对应的未处理的RAW数据；
前处理单元，通过对所述RAW数据进行前处理而生成去马赛克算法处理前的中间数据；
第一去马赛克算法处理单元，对所述中间数据进行去马赛克算法处理，生成第一三面颜色数据；及
输出单元，向所述第一三面颜色数据赋予用于确定各色数据中的所述中间数据的像素位置的配置信息并输出，
所述第一接收侧装置具备：
第一输入单元，输入所述第一三面颜色数据和所述配置信息；
中间数据提取单元，基于所述配置信息从所述第一三面颜色数据提取所述中间数据；
第二去马赛克算法处理单元，对提取出的所述中间数据进行去马赛克算法处理，生成第二三面颜色数据；及
第一后处理单元，通过对所述第二三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据，
所述第二接收侧装置具备：
第二输入单元，输入所述第一三面颜色数据；及
第二后处理单元，通过对所输入的所述第一三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据。
2.一种图像处理***，由发送侧装置及RAW显影对应的第一接收侧装置和RAW显影非对应的第二接收侧装置中的至少一方的接收侧装置构成，
所述发送侧装置具备：
RAW数据获取单元，从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取与所述滤色器排列对应的未处理的RAW数据；
第一前处理单元，通过对所述RAW数据进行前处理而生成去马赛克算法处理前的第一中间数据；
复原信息获取单元，获取用于从所述第一中间数据向所述RAW数据复原的复原信息；
第一去马赛克算法处理单元，对所述第一中间数据进行去马赛克算法处理，生成第一三面颜色数据；及
输出单元，向所述第一三面颜色数据赋予用于确定各色数据中的所述第一中间数据的像素位置的配置信息和所述复原信息并输出，
所述第一接收侧装置具备：
第一输入单元，输入所述第一三面颜色数据、所述配置信息和所述复原信息；
中间数据提取单元，基于所述配置信息从所述第一三面颜色数据提取所述第一中间数据；
复原处理单元，基于所述复原信息从提取出的所述第一中间数据复原所述RAW数据；
第二前处理单元，通过对由所述复原处理单元复原的所述RAW数据进行前处理而生成去马赛克算法处理前的第二中间数据；
第二去马赛克算法处理单元，对所述第二中间数据进行去马赛克算法处理，生成第二三面颜色数据；及
第一后处理单元，通过对所述第二三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据，
所述第二接收侧装置具备：
第二输入单元，输入所述第一三面颜色数据；及
第二后处理单元，通过对所输入的所述第一三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据。
3.根据权利要求1所述的图像处理***，其中，
所述发送侧装置的输出单元向所述第一三面颜色数据赋予所述配置信息和所述中间数据并输出，
向所述第一接收侧装置的输入单元输入所述第一三面颜色数据、所述配置信息和所述中间数据，
具备中间数据选择单元，选择从所述发送侧装置发送来的所述中间数据或者从所述中间数据提取单元得到的中间数据，
所述第二去马赛克算法处理单元对由所述中间数据选择单元所选择的中间数据进行去马赛克算法处理，生成所述第二三面颜色数据。
4.根据权利要求2所述的图像处理***，其中，
所述发送侧装置的输出单元向所述第一三面颜色数据赋予所述配置信息和所述RAW数据并输出，
所述第一接收侧装置的输入单元输入所述第一三面颜色数据、所述配置信息和所述RAW数据，
具备RAW数据选择单元，选择从所述发送侧装置发送来的所述RAW数据或者从所述复原处理单元得到的RAW数据，
所述第二前处理单元通过由所述RAW数据选择单元选择的RAW数据而生成第二中间数据。
5.一种图像处理***，由发送侧装置及RAW显影对应的第一接收侧装置和RAW显影非对应的第二接收侧装置中的至少一方的接收侧装置构成，
所述发送侧装置具备：
RAW数据获取单元，从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取与所述滤色器排列对应的未处理的RAW数据；
第一前处理单元，通过对所述RAW数据进行前处理而生成去马赛克算法处理前的第一中间数据；
第一去马赛克算法处理单元，对所述第一中间数据进行去马赛克算法处理而生成三面颜色数据，取代所述三面颜色数据中的中间数据而配置所述RAW数据，生成第一三面颜色数据；及
输出单元，向所述第一三面颜色数据赋予用于确定各色数据中的所述RAW数据的像素位置的配置信息并输出，
所述第一接收侧装置具备：
输入单元，输入所述第一三面颜色数据和所述配置信息；
RAW数据提取单元，基于所述配置信息从所述第一三面颜色数据提取所述RAW数据；
第二前处理单元，对由所述RAW数据提取单元提取出的所述RAW数据进行前处理而生成第二中间数据；
第二去马赛克算法处理单元，对所述第二中间数据进行去马赛克算法处理而生成第二三面颜色数据；及
第一后处理单元，通过对所述第二三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据，
所述第二接收侧装置具备：
第二输入单元，输入所述第一三面颜色数据；及
第二后处理单元，通过对所输入的所述第一三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据。
6.一种图像处理***，由发送侧装置及RAW显影对应的第一接收侧装置和RAW显影非对应的第二接收侧装置中的至少一方的接收侧装置构成，
所述发送侧装置具备：
RAW数据获取单元，从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取与所述滤色器排列对应的未处理的RAW数据；
第一前处理单元，通过对所述RAW数据进行前处理而生成去马赛克算法处理前的第一中间数据；
复原信息获取单元，获取用于从所述RAW数据向所述第一中间数据复原的复原信息；
第一去马赛克算法处理单元，对所述第一中间数据进行去马赛克算法处理而生成三面颜色数据，取代所述三面颜色数据中的中间数据而配置所述RAW数据，生成第一三面颜色数据；及
输出单元，向所述第一三面颜色数据赋予用于确定各色数据中的所述RAW数据的像素位置的配置信息和所述复原信息并输出，
所述第一接收侧装置具备：
第一输入单元，输入所述第一三面颜色数据、所述配置信息和所述复原信息；
RAW数据提取单元，基于所述配置信息从所述第一三面颜色数据提取所述RAW数据；
第一复原处理单元，基于所述复原信息对由所述RAW数据提取单元提取出的所述RAW数据进行前处理而生成第二中间数据；
第二去马赛克算法处理单元，对所述第二中间数据进行去马赛克算法处理，生成第二三面颜色数据；及
第一后处理单元，通过对所述第二三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据，
所述第二接收侧装置具备：
输入单元，输入所述第一三面颜色数据、所述配置信息和所述复原信息；
RAW数据提取单元，基于所述配置信息从所述第一三面颜色数据提取所述RAW数据；
第二复原处理单元，基于所述复原信息对由所述RAW数据提取单元提取出的所述RAW数据进行前处理而生成第三中间数据；
RAW像素校正处理单元，进行利用所述第三中间数据来置换所述第一三面颜色数据中的RAW像素的校正，生成第三三面颜色数据；及
第二后处理单元，通过对所述第三三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据。
7.根据权利要求5所述的图像处理***，其中，
所述发送侧装置的输出单元具备向所述第一三面颜色数据赋予所述配置信息和所述RAW数据并输出的输出单元，
所述第一接收侧装置的输入单元输入所述第一三面颜色数据、所述配置信息和所述RAW数据，
具备RAW数据选择单元，选择所述RAW数据或者从所述RAW数据提取单元得到的RAW数据。
8.根据权利要求6所述的图像处理***，其中，
所述发送侧装置的输出单元具备向所述第一三面颜色数据赋予所述配置信息、所述复原信息和所述第一中间数据并输出的输出单元，
所述第一接收侧装置的输入单元输入所述第一三面颜色数据、所述配置信息、所述复原信息和所述第一中间数据，
具备中间数据选择单元，选择所述第一中间数据或者所述第二中间数据。
9.根据权利要求2或6所述的图像处理***，其中，
所述发送侧装置的所述复原信息获取单元获取的所述复原信息是所述RAW数据与所述第一中间数据的差数据或者是所述前处理的处理内容。
10.根据权利要求1～9中任一项所述的图像处理***，其中，
所述第一接收侧装置具备第三后处理单元，通过对所述第一三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据，
具备选择单元，选择从所述第一后处理单元得到的记录用的所述图像数据或显示用的所述图像数据或者从所述第三后处理单元得到的记录用的所述图像数据或显示用的所述图像数据。
11.根据权利要求3所述的图像处理***，其中，
所述发送侧装置具备选择单元，选择所述第一三面颜色数据和所述中间数据中的至少一个数据，
所述输出单元向由所述选择单元所选择的至少一个数据赋予所述配置信息并输出。
12.根据权利要求4所述的图像处理***，其中，
所述发送侧装置具备选择单元，选择所述第一三面颜色数据和所述RAW数据中的至少一个数据，
所述输出单元向由所述选择单元所选择的至少一个数据赋予所述配置信息和所述复原信息并输出。
13.根据权利要求8所述的图像处理***，其中，
所述发送侧装置选择所述第一三面颜色数据和所述RAW数据中的至少一个数据，
所述输出单元向由所述中间数据选择单元所选择的至少一个数据赋予所述配置信息并输出。
14.根据权利要求9所述的图像处理***，其中，
所述发送侧装置具备选择单元，选择所述第一三面颜色数据和所述第一中间数据中的至少一个数据，
所述输出单元向由所述选择单元所选择的至少一个数据赋予所述配置信息和所述复原信息并输出。
15.根据权利要求6所述的图像处理***，其中，
所述第一接收侧装置具备：
RAW像素校正处理单元，进行使用从所述第一复原处理单元得到的所述第二中间数据来置换所述第一三面颜色数据中的所述RAW像素的校正，生成第四三面颜色数据；
第三后处理单元，通过对所述第四三面颜色数据进行第三后处理而生成记录用的图像数据或者显示用的图像数据；及
选择单元，选择从所述第一后处理单元得到的记录用的图像数据或者显示用的图像数据或者从所述第三后处理单元得到的记录用的图像数据或者显示用的图像数据。
16.一种发送侧装置，输出将由摄像元件得到的数据处理为能够图像显示或者记录的数据用的数据和信息，
所述发送侧装置具备：
RAW数据获取单元，从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取与所述滤色器排列对应的未处理的RAW数据；
前处理单元，通过对所述RAW数据进行前处理而生成去马赛克算法处理前的中间数据；
去马赛克算法处理单元，对所述中间数据进行去马赛克算法处理，生成三面颜色数据；及
输出单元，向所述三面颜色数据赋予用于确定各色数据中的所述中间数据的像素位置的配置信息并输出。
17.一种发送侧装置，输出将由摄像元件得到的数据处理为能够图像显示或者记录的数据用的数据和信息，
所述发送侧装置具备：
RAW数据获取单元，从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取与所述滤色器排列对应的未处理的RAW数据；
前处理单元，通过对所述RAW数据进行前处理而生成去马赛克算法处理前的中间数据；
复原信息获取单元，获取用于从所述中间数据向所述RAW数据复原的复原信息；
去马赛克算法处理单元，对所述中间数据进行去马赛克算法处理，生成三面颜色数据；及
输出单元，向所述三面颜色数据赋予用于确定各色数据中的所述中间数据的像素位置的配置信息和所述复原信息并输出。
18.一种发送侧装置，输出将由摄像元件得到的数据处理为能够图像显示或者记录的数据用的数据和信息，
所述发送侧装置具备：
RAW数据获取单元，从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取与所述滤色器排列对应的未处理的RAW数据；
前处理单元，通过对所述RAW数据进行前处理而生成去马赛克算法处理前的中间数据；
去马赛克算法处理单元，对所述中间数据进行去马赛克算法处理而生成三面颜色数据，取代所述三面颜色数据中的中间数据而配置所述RAW数据，生成三面颜色数据；及
输出单元，向所述三面颜色数据赋予用于确定各色数据中的所述RAW数据的像素位置的配置信息并输出。
19.一种发送侧装置，输出将由摄像元件得到的数据处理为能够图像显示或者记录的数据用的数据和信息，
所述发送侧装置具备：
RAW数据获取单元，从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取与所述滤色器排列对应的未处理的RAW数据；
前处理单元，通过对所述RAW数据进行前处理而生成去马赛克算法处理前的中间数据；
复原信息获取单元，获取用于从所述RAW数据向所述中间数据复原的复原信息；
去马赛克算法处理单元，对所述中间数据进行去马赛克算法处理而生成三面颜色数据，取代所述三面颜色数据中的中间数据而配置所述RAW数据，生成三面颜色数据；及
输出单元，向所述三面颜色数据赋予用于确定各色数据中的所述RAW数据的像素位置的配置信息和所述复原信息并输出。
20.一种接收侧装置，接收第一三面颜色数据及配置信息，所述第一三面颜色数据是如下得到的：通过对从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取的与所述滤色器排列对应的未处理的RAW数据进行前处理而生成去马赛克算法处理前的中间数据、通过对所述中间数据进行去马赛克算法处理而生成第一三面颜色数据，所述配置信息是向所述第一三面颜色数据赋予的用于确定各色数据中的所述中间数据的像素位置的信息，
所述接收侧装置具备：
第一输入单元，输入所述第一三面颜色数据和所述配置信息；
中间数据提取单元，基于所述配置信息从所述第一三面颜色数据提取所述中间数据；
第二去马赛克算法处理单元，对提取出的所述中间数据进行去马赛克算法处理，生成第二三面颜色数据；及
后处理单元，通过对所述第二三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据。
21.一种接收侧装置，接收第一三面颜色数据、配置信息及复原信息，所述第一三面颜色数据是如下得到的：通过对从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取的与所述滤色器排列对应的未处理的RAW数据进行前处理而生成去马赛克算法处理前的第一中间数据、通过对所述第一中间数据进行去马赛克算法处理而生成第一三面颜色数据，所述配置信息是向所述第一三面颜色数据赋予的用于确定各色数据中的所述第一中间数据的像素位置的信息，所述复原信息是向所述第一三面颜色数据赋予的用于从所述第一中间数据向所述RAW数据复原的信息，
所述接收侧装置具备：
第一输入单元，输入所述第一三面颜色数据、所述配置信息和所述复原信息；
中间数据提取单元，基于所述配置信息从所述第一三面颜色数据提取所述第一中间数据；
复原处理单元，基于所述复原信息从提取出的所述第一中间数据复原所述RAW数据；
第二前处理单元，通过对由所述复原处理单元复原的所述RAW数据进行前处理而生成去马赛克算法处理前的第二中间数据；
第二去马赛克算法处理单元，对所述第二中间数据进行去马赛克算法处理，生成第二三面颜色数据；及
后处理单元，通过对所述第二三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据。
22.一种接收侧装置，接收第一三面颜色数据及配置信息，所述第一三面颜色数据是如下得到的：通过对从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取的与所述滤色器排列对应的未处理的RAW数据进行前处理而生成去马赛克算法处理前的第一中间数据、通过对所述第一中间数据进行去马赛克算法处理而生成三面颜色数据、通过取代所述三面颜色数据中的中间数据而配置所述RAW数据从而得到第一三面颜色数据，所述配置信息是向所述第一三面颜色数据赋予的用于确定各色数据中的所述RAW数据的像素位置的信息，
所述接收侧装置具备：
输入单元，输入所述第一三面颜色数据和所述配置信息；
RAW数据提取单元，基于所述配置信息从所述第一三面颜色数据提取所述RAW数据；
第二前处理单元，对由所述RAW数据提取单元提取出的所述RAW数据进行前处理而生成第二中间数据；
第二去马赛克算法处理单元，对所述第二中间数据进行去马赛克算法处理，生成第二三面颜色数据；及
后处理单元，通过对所述第二三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据。
23.一种接收侧装置，接收第一三面颜色数据、配置信息及复原信息，所述第一三面颜色数据是如下得到的：通过对从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取的与所述滤色器排列对应的未处理的RAW数据进行前处理而生成去马赛克算法处理前的第一中间数据、通过对所述第一中间数据进行去马赛克算法处理而生成三面颜色数据、通过取代所述三面颜色数据中的中间数据而配置所述RAW数据从而得到第一三面颜色数据，所述配置信息是向所述第一三面颜色数据赋予的用于确定各色数据中的所述RAW数据的像素位置的信息，所述复原信息是向所述第一三面颜色数据赋予的用于从所述RAW数据向所述第一中间数据复原的信息，
所述接收侧装置具备：
第一输入单元，输入所述第一三面颜色数据、所述配置信息和所述复原信息；
RAW数据提取单元，基于所述配置信息从所述第一三面颜色数据提取所述RAW数据；
第一复原处理单元，基于所述复原信息对由所述RAW数据提取单元提取出的所述RAW数据进行前处理而生成第二中间数据；
第二去马赛克算法处理单元，对所述第二中间数据进行去马赛克算法处理，生成第二三面颜色数据；及
后处理单元，通过对所述第二三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据。
24.一种接收侧装置，接收第一三面颜色数据、配置信息及复原信息，所述第一三面颜色数据是如下得到的：通过对从在二维排列的多个像素上配置预定的滤色器排列的滤色器而成的单板式的彩色摄像元件获取的与所述滤色器排列对应的未处理的RAW数据进行前处理而生成去马赛克算法处理前的第一中间数据、通过对所述第一中间数据进行去马赛克算法处理而生成三面颜色数据、通过取代所述三面颜色数据中的中间数据而配置所述RAW数据从而得到第一三面颜色数据，所述配置信息是向所述第一三面颜色数据赋予的用于确定各色数据中的所述RAW数据的像素位置的信息，所述复原信息是向所述第一三面颜色数据赋予的用于从所述RAW数据向所述第一中间数据复原的信息，
所述接收侧装置具备：
输入单元，输入所述第一三面颜色数据、所述配置信息和所述复原信息；
RAW数据提取单元，基于所述配置信息从所述第一三面颜色数据提取所述RAW数据；
复原处理单元，基于所述复原信息对由所述RAW数据提取单元提取出的所述RAW数据进行前处理而生成第二中间数据；
RAW像素校正处理单元，进行利用所述第二中间数据来置换所述第一三面颜色数据中的RAW像素的校正，生成第二三面颜色数据；及
后处理单元，通过对所述第二三面颜色数据进行去马赛克算法处理后的处理而生成记录用的图像数据或者显示用的图像数据。
CN201380030444.3A 2012-06-13 2013-04-23 图像处理***、发送侧装置及接收侧装置 Pending CN104365090A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012133938 2012-06-13
JP2012-133938 2012-06-13
PCT/JP2013/061872 WO2013187127A1 (ja) 2012-06-13 2013-04-23 画像処理システム、送信側装置および受信側装置

Publications (1)

Publication Number Publication Date
CN104365090A true CN104365090A (zh) 2015-02-18

Family

ID=49757962

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380030444.3A Pending CN104365090A (zh) 2012-06-13 2013-04-23 图像处理***、发送侧装置及接收侧装置

Country Status (4)

Country Link
US (1) US9307211B2 (zh)
JP (1) JP5680799B2 (zh)
CN (1) CN104365090A (zh)
WO (1) WO2013187127A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115776532A (zh) * 2021-09-07 2023-03-10 荣耀终端有限公司 一种录像中抓拍图像的方法及电子设备

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI542224B (zh) 2014-09-22 2016-07-11 瑞昱半導體股份有限公司 影像訊號處理方法以及影像訊號處理裝置
JP6525718B2 (ja) * 2015-05-11 2019-06-05 キヤノン株式会社 画像処理装置、その制御方法、および制御プログラム
JP6888405B2 (ja) * 2017-05-10 2021-06-16 富士フイルムビジネスイノベーション株式会社 画像処理装置及びプログラム
TWI670708B (zh) * 2017-11-08 2019-09-01 瑞昱半導體股份有限公司 顏色偏移校正方法及裝置
CN115211104A (zh) * 2020-03-09 2022-10-18 索尼集团公司 文件处理设备、文件处理方法和程序

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1941842A (zh) * 2005-09-30 2007-04-04 精工爱普生株式会社 图像处理设备、图像处理方法以及图像处理程序
JP2007098897A (ja) * 2005-10-07 2007-04-19 Seiko Epson Corp プリンタ
CN101335900A (zh) * 2007-06-25 2008-12-31 安奇逻辑股份有限公司 图像处理装置、图像处理方法、程序和摄像装置
US20110149103A1 (en) * 2009-12-17 2011-06-23 Canon Kabushiki Kaisha Image processing apparatus and image pickup apparatus using same
CN102224736A (zh) * 2009-02-03 2011-10-19 松下电器产业株式会社 摄像装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3543928B2 (ja) * 1998-10-29 2004-07-21 三菱電機株式会社 画素数変換装置
JP2004304712A (ja) 2003-04-01 2004-10-28 Canon Inc 画像処理方法及び装置
JP4854748B2 (ja) * 2006-12-21 2012-01-18 パナソニック株式会社 現像サーバおよび現像方法
BRPI0809662A2 (pt) 2007-04-11 2014-10-14 Red Com Inc Câmaras de vídeo e métodos de gravação de vídeo de movimento com câmara e de processamento de imagens
US8085320B1 (en) * 2007-07-02 2011-12-27 Marvell International Ltd. Early radial distortion correction
JP2009147875A (ja) 2007-12-18 2009-07-02 Nikon Corp 画像読み取り表示装置
JP5341615B2 (ja) 2008-06-27 2013-11-13 キヤノン株式会社 情報処理装置及びその制御方法
JP2010226365A (ja) 2009-03-23 2010-10-07 Seiko Epson Corp ホワイトバランス処理装置、ホワイトバランス処理方法およびホワイトバランス処理プログラム
US9105078B2 (en) * 2012-05-31 2015-08-11 Apple Inc. Systems and methods for local tone mapping

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1941842A (zh) * 2005-09-30 2007-04-04 精工爱普生株式会社 图像处理设备、图像处理方法以及图像处理程序
JP2007098897A (ja) * 2005-10-07 2007-04-19 Seiko Epson Corp プリンタ
CN101335900A (zh) * 2007-06-25 2008-12-31 安奇逻辑股份有限公司 图像处理装置、图像处理方法、程序和摄像装置
CN102224736A (zh) * 2009-02-03 2011-10-19 松下电器产业株式会社 摄像装置
US20110149103A1 (en) * 2009-12-17 2011-06-23 Canon Kabushiki Kaisha Image processing apparatus and image pickup apparatus using same

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115776532A (zh) * 2021-09-07 2023-03-10 荣耀终端有限公司 一种录像中抓拍图像的方法及电子设备
CN115776532B (zh) * 2021-09-07 2023-10-20 荣耀终端有限公司 一种录像中抓拍图像的方法及电子设备

Also Published As

Publication number Publication date
US20150138398A1 (en) 2015-05-21
US9307211B2 (en) 2016-04-05
JPWO2013187127A1 (ja) 2016-02-04
JP5680799B2 (ja) 2015-03-04
WO2013187127A1 (ja) 2013-12-19

Similar Documents

Publication Publication Date Title
US20220207680A1 (en) Image Processing Method and Apparatus
CN104380168B (zh) 摄像装置及自动调焦方法
CN108605099B (zh) 用于终端拍照的方法及终端
CN104995911B (zh) 图像处理装置、摄影装置、滤波器生成装置、图像复原方法以及程序
US10003731B2 (en) Image element, and imaging device and imaging method using the same for achieving improved image quality regardless of an incident angle of light
CN104380706B (zh) 图像处理装置、摄像装置、计算机及图像处理方法
US10516860B2 (en) Image processing method, storage medium, and terminal
CN105103534B (zh) 摄像装置及校准方法
US9160990B2 (en) Solid-state imaging device, imaging apparatus, and driving method of a solid-state imaging device
CN108900750B (zh) 一种图像传感器及移动终端
CN104365090A (zh) 图像处理***、发送侧装置及接收侧装置
CN105075239B (zh) 复原滤波器生成装置以及方法、图像处理装置以及方法、摄像装置以及记录介质
CN107431760A (zh) 摄像装置、摄像装置的图像处理方法以及程序
CN104380727B (zh) 图像处理装置和图像处理方法
CN104813648A (zh) 图像处理装置、摄像装置、图像处理方法及图像处理程序
CN105009168A (zh) 复原滤波器生成装置以及方法、图像处理装置以及方法、摄像装置、程序以及记录介质
CN104704807A (zh) 图像处理装置、摄像装置、图像处理方法、程序及记录介质
CN104995904A (zh) 摄像装置
CN104247412B (zh) 图像处理装置、摄像装置、图像处理方法、记录介质以及程序
CN104221370A (zh) 图像处理装置、摄像装置以及图像处理方法
CN104272732B (zh) 图像处理装置、方法及摄像装置
CN104285437A (zh) 信号处理装置、摄像装置、信号校正方法
CN104796625A (zh) 照片的合成方法及照片合成装置
CN104584532B (zh) 图像处理装置、摄像装置、计算机、图像处理方法及程序
CN108370415B (zh) 图像处理装置及图像处理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20150218

RJ01 Rejection of invention patent application after publication