CN109218604A - 影像撷取装置、影像亮度调变方法及影像处理装置 - Google Patents

影像撷取装置、影像亮度调变方法及影像处理装置 Download PDF

Info

Publication number
CN109218604A
CN109218604A CN201810632018.1A CN201810632018A CN109218604A CN 109218604 A CN109218604 A CN 109218604A CN 201810632018 A CN201810632018 A CN 201810632018A CN 109218604 A CN109218604 A CN 109218604A
Authority
CN
China
Prior art keywords
those
block
image
blocks
sub
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810632018.1A
Other languages
English (en)
Other versions
CN109218604B (zh
Inventor
林栩永
吴诚昌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ability Enterprise Co Ltd
Original Assignee
Ability Enterprise Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ability Enterprise Co Ltd filed Critical Ability Enterprise Co Ltd
Publication of CN109218604A publication Critical patent/CN109218604A/zh
Application granted granted Critical
Publication of CN109218604B publication Critical patent/CN109218604B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/0007—Image acquisition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/04—Context-preserving transformations, e.g. by using an importance map
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B13/00—Optical objectives specially designed for the purposes specified below
    • G02B13/06—Panoramic objectives; So-called "sky lenses" including panoramic objectives having reflecting surfaces

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Studio Devices (AREA)
  • Optics & Photonics (AREA)
  • Image Processing (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Image Analysis (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Endoscopes (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明公开了一种影像撷取装置，包括第一镜头模块、第二镜头模块及运算模块。第一镜头模块及第二镜头模块分别提供第一影像及第二影像。运算模块将第一影像的第一左区块、第一右区块及第二影像的第二左区块、第二右区块分别划分为多个第一左子区块、第一右子区块、第二左子区块及第二右子区块。比较第一左子区块、第一右子区块、第二左子区块及第二右子区块的第一参数、第二参数及/或第三参数获得第一差异量、第二差异量及第三差异量，依据第一差异量、第二差异量及/或第三差异量获得总和权重值，依据总和权重值调变第一影像与第二影像的亮度。

Description

影像撷取装置、影像亮度调变方法及影像处理装置
技术领域
本发明涉及一种影像撷取装置、影像亮度调变方法及影像处理装置，特别是有关于可对多帧影像进行叠合/拼接的影像撷取装置、影像亮度调变方法及影像处理装置。
背景技术
1839年，人类史上第一台相机被发明出来。从此之后，人们透过相机捕捉美景与记录生活。时至今日，拍照已然成为现代人生活中重要的一环。而随着科技的发展，相机与影像处理技术的搭配，让照片中的画面有更多样化的呈现。
影像处理技术中，影像叠合(image stitching)/拼接技术是指将至少两张素材影像合成为一张广幅影像的技术。然而，当两张素材影像之间的亮度有差异时，会使得叠合/拼接后的广幅影像有不连续之感，而造成影像处理的效果不佳。
有鉴于此，如何提供一种影像撷取装置及影像亮度调变方法，已然成为业界努力的目标之一。
发明内容
为达到上述目的，本发明实施例揭露一种影像撷取装置，其包括一第一镜头模块、一第二镜头模块及一运算模块。第一镜头模块朝一第一方向撷取一第一影像，其中第一影像至少包括一第一左区块及一第一右区块。第二镜头模块朝一第二方向撷取一第二影像，其中第二影像至少包括一第二左区块及一第二右区块。运算模块分别将第一左区块、第一右区块、第二左区块及第二右区块划分为多个第一左子区块、多个第一右子区块、多个第二左子区块及多个第二右子区块；比较至少一组该些第一左子区块与该些第二右子区块的一第一参数、一第二参数及一第三参数的至少一者，以及比较对应该组的第一右子区块与该第二左子区块的应该组的该第一参数、该第二参数及/或第三参数，并获得至少一对应的第一差异量、对应的第二差异量及/或对应的第三差异量；以及，依据第一差异量、第二差异量及/或第三差异量获得一总和权重值，并依据总和权重值调变第一影像及/或第二影像的亮度。
为达到上述目的，本发明实施例揭露一种影像亮度调变方法。该方法适用于一种具有一运算模块的影像处理装置。该方法包括：提供一第一影像及一第二影像予运算模块，第一影像具有至少一第一左区块及一第一右区块，第二影像具有至少一第二左区块及至少一第二右区块；以及借助运算模块将第一左区块、第一右区块、第二左区块及第二右区块划分为多个第一左子区块、多个第一右子区块、多个第二左子区块及多个第二右子区块；比较该些第一左子区块与该些第二右子区块的多个第一参数、多个第二参数及/或多个第三参数，比较该些第一右子区块与该些第二左子区块的该些第一参数、该些第二参数及/或该些第三参数，并获得对应的多个第一差异量、多个第二差异量及/或多个第三差异量；依据该些第一差异量、该些第二差异量及/或该些第三差异量获得一总和权重值；以及，依据总和权重值调变第一影像与第二影像之间的亮度差异。
为达到上述目的，本发明实施例又揭露一种影像处理装置，其包括一储存模块及一运算模块。储存模块储存至少一第一影像及至少一第二影像，该第一影像至少包括一第一左区块及一第一右区块，该第二影像至少包括一第二左区块及一第二右区块。运算模块分别将该第一左区块、该第一右区块、该第二左区块及该第二右区块划分为多个第一左子区块、多个第一右子区块、多个第二左子区块及多个第二右子区块；比较至少一组该些第一左子区块与该些第二右子区块的一第一参数、一第二参数及一第三参数的至少一者，以及比较对应该组的该第一右子区块与该第二左子区块的应该组的该第一参数、该第二参数及/或该第三参数，并获得至少一对应的第一差异量、对应的第二差异量及/或对应的第三差异量；以及，依据该些第一差异量、该些第二差异量及/或该些第三差异量获得一总和权重值，并依据该总和权重值调变该第一影像及/或该第二影像的亮度。
为了对本发明的上述及其他方面有更佳的了解，下文特举实施例，并配合所附图式详细说明如下：
附图说明
图1绘示本发明一实施例的影像撷取装置的***方块图。
图2绘示图1的影像撷取装置的第一镜头模块与第二镜头模块的一实施例的的视角示意图。
图3绘示第一影像与第二影像的示意图。
图4A及4B绘示本发明一实施例的影像亮度调变方法的流程图。
图5至图7绘示本发明的一实施例的影像亮度调变方法的操作示意图。
图8绘示本发明的一实施例的权重值及总和权重值之间的关系图。
具体实施方式
以下结合附图和具体实施例对本发明进行详细描述，但不作为对本发明的限定。
图1绘示本发明一实施例的影像撷取装置的***方块图。如图1所示，影像撷取装置10至少包括一第一镜头模块102、一第二镜头模块104、一运算模块106及一储存模块108。其中，影像撷取装置10可以是数字装置、多镜头手持装置、多镜头通讯装置、全景取像装置、运动相机、车用取像装置或空中摄影装置，但不以此为限。
图2绘示图1的影像撷取装置10的第一镜头模块102与第二镜头模块104的一实施例的视角(field of view，FOV)示意图。如图1及图2所示，第一镜头模块102朝一第一方向D1撷取一第一影像，第二镜头模块104朝一第二方向D2撷取一第二影像，第二方向D2与第一方向D1可以是不同方向，即第一方向D1与第二方向D2之间的夹角为θ，且0度＜θ≦180度。其中，可定义第一方向D1左侧的水平虚线为0度，右侧的水平虚线为180度。
一实施例中，第一方向D1与第二方向D2之间的夹角实质可为180度或近似于180度(θ≒180度)，但不以此为限。第一镜头模块102与第二镜头模块104的视角范围可皆大于180度，例如第一镜头模块102与第二镜头模块104的视角范围是(180+2a)度，其中a为一大于0的实数。于本实施例中，第一镜头模块102提供一第一影像IMG1，第二镜头模块104提供一第二影像IMG2。
运算模块106电性连接第一镜头模块102、第二镜头模块104及储存模块108。运算模块106可对第一影像IMG1及第二影像IMG2的像素进行运算。进一步地，运算模块106可调整第一镜头模块102及/或第二镜头模块104的一影像撷取参数，以及/或者调整已取得的第一影像IMG1及/或第二影像IMG2的亮度值。一具体实施例中，运算模块106调整第一影像IMG1及/或第二影像IMG2的亮度值后，将第一影像IMG1及第二影像IMG2整合成一第三影像IMG3；另一具体实施例中，运算模块106先将第一影像IMG1及第二影像IMG2整合成一第三影像IMG3后，再调整原第一影像IMG1及/或原第二影像IMG2的亮度参数，其中运算模块106可借助拼接第一影像IMG1及第二影像IMG2的方式提供第三影像IMG3，但不用以限定本发明。
储存模块108电性连接第一镜头模块102、第二镜头模块104及运算模块106。第一影像IMG1、第二影像IMG2、第三影像IMG3及影像撷取装置10的设定资料与机电参数等皆可储存于储存模块108内，但不用以限定本发明。于另一实施例，第一影像IMG1、第二影像IMG2、第三影像IMG3的至少一者可储存在记忆体(未绘示)内；再一实施例中，储存模块108包括至少一记忆体(未绘示)。
图3绘示第一影像IMG1与第二影像IMG2的示意图。同时参照图2及图3，若第一镜头模块102与第二镜头模块104朝相背的方向撷取影像，即θ≒180度，则可对第一影像IMG1及第二影像IMG2重叠的影像区域进行影像处理，并获得第三影像IMG3。
此外，第一影像IMG1具有一第一主区块IMG1_M、一第一左区块IMG1_L及一第一右区块IMG1_R。第一左区块IMG1_L对应第一镜头模块102朝第一方向D1撷取到的视角范围为(0-a)度与(0+a)度之间的景物影像；第一右区块IMG1_R对应第一镜头模块102朝第一方向D1撷取到的视角范围为(180-a)度与(180+a)度之间的景物影像；第一主区块IMG1_M则是对应第一镜头模块102朝第一方向D1撷取到的视角范围为(0+a)度与(180-a)度之间的景物影像。
相似地，第二影像IMG2具有一第二主区块IMG2_M、一第二左区块IMG2_L及一第二右区块IMG2_R。第二左区块IMG2_L对应第二镜头模块104朝第二方向D2撷取到的视角范围为(180-a)度与(180+a)度之间的景物影像；第二右区块IMG2_R对应的是第二镜头模块104朝第二方向D2撷取到的视角范围为(0+a)度与(0-a)度之间的景物影像；第二主区块IMG2_M则是对应第一镜头模块104朝第二方向D2撷取到的视角范围为(0+a)度与(180-a)度之间的景物影像。
如图3所示，一实施例中，第一镜头模块102与第二镜头模块104具有相同广度的视角，且第一镜头模块102与第二镜头模块104可分别输出相同尺寸的第一影像IMG1与第二影像IMG2，即第一影像IMG1与第二影像IMG2的宽度皆为x1且高度皆为y1。进一步地，一具体实施方式中，第一左区块IMG1_L、第一右区块IMG1_R、第二左区块IMG2_L及第二右区块IMG2_R可具有相同的尺寸，即第一左区块IMG1_L、第一右区块IMG1_R、第二左区块IMG2_L及第二右区块IMG2_R的宽度皆为x2且高度皆为y2，其中本实施例以y2＝y1)做说明，但不以此为限。亦即，在其他实施例中，y2也可以小于y1。其中，在考虑相背设置的第一镜头模块102和第二镜头模块104的厚度甚小的前提下，第一镜头模块102和第二镜头模块104同时朝相反方向撷取影像且视角皆近似于(180+2a)度，第一左区块IMG1_L与第二右区块IMG2_R会取得实质为第一视角范围A1内部分的景物影像，且第一右区块IMG1_R与第二左区块IMG2_L会取得实质为第二视角范围A2内部分的景物影像。
同时参照图1、图2及图3，于一实施例中，第一方向D1及第二方向D2之间的夹角可以是实质180度，即第一镜头模块102及第二镜头模块104朝相反的方向撷取影像第一影像IMG1与第二影像IMG2，并由运算模块106对第一影像IMG1与第二影像IMG2进行运算、依据运算结果调整第一影像IMG1与第二影像IMG2之间的亮度差，并可进一步将第一影像IMG1与第二影像IMG2整合成第三影像IMG3。如此，有助于减少第一影像IMG1与第二影像IMG2之间的亮度差距，也可使得整合出的第三影像IMG3的整体亮度更和谐而不突兀。此外，还可将第三影像IMG3显示于一显示模块(未绘示)上，或储存于储存模块108(或记忆体)内。其中，一实施例中，第三影像可以是一环景影像，如360度的全环景影像，但本发明并不以此为限；于另一实施例，第三影像IMG3也可以是由多帧撷取自不同视角且经影像运算处理而成的一广幅影像。于此实施例中，第一方向D1及第二方向D2之间的夹角界于0度和180度之间(0度＜θ＜180度)。
图4A、4B绘示本发明一实施例的影像亮度调变方法的流程图；图5至图7绘示本发明的一实施例的影像亮度调变方法的操作示意图；图8绘示本发明的一实施例的权重值及总和权重值之间的关系图。
在一实施例中，影像亮度调变方法可应用于具有运算模块106的影像处理装置；另一实施例，影像处理装置可以是具有第一镜头模块102及第二镜头模块104的影像撷取装置10，但不限于此。其中，影像处理装置包括但不限于是手持式电子装置、异地遥控/接收装置、个人电脑、网络服务器等；运算模块106包括但不限于是中央处理器、特殊应用积体电路(Application-specific integrated circuit，ASIC)、***晶片(System on Chip，SoC)等。下文的说明请同时参照图1、图3至图8，以利理解。
在步骤S201中，提供运算模块106第一影像IMG1及第二影像IMG2。一实施例，第一影像IMG1及第二影像IMG2可分别借助第一镜头模块102及第二镜头模块104撷取而得，另一实施例，第一影像IMG1及第二影像IMG2则是预存于储存模块108，且由运算模块106自储存模块108中取得。其中，若影像撷取装置10处于静态摄影模式，则第一镜头模块102及第二镜头模块104分别提供一帧第一影像IMG1及一帧第二影像IMG2；若影像撷取装置10处于预览模式(Preview)或录影模式中，则第一镜头模块102可提供包括多帧第一影像IMG1的第一影像串流，且第二镜头模块104可提供包括多帧第二影像IMG2的第二影像串流。本实施例以静态摄影模式做说明，但不用以限定本发明。
在步骤S203中，如图5所示，可利用运算模块106分别将各区块画分出多个子区块。一实施例，运算模块106将第一左区块IMG1_L、第一右区块IMG1_R、第二左区块IMG2_L及一第二右区块IMG2_R划分为n1个第一左子区块Sub1_L1～Sub1_Ln1、n2个第一右子区块Sub1_R1～Sub1_Rn2、n2个第二左子区块Sub2_L1～Sub2_Ln2及n1个第二右子区块Sub2_R1～Sub2_Rn1。其中，n1和n2为正整数，且n1可大于、小于或等于n2。
以下以n1＝n2＝n为例，在步骤S205中，可借助运算模块106比较第一左子区块Sub1_L1～Sub1_Ln与第二右子区块Sub2_R1～Sub2_Rn的一第一参数、一第二参数及一第三参数的至少一者，以及/或者比较第一右子区块Sub1_R1～Sub1_Rn与第二左子区块Sub2_L1～Sub2_Ln的第一参数、第二参数及第三参数的至少一者，并提供对应的多个第一差异量、多个第二差异量及多个第三差异量的至少一者，且依据第一差异量、第二差异量及/或第三差异量获得一总和权重值。
一实施例中，可通过运算模块106对全部的第一左子区块Sub1_L1～Sub1_Ln及第二右子区块Sub2_R1～Sub2_Rn进行比较；另一实施例，运算模块106是对边缘的2i个第一左子区块Sub1_L1～Sub1_Li、Sub1_L(n-i)～Sub1_Ln及2i个第二右子区块Sub2_R1～Sub2_Ri、Sub2_R(n-i)～Sub2_Rn进行比较；再一实施例，运算模块106是对中间区域第j1至j2个第一左子区块Sub1_Lj1～Sub1_Lj2、Sub1_Lj1～Sub1_Lj2及第j1至j2个第二右子区块Sub2_Rj1～Sub2_Rj2、Sub2_Rj1～Sub2_Rj2进行比较。其中，i、j1和j2是各自独立的正整数。但本发明并不以此为限。
进一步来说，步骤S205包括步骤S2051～S2055。
在步骤S2051中，可通过运算模块106比较第一左子区块Sub1_L1～Sub1_Ln与第二右子区块Sub2_R1～Sub2_Rn的第一参数，比较第一右子区块Sub1_R1～Sub1_Rn与第二左子区块Sub2_L1～Sub2_Ln的第一参数，并获得第一差异量；比较第一左子区块Sub1_L1～Sub1_Ln与第二右子区块Sub2_R1～Sub2_Rn的第二参数，比较第一右子区块Sub1_R1～Sub1_Rn与第二左子区块Sub2_L1～Sub2_Ln的第二参数，并获得第二差异量。其后，依据第一差异量、第二差异量及一预设条件筛选出多个第一左子区块Sub1_L1～Sub1_Ln中的至少一者、多个第二右子区块Sub2_R1～Sub2_Rn中的至少一者、多个第一右子区块Sub1_R1～Sub1_Rn中的至少一者及多个第二左子区块Sub2_L1～Sub2_Ln中的至少一者。
一实施例，如图6所示，运算模块106比较第一左子区块Sub1_Lx与第二右子区块Sub2_Rx的第一参数获得第一差异量D1_x，比较第一左子区块Sub1_Lx与第二右子区块Sub2_Rx的第二参数获得第二差异量D2_x，其中x为小于或等于n的正整数；相似地，比较第一右子区块Sub1_Ry与第二左子区块Sub2_Ly的第一参数获得第一差异量D1_y，比较第一右子区块Sub1_Ry与第二左子区块Sub2_Ly的第二参数获得第二差异量D2_y，其中y为小于或等于n的正整数。
一具体实施例中，预设条件是指第一差异量落于一第一范围内且第二差异量落于一第二范围内。意即，假设第一差异量D1_1落于第一范围内且第二差异量D2_1落于第二范围内，则第一左子区块Sub1_L1与第二右子区块Sub2_R1符合预设条件进而进行步骤S2053；反之，若第一差异量D1_2落于第一范围内且第二差异量D2_2未落于第二范围内，或第一差异量D1_2未落于第一范围内且第二差异量D2_2落于第二范围内，或第一差异量D1_2未落于第一范围内且第二差异量D2_2未落于第二范围内，则第一左子区块Sub1_L2与第二右子区块Sub2_R2不进行步骤S2053，以此类推。
需要注意的是，在不同的实施例中，预设条件也可以是第一差异量落于第一范围内或第二差异量落于第二范围内，本发明不加以限定。
在一具体实施例中，第一影像IMG1及第二影像IMG2的颜色编码格式可以是RGB格式。第一参数可以是绿色值除以红色值(G/R)或为该绿色值与该红色值的一比值，第二参数可以是绿色值除以蓝色值(G/B)或为该绿色值与该蓝色值的一比值；第一差异量可以是第一左子区块Sub1_Lx与第二右子区块Sub2_Rx的第一参数(G/R)的差值及第一右子区块Sub1_Ry与第二左子区块Sub2_Ly的第一参数(G/R)的差值，以及/或者第二差异量可以是第一左子区块Sub1_Lx与第二右子区块Sub2_Rx的第二参数(G/B)的差值及第一右子区块Sub1_Ry与第二左子区块Sub2_Ly的第二参数(G/B)的差值；第一范围可是大于第一低阀值且小于第一高阀值，第二范围可是大于第二低阀值且小于第二高阀值。其中第一低阀值与第二低阀值可以相同或不相同。第一高阀值与第二高阀值可以相同或不相同。但本发明不以此为限。
在步骤S2053中，运算模块106可对符合预设条件的第一左子区块与符合预设条件的第二右子区块的第三参数进行比较、对符合预设条件的第一右子区块与符合预设条件的第二左子区块的第三参数进行比较，并获得第三差异量。
如图7所示，若第一左子区块Sub1_L1与第二右子区块Sub2_R1符合步骤S2051的预设条件，则运算模块106可进一步比较第一左子区块Sub1_L1与第二右子区块Sub2_R1的第三参数，并获得第三差异量D3_1；若第一右子区块Sub1_R1与第二左子区块Sub2_L1符合步骤S2051的预设条件，则比较第一右子区块Sub1_R1与第二左子区块Sub2_R1的第三参数，并获得第三差异量D3_(1+n)。其中，第三参数可以是亮度值。
在步骤S2055中，借助运算模块106依据第三差异量、一第三低阀值及一第三高阀值获得多个权重值，并依据所有权重值，获得总和权重值。如图8所示，当第三差异量介于0及第三低阀值L之间时，权重值由0增加至一最大值M；当第三差异量介于第三低阀值L与第三高阀值H之间时，权重值为最大值M；当第三差异量介于第三高阀值H与差异上限值T之间时，权重值由最大值M递减至0，但本发明不以此为限。其后，将所有权重值加总，并获得总和权重值。
具体来说，步骤S2051可以是对两两对应的子区块的差异程度进行初步评估，意即初步评估第一左子区块Sub1_Lx与第二右子区块Sub2_Rx，第一右子区块Sub1_Ry及第二左子区块Sub2_Ly，以此类推。若不符合预设条件，则判定两两对应的子区块差异过大或过小，而无须进行进一步的评估；步骤S2053则是进一步评估符合预设条件的两两对应的子区块的差异程度，藉由总和权重值了解第一影像IMG1与第二影像IMG2之间的亮度差异。
在步骤S207中，利用运算模块106依据总和权重值调变第一影像IMG1及第二影像IMG2的亮度，以期缩小第一影像IMG1及第二影像IMG2的亮度差异。在本实施例中，调变方式可以是依据总和权重值调整第一镜头模块102及第二镜头模块104至少其中之一的影像撷取参数，包含但不限于亮度感测参数。其中，亮度感测参数可以是光圈(aperture)、快门速度(shutter time)及/或感光度(ISO)等。举例来说，若总和权重值显示第一影像IMG1整体的亮度高于第二影像IMG2整体的亮度，运算模块106可依据总和权重值调高第二镜头模块104的感光值，或依据总和权重值调低第一镜头模块102的感光值，及/或依据总和权重值调高第二镜头模块104的感光值并调低第一镜头模块102的感光值。此外，调变方式也可以是依据总和权重值调整第一影像IMG1或第二影像IMG2至少其中之一的亮度值。于另一实施例，藉由采逐步增加/减少一步值的(例如0.1)方式调整来调整亮度参数或亮度值，有助于维持第一影像IMG1的第一影像串流与第二影像IMG2的第二影像串流的稳定性。
另一实施例中，若第一影像IMG1及第二影像IMG2的颜色格式为YUV格式时，可以先将第一影像IMG1及第二影像IMG2的颜色格式进行转换，由YUV格式转换为RGB格式。此外，若不进行颜色格式转换，也可以将YUV格式中的色度值(U)设为第一参数，将浓度值(V)设为第二参数。
在一具体实施例中，第一镜头模块102及第二镜头模块104的视角范围可以是188.48度(即a等于4.24)，第一影像IMG1与第二影像IMG2的尺寸可以是宽度x1为3200个像素、高度y1为3056个像素，n为32，然本发明不以此为限。
此外，在不同的实施例中，第一差异量及第二差异量至少其中之一也可以是第一参数与第二参数的比值。第三差异量与权重值之间也可以是呈拋物线关系或线性关系，或者权重值是第三差异量的函数等，本发明不加限定。
依据本发明实施例影像撷取装置及影像亮度调变方法是藉由计算总和权重值了解第一镜头模块102提供的第一影像IMG1与第二镜头模块104提供的第二影像IMG2之间的亮度差异，并依据总和权重值调整第一镜头模块102及第二镜头模块104至少其中之一的亮度参数，或调整第一影像IMG1及第二影像IMG2至少其中之一的亮度值，可以即时地减少第一影像IMG1与第二影像IMG2的亮度参数。有助于获得效果较佳的第三影像IMG3。
综上所述，虽然本发明已以实施例揭露如上，然其并非用以限定本发明。本发明所属技术领域中具有通常知识者，在不脱离本发明的精神和范围内，当可作各种的更动与润饰。因此，本发明的保护范围当视后附的申请专利范围所界定者为准。

Claims (20)

1.一种影像撷取装置，其特征在于，包括：
一第一镜头模块，朝一第一方向撷取一第一影像，该第一影像至少包括一第一左区块及一第一右区块；
一第二镜头模块，朝一第二方向撷取一第二影像，该第二影像至少包括一第二左区块及一第二右区块；以及
一运算模块，分别将该第一左区块、该第一右区块、该第二左区块及该第二右区块划分为多个第一左子区块、多个第一右子区块、多个第二左子区块及多个第二右子区块；比较至少一组该些第一左子区块与该些第二右子区块的一第一参数、一第二参数及一第三参数的至少一者，以及比较对应该组的该第一右子区块与该第二左子区块的应该组的该第一参数、该第二参数及/或该第三参数，并获得至少一对应的第一差异量、对应的第二差异量及/或对应的第三差异量；以及，依据该些第一差异量、该些第二差异量及/或该些第三差异量获得一总和权重值，并依据该总和权重值调变该第一影像及/或该第二影像的亮度。
2.如权利要求1所述的影像撷取装置，其特征在于，该运算模块比较多组该些第一左子区块与该些第二右子区块的该些第一参数、对应的该些第一右子区块与该些第二左子区块的该些第一参数，获得该些第一差异量；比较多组该些第一左子区块与该些第二右子区块的该些第二参数、对应的该些第一右子区块与该些第二左子区块的该些第二参数，获得该些第二差异量。
3.如权利要求2所述的影像撷取装置，其特征在于，该运算模块更依据该些第一差异量、该些第二差异量及一预设条件筛选出部分的该些第一左子区块、部分的该些第二右子区块、部分的该些第一右子区块及部分的该些第二左子区块。
4.如权利要求3所述的影像撷取装置，其特征在于，该运算模块比较至少一组被筛选出的该些第一左子区块与被筛选出的该些第二右子区块的该第三参数、对应该组被筛选出的该些第一右子区块与被筛选出的该些第二左子区块的该第三参数，并获得该第三差异量。
5.如权利要求4所述的影像撷取装置，其特征在于，该运算模块更依据该第三差异量、一第三低阀值及一第三高阀值获得至少一权重值，并依据该些权重值获得该总和权重值。
6.如权利要求1所述的影像撷取装置，其特征在于，该第一参数为一绿色值除以一红色值或为该绿色值与该红色值的一比值，或为一色度值；或者，该第二参数为该绿色值除以一蓝色值或为该绿色值与该蓝色值的一比值，或为一浓度值；或者，该第三参数一亮度值。
7.如权利要求1所述的影像撷取装置，其特征在于，该运算模块依据该总和权重值调整该第一镜头模块及该第二镜头模块的至少其中之一的一亮度参数，或者该运算模块调整该第一影像及该第二影像至少其中之一的一亮度值。
8.如权利要求1所述的影像撷取装置，其特征在于，该第一方向与该第二方向之间的夹角为θ，且0度＜θ≦180度。
9.一种影像亮度调变方法，其特征在于，适用于一种具有一运算模块的影像处理装置，该方法包括：
提供一第一影像及一第二影像予该运算模块，该第一影像具有至少一第一左区块及一第一右区块，该第二影像具有至少一第二左区块及至少一第二右区块；以及
借助该运算模块将该第一左区块、该第一右区块、该第二左区块及该第二右区块划分为多个第一左子区块、多个第一右子区块、多个第二左子区块及多个第二右子区块；比较该些第一左子区块与该些第二右子区块的多个第一参数、多个第二参数及/或多个第三参数，比较该些第一右子区块与该些第二左子区块的该些第一参数、该些第二参数及/或该些第三参数，并获得对应的多个第一差异量、多个第二差异量及/或多个第三差异量；依据该些第一差异量、该些第二差异量及/或该些第三差异量获得一总和权重值；以及，依据该总和权重值调变该第一影像与该第二影像之间的亮度差异。
10.如权利要求9所述的影像亮度调变方法，其特征在于，借助比较该些第一参数获得该些第一差异量、比较该些第二参数获得该些第二差异量。
11.如权利要求9或8任一所述的影像亮度调变方法，其特征在于，依据该些第一差异量、该些第二差异量及一预设条件筛选该些第一左子区块、该些第二右子区块、该些第一右子区块及该些第二左子区块。
12.如权利要求11所述的影像亮度调变方法，其特征在于，更包括：对筛选出的该些第一左子区块与筛选出的该些第二右子区块的该些第三参数进行比较、对筛选出的该些第一右子区块与筛选出的该些第二左子区块的该些第三参数进行比较，并获得该些第三差异量。
13.如权利要求12所述的影像亮度调变方法，其特征在于，更包括：依据该些第三差异量、一第三低阀值及一第三高阀值获得多个权重值及该总和权重值。
14.如权利要求9所述的影像亮度调变方法，其特征在于，该第一参数为一绿色值除以一红色值或为该绿色值与该红色值的一比值，或为一色度值；或者，该第二参数为该绿色值除以一蓝色值或为该绿色值与该蓝色值的一比值，或为一浓度值；或者，该第三参数一亮度值。
15.一种影像处理装置，其特征在于，包括：
一储存模块，储存至少一第一影像及至少一第二影像，该第一影像至少包括一第一左区块及一第一右区块，该第二影像至少包括一第二左区块及一第二右区块；以及
一运算模块，分别将该第一左区块、该第一右区块、该第二左区块及该第二右区块划分为多个第一左子区块、多个第一右子区块、多个第二左子区块及多个第二右子区块；比较至少一组该些第一左子区块与该些第二右子区块的一第一参数、一第二参数及一第三参数的至少一者，以及比较对应该组的该第一右子区块与该第二左子区块的应该组的该第一参数、该第二参数及/或该第三参数，并获得至少一对应的第一差异量、对应的第二差异量及/或对应的第三差异量；以及，依据该些第一差异量、该些第二差异量及/或该些第三差异量获得一总和权重值，并依据该总和权重值调变该第一影像及/或该第二影像的亮度。
16.如权利要求15所述的影像处理装置，其特征在于，该运算模块比较多组该些第一左子区块与该些第二右子区块的该些第一参数、对应的该些第一右子区块与该些第二左子区块的该些第一参数，获得该些第一差异量；比较多组该些第一左子区块与该些第二右子区块的该些第二参数、对应的该些第一右子区块与该些第二左子区块的该些第二参数，获得该些第二差异量。
17.如权利要求16所述的影像处理装置，其特征在于，该运算模块更依据该些第一差异量、该些第二差异量及一预设条件筛选出部分的该些第一左子区块、部分的该些第二右子区块、部分的该些第一右子区块及部分的该些第二左子区块。
18.如权利要求17所述的影像处理装置，其特征在于，该运算模块比较至少一组被筛选出的该些第一左子区块与被筛选出的该些第二右子区块的该第三参数、对应该组被筛选出的该些第一右子区块与被筛选出的该些第二左子区块的该第三参数，并获得该第三差异量。
19.如权利要求18所述的影像处理装置，其特征在于，该运算模块更依据该第三差异量、一第三低阀值及一第三高阀值获得至少一权重值，并依据该些权重值获得该总和权重值。
20.如权利要求15所述的影像处理装置，其特征在于，该第一参数为一绿色值除以一红色值或为该绿色值与该红色值的一比值，或为一色度值；或者，该第二参数为该绿色值除以一蓝色值或为该绿色值与该蓝色值的一比值，或为一浓度值；或者，该第三参数一亮度值。
CN201810632018.1A 2017-06-29 2018-06-19 影像撷取装置、影像亮度调变方法及影像处理装置 Active CN109218604B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201762526438P 2017-06-29 2017-06-29
US62/526,438 2017-06-29

Publications (2)

Publication Number Publication Date
CN109218604A true CN109218604A (zh) 2019-01-15
CN109218604B CN109218604B (zh) 2020-12-29

Family

ID=64738433

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201810601444.9A Active CN109218602B (zh) 2017-06-29 2018-06-12 影像撷取装置、影像处理方法及电子装置
CN201810632018.1A Active CN109218604B (zh) 2017-06-29 2018-06-19 影像撷取装置、影像亮度调变方法及影像处理装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201810601444.9A Active CN109218602B (zh) 2017-06-29 2018-06-12 影像撷取装置、影像处理方法及电子装置

Country Status (3)

Country Link
US (2) US10630898B2 (zh)
CN (2) CN109218602B (zh)
TW (2) TWI775869B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220405987A1 (en) * 2021-06-18 2022-12-22 Nvidia Corporation Pixel blending for neural network-based image generation
TWI830094B (zh) * 2021-11-25 2024-01-21 信驊科技股份有限公司 偵測全景相機的拼接瑕疵的測試裝置和測試方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102938145A (zh) * 2012-10-23 2013-02-20 深圳大学 一种拼接类全景图的一致性调整方法及***
US20150138312A1 (en) * 2013-11-18 2015-05-21 Texas Instruments Incorporated Method and apparatus for a surround view camera system photometric alignment
CN105635602A (zh) * 2015-12-31 2016-06-01 天津大学 一种采用两路视频间亮度和色偏对视频拼接的***及其调整方法
EP3076655A1 (en) * 2013-11-27 2016-10-05 Kyocera Corporation Imaging settings changing device, imaging system, and imaging settings changing method
CN106791623A (zh) * 2016-12-09 2017-05-31 深圳市云宙多媒体技术有限公司 一种全景视频拼接方法及装置

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7015954B1 (en) * 1999-08-09 2006-03-21 Fuji Xerox Co., Ltd. Automatic video system using multiple cameras
KR100731979B1 (ko) * 2005-10-18 2007-06-25 전자부품연구원 다시점 정방향 카메라 구조 기반의 메쉬를 이용한 중간영상 합성 방법 및 장치와 이를 구현하는 기능을실현시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는기록 매체
EP2518995B1 (en) * 2009-12-24 2018-08-22 Sharp Kabushiki Kaisha Multocular image pickup apparatus and multocular image pickup method
CN102857704B (zh) * 2012-09-12 2015-08-19 天津大学 带有时间域同步校准技术的多源视频拼接方法
FR2998126B1 (fr) * 2012-11-15 2014-12-26 Giroptic Procede et dispositif de capture et de construction d'un flux d'images panoramiques ou stereoscopiques
US9832378B2 (en) * 2013-06-06 2017-11-28 Apple Inc. Exposure mapping and dynamic thresholding for blending of multiple images using floating exposure
CN103856727B (zh) * 2014-03-24 2017-01-25 北京工业大学 一种多路实时视频拼接处理***
US9196039B2 (en) * 2014-04-01 2015-11-24 Gopro, Inc. Image sensor read window adjustment for multi-camera array tolerance
US9892493B2 (en) * 2014-04-21 2018-02-13 Texas Instruments Incorporated Method, apparatus and system for performing geometric calibration for surround view camera solution
CN103984608B (zh) * 2014-05-27 2017-01-04 大连理工大学 一种基于内容的图像文件雕复方法
JP6349962B2 (ja) * 2014-05-27 2018-07-04 富士ゼロックス株式会社 画像処理装置およびプログラム
TWI537875B (zh) * 2015-04-08 2016-06-11 大同大學 影像合成方法與影像處理裝置
KR102508248B1 (ko) * 2015-08-20 2023-03-08 삼성전자주식회사 중력 및 온도 센서를 이용한 카메라의 자동 초점 조절 방법, 카메라 제어 장치, 및 카메라 시스템
US10116880B2 (en) * 2016-02-05 2018-10-30 Sintai Optical (Shenzhen) Co., Ltd. Image stitching method and image processing apparatus
GB2553315A (en) * 2016-09-01 2018-03-07 Nokia Technologies Oy Determining inter-view prediction areas
CN106534787A (zh) * 2016-11-16 2017-03-22 北京明泰朗繁精密设备有限公司 一种视频显示***
US10616482B2 (en) * 2017-03-10 2020-04-07 Gopro, Inc. Image quality assessment
CN107018335A (zh) * 2017-03-14 2017-08-04 上海小蚁科技有限公司 图像拼接方法、装置及终端
US10009551B1 (en) * 2017-03-29 2018-06-26 Amazon Technologies, Inc. Image processing for merging images of a scene captured with differing camera parameters

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102938145A (zh) * 2012-10-23 2013-02-20 深圳大学 一种拼接类全景图的一致性调整方法及***
US20150138312A1 (en) * 2013-11-18 2015-05-21 Texas Instruments Incorporated Method and apparatus for a surround view camera system photometric alignment
EP3076655A1 (en) * 2013-11-27 2016-10-05 Kyocera Corporation Imaging settings changing device, imaging system, and imaging settings changing method
CN105635602A (zh) * 2015-12-31 2016-06-01 天津大学 一种采用两路视频间亮度和色偏对视频拼接的***及其调整方法
CN106791623A (zh) * 2016-12-09 2017-05-31 深圳市云宙多媒体技术有限公司 一种全景视频拼接方法及装置

Also Published As

Publication number Publication date
US10567644B2 (en) 2020-02-18
TWI775876B (zh) 2022-09-01
US20190007607A1 (en) 2019-01-03
CN109218602A (zh) 2019-01-15
TW201905852A (zh) 2019-02-01
CN109218602B (zh) 2020-12-08
TW201905849A (zh) 2019-02-01
CN109218604B (zh) 2020-12-29
TWI775869B (zh) 2022-09-01
US20190007606A1 (en) 2019-01-03
US10630898B2 (en) 2020-04-21

Similar Documents

Publication Publication Date Title
US11335079B2 (en) Method and system of reflection suppression for image processing
US9819861B2 (en) Picture taking device comprising a plurality of camera modules
JP5971207B2 (ja) 画像調整装置、画像調整方法およびプログラム
CN102572443B (zh) 用于在图像信号处理***中同步音频和视频数据的技术
US9633417B2 (en) Image processing device and image capture device performing restoration processing using a restoration filter based on a point spread function
JP6455601B2 (ja) 制御システム、撮像装置、およびプログラム
CN104620569A (zh) 成像控制器以及成像控制方法和程序
US9699427B2 (en) Imaging device, imaging method, and image processing device
US9906732B2 (en) Image processing device, image capture device, image processing method, and program
US9799105B2 (en) Image processing device, imaging device, image processing method, and program for restoration processing based on a point spread function and a frame after a frame to be processed
WO2023231583A1 (zh) 图像处理方法及其相关设备
US20230325999A1 (en) Image generation method and apparatus and electronic device
WO2023036034A1 (zh) 图像处理方法及其相关设备
US20160330388A1 (en) Device for picture taking in low light and connectable to a mobile telephone type device
CN109218604A (zh) 影像撷取装置、影像亮度调变方法及影像处理装置
US8654210B2 (en) Adaptive color imaging
US20090324127A1 (en) Method and System for Automatic Red-Eye Correction
Lukac Single-sensor digital color imaging fundamentals
WO2023060921A1 (zh) 图像处理方法与电子设备
CN117135293A (zh) 图像处理方法和电子设备
CN116437198B (zh) 图像处理方法与电子设备
CN116668862A (zh) 图像处理方法与电子设备
CN116051368B (zh) 图像处理方法及其相关设备
JP2015119436A (ja) 撮像装置
US11470258B2 (en) Image processing apparatus and image processing method to perform image processing on divided areas

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant