CN112585644A - 在相机摇摄或运动中创建背景模糊的***及方法 - Google Patents

在相机摇摄或运动中创建背景模糊的***及方法 Download PDF

Info

Publication number
CN112585644A
CN112585644A CN202080004470.9A CN202080004470A CN112585644A CN 112585644 A CN112585644 A CN 112585644A CN 202080004470 A CN202080004470 A CN 202080004470A CN 112585644 A CN112585644 A CN 112585644A
Authority
CN
China
Prior art keywords
image
camera
selected object
aligning
image sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080004470.9A
Other languages
English (en)
Inventor
阿纳特·莱瑟姆·盖特
露丝·卡茨
欧姆瑞·利维
奥德·吉古辛斯基
耶夫塔·科瓦尔
以法莲·戈登堡
加尔·沙伯泰
诺伊·科恩
麦克·谢勒
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Corephotonics Ltd
Original Assignee
Corephotonics Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Corephotonics Ltd filed Critical Corephotonics Ltd
Publication of CN112585644A publication Critical patent/CN112585644A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/292Multi-camera tracking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/54Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/58Means for changing the camera field of view without moving the camera body, e.g. nutating or panning of optics or image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/695Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/89Television signal recording using holographic recording
    • H04N5/90Television signal recording using holographic recording on discs or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/907Television signal recording using static stores, e.g. storage tubes or semiconductor memories
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/915Television signal processing therefor for field- or frame-skip recording or reproducing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/917Television signal processing therefor for bandwidth reduction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20208High dynamic range [HDR] image processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20212Image combination
    • G06T2207/20221Image fusion; Image merging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30221Sports video; Sports image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30232Surveillance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

在相机摇摄或运动中产生背景模糊的***、成像设备及方法。使用具有一图像传感器的一成像设备,方法可包括在一场景中选定要追踪的一对象,录制一图像或一图像流,以及在所述选定对象相对于所述成像设备或相对于所述场景移动的时候,将所述选定对象光学地及/或数字地对准于所述图像传感器上的一相同位置,从而创建相对于所述选定对象的一模糊的图像背景及/或前景以及一摇摄或运动感。

Description

在相机摇摄或运动中创建背景模糊的***及方法
相关申请的交叉引用
本申请要求2019年7月31日提交的美国临时专利申请62/881,007的优先权,其揭露内容的全文以引用方式并入本文。
技术领域
本文所揭露的实施例一般涉及数码相机,特别是涉及相机摇摄或运动期间的效果。
背景技术
手动相机摇摄涉及用户在获取期间开启相机快门并追踪移动的被摄物(或对象)时,在关闭快门之前的曝光期间内保持被摄物或对象在帧的相同位置,从而获取包括模糊背景和相对锐利的被摄物的图像。曝光时间必须足够长,以便在摄影师跟随取景器中的对象时由于相机移动使得背景模糊。在下面的描述中,“被摄物”和“对象”可以互换使用。
摄影师摇摄相机以盲目追踪选定对象的能力也是拍摄运动中的选定对象的图像的关键。较差的技术可能导致选定对象及背景及/或前景都模糊,例如由于手部移动。因此,通过手动相机摇摄来拍摄描述选定对象的运动感的图像可能相当困难。为了帮助拍摄摇摄照片,摄影师可使用三脚架及单脚架或运动控制相机机器人,使得在一个平面上很容易摆动相机,同时在其他平面上保持稳定。
通常,尤其是在体育摄影领域,拍摄描绘选定对象的运动感的图像是期望的。一种利用简单的摄影技术拍摄描绘选定对象的运动感的图像的改进方法是期望的,该方法通过简单的摄影技术拍摄描绘选定对象的运动感的图像,所述方法产生平稳的背景/前景模糊及大视场(FOV)。
发明内容
本文揭露的实施例教导用于自动产生具有摇摄效果以及从相机或对象运动所导出的其他模糊效果的静止图像或视频的方法。所述方法使用单一相机或多个相机,并根据一个或多个相机或场景的移动输出背景及前景模糊。
在多个示例性实施例中,提供一种方法包括:在包括一图像传感器的一成像设备中,在一场景中选定要追踪的一对象;录制一图像或一图像流以提供一相应的录制图像或录制图像流;以及在所述选定对象相对于所述成像设备或相对于所述场景移动的时候,将所述选定对象对准于图像传感器上的一相同给定位置,从而创建相对于所述选定对象的一模糊的图像背景及/或前景。
在一实施例中,所述对准包括将所述选定对象光学地对准于所述图像传感器上的一相同给定位置。
在一实施例中,所述成像设备包括具有一第一图像传感器的一第一相机和具有一第二图像传感器的一第二相机,其中所述录制和对准是使用所述第一相机进行,以及其中所述对准所需的至少一个参数是使用所述第二相机所提供的信息进行计算。
在一实施例中,所述图像传感器包括提供用于计算所述对准所需的至少一个参数的信息的第一多个像素,以及用于所述录制的第二多个像素。
在一实施例中,所述录制包括录制多个帧,以及其中所述对准包括将所述选定对象光学地对准于所述图像传感器上的一类似位置且进一步将所述选定对象数字地对准于所述图像传感器上的所述相同给定位置。
在一实施例中,所述录制包括录制多个帧,以及其中所述对准包括将所述选定对象光学地对准于所述图像传感器上的多个离散像素且进一步将所述选定对象数字地对准于所述图像传感器上的所述相同给定位置。
在一实施例中,所述录制图像流包括多个单一图像,以及其中所述方法还包括使用单一图像数据产生人工图像数据。
在一实施例中,所述方法还包括以不同于用于录制所述图像流的帧速率的帧速率(fps)播放所述录制图像流。
在一实施例中,所述录制图像流被分为两个或多个序列,以及其中所述方法还包括以不同的帧速率播放各个序列。
在一实施例中,所述方法还包括将所述录制图像流分为两个或多个显示不同模糊程度的序列。
在一实施例中,所述对准包括对所述选定对象的一未来位置进行推断。
在一实施例中,所述选定对象包括一星体。
在一实施例中,所述对准所需的所述至少一个参数是从由一移位参数、一缩放参数及一旋转参数所组成的群组中选择。
在一实施例中,所述录制包括录制多个帧,以及其中所述对准包括将所述选定对象光学地对准于所述第一图像传感器上的一类似位置且进一步将所述选定对象数字地对准于所述第一图像传感器上的所述相同给定位置。
在一实施例中,所述录制包括录制多个帧,以及其中所述对准包括将所述选定对象光学地对准于所述图像传感器上的多个离散像素且进一步将所述选定对象数字地对准于所述图像传感器上的所述相同给定位置。
在一实施例中,所述第一相机及所述第二相机之间的校准数据是存储在一非易失性存储器中。
在一实施例中,所述第一和第二多个像素相加为传感器像素的总数。
在一实施例中,所述对准所需的所述至少一个参数是从由一移位参数、一缩放参数及一旋转参数所组成的群组中选择。
在一实施例中,所述人工图像数据用于增加图像模糊的均匀性。
在多个示例性实施例中,提供一种***包括:一成像设备,其包括用于录制一图像或一图像流以提供一相应的录制图像或录制图像流的一图像传感器;以及一处理器,其被配置为在一场景中选定要追踪的一对象,以及在所述选定对象相对于所述成像设备或相对于所述场景移动的时候将所述选定对象对准于所述图像传感器上的一相同给定位置,从而创建相对于所述选定对象的一模糊的图像背景及/或前景。
在一实施例中,将所述选定对象对准于所述图像传感器上的一相同给定位置的所述处理器配置包括指示一反射组件对包括所述对象的一视场进行扫描的一配置。
在一实施例中,所述成像设备包括一第一相机及一第二相机。
在各种实施例中,如上或下的一***是一智能手机。
附图说明
本文所揭露的多个实施例的多个非限制性示例是参考本段后面列出的附图来描述。附图和说明书意在解释和阐明本文所揭露的多个实施例且不应被认为以任何方式所限制。不同附图中的类似元件可以用相似的编号表示。附图中的元件不一定按照比例绘制。
图1A示出了使用低频拍摄进行多帧平均的现象;
图1B示出了使用高频拍摄进行多帧平均的现象;
图2A示出了具有对象且对象相对于固定(非移动)背景移动的动态场景的示例;
图2B示出了相机在拍摄具有相对于背景固定的位置的对象时移动的动态场景的示例;
图3在(a)到(g)示出了不同类型的示例性模糊效果;
图4示出了利用离相机更远/更靠近相机的对象移动的示例性背景模糊;
图5示出了利用垂直于相机的光轴的对象移动的示例性背景;
图6示出了利用垂直于相机光轴的相机运动的示例性背景模糊;
图7在流程图中示出了用于拍摄描述本文所揭露的对象的运动感的图像的方法的示例性实施例;
图8A示意性地示出了具有可调节的远程视场的双孔径数码相机的实施例;
图8B示意性地示出了具有可调节视场的单孔径折叠数码相机;
图9示意性地示出了包括具有至少一个扫描远程相机的多孔径相机的电子设备的实施例。
具体实施方式
图1A示出了通过对以低频拍摄的多个单一图像进行平均所产生的一动态场景的一平均图像的一示例。所述场景示出了包括树和选定对象104的背景102。低频拍摄意味着在两个连续拍摄的图像之间经过相对较长的时间。术语“相对较长的时间”是指场景中发生大量移动的时间区间。在低频下拍摄单一图像可以得到在物体特征之间具有可见“阶状”的一个平均图像。作为示例,我们参考在背景中的两棵树102的各自顶部的位置a-d之间可见的阶状。
本领域已知的人工模糊可用于修改平均图像并获得图像特征或区域的更为连续的模糊。例如,可以使用人工模糊来获得如图1B中的树顶所呈现的模糊程度。在其他示例中,可以通过产生人工图像数据来获得更为连续的模糊。参考图1A中可见的左树的图像数据,例如可以使用来自创建树的左顶部的帧的图像数据(第一图像数据)和来自创建树的右顶部的帧的图像数据(第二图像数据)来人工产生一个或多个图像。例如,可以应用将对象(此处:树)从第一位置移动到第二位置(此处:从左边到右边位置)的运动模型。图像数据可通过“冻结”(freezing)由运动模型所产生的一个或多个位置来人工产生。运动模型可以是沿着将对象特征(此处:树的顶部)在第一位置连接到第二位置(此处:从左边到右边位置)的直线的匀速运动或是任何其他运动,例如匀加速运动或沿着任意非直线进行的运动。
在一些示例中,“模糊程度”可以相对地并且仅相对于视觉外观来定义。例如,当比较两个或多个对于技术人员显现为较高模糊或较少模糊的图像时,可指的是“较强的模糊”与“较弱的模糊”或“模糊程度降低”等。在一些情况下,“模糊程度”可由如本文所述的用于产生具有模糊背景及/或前景的图像所进行平均的图像(或“帧”)的数目来定义。较高程度的模糊可对应于较多数量的图像被平均以用于图像生成。在又一示例中,“模糊程度”可由用于产生图像所进行平均的像素的数目来定义。较高程度的模糊可对应于较多数量的像素被平均以用于图像生成。例如,如果2到3个像素被平均则可以获得较低程度的模糊,且如果40到50个像素被平均则可以获得较高程度的模糊。在又一示例中,“模糊程度”可由一个值来定义,该值可通过计算与所有像素及所有平均图像的相同像素的值的图像与图像的偏差(image-to-image deviation)的总和来获得。较高程度的模糊可对应于较高的总和值。本领域已知的函数(例如均方根(rms)函数)可用于计算所述偏差。
图1B示出了通过对以高频拍摄的多个单一图像进行平均所产生的一动态场景的一平均图像的另一示例。高频拍摄意味着两个连续拍摄的图像之间经过相对较短的时间。在高频下拍摄单一图像可得到几乎没有可见的阶状但在对象特征之间有平滑过渡的一个平均图像。在背景102中的树的位置的示例中,我们没有发现如图1A中那样可见的阶状,而是在树的不同位置之间的平滑过渡。所述平滑过渡可以是理想的,因为它可被感知为均匀模糊。
摄影的动态场景可能涉及相机运动、对象运动或两者。图2A示出了具有对象200(例如,滑板上的男孩)且所述对象200相对于固定(非移动)背景202移动的动态场景的一示例。所述场景通过相机204成像(拍摄)。相机204可包括镜头、图像传感器及处理单元(处理器),也见于图9。图2B示出了在拍摄相对于背景202具有固定位置的选定对象(例如,儿童)200’时移动相机204的另一动态场景的一示例。图2A中的选定对象200和背景202,或图2B中的选定对象200’和背景202与相机204的距离不同。
在拍摄动态场景时,最好在具有模糊的背景及/或前景的情况下保持对象聚焦。本文所公开的实施例以许多方式提供了这一点,其中一些在图3中所示出。
图3在(a)到(g)中示出了由本文公开的方法所产生的不同类型的示例性模糊效果:(a)相机沿X方向移位,其中在对象304保持锐利的同时,对象(人形)304后面的背景树302在X方向上展现线性模糊;(b)在X和Y方向上的小相机移位导致在树302中的高斯或“圆盘”(disk)类型的模糊;(c)在X和Y方向上的大相机移位导致在树302中的“心形”类型的模糊;(d)对象304相对于树302在X方向上的移动导致移位类型的模糊(类似于(a)的移动,但与所述移动相比要小一些,且与对象和背景之间的距离无关);(e)对象304相对于树302在Z方向上的移动导致缩放类型的模糊;(f)对象304相对于树302的旋转导致旋转类型的模糊;(g)对象304相对于树302的变形运动(例如,挥手)导致非刚性物体形状改变/变换或非刚性物体/姿势改变类型的模糊;以及(h)相机沿X方向移位,其中在对象304保持锐利的同时,对象(人形)304后面的背景树302和前景树306在X方向上显示线性模糊。
在一些实施例中,本文所描述的方法不仅可用于对人们通常可称为动态场景的场景进行成像,还可用于其它目的,例如用于在弱光情况下的场景进行成像。“弱光”可定义为场景的平均亮度小于50到70勒克斯(Lux)的情况,例如20勒克斯或5勒克斯。更一般地,本文所描述的方法可用于拍摄具有长有效曝光时间的场景。长有效曝光时间可通过场景中的动态或运动程度与实际曝光时间的乘积来定义。长有效曝光时间可例如通过在曝光时间T1的期间以角速度ω1快速移动物体以及通过以较长曝光时间T2=2T1对以角速度ω2=1/2·ω1较缓慢移动的物体进行拍摄来获得。例如,以慢角速度ω移动的物体可以用长曝光时间T来进行拍摄,例如,在夜空中可看到的星体。
在一些实施例中,如果一个场景或整个场景中的一个或多个对象在曝光期间显著移动,则获得长的有效曝光时间。在一示例中,显著的移动量可被定义为在曝光期间导致一特定对象点在例如图像传感器的1到3个像素上的漏光(smearing)的移动。在另一实例中,显著的移动量可被定义为在曝光期间导致一特定对象点在例如10或更多个像素的漏光的移动。在又一实例中,显著的移动量可被定义为在曝光期间导致一特定物体点在例如20到250或更多个像素上的漏光的移动。
根据下面描述的实施例,背景和前景模糊可以通过以下四个情节有意地和人工地创建,参考图4-6说明.
在第一个情节中,选定对象从相机移近/移远,参见例如图4。当物体靠近相机移动时,其尺寸在相机图像传感器上变大;当物体远离相机移动时,其尺寸在相机图像传感器上变小。这代表比例变化。如果对象的比例变化不等于场景其余部分的比例变化,则不以这种方式移动的对象将变得模糊。在这种情节下,当录制开始时,在拍摄图像时使用机械变焦,所述对象被缩放(也称为“对准”)到它在传感器上的尺寸。
更详细地说,帧(a)示出了具有远离相机的对象(人形)400与在对象400后面包括两棵树402a和402b的背景的图像。对象400是选定的对象。帧(a)对应于图像录制开始时传感器上的初始场景。帧(b)示出了在没有使用对准的情况下,对象400’(表示此时处于不同位置和时间的对象400)更靠近相机的图像。如图4所示,在下面的图中5和6中标号500和600表示最初选定的对象,而标号500’和600’表示在不同位置和时间的相同的相应对象。帧(c)示出了对场景(b)光学地及/或数字地对准(缩放)到录制开始时传感器上的尺寸,参见下面的步骤708,使得对象与帧(a)中的尺寸和位置相同。注意,与帧(a)相比,所述移动相对于对象400’的尺寸减小了树402a’和402b’的尺寸。帧(c)对应于录制图像结束时传感器上的最终场景。帧(d)示出了来自拍摄的开始步骤704(帧a)和结束步骤710(帧c)的帧(a)和(c)的对象400和树402a和402b的重叠图像。帧(e)示出了最终的拍摄结果,其包括在录制期间在传感器上所捕获的光(步骤704–708)。这包括第一个场景(a)、最后一个场景(c)以及在其间的所有场景。
在一些实施例中并且可选地,对准可以在拍摄之后以数字方式进行。在其它实施例中,例如在多帧的情况下(参见下面的步骤708)并且可选地,部分对准可以在拍摄期间以光学方式及/或数字方式进行,且部分对准在拍摄之后以数字方式进行。例如,对准可以包括将选定对象光学地对准于图像传感器上的多个离散像素,且进一步将选定对象数字地对准于图像传感器上的相同给定位置。将选定对象光学地对准于多个离散像素可指的是不包括子像素对准的光学对准。
在第二个情节中,相机静止,且选定对象垂直于相机镜头的光轴移动(移位),参见例如图5。如果选定对象的移位移动不等于相机传感器上的场景的其余部分的移位移动,则不以这种方式移动的对象将模糊。在这种情节下,当录制开始时,选定对象被对准于其在传感器上的位置。选定对象在使用机械移位拍摄图像时进行对准(移位)。所述机械移位例如可通过移动反射组件或光路折叠组件(optical path folding element,OPFE)(例如,棱镜),或者是通过移动相机的镜头或者是通过移动相机模块的横向位置或倾斜角位置来进行。
图5描述了根据本文所描述用于选定对象垂直于相机镜头的光轴移动的情况的方法的一实施例所获得的背景模糊的结果。更详细地说,帧(a)示出了具有选定对象(人形)500以及于对象500后面包括两棵树502a和502b的背景的图像。帧(a)对应于开始录制图像时传感器上的初始场景。帧(b)示出了在没有使用对准的情况下,具有代表对象500相对于相机向右移动的的对象500’的图像。帧(c)示出了场景(b)通过移动视场(field of view,FOV)以对准对象500’来进行光学地及/或数字地对准(移位),参见下面的步骤708,使得对象500’与帧(a)中的对象500位于同一位置。注意,所述移位将传感器上的树502a’和502b’向左移动。帧(c)对应于图像录制结束时传感器上的最终场景。帧(d)示出了来自拍摄的开始步骤704(帧a)和结束步骤710(帧c)的帧(a)和(c)的对象500以及树502a和502b的重叠图像。帧(e)示出了最终的拍摄结果,其中包括在录制期间在传感器上所捕获的光(步骤704–708)。这包括第一个场景(a)、最后一个场景(c)以及在其间的所有场景。
在第三个情节中,当对象与背景/前景不移动的同时,相机垂直于光轴移动。这使得对象和相机之间的距离改变,例如参见图6。由于在整个移动过程中摄影机位置的基线之间的差异,场景中与相机的距离不同于选定对象的所有对象都将模糊。如果选定对象和摄影机之间的距离不等于其他对象或场景其余部分相对于相机传感器的距离,则它们在传感器上的移位将不同。不以相同方式移动的对象将变得模糊。在这种情节下,在拍摄图像时使用如上所述的机械移位来对准(移位)选定对象。
图6描述了根据本文所描述用于相机垂直于相机的光轴移动的情况的方法的一实施例所获得的背景模糊的结果。更详细地说,帧(a)示出了具有对象(人形)600以及于对象600后面包括两棵树602a和602b的背景的图像。对象600’代表已移位的对象600。帧(a)对应于图像录制开始时传感器上的初始场景。帧(b)示出了在未使用对准的情况下,由于相机的移动导致的相对于帧(a)的位置向右移动的图像。帧(c)示出了场景(b)通过移动视场以对准对象600’来进行光学地及/或数字地对准(移位),以便选定对象位于与帧(a)相同的位置。注意,所述移位将传感器上的树602a’和602b’向左移动。帧(c)对应于图像录制结束时传感器上的最终场景。帧(d)示出了来自拍摄的开始步骤704(帧a)和结束步骤710(帧c)的帧(a)和(c)的对象600和树602a和602b的重叠图像。帧(e)示出了最终的拍摄结果,其包括在录制期间在传感器上所捕获的光(步骤704–708)。这包括第一个场景(a)、最后一个场景(c)以及在其间的所有场景。
在第四个情节中,可以使用上述第一个、第二个和第三个情节的任意组合。
图7在流程图中示出了用于获取描述本文所公开的对象的运动感的图像的方法的示例性实施例。所述流程从观察包括由对象的移动或相机的移动所引起的运动的一个场景开始。在步骤702中选择要追踪的对象,并且在步骤704中开始录制图像或视频流,在录制图像或视频流期间,通过移动的对象或移动的相机来追踪对象。在步骤706中,对在图像或视频流中看到的对象执行移位、缩放和旋转计算。如从708到706的箭头所示,追踪、缩放、移位和旋转修改在每个帧(或每个X集帧)中重新计算。在步骤708中,在一些实施例中,对象被光学地及/或数字地对准以确保它在相机的图像传感器上保持在相同的位置。在涉及多帧的一些实施例中,对象的剩余对准可以在录制结束后在步骤712中数字地进行,或者通过机械对准和数字对准的组合来进行。在用于产生包括图像流的视频的一些实施例中,可执行对象的对准使得对象出现在流的所有图像的视场内的相同位置。
在用于产生包括图像流的视频的其他实施例中,可执行对象的对准使得对象看起来以角速度ω移动,所述角速度ω近似地对应于在步骤708中没有执行光学对准的情况下对象将在场景内移动的角速度。在一些实施例中,所产生的图像流可以用用于拍摄视频的速度(由用于视频的帧速率(fps)所定义)来播放。在其他实施例中,所产生的图像流可以用更高的fps播放以实现艺术的延时效果,或者用更低的fps播放以实现艺术的慢动作效果。fps可以不是恒定的,而是可以在产生视频的过程中进行修改。这对于强调在视场内的特定片段或强调显示视频拍摄期间可能发生的特定事件可能是有益的。
在一个示例中,可以通过以下或类似的序列强调视频中的特定事件:
-以恒定的fps播放视频的第一个序列,例如,使用录制视频的fps,
-以逐渐降低的fps播放视频的第二个序列,直到要被强调的事件发生,
-在所强调的事件发生后以恒定的fps播放视频的第三个序列,
-在事件发生后以逐渐增加的fps播放视频的第四个序列,直到达到第一个序列的fps为止,
-以第一个序列的恒定fps播放视频的第五个序列。
在步骤710中完成图像或视频流的录制,产生具有模糊背景的图像。
在一些示例中,对象可能是移动对象。这暗示着为了产生结果图像,不可能使用存在于每个帧中的整个图像数据,但是可以仅使用来自存在于图像序列的每个图像中的图像片段的图像数据。
在图7中所执行的一些步骤的更多细节于下面叙述。
对象/被摄物选择步骤702
要追踪的对象或被摄物的选择可以通过几种方式来完成。选定对象可以通过矩形的感兴趣区域(region of interest,ROI)或通过图像内的屏蔽区域来识别。识别的标记可以使用自动选择、用户选择或用户选择及数字细化(digital refinement)来完成,所有这些在本领域都是已知的。可以使用本领域已知的具有改进鲁棒性(robustness)的追踪方法。追踪方法不仅可以依赖于单个对象特征,还可以依赖于多个对象特征。
图像或视频流的录制,步骤704-710
录制可使用单次长曝光或是通过拍摄多个短曝光图像的一序列并平均它们来执行,如下:
a)单次长曝光,使用长时间快门速度。光圈和数字/模拟增益自动调整,以达到相同的亮度水平。
b)使用短曝光和平均的多张图像。由于在对多个图像进行平均时噪声会减少,因此曝光时间可以很短。对于视频模式,输出可以是取最后一帧的平均值,例如,取最后10到30帧的平均值。
c)使用具有不同传感器像素功能性的单一相机(例如折叠相机804,也在图8A中示出),亦即,一些(多个)传感器像素经历短的多次曝光,而其他传感器像素经历长曝光。例如,通过使用四元(Quad)传感器(参见例如日本专利申请号2019041178),四元拜耳(quad-Bayer)像素结构使得能够在四个像素的群组内具有两次曝光。在这种情况下,图像传感器上的像素选择是用于长曝光,剩余的像素则是用于短曝光。最终图像是来自长曝光像素和短曝光像素的图像数据的组合。
在一些实施例中,可以产生并输出单一图像以向用户显示。在其他实施例中,可以产生图像流(亦即,视频)以供输出。在产生视频流的例子中,对于视频的特定序列可能需要特定程度的模糊。这可以通过调整用于平均(或平均)的帧的数目来实现。在一个示例中,对于具有第一模糊度的第一序列,可以平均10到30帧,而对于具有第二模糊度的第二序列,可以平均30到60帧。所产生的视频的第二序列具有比第一序列更高的模糊度。在另一实例中,可平均5到10帧以获得表现出比第一和第二序列更弱的模糊的第三序列。用户或程序可以定义“后拍摄”(亦即,在拍摄图像流之后的任意时间)中的模糊程度。在又一示例中,为了强调场景中的特定事件,可以期望逐渐增加模糊程度直到事件发生,在事件期间保持恒定的模糊程度,然后逐渐减小模糊程度。由于模糊依赖于对出现于不同帧中的图像数据的平均,因此模糊程度不能连续地而只能在离散的阶状中修改。在一些示例中,离散阶状通过将一个或多个帧添加至已平均的帧序列或帧集合或是从已平均的帧序列或帧集合减去一个或多个帧来进行。为了实现连续的模糊修改,可将本领域已知的人工模糊叠加在通过图像平均所实现的模糊上。本领域已知的人工模糊也可用于在如本文所述的所产生的单一图像内连续地修改模糊程度。
计算移位、缩放和旋转步骤706
在一示例性实施例中,对象可例如使用于共同拥有的国际专利申请PCT/IB2016/052179、PCT/IB2016/055308、PCT/IB2016/057366及PCT/IB2019/053315中所描述的已知相机以下面概述的多个方式的一个来追踪对象,且可根据追踪结果计算移位、缩放和旋转。
1.使用具有不同传感器像素功能的单一相机(例如,折叠相机804,也在图8A中示出),亦即,一些(多个)传感器像素经历短的多次曝光,而其他传感器像素经历长曝光。使用来自传感器806上的一些(多个)像素的信息(例如,像素总数的1/16)来进行对象移位、缩放和旋转计算。在相机804上进行机械对准。对传感器806的剩余像素(亦即,未使用在对象移位、缩放和旋转计算中的像素总数的15/16)执行图片录制步骤704-710。
2.或者是,使用单一相机,在如图8B所示的相同的相机传感器(例如,传感器806)上进行对象移位计算和图片录制。对象在视频流上被追踪,并计算移位、缩放和旋转。在追踪的同时进行机械对准(步骤708)。
3.使用例如在PCT/IB2016/057366中所描述并在图8B和图9中所示出的双相机:双相机包括具有传感器802的第一直立相机800和具有传感器806的第二折叠相机804。相机800可以是红外线(IR)、可见光、结构光或任何其他类型的光,并且用于追踪对象。机械对准和图片录制在相机804上进行。对象位置(移动、缩放和旋转)计算通过使用来自传感器802的信息追踪对象来进行。为了估计相机804所需的对准(对于步骤708),传感器之间的移位、缩放和旋转是使用特征匹配和相机之间的先前校准来计算。相机(例如,相机804)(参见图8A)及包括相机800和相机804的双相机(参见图8B)可以被包括在主机设备(例如,电子设备900)中。
在一些实施例中,可以对正在移动的对象进行未来位置的推断(估计)。所述推断可基于在被拍摄的帧中所检测到的参数(例如,过去的移位、缩放及旋转)。这些可提供未来的移位、缩放及旋转的估计。所述估计可例如通过过去的移位、缩放及旋转的线性外推法(linear extrapolation)来进行。在另一实施例中,可进行非线性外推法。所述推断也可或者是基于机器学习或本领域中已知的其他技术。所述推断可有益于在步骤708中进行有意义的机械对准。例如,可考虑在场景的视场(FOV)内以角速度ωObject移动的物体,所述视场可能更小但仍以可进行视场扫描移动(进行机械对准可能所需的)的最大角速度ωScan的顺序移动,例如,通过旋转光路折叠组件进行该视场扫描移动。在本示例中,所述推断对于确实能够将对象对准于图像传感器上的特定位置的机械移动可能是至关重要的。在一些实施例中,可以在拍摄例如2到4个帧所需的时间尺度上进行外推法。在其他实施例中,例如,需要更大机械对准的冲程(strokes)的实施例,可以在拍摄例如4到10个帧或更多帧所需的时间尺度上进行外推法。
在一些实施例中,可进行数字对准以对所拍摄的实际移动和已进行外推法的移动之间的偏差进行补偿。
其他实施例可以使用其他单一、双或多孔径相机来进行对象追踪、图片录制或两者。
机械对准步骤708
在示例性实施例中,在传感器上的对象的对准、移位、旋转和变焦可以光学地及/或数字地(后者是使用数字视频流)进行。可使用以下类型的机械对准:
例如,在图8B所示及在PCT/IB2019/053315中所描述的双相机中的棱镜移动以匹配对象移位。光路折叠组件(例如,棱镜)808可以围绕两个轴(各个轴是一自由度(degreeof freedom,DOF))折叠光路。所述两个自由度是围绕平行于第一光路814(X轴)的偏航旋转轴812的偏航旋转810以及围绕平行于Y轴的俯仰旋转轴818的俯仰旋转816。通过棱镜移动的视场扫描不是瞬时进行的,而是需要一定的稳定时间。通过棱镜移动的视场扫描可以在大约1到30毫秒的时间尺度上扫描例如2°到5°,并且在大约15到80毫秒的时间尺度上扫描10到25°。
1.镜头移动或相机模块移动,以修改相机的横向位置或倾斜角度以匹配对象移位,例如在PCT/IB2016/052179中所描述的移位。例如,镜头模块的移动可使用在X方向822上的致动器来进行,所述镜头模块的移动对应于对象在Z方向和Y方向820上的移位。倾斜移动可转换为沿着耦接于致动器的光学元件的光轴的线性位移。两个致动器可组合成一个例如共同拥有的PCT/IB2019/053315所述的能够提供双轴倾斜的组件。
2.机械变焦调整以匹配对象比例。一些先进的相机设计可能包括不同的镜头组,这些镜头组可以相互移动,从而改变相机的有效焦距以产生光学变焦的能力。机械变焦可用于光学地对准对象比例。
3.机械对准以匹配对象旋转。例如,光路折叠组件倾斜创建的图像滚动运动补偿对象旋转。通过组合棱镜围绕两个轴(Y-818和X-812)的旋转,并通过在Y方向上移位棱镜,可以实现对物体的正切旋转(在滚动轴上)的补偿。所述机制在申请人的国际专利申请PCT/IB2016/055308中有详细描述。
注意,其他配置可使用利用电机或运动控制的替代外部或内部机械对准组件。
方法的一些实施例可被配置成拍摄具有非常弱的光的场景,例如夜空。用于夜空拍摄的实施例可类似于所谓的“星体追踪器”三脚架,亦即,跟随星体的运动以长曝光时间拍摄天空(“天体摄影”)的三脚架。天体摄影通常在约0.1到0.0001勒克斯的光条件下进行。对于天体摄影而言,将相机主机设备放置在静止物体(相对于地球)处或将相机主机设备固定连接到静止物体上可能是有益的。地球相对于星体进行相对运动,因此对于地球上的摄影师而言,星体可以以大约ω≈4·10-3度/秒的角速度ω移动,所述角速度ω源自地球在约24小时内360度的旋转(转化为大约每小时15度或每分钟1/4度)。众所周知,实际的角速度取决于摄影师在地球上的具***置或坐标。在光学对准步骤708中,可以使用类似于星体运动的光路折叠组件或镜头或传感器或相机来进行运动。在一示例中,步骤708中的光学对准可以仅取决于用户的位置及相机在地球上的方向,亦即,不需要进一步的信息(例如来,来自相机的图像信息)。用户的位置和相机的方向可通过已知的相机主机设备直接获取,或者例如通过外部设备(例如,WiFi)供应已知位置的设备间接获取。
一般来说,摄影师使用“600法则”(有时也使用“500法则”)。600法则提供了可用于天体摄影的给定相机设置的最大可能曝光时间TMax的粗略估计。也就是说,在TMax时间对传感器进行曝光有望在尚未在图像中产生星迹(star trails)的同时提供最大的信号捕获。600法则规定TMax(以秒为单位)由以下公式给出:
Figure BDA0002938036150000171
其中CF是相机传感器的焦距转换率(crop factor),EFL是本领域已知的有效焦距(以毫米为单位:)。通常,移动设备所包括的相机的有效焦距例如在EFL=2.5毫米(对于超广角相机(Ultra-Wide cameras))到EFL=25毫米(对于远程相机)的范围内。通常,移动设备所包括的相机的焦距转换率例如在CF=2.5(对于大的1/1”传感器)到CF=10(对于1/4”传感器)的范围内。以极端情况(a)CF=2.5和EFL=2.5毫米(大传感器和大视场)和(b)CF=10和EFL=25毫米(小传感器和窄视场)为例,在移动天体摄影的背景下得到的TMax值为T1 Max≈100秒和T2 Max≈2.4秒。第二个示例(CF=10,EFL=25毫米)例如可对应于具有高变焦因子的折叠远程相机。利用本文所描述并应用在天体摄影场合中的用于通过在图像传感器上光学地对准星体来补偿星体运动的方法,可以使用显著更长的曝光时间,同时仍然获得没有星迹的清晰夜空图像。显著更长的曝光时间可意味着这里的曝光时间比使用600法则所估计的时间长1.5到40倍。从第二个示例可明显看出,这可能特别适用于远程相机。在其它示例中,在步骤712中,星体可不进行光学地对准,而是可进行数字地对准。在另一些例子中,星体可以通过光学和数字对准的组合来进行对准。
图9示意性地示出了编号为900的电子设备的实施例,所述电子设备包括具有至少一个扫描远程相机的多孔径相机。电子设备900可例如是智能手机、平板电脑或笔记本电脑。电子设备900包括包括用于视场扫描的光路折叠组件912的第一扫描远程相机模块910和形成通过第一图像传感器916所录制的第一图像的第一镜头模块918。第一镜头致动器924可以移动用于聚焦及/或光学图像稳定(OIS)的镜头模块918。在一些实施例中,电子设备900还可以包括应用处理器(AP)940,其包括对象对准器942和图像/视频产生器944。在一些实施例中,第一校准数据可以存储在相机模块的第一存储器922中,例如电可擦除可编程只读存储器(EEPROM)。在其他实施例中,第一校准数据可以存储在电子设备900的第三存储器950中,例如非易失性存储器(NVM)。第一校准数据可包括在广角相机模块930的传感器和远程相机模块910的传感器之间的校准数据。在一些实施例中,第二校准数据可以存储在第二存储器938中。在其它实施例中,第二校准数据可以存储在第三存储器950中。在其它实施例中,应用处理器940可以接收分别存储在位于相机模块910上的第一存储器和位于相机模块930上的第二存储器中的校准数据。第二校准数据可包括在广角相机模块930的传感器和远程相机模块910的传感器之间的校准数据。电子设备900还包括具有视场比相机模块910的视场还大的广角(或超广角)相机模块930,所述广角(或超广角)相机模块930包括形成通过第二图像传感器934所录制的图像的第二镜头模块932。第二镜头致动器936可移动用于聚焦及/或光学图像稳定的镜头模块932。
在使用中,处理单元(例如,应用处理器940)可从相机模块910和930分别接收第一和第二图像数据,并向相机模块910和930提供相机控制信号。相机控制信号可包括给光路折叠组件致动器914的控制信号,其可响应于控制信号以旋转光路折叠组件912来进行视场扫描。视场扫描可用于在步骤708中的将选定对象光学地(或机械地)对准于图像传感器上的给定位置。在一些实施例中,光路折叠组件致动器914可驱动用于光学图像稳定的光路折叠组件912。在一些实施例中以及例如为了执行步骤706,应用处理器940可以从相机模块930接收第二图像数据。对象对准器942可以是处理器,其被配置为使用第二图像数据来追踪选定对象并计算发送到远程相机910的控制信号以将选定对象光学地对准于图像传感器上的给定位置。在其它实施例中,对象对准器942可使用第一图像数据来追踪选定对象。在其它实施例中,对象对准器942可被配置成步骤712的将对象数字地对准于图像传感器上的给定位置。在一些实施例中,对象对准器942可被配置为使用第一图像数据及/或第二图像数据来推断(估计)正在移动的对象的未来位置。图像或视频产生器944可被配置成分别产生如图7中所述的图像和图像流。在一些实施例中,图像/视频产生器944可被配置成对来自多个单一图像的第一图像数据进行平均。在一些实施例中,图像/视频产生器944可被配置成产生人工图像。在一些实施例中,图像/视频产生器944可被配置成产成包括人工模糊的图像。
除非另有说明,在供选择的选项列表的最后两个项目之间使用措辞“及/或”表示对所列选项中的一个或多个的选择是适当的且可进行选择。
应当理解,在权利要求或说明书提及“一”(a)或“一”(an)组件的情况下,这类所提及的事物不应被解释为仅有一个所述组件。
应当理解,为清楚起见,在单一实施例或示例的上下文中所描述的本发明中的某些特征也可以在单一实施例中以组合的形式提供。相反地,为简洁起见,在单一实施例的上下文中所描述的本发明中的各种特征也可以单独地或以任何合适的子组合方式或在任何其他描述的实施例中适当地提供。在各种实施例的上下文中所描述的某些特征不应被视为这些实施例的基本特征,除非所述实施例在没有这些组件的情况下是不能实施的。
虽然本揭露描述了有限数量的实施例,但是应当理解,可以对这些实施例进行许多变化、修改和其他应用。一般而言,本揭露应理解为不受本文所描述的具体实施例的限制,而仅受所附权利要求书的范围的限制。
本说明书中提及的所有参考文献通过引用全部并入本说明书中,其程度与每个单独的参考文献被明确且单独地指示通过引用并入本文中的程度相同。此外,引用或识别本申请中的任何引用不应被解释为承认所述引用作为可用于本申请的现有技术。

Claims (23)

1.一种方法,包括:在具有一图像传感器的一成像设备中,
a)在一场景中选定要追踪的一对象;
b)录制一图像或一图像流以提供一相应的录制图像或录制图像流;以及
c)在所述选定对象相对于所述成像设备或相对于所述场景移动的时候,将所述选定对象对准于图像传感器上的一相同给定位置,从而创建相对于所述选定对象的一模糊的图像背景及/或前景。
2.如权利要求1所述的方法,其中所述对准包括将所述选定对象光学地对准于所述图像传感器上的一相同给定位置。
3.如权利要求1所述的方法,其中所述成像设备包括具有一第一图像传感器的一第一相机和具有一第二图像传感器的一第二相机,其中所述录制和对准是使用所述第一相机进行,以及其中所述对准所需的至少一个参数是使用所述第二相机所提供的信息进行计算。
4.如权利要求1所述的方法,其中所述图像传感器包括提供用于计算所述对准所需的至少一个参数的信息的第一多个像素,以及用于所述录制的第二多个像素。
5.如权利要求1所述的方法,其中所述录制包括录制多个帧,以及其中所述对准包括将所述选定对象光学地对准于所述图像传感器上的一类似位置且进一步将所述选定对象数字地对准于所述图像传感器上的所述相同给定位置。
6.如权利要求1所述的方法,其中所述录制包括录制多个帧,以及其中所述对准包括将所述选定对象光学地对准于所述图像传感器上的多个离散像素且进一步将所述选定对象数字地对准于所述图像传感器上的所述相同给定位置。
7.如权利要求1所述的方法,其中所述录制图像流包括多个单一图像,以及其中所述方法还包括使用单一图像数据产生人工图像数据。
8.如权利要求1所述的方法,还包括以不同于用于录制所述图像流的帧速率的帧速率(fps)播放所述录制图像流。
9.如权利要求1所述的方法,其中所述录制图像流被分为两个或多个序列,以及其中所述方法还包括以不同的帧速率播放各个序列。
10.如权利要求1所述的方法,还包括将所述录制图像流分为两个或多个显示不同模糊程度的序列。
11.如权利要求1所述的方法,其中所述对准包括对所述选定对象的一未来位置进行推断。
12.如权利要求1所述的方法,其中所述选定对象包括一星体。
13.如权利要求3所述的方法,其中所述对准所需的所述至少一个参数是从由一移位参数、一缩放参数及一旋转参数所组成的群组中选择。
14.如权利要求3所述的方法,其中所述录制包括录制多个帧,以及其中所述对准包括将所述选定对象光学地对准于所述第一图像传感器上的一类似位置且进一步将所述选定对象数字地对准于所述第一图像传感器上的所述相同给定位置。
15.如权利要求3所述的方法,其中所述录制包括录制多个帧,以及其中所述对准包括将所述选定对象光学地对准于所述图像传感器上的多个离散像素且进一步将所述选定对象数字地对准于所述图像传感器上的所述相同给定位置。
16.如权利要求3所述的方法,其中所述第一相机及所述第二相机之间的校准数据是存储在一非易失性存储器中。
17.如权利要求4所述的方法,其中所述第一和第二多个像素相加为传感器像素的总数。
18.如权利要求4所述的方法,其中所述对准所需的所述至少一个参数是从由一移位参数、一缩放参数及一旋转参数所组成的群组中选择。
19.如权利要求7所述的方法,其中所述人工图像数据用于增加图像模糊的均匀性。
20.一种***,包括:
a)一成像设备,其包括用于录制一图像或一图像流以提供一相应的录制图像或录制图像流的一图像传感器;以及
b)一处理器,其被配置为在一场景中选定要追踪的一对象,以及在所述选定对象相对于所述成像设备或相对于所述场景移动的时候,将所述选定对象对准于所述图像传感器上的一相同给定位置,从而创建相对于所述选定对象的一模糊的图像背景及/或前景。
21.如权利要求20所述的***,其中将所述选定对象对准于所述图像传感器上的一相同给定位置的所述处理器配置包括指示一反射组件对包括所述对象的一视场进行扫描的一配置。
22.如权利要求20所述的***,其中所述成像设备包括一第一相机及一第二相机。
23.如权利要求20所述的***,其中所述***是一智能手机。
CN202080004470.9A 2019-07-31 2020-06-09 在相机摇摄或运动中创建背景模糊的***及方法 Pending CN112585644A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201962881007P 2019-07-31 2019-07-31
US62/881,007 2019-07-31
PCT/IB2020/055428 WO2021019318A1 (en) 2019-07-31 2020-06-09 System and method for creating background blur in camera panning or motion

Publications (1)

Publication Number Publication Date
CN112585644A true CN112585644A (zh) 2021-03-30

Family

ID=74230207

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080004470.9A Pending CN112585644A (zh) 2019-07-31 2020-06-09 在相机摇摄或运动中创建背景模糊的***及方法

Country Status (6)

Country Link
US (2) US11368631B1 (zh)
EP (1) EP3837662A4 (zh)
KR (6) KR102640227B1 (zh)
CN (1) CN112585644A (zh)
IL (3) IL297759B2 (zh)
WO (1) WO2021019318A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115334243A (zh) * 2022-08-23 2022-11-11 维沃移动通信有限公司 拍摄方法及其装置

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220137700A1 (en) * 2020-10-30 2022-05-05 Rovi Guides, Inc. System and method for selection of displayed objects by path tracing
EP4241234A4 (en) * 2021-06-03 2024-05-01 Samsung Electronics Co., Ltd. METHOD AND ELECTRONIC DEVICE FOR RECTIFYING AN IMAGE
US11989848B2 (en) * 2021-09-17 2024-05-21 Yembo, Inc. Browser optimized interactive electronic model based determination of attributes of a structure
KR20230060304A (ko) * 2021-10-27 2023-05-04 삼성전자주식회사 복수의 렌즈들을 구비하는 전자 장치 및 그 제어 방법
WO2024085494A1 (ko) * 2022-10-18 2024-04-25 삼성전자주식회사 디지털 보케 성능 향상을 위한 전자 장치 및 방법
CN117635506B (zh) * 2024-01-24 2024-04-05 成都航天凯特机电科技有限公司 一种基于AI赋能Mean Shift算法的图像增强方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101221341A (zh) * 2007-01-08 2008-07-16 华晶科技股份有限公司 景深构图设定方法
CN105488511A (zh) * 2015-11-25 2016-04-13 小米科技有限责任公司 图像的识别方法及装置
CN105847662A (zh) * 2015-06-19 2016-08-10 维沃移动通信有限公司 一种基于移动终端的运动物体拍摄方法和移动终端

Family Cites Families (329)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4199785A (en) 1979-01-05 1980-04-22 Honeywell Inc. Electronic zoom system
JPS59191146A (ja) 1983-04-13 1984-10-30 Hitachi Ltd 光学走査装置
US5099263A (en) 1984-11-10 1992-03-24 Minolta Camera Kabushiki Kaisha Variable focal length camera
DE58902538D1 (de) 1988-05-19 1992-12-03 Siemens Ag Verfahren zur beobachtung einer szene und einrichtung zur durchfuehrung des verfahrens.
DE3927334C1 (zh) 1989-08-18 1991-01-10 Messerschmitt-Boelkow-Blohm Gmbh, 8012 Ottobrunn, De
JP2703105B2 (ja) 1989-10-20 1998-01-26 富士写真フイルム株式会社 手振れ補正装置
US5032917A (en) 1990-03-12 1991-07-16 Rca Licensing Corporation Video signal blending apparatus
JPH0443773A (ja) 1990-06-11 1992-02-13 Matsushita Electric Ind Co Ltd 演算回路
US5041852A (en) 1990-10-18 1991-08-20 Fjui Photo Film Co., Ltd. Camera shake correction system
JP3261152B2 (ja) 1991-03-13 2002-02-25 シャープ株式会社 複数の光学系を備えた撮像装置
US5394520A (en) 1991-09-26 1995-02-28 Hughes Aircraft Company Imaging apparatus for providing a composite digital representation of a scene within a field of regard
US5657402A (en) 1991-11-01 1997-08-12 Massachusetts Institute Of Technology Method of creating a high resolution still image using a plurality of images and apparatus for practice of the method
US5248971A (en) 1992-05-19 1993-09-28 Mandl William J Method and apparatus for multiplexed oversampled analog to digital modulation
JPH06177706A (ja) 1992-12-08 1994-06-24 Sony Corp 信号処理装置
EP0605045B1 (fr) 1992-12-29 1999-03-31 Laboratoires D'electronique Philips S.A.S. Procédé et dispositif de traitement d'images pour construire une image à partir d'images adjacentes
US5682198A (en) 1993-06-28 1997-10-28 Canon Kabushiki Kaisha Double eye image pickup apparatus
US6128416A (en) 1993-09-10 2000-10-03 Olympus Optical Co., Ltd. Image composing technique for optimally composing a single image from a plurality of digital images
JP3355787B2 (ja) 1994-05-20 2002-12-09 ソニー株式会社 光軸補正機構
US6714665B1 (en) 1994-09-02 2004-03-30 Sarnoff Corporation Fully automated iris recognition system utilizing wide and narrow fields of view
CA2155719C (en) 1994-11-22 2005-11-01 Terry Laurence Glatt Video surveillance system with pilot and slave cameras
JPH08271976A (ja) 1995-03-29 1996-10-18 Canon Inc カメラ
US5768443A (en) 1995-12-19 1998-06-16 Cognex Corporation Method for coordinating multiple fields of view in multi-camera
US5982951A (en) 1996-05-28 1999-11-09 Canon Kabushiki Kaisha Apparatus and method for combining a plurality of images
US5926190A (en) 1996-08-21 1999-07-20 Apple Computer, Inc. Method and system for simulating motion in a computer graphics application using image registration and view interpolation
JPH10126796A (ja) 1996-09-12 1998-05-15 Eastman Kodak Co デュアル・モード・ソフトウェア処理を用いた動画・静止画像用デジタル・カメラ
US5960218A (en) 1997-02-18 1999-09-28 Mobi Corporation Dual focal length camera
US5940641A (en) 1997-07-10 1999-08-17 Eastman Kodak Company Extending panoramic images
US6148120A (en) 1997-10-30 2000-11-14 Cognex Corporation Warping of focal images to correct correspondence error
US6341180B1 (en) 1997-12-18 2002-01-22 Cellavision Ab Image content autofocus for microscopy using a noise-insensitive focus filter
JP3695119B2 (ja) 1998-03-05 2005-09-14 株式会社日立製作所 画像合成装置、及び画像合成方法を実現するプログラムを記録した記録媒体
US6208765B1 (en) 1998-06-19 2001-03-27 Sarnoff Corporation Method and apparatus for improving image resolution
GB9823689D0 (en) 1998-10-30 1998-12-23 Greenagate Limited Improved methods and apparatus for 3-D imaging
US6611289B1 (en) 1999-01-15 2003-08-26 Yanbin Yu Digital cameras using multiple sensors with multiple lenses
US20020063711A1 (en) 1999-05-12 2002-05-30 Imove Inc. Camera system with high resolution image inside a wide angle view
US20020075258A1 (en) 1999-05-12 2002-06-20 Imove Inc. Camera system with high resolution image inside a wide angle view
US6738073B2 (en) 1999-05-12 2004-05-18 Imove, Inc. Camera system with both a wide angle view and a high resolution view
US6346950B1 (en) 1999-05-20 2002-02-12 Compaq Computer Corporation System and method for display images using anamorphic video
US7038716B2 (en) 1999-07-30 2006-05-02 Pixim, Inc. Mobile device equipped with digital image sensor
US7015954B1 (en) 1999-08-09 2006-03-21 Fuji Xerox Co., Ltd. Automatic video system using multiple cameras
US6650368B1 (en) 1999-10-26 2003-11-18 Hewlett-Packard Development Company, Lp. Digital camera and method of enhancing zoom effects
US6643416B1 (en) 1999-11-30 2003-11-04 Eastman Kodak Company Method for determining necessary resolution for zoom and crop images
US20020005902A1 (en) 2000-06-02 2002-01-17 Yuen Henry C. Automatic video recording system using wide-and narrow-field cameras
JP2002010276A (ja) 2000-06-22 2002-01-11 Olympus Optical Co Ltd 撮像装置
JP4501239B2 (ja) 2000-07-13 2010-07-14 ソニー株式会社 カメラ・キャリブレーション装置及び方法、並びに、記憶媒体
US7002583B2 (en) 2000-08-03 2006-02-21 Stono Technologies, Llc Display of images and image transitions
US6778207B1 (en) 2000-08-07 2004-08-17 Koninklijke Philips Electronics N.V. Fast digital pan tilt zoom video
US7345277B2 (en) 2000-08-09 2008-03-18 Evan Zhang Image intensifier and LWIR fusion/combination system
JP2002214662A (ja) 2001-01-23 2002-07-31 Olympus Optical Co Ltd 光学装置の振れ補正装置
US6741250B1 (en) 2001-02-09 2004-05-25 Be Here Corporation Method and system for generation of multiple viewpoints into a scene viewed by motionless cameras and for presentation of a view path
US7346217B1 (en) 2001-04-25 2008-03-18 Lockheed Martin Corporation Digital image enhancement using successive zoom images
JP2002341220A (ja) 2001-05-14 2002-11-27 Olympus Optical Co Ltd 光学機器
GB0116877D0 (en) 2001-07-10 2001-09-05 Hewlett Packard Co Intelligent feature selection and pan zoom control
US6680748B1 (en) 2001-09-27 2004-01-20 Pixim, Inc., Multi-mode camera and method therefor
US20030093805A1 (en) 2001-11-15 2003-05-15 Gin J.M. Jack Dual camera surveillance and control system
US7339621B2 (en) 2001-12-13 2008-03-04 Psion Teklogix Systems, Inc. Imager output signal processing
JP4198449B2 (ja) 2002-02-22 2008-12-17 富士フイルム株式会社 デジタルカメラ
JP2003298920A (ja) 2002-03-29 2003-10-17 Fuji Photo Film Co Ltd デジタルカメラ
GB2388265B (en) 2002-04-30 2005-10-12 Hewlett Packard Co Improvements in and relating to processing of images
JP4657564B2 (ja) 2002-04-30 2011-03-23 イーストマン コダック カンパニー 電子スチルカメラ及び画像処理方法
CA2386560A1 (en) 2002-05-15 2003-11-15 Idelix Software Inc. Controlling optical hardware and dynamic data viewing systems with detail-in-context viewing tools
JP3870124B2 (ja) 2002-06-14 2007-01-17 キヤノン株式会社 画像処理装置及びその方法、並びにコンピュータプログラム及びコンピュータ可読記憶媒体
US6839067B2 (en) 2002-07-26 2005-01-04 Fuji Xerox Co., Ltd. Capturing and producing shared multi-resolution video
US20040061788A1 (en) 2002-09-26 2004-04-01 Logitech Europe S.A. Multiple mode capture button for a digital camera
JP4481560B2 (ja) 2002-10-08 2010-06-16 オリンパス株式会社 レンズ鏡筒
US7321470B2 (en) 2002-10-08 2008-01-22 Olympus Corporation Camera
GB2394852B (en) 2002-10-31 2006-12-20 Hewlett Packard Co Image capture systems using motion detection
JP2004219569A (ja) 2003-01-10 2004-08-05 Olympus Corp 電子撮像装置
JP3861815B2 (ja) 2003-01-17 2006-12-27 コニカミノルタフォトイメージング株式会社 手振れ補正機能付きカメラ
JP4055599B2 (ja) 2003-02-13 2008-03-05 コニカミノルタオプト株式会社 撮像レンズ装置およびそれを備えた電子機器
AU2003236050A1 (en) 2003-03-20 2004-10-11 Seijiro Tomita Panoramic picture creating method and device, and monitor system using the method and device
CN1574894A (zh) 2003-06-02 2005-02-02 宾得株式会社 多焦距成像装置和具有该多焦距成像装置的移动装置
US7596284B2 (en) 2003-07-16 2009-09-29 Hewlett-Packard Development Company, L.P. High resolution image reconstruction
US7619683B2 (en) 2003-08-29 2009-11-17 Aptina Imaging Corporation Apparatus including a dual camera module and method of using the same
JP2005099265A (ja) 2003-09-24 2005-04-14 Fujinon Corp 撮像装置および撮像方法、ならびに測距方法
EP1536633A1 (en) 2003-11-27 2005-06-01 Sony Corporation Photographing apparatus and method, supervising system, program and recording medium
JP2005208194A (ja) 2004-01-21 2005-08-04 Konica Minolta Photo Imaging Inc 撮影装置
KR20050090780A (ko) 2004-03-10 2005-09-14 삼성전자주식회사 영상촬영장치
WO2006040687A2 (en) 2004-07-19 2006-04-20 Grandeye, Ltd. Automatically expanding the zoom capability of a wide-angle video camera
WO2006008805A1 (ja) 2004-07-20 2006-01-26 Five Dimension Co., Ltd. 電子撮像装置
US7564019B2 (en) 2005-08-25 2009-07-21 Richard Ian Olsen Large dynamic range cameras
EP1812968B1 (en) 2004-08-25 2019-01-16 Callahan Cellular L.L.C. Apparatus for multiple camera devices and method of operating same
US7916180B2 (en) 2004-08-25 2011-03-29 Protarius Filo Ag, L.L.C. Simultaneous multiple field of view digital cameras
US7465107B2 (en) 2004-09-21 2008-12-16 Canon Kabushiki Kaisha Photographing apparatus and control method therefor
JP2006092156A (ja) * 2004-09-22 2006-04-06 Namco Ltd プログラム、情報記憶媒体及び画像生成装置
KR101054344B1 (ko) 2004-11-17 2011-08-04 삼성전자주식회사 박막 트랜지스터 표시판 및 그 제조 방법
US7688364B2 (en) 2004-12-10 2010-03-30 Ambarella, Inc. Decimating and cropping based zoom factor for a digital camera
US20060126737A1 (en) * 2004-12-15 2006-06-15 International Business Machines Corporation Method, system and program product for a camera to track an object using motion vector data
KR100636969B1 (ko) 2004-12-30 2006-10-19 매그나칩 반도체 유한회사 Isp 내장형 이미지 센서 및 듀얼 카메라 시스템
US7573514B2 (en) 2005-02-03 2009-08-11 Eastman Kodak Company Digital imaging system with digital zoom warning
US7663662B2 (en) 2005-02-09 2010-02-16 Flir Systems, Inc. High and low resolution camera systems and methods
US7206136B2 (en) 2005-02-18 2007-04-17 Eastman Kodak Company Digital camera using multiple lenses and image sensors to provide an extended zoom range
US20060187322A1 (en) 2005-02-18 2006-08-24 Janson Wilbert F Jr Digital camera using multiple fixed focal length lenses and multiple image sensors to provide an extended zoom range
US7561191B2 (en) 2005-02-18 2009-07-14 Eastman Kodak Company Camera phone using multiple lenses and image sensors to provide an extended zoom range
US7236306B2 (en) 2005-02-18 2007-06-26 Eastman Kodak Company Digital camera using an express zooming mode to provide expedited operation over an extended zoom range
US7256944B2 (en) 2005-02-18 2007-08-14 Eastman Kodak Company Compact image capture assembly using multiple lenses and image sensors to provide an extended zoom range
JP2006238325A (ja) 2005-02-28 2006-09-07 Canon Inc カメラシステム
KR100658150B1 (ko) 2005-04-08 2006-12-15 삼성전기주식회사 카메라 모듈 및 이의 제작방법
WO2006137253A1 (ja) 2005-06-22 2006-12-28 Matsushita Electric Industrial Co., Ltd. 画像生成装置および画像生成方法
KR20070005946A (ko) 2005-07-05 2007-01-11 엘지전자 주식회사 휴대 단말기용 카메라 렌즈의 위치 검출 장치
JP2007033879A (ja) 2005-07-27 2007-02-08 Sony Corp 撮像レンズ装置及び撮像装置
US7424218B2 (en) 2005-07-28 2008-09-09 Microsoft Corporation Real-time preview for panoramic images
JP4573724B2 (ja) 2005-08-01 2010-11-04 イーストマン コダック カンパニー 複数光学系を有する撮像装置
JP4573725B2 (ja) 2005-08-01 2010-11-04 イーストマン コダック カンパニー 複数光学系を有する撮像装置
US7964835B2 (en) 2005-08-25 2011-06-21 Protarius Filo Ag, L.L.C. Digital cameras with direct luminance and chrominance detection
JP4188394B2 (ja) * 2005-09-20 2008-11-26 フジノン株式会社 監視カメラ装置及び監視カメラシステム
DE602006017102D1 (de) 2005-11-14 2010-11-04 Nippon Kogaku Kk Bildwackelkorrektureinrichtung und kamera
JP4788953B2 (ja) 2005-11-16 2011-10-05 ソニー株式会社 撮像装置及びズームレンズ
US8238695B1 (en) 2005-12-15 2012-08-07 Grandeye, Ltd. Data reduction techniques for processing wide-angle video
US20070177025A1 (en) 2006-02-01 2007-08-02 Micron Technology, Inc. Method and apparatus minimizing die area and module size for a dual-camera mobile device
JP4579842B2 (ja) 2006-02-06 2010-11-10 イーストマン コダック カンパニー 撮像装置
WO2007091112A1 (en) 2006-02-06 2007-08-16 Nokia Corporation Optical image stabilizer using gimballed prism
US20090219547A1 (en) 2006-02-06 2009-09-03 Petteri Kauhanen Method and Device for Position Sensing in an Imaging System
US9182228B2 (en) 2006-02-13 2015-11-10 Sony Corporation Multi-lens array system and method
JP4622882B2 (ja) 2006-02-21 2011-02-02 カシオ計算機株式会社 デジタルカメラ
US7708478B2 (en) 2006-04-13 2010-05-04 Nokia Corporation Actuator mechanism and a shutter mechanism
US7773121B1 (en) 2006-05-03 2010-08-10 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration High-resolution, continuous field-of-view (FOV), non-rotating imaging system
JP2007306282A (ja) 2006-05-11 2007-11-22 Citizen Electronics Co Ltd カメラモジュール
KR100749337B1 (ko) 2006-06-13 2007-08-14 삼성전자주식회사 복수의 카메라렌즈를 구비한 이동통신단말기를 이용한 촬영방법 및 장치
US7737379B2 (en) 2006-07-19 2010-06-15 Witdouck Calvin J System and method for sorting larvae cocoons
US8189100B2 (en) 2006-07-25 2012-05-29 Qualcomm Incorporated Mobile device with dual digital camera sensors and methods of using the same
US7756330B2 (en) 2006-07-27 2010-07-13 Eastman Kodak Company Producing an extended dynamic range digital image
US20080030592A1 (en) 2006-08-01 2008-02-07 Eastman Kodak Company Producing digital image with different resolution portions
US7667762B2 (en) 2006-08-01 2010-02-23 Lifesize Communications, Inc. Dual sensor video camera
JP2008076485A (ja) 2006-09-19 2008-04-03 Konica Minolta Opto Inc レンズ鏡胴、及び撮像装置
JP2008096584A (ja) 2006-10-10 2008-04-24 Nikon Corp カメラ
US7697053B2 (en) 2006-11-02 2010-04-13 Eastman Kodak Company Integrated display having multiple capture devices
JP4448844B2 (ja) 2006-11-22 2010-04-14 富士フイルム株式会社 複眼撮像装置
KR100871566B1 (ko) 2006-12-04 2008-12-02 삼성전자주식회사 이미지 촬상 장치의 손떨림 보상을 위한 장치 및 방법
US7533819B2 (en) 2007-01-31 2009-05-19 Symbol Technologies, Inc. Dual camera assembly for an imaging-based bar code reader
US7978239B2 (en) 2007-03-01 2011-07-12 Eastman Kodak Company Digital camera using multiple image sensors to provide improved temporal sampling
US7729602B2 (en) 2007-03-09 2010-06-01 Eastman Kodak Company Camera using multiple lenses and image sensors operable in a default imaging mode
US7859588B2 (en) 2007-03-09 2010-12-28 Eastman Kodak Company Method and apparatus for operating a dual lens camera to augment an image
US7676146B2 (en) 2007-03-09 2010-03-09 Eastman Kodak Company Camera using multiple lenses and image sensors to provide improved focusing capability
US7683962B2 (en) 2007-03-09 2010-03-23 Eastman Kodak Company Camera using multiple lenses and image sensors in a rangefinder configuration to provide a range map
US8937651B2 (en) 2007-04-19 2015-01-20 Dvp Technologies Ltd. Imaging system and method for use in monitoring a field of regard
US7918398B2 (en) 2007-06-04 2011-04-05 Hand Held Products, Inc. Indicia reading terminal having multiple setting imaging lens
US8390729B2 (en) 2007-09-05 2013-03-05 International Business Machines Corporation Method and apparatus for providing a video image having multiple focal lengths
US20090086074A1 (en) 2007-09-27 2009-04-02 Omnivision Technologies, Inc. Dual mode camera solution apparatus, system, and method
JP2009109904A (ja) 2007-10-31 2009-05-21 Sony Corp レンズ鏡筒及び撮像装置
US20090122195A1 (en) 2007-11-09 2009-05-14 Van Baar Jeroen System and Method for Combining Image Sequences
US20090128644A1 (en) 2007-11-15 2009-05-21 Camp Jr William O System and method for generating a photograph
KR20090058229A (ko) 2007-12-04 2009-06-09 삼성전기주식회사 듀얼 카메라 모듈
US8310587B2 (en) 2007-12-04 2012-11-13 DigitalOptics Corporation International Compact camera optics
US8824833B2 (en) 2008-02-01 2014-09-02 Omnivision Technologies, Inc. Image data fusion systems and methods
US8115825B2 (en) 2008-02-20 2012-02-14 Apple Inc. Electronic device with two image sensors
CN101276415A (zh) 2008-03-03 2008-10-01 北京航空航天大学 用多定焦摄像机实现多分辨率图像采集的装置和方法
US20100097444A1 (en) 2008-10-16 2010-04-22 Peter Lablans Camera System for Creating an Image From a Plurality of Images
US8866920B2 (en) 2008-05-20 2014-10-21 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
FI20085510L (fi) 2008-05-28 2009-11-29 Valtion Teknillinen Zoom-kamera -järjestely, joka käsittää useita alikameroita
JP4513906B2 (ja) 2008-06-27 2010-07-28 ソニー株式会社 画像処理装置、画像処理方法、プログラム及び記録媒体
US8134589B2 (en) 2008-07-17 2012-03-13 Eastman Kodak Company Zoom by multiple image capture
KR101477178B1 (ko) 2008-07-17 2014-12-29 삼성전자주식회사 듀얼 카메라를 구비하는 휴대 단말기 및 이를 이용한 촬영방법
GB2462095A (en) 2008-07-23 2010-01-27 Snell & Wilcox Ltd Processing of images to represent a transition in viewpoint
US8237807B2 (en) 2008-07-24 2012-08-07 Apple Inc. Image capturing device with touch screen for adjusting camera settings
WO2010029689A1 (ja) 2008-09-10 2010-03-18 パナソニック株式会社 カメラ本体および撮像装置
CN101394487B (zh) 2008-10-27 2011-09-14 华为技术有限公司 一种合成图像的方法与***
JP5230376B2 (ja) 2008-11-28 2013-07-10 三星電子株式会社 撮像装置及び撮像方法
JP5265336B2 (ja) 2008-12-25 2013-08-14 富士フイルム株式会社 手振れ補正装置及び光学機器
JP2010204341A (ja) 2009-03-03 2010-09-16 Nikon Corp カメラ
CN101833157A (zh) 2009-03-13 2010-09-15 鸿富锦精密工业(深圳)有限公司 相机模组
CN105681633B (zh) 2009-03-19 2019-01-18 数字光学公司 双传感器照相机及其方法
WO2010116366A1 (en) 2009-04-07 2010-10-14 Nextvision Stabilized Systems Ltd Video motion compensation and stabilization gimbaled imaging system
KR101552481B1 (ko) 2009-04-13 2015-09-21 삼성전자 주식회사 줌 렌즈 모듈
WO2010122841A1 (ja) 2009-04-22 2010-10-28 コニカミノルタオプト株式会社 レンズ鏡胴、撮像装置及びレンズ鏡胴の製造方法
US8553106B2 (en) 2009-05-04 2013-10-08 Digitaloptics Corporation Dual lens digital zoom
JP5261805B2 (ja) 2009-06-16 2013-08-14 インテル・コーポレーション 携帯用機器のカメラアプリケーション
WO2010148363A2 (en) 2009-06-18 2010-12-23 Theia Technologies, Llc Compact dome camera
WO2011005413A2 (en) 2009-06-22 2011-01-13 Omnivision Technologies, Inc. System and method for an image sensor operable in multiple video standards
WO2011009108A2 (en) 2009-07-17 2011-01-20 Universal Robotics, Inc. System and method for automatic calibration of stereo images
JP5846346B2 (ja) 2009-08-21 2016-01-20 ミツミ電機株式会社 カメラの手振れ補正装置
CN201514511U (zh) 2009-09-08 2010-06-23 华晶科技股份有限公司 潜望式镜头结构
KR101613928B1 (ko) 2009-09-09 2016-04-20 엘지전자 주식회사 이동 단말기
WO2011029203A1 (en) 2009-09-14 2011-03-17 Viion Systems Inc. Saccadic dual-resolution video analytics camera
KR101617289B1 (ko) 2009-09-30 2016-05-02 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
JP5513834B2 (ja) 2009-10-13 2014-06-04 台湾東電化股▲ふん▼有限公司 レンズ駆動装置
EP2502410B1 (en) 2009-11-19 2019-05-01 eSight Corporation A method for augmenting sight
US8514491B2 (en) 2009-11-20 2013-08-20 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
US8400555B1 (en) 2009-12-01 2013-03-19 Adobe Systems Incorporated Focused plenoptic camera employing microlenses with different focal lengths
US20110128288A1 (en) 2009-12-02 2011-06-02 David Petrou Region of Interest Selector for Visual Queries
EP2529333A4 (en) 2010-01-28 2013-10-23 Pathway Innovations And Technologies Inc DOCUMENT IMAGING SYSTEM WITH A CAMERA SCANNER DEVICE AND A PC-BASED PROCESSING SOFTWARE
JP5445235B2 (ja) 2010-03-09 2014-03-19 ソニー株式会社 画像処理装置、画像処理方法およびプログラム
JP2011205374A (ja) 2010-03-25 2011-10-13 Fujifilm Corp 表示装置
JP4783465B1 (ja) 2010-03-26 2011-09-28 富士フイルム株式会社 撮像装置及び表示装置
TWI478828B (zh) 2010-03-26 2015-04-01 Hon Hai Prec Ind Co Ltd 車載影像系統及安裝有該車載影像系統的汽車
US8456518B2 (en) 2010-03-31 2013-06-04 James Cameron & Vincent Pace Stereoscopic camera with automatic obstruction removal
US8547389B2 (en) 2010-04-05 2013-10-01 Microsoft Corporation Capturing image structure detail from a first image and color from a second image
US20110242355A1 (en) 2010-04-05 2011-10-06 Qualcomm Incorporated Combining data from multiple image sensors
US8446484B2 (en) 2010-04-21 2013-05-21 Nokia Corporation Image processing architecture with pre-scaler
US9369621B2 (en) 2010-05-03 2016-06-14 Invisage Technologies, Inc. Devices and methods for high-resolution image and video capture
US20130250150A1 (en) 2010-05-03 2013-09-26 Michael R. Malone Devices and methods for high-resolution image and video capture
DE102010017057B4 (de) 2010-05-21 2015-03-19 Jena-Optronik Gmbh Kamera mit mehreren Festbrennweiten
GB201010233D0 (en) * 2010-06-18 2010-07-21 Univ Nottingham Trent Improvements in or relating to sample analysis
CN103154816A (zh) 2010-07-13 2013-06-12 R·S·米尔拉伊 用于静态摄影的可变三维照相机组件
JP2012027263A (ja) 2010-07-23 2012-02-09 Sony Corp 撮像装置、その制御方法およびプログラム
US8493482B2 (en) 2010-08-18 2013-07-23 Apple Inc. Dual image sensor image processing system and method
US8896655B2 (en) 2010-08-31 2014-11-25 Cisco Technology, Inc. System and method for providing depth adaptive video conferencing
JP5609467B2 (ja) 2010-09-15 2014-10-22 株式会社リコー 撮像装置及び撮像方法
US8780251B2 (en) 2010-09-20 2014-07-15 Canon Kabushiki Kaisha Image capture with focus adjustment
US20120075489A1 (en) 2010-09-24 2012-03-29 Nishihara H Keith Zoom camera image blending technique
US20140192238A1 (en) 2010-10-24 2014-07-10 Linx Computational Imaging Ltd. System and Method for Imaging and Image Processing
US9204026B2 (en) 2010-11-01 2015-12-01 Lg Electronics Inc. Mobile terminal and method of controlling an image photographing therein
JP5719148B2 (ja) 2010-11-10 2015-05-13 キヤノン株式会社 撮像装置及びその制御方法、プログラム
KR101731346B1 (ko) 2010-11-12 2017-04-28 엘지전자 주식회사 멀티미디어 장치의 디스플레이화면 제공 방법 및 그에 따른 멀티미디어 장치
WO2012075250A1 (en) 2010-12-01 2012-06-07 Magna Electronics Inc. System and method of establishing a multi-camera image using pixel remapping
US8274552B2 (en) 2010-12-27 2012-09-25 3Dmedia Corporation Primary and auxiliary image capture devices for image processing and related methods
US10200671B2 (en) 2010-12-27 2019-02-05 3Dmedia Corporation Primary and auxiliary image capture devices for image processing and related methods
JP2012141442A (ja) 2010-12-28 2012-07-26 Sony Corp レンズ保護装置、レンズユニット及び撮像装置
US8803990B2 (en) 2011-01-25 2014-08-12 Aptina Imaging Corporation Imaging system with multiple sensors for producing high-dynamic-range images
US8520080B2 (en) 2011-01-31 2013-08-27 Hand Held Products, Inc. Apparatus, system, and method of use of imaging assembly on mobile terminal
JP5814566B2 (ja) 2011-02-28 2015-11-17 オリンパス株式会社 撮像装置、撮像方法及び撮像装置の制御プログラム
WO2012122177A1 (en) 2011-03-08 2012-09-13 Spectral Instruments Imaging, LLC Imaging system having primary and auxiliary camera systems
JP5708097B2 (ja) 2011-03-18 2015-04-30 株式会社リコー 撮像装置、撮像方法、及び撮像プログラム
US9172856B2 (en) 2011-03-29 2015-10-27 Microsoft Technology Licensing, Llc Folded imaging path camera
CN102739949A (zh) 2011-04-01 2012-10-17 张可伦 多镜头相机和多镜头装置的控制方法
EP2523450B1 (en) 2011-05-10 2014-05-14 HTC Corporation Handheld electronic device with dual image capturing method and computer program product
US8553129B2 (en) 2011-05-10 2013-10-08 Htc Corporation Handheld electronic device with two lens modules, dual image capturing method applying for the handheld electronic device, and computer program product for load into the handheld electronic device
KR101224790B1 (ko) 2011-06-14 2013-01-21 삼성전기주식회사 영상 촬상 장치
US8605199B2 (en) 2011-06-28 2013-12-10 Canon Kabushiki Kaisha Adjustment of imaging properties for an imaging assembly having light-field optics
JP5821356B2 (ja) 2011-07-15 2015-11-24 ミツミ電機株式会社 レンズ駆動装置
US9270875B2 (en) 2011-07-20 2016-02-23 Broadcom Corporation Dual image capture processing
JP6103840B2 (ja) 2011-07-28 2017-03-29 キヤノン株式会社 補正光学装置及び撮像装置
US8988564B2 (en) 2011-09-09 2015-03-24 Apple Inc. Digital camera with light splitter
EP2582128A3 (en) 2011-10-12 2013-06-19 Canon Kabushiki Kaisha Image-capturing device
US8947627B2 (en) 2011-10-14 2015-02-03 Apple Inc. Electronic devices having displays with openings
JP5884421B2 (ja) 2011-11-14 2016-03-15 ソニー株式会社 画像処理装置、画像処理装置の制御方法およびプログラム
JP5741395B2 (ja) 2011-11-16 2015-07-01 コニカミノルタ株式会社 撮像装置
US8970655B2 (en) 2011-12-16 2015-03-03 Polycom, Inc. Reflective and refractive solutions to providing direct eye contact videoconferencing
US8619148B1 (en) 2012-01-04 2013-12-31 Audience, Inc. Image correction after combining images from multiple cameras
JP2013143753A (ja) 2012-01-12 2013-07-22 Olympus Corp 撮像装置
KR20130090225A (ko) 2012-02-03 2013-08-13 삼성전자주식회사 카메라 이미지 센서의 동작 모드 변경 방법
GB2499200B (en) 2012-02-07 2014-12-17 Canon Kk Method and device for transitioning between an image of a first video sequence and an image for a second video sequence
US8866943B2 (en) 2012-03-09 2014-10-21 Apple Inc. Video camera providing a composite video sequence
US20130258044A1 (en) 2012-03-30 2013-10-03 Zetta Research And Development Llc - Forc Series Multi-lens camera
US9029759B2 (en) 2012-04-12 2015-05-12 Nan Chang O-Film Optoelectronics Technology Ltd Compact camera modules with features for reducing Z-height and facilitating lens alignment and methods for manufacturing the same
JP6046966B2 (ja) * 2012-04-19 2016-12-21 キヤノン株式会社 画像処理装置及び画像処理方法、プログラム、並びに記憶媒体
JP2013238848A (ja) 2012-04-20 2013-11-28 Hoya Corp 撮像装置
IL219639A (en) 2012-05-08 2016-04-21 Israel Aerospace Ind Ltd Remote object tracking
CN102722321A (zh) 2012-05-22 2012-10-10 中兴通讯股份有限公司 双摄像头切换的方法及装置
US8953084B2 (en) 2012-05-30 2015-02-10 Digimarc Corporation Plural focal-plane imaging
CN104350734B (zh) 2012-06-11 2017-12-12 索尼电脑娱乐公司 图像生成设备以及图像生成方法
KR101991719B1 (ko) 2012-06-29 2019-06-21 엘지이노텍 주식회사 카메라 모듈
US9134503B2 (en) 2012-07-06 2015-09-15 Apple Inc. VCM OIS actuator module
WO2014010303A1 (ja) 2012-07-12 2014-01-16 ソニー株式会社 像振れ補正装置と像振れ補正方法および撮像装置
EP2872966A1 (en) 2012-07-12 2015-05-20 Dual Aperture International Co. Ltd. Gesture-based user interface
KR102051501B1 (ko) 2012-07-26 2019-12-03 엘지이노텍 주식회사 카메라 모듈
US9398264B2 (en) 2012-10-19 2016-07-19 Qualcomm Incorporated Multi-camera system using folded optics
EP2915325A4 (en) 2012-10-31 2016-06-01 Invisage Technologies Inc PICTURE AND VIDEO RECORDING WITH ADVANCED VIEW FIELD
CN105122129A (zh) 2012-11-08 2015-12-02 威动光有限公司 微型光学变焦镜头
CN104106002B (zh) 2012-11-16 2017-10-13 松下电器(美国)知识产权公司 相机驱动装置
CN103024272A (zh) 2012-12-14 2013-04-03 广东欧珀移动通信有限公司 移动终端的双摄像头控制装置、方法、***以及移动终端
US9270876B2 (en) 2013-01-05 2016-02-23 The Lightco Inc. Methods and apparatus for using multiple optical chains in parallel with multiple different exposure times
US20140313316A1 (en) 2013-01-30 2014-10-23 SeeScan, Inc. Adjustable variable resolution inspection systems and methods using multiple image sensors
US20140218587A1 (en) 2013-02-07 2014-08-07 Motorola Mobility Llc Double sided camera module
US9413930B2 (en) 2013-03-14 2016-08-09 Joergen Geerds Camera system
US9851803B2 (en) 2013-03-15 2017-12-26 Eyecam, LLC Autonomous computing and telecommunications head-up displays glasses
JP6214206B2 (ja) 2013-05-13 2017-10-18 キヤノン株式会社 撮像装置、制御方法及びプログラム
JP6100089B2 (ja) 2013-05-17 2017-03-22 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム
DE102013209829B4 (de) 2013-05-27 2016-04-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Optische Struktur mit daran angeordneten Stegen und Verfahren zur Herstellung derselben
KR102166262B1 (ko) 2013-06-10 2020-10-15 삼성전자주식회사 카메라 렌즈 어셈블리
CN109194849B (zh) 2013-06-13 2021-01-15 核心光电有限公司 双孔径变焦数字摄影机
US9432575B2 (en) * 2013-06-28 2016-08-30 Canon Kabushiki Kaisha Image processing apparatus
TWI546570B (zh) 2013-07-01 2016-08-21 台灣東電化股份有限公司 可切換光路徑之光學防震機構
JP6103503B2 (ja) 2013-07-31 2017-03-29 パナソニックIpマネジメント株式会社 撮像装置
US9285566B2 (en) 2013-08-08 2016-03-15 Apple Inc. Mirror tilt actuation
US9494769B2 (en) 2013-09-12 2016-11-15 Hong Kong Applied Science And Technology Research Institute Co. Ltd. Multi-lens imaging module and actuator with auto-focus adjustment
US10151859B2 (en) 2013-09-23 2018-12-11 Lg Innotek Co., Ltd. Camera module and manufacturing method for same
US9615012B2 (en) 2013-09-30 2017-04-04 Google Inc. Using a second camera to adjust settings of first camera
TW201515433A (zh) 2013-10-14 2015-04-16 Etron Technology Inc 影像校正系統和立體照相機的校正方法
US9736365B2 (en) 2013-10-26 2017-08-15 Light Labs Inc. Zoom related methods and apparatus
US9344626B2 (en) 2013-11-18 2016-05-17 Apple Inc. Modeless video and still frame capture using interleaved frames of video and still resolutions
CN104680501B (zh) 2013-12-03 2018-12-07 华为技术有限公司 图像拼接的方法及装置
US9215377B2 (en) 2013-12-04 2015-12-15 Nokia Technologies Oy Digital zoom with sensor mode change
US9736391B2 (en) 2013-12-06 2017-08-15 Huawei Device Co., Ltd. Photographing method of dual-lens device, and dual-lens device
WO2015081563A1 (zh) 2013-12-06 2015-06-11 华为终端有限公司 一种生成图片的方法及一种双镜头设备
EP3062509B1 (en) 2013-12-06 2020-06-03 Huawei Device Co., Ltd. Terminal and image processing method
CN105339841B (zh) 2013-12-06 2018-12-14 华为终端(东莞)有限公司 双镜头设备的拍照方法及双镜头设备
US9538096B2 (en) 2014-01-27 2017-01-03 Raytheon Company Imaging system and methods with variable lateral magnification
KR101474191B1 (ko) 2014-02-03 2014-12-18 삼성전기주식회사 조명 모듈 및 이를 이용하는 외관 검사 시스템
KR102128468B1 (ko) 2014-02-19 2020-06-30 삼성전자주식회사 복수의 이미지 신호 프로세서들을 포함하는 이미지 처리 장치 및 이미지 처리 방법
TW201533514A (zh) 2014-02-27 2015-09-01 Tdk Taiwan Corp 相機模組的反射鏡結構
US9557627B2 (en) 2014-03-07 2017-01-31 Apple Inc. Folded camera lens systems
US9316810B2 (en) 2014-03-07 2016-04-19 Apple Inc. Folded telephoto camera lens system
CN103841404A (zh) 2014-03-18 2014-06-04 江西省一元数码科技有限公司 一种新型三维影像拍摄模组
US20150271471A1 (en) 2014-03-19 2015-09-24 Htc Corporation Blocking detection method for camera and electronic apparatus with cameras
KR102214193B1 (ko) 2014-03-25 2021-02-09 삼성전자 주식회사 깊이 카메라 장치, 그것을 구비한 3d 영상 디스플레이 시스템 및 그 제어방법
US9383550B2 (en) 2014-04-04 2016-07-05 Qualcomm Incorporated Auto-focus in low-profile folded optics multi-camera system
KR101771778B1 (ko) 2014-04-11 2017-08-25 삼성전기주식회사 카메라 모듈
CN105024516B (zh) 2014-04-30 2017-12-01 光宝电子(广州)有限公司 音圈马达阵列模块
WO2015172366A1 (zh) 2014-05-15 2015-11-19 华为技术有限公司 用于多帧降噪的方法和终端
US20150334309A1 (en) 2014-05-16 2015-11-19 Htc Corporation Handheld electronic apparatus, image capturing apparatus and image capturing method thereof
US9360671B1 (en) 2014-06-09 2016-06-07 Google Inc. Systems and methods for image zoom
US9392188B2 (en) 2014-08-10 2016-07-12 Corephotonics Ltd. Zoom dual-aperture camera with folded lens
JP2016057468A (ja) 2014-09-10 2016-04-21 Hoya株式会社 屈曲撮像装置
WO2016049889A1 (zh) 2014-09-30 2016-04-07 华为技术有限公司 一种自动对焦方法、装置及电子设备
WO2016081567A1 (en) 2014-11-19 2016-05-26 Orlo James Fiske Thin optical system and camera
KR102287013B1 (ko) 2014-11-25 2021-08-06 삼성디스플레이 주식회사 박막 트랜지스터, 이를 포함하는 유기 발광 표시 장치 및 그 제조 방법
US10634867B2 (en) 2014-11-28 2020-04-28 Samsung Electro-Mechanics Co., Ltd. Camera module
US9286680B1 (en) 2014-12-23 2016-03-15 Futurewei Technologies, Inc. Computational multi-camera adjustment for smooth view switching and zooming
US11019330B2 (en) 2015-01-19 2021-05-25 Aquifi, Inc. Multiple camera system with auto recalibration
US9800798B2 (en) 2015-02-13 2017-10-24 Qualcomm Incorporated Systems and methods for power optimization for imaging devices with dual cameras
US9591237B2 (en) * 2015-04-10 2017-03-07 Qualcomm Incorporated Automated generation of panning shots
KR102088603B1 (ko) 2015-04-16 2020-03-13 코어포토닉스 리미티드 소형 접이식 카메라의 오토 포커스 및 광학 이미지 안정화
US9485432B1 (en) 2015-04-29 2016-11-01 Uurmi Systems Private Limited Methods, systems and apparatuses for dual-camera based zooming
US20160353012A1 (en) 2015-05-25 2016-12-01 Htc Corporation Zooming control method for camera and electronic apparatus with camera
US10126633B2 (en) 2015-06-24 2018-11-13 Corephotonics Ltd. Low profile tri-axis actuator for folded lens camera
CN106709899B (zh) 2015-07-15 2020-06-02 华为终端有限公司 双摄像头相对位置计算方法、装置和设备
KR102214287B1 (ko) 2015-08-13 2021-02-09 코어포토닉스 리미티드 비디오 지원 및 스위칭/비스위칭 동적 제어 기능이 있는 듀얼-애퍼처 줌 카메라
US20170070731A1 (en) 2015-09-04 2017-03-09 Apple Inc. Single And Multi-Camera Calibration
CN109901342B (zh) 2015-09-06 2021-06-22 核心光电有限公司 紧凑型折叠式相机中带有滚动补偿的自动对焦和光学图像稳定
JP6593629B2 (ja) * 2015-09-09 2019-10-23 ソニー株式会社 画像処理装置、固体撮像素子、および電子機器
KR20170075442A (ko) 2015-12-23 2017-07-03 삼성전자주식회사 촬상 장치 모듈, 이를 포함하는 사용자 단말 장치 및 촬상 장치 모듈의 작동 방법
US9843736B2 (en) 2016-02-26 2017-12-12 Essential Products, Inc. Image capture with a camera integrated display
KR20170112491A (ko) 2016-03-31 2017-10-12 엘지전자 주식회사 이동 단말기 및 그 제어방법
EP3758356B1 (en) 2016-05-30 2021-10-20 Corephotonics Ltd. Actuator
US10303042B2 (en) 2016-07-12 2019-05-28 Tdk Taiwan Corp. Lens driving module
TWM533229U (en) 2016-08-26 2016-12-01 Largan Precision Co Ltd Optical path folding element, imaging lens module and electronic device
CN106603765B (zh) 2016-12-20 2020-03-17 Oppo广东移动通信有限公司 支架组件及移动终端
CN106534655B (zh) 2017-01-11 2019-04-16 Oppo广东移动通信有限公司 摄像头模组及移动终端
KR102164655B1 (ko) 2017-01-12 2020-10-13 코어포토닉스 리미티드 컴팩트 폴디드 카메라
US10334149B2 (en) 2017-02-23 2019-06-25 Qualcomm Incorporated Adjustment for cameras for low power mode operation
KR102426728B1 (ko) 2017-04-10 2022-07-29 삼성전자주식회사 포커스 제어 방법 및 이를 지원하는 전자 장치
JP6967715B2 (ja) 2017-04-18 2021-11-17 パナソニックIpマネジメント株式会社 カメラ校正方法、カメラ校正プログラム及びカメラ校正装置
KR102076391B1 (ko) * 2017-04-27 2020-02-13 (주)이즈미디어 카메라 모듈 검사장치용 위치 정렬 장치
EP3488603B1 (en) * 2017-05-24 2021-07-28 SZ DJI Technology Co., Ltd. Methods and systems for processing an image
WO2019023915A1 (zh) * 2017-07-31 2019-02-07 深圳市大疆创新科技有限公司 一种视频处理方法、设备、飞行器及***
US11190702B2 (en) 2017-09-05 2021-11-30 Sony Corporation Image-capturing apparatus
JP7009142B2 (ja) * 2017-09-28 2022-01-25 キヤノン株式会社 撮像装置および画像処理方法
US10600157B2 (en) * 2018-01-05 2020-03-24 Qualcomm Incorporated Motion blur simulation
US20190378334A1 (en) * 2018-06-08 2019-12-12 Vulcan Inc. Augmented reality portal-based applications

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101221341A (zh) * 2007-01-08 2008-07-16 华晶科技股份有限公司 景深构图设定方法
CN105847662A (zh) * 2015-06-19 2016-08-10 维沃移动通信有限公司 一种基于移动终端的运动物体拍摄方法和移动终端
CN105488511A (zh) * 2015-11-25 2016-04-13 小米科技有限责任公司 图像的识别方法及装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115334243A (zh) * 2022-08-23 2022-11-11 维沃移动通信有限公司 拍摄方法及其装置

Also Published As

Publication number Publication date
KR20230048447A (ko) 2023-04-11
KR20210059800A (ko) 2021-05-25
KR102425865B1 (ko) 2022-07-27
KR102640227B1 (ko) 2024-02-22
KR20220107328A (ko) 2022-08-02
KR20210016469A (ko) 2021-02-15
US11368631B1 (en) 2022-06-21
IL290201B (en) 2022-12-01
IL297759A (en) 2022-12-01
US20220210343A1 (en) 2022-06-30
IL297759B1 (en) 2023-05-01
IL290201B2 (en) 2023-04-01
KR102365748B1 (ko) 2022-02-23
IL301734B1 (en) 2024-07-01
KR20240027858A (ko) 2024-03-04
IL297759B2 (en) 2023-09-01
US20220264030A1 (en) 2022-08-18
EP3837662A1 (en) 2021-06-23
KR20220025263A (ko) 2022-03-03
KR102254947B1 (ko) 2021-05-24
IL301734A (en) 2023-05-01
IL290201A (en) 2022-03-01
WO2021019318A1 (en) 2021-02-04
KR102515482B1 (ko) 2023-03-29
EP3837662A4 (en) 2021-12-15

Similar Documents

Publication Publication Date Title
US11368631B1 (en) System and method for creating background blur in camera panning or motion
US20240107163A1 (en) Multi-Camera Video Stabilization
US7664293B2 (en) Image sensing apparatus and control method thereof
EP2242021A1 (en) Generation of simulated long exposure images in response to multiple short exposures
JP6659130B2 (ja) 画像処理装置、撮像装置、画像処理方法およびプログラム
JP5950678B2 (ja) 撮像装置、制御方法、及びプログラム
US20070147812A1 (en) Digital panoramic camera
CN110536057A (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
JP2017058660A (ja) 像振れ補正装置、傾き補正装置、像振れ補正装置の制御方法、傾き補正装置の制御方法
US20110149096A1 (en) Imaging apparatus and control method thereof
US20220180484A1 (en) Image processing method, electronic device, and computer-readable storage medium
JP2016005160A (ja) 撮像装置およびその制御方法
CN114651275A (zh) 全视场参考图像的图像拼接
US8817127B2 (en) Image correction device for image capture device and integrated circuit for image correction device
CN112449105A (zh) 合成拍摄天体的多个图像的方法及装置
JP6584259B2 (ja) 像ブレ補正装置、撮像装置および制御方法
JP7102301B2 (ja) 撮像装置及びその制御方法、並びにプログラム
JP2017183983A (ja) 撮像装置、その制御方法、および制御プログラム
JP2007142554A (ja) デジタルカメラ
JP2022187291A (ja) レンズ駆動型ハイブリッド画像補正システムならびにレンズ駆動ドライバーlsi
JP2007110347A (ja) カメラ装置
JP2018011109A (ja) 撮像装置及びその制御方法
JP2020028079A (ja) 撮像装置及、画像処理装置、それらの制御方法、プログラム、記憶媒体
JP2017073698A (ja) 撮像装置及びその制御方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination