CN105453538A - 电子装置及其控制方法,以及图像再现装置和方法 - Google Patents

电子装置及其控制方法,以及图像再现装置和方法 Download PDF

Info

Publication number
CN105453538A
CN105453538A CN201480042939.2A CN201480042939A CN105453538A CN 105453538 A CN105453538 A CN 105453538A CN 201480042939 A CN201480042939 A CN 201480042939A CN 105453538 A CN105453538 A CN 105453538A
Authority
CN
China
Prior art keywords
image
coke number
described multiple
focusing
map
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480042939.2A
Other languages
English (en)
Other versions
CN105453538B (zh
Inventor
金健荣
朴正容
朴夏中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN105453538A publication Critical patent/CN105453538A/zh
Application granted granted Critical
Publication of CN105453538B publication Critical patent/CN105453538B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/743Bracketing, i.e. taking a series of images with varying exposure conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/90Dynamic range modification of images or parts thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)

Abstract

提供了一种控制电子装置的方法。该方法包括:生成指示通过拆分场景来定义的多个框的对焦值的对焦地图;连续地捕捉与对焦地图中的对焦值对应的多个图像;以及存储所述多个图像、所述多个图像的每个的对焦值信息以及场景的对焦值信息。

Description

电子装置及其控制方法,以及图像再现装置和方法
技术领域
本发明的一个或多个实施例涉及一种电子装置、控制该电子装置的方法以及图像再现装置和方法。
背景技术
当使用拍摄装置拍摄对象时,在拍摄过程中确定了焦距,因而不可能修改拍摄的对象的焦点。因此,当对象不在焦点上时,用户不能够经由后期校正来获得对象的聚焦的图像。此外,当在场景(field)中存在与拍摄装置的距离不同的若干对象时,难以获得所有对象的聚焦的图像。
发明内容
技术问题
存在这样的问题,在捕捉图像之后,用户不能够调整场景中在预定位置处的图像的焦点。
解决方案
本发明的一个或多个实施例包括一种电子装置、控制该电子装置的方法以及图像再现装置和方法,其中即使在执行拍摄之后用户也能够将图像对焦到场景中的预定位置。
另外的方面将部分在下面的描述中阐述,并且部分将从描述中变得显然,或者可以通过对呈现的实施例的实践来习得。
根据一个或多个实施例,提供了一种控制电子装置的方法。该方法包括:生成指示通过拆分场景来定义的多个框(block)的对焦值的对焦地图;连续地捕捉与对焦地图中的对焦值对应的多个图像;以及存储所述多个图像、所述多个图像的每个的对焦值信息以及场景的对焦值信息。
该方法还可以包括通过按次序排列所述多个框的对焦值来生成捕捉顺序,其中连续地捕捉可以包括根据捕捉顺序中排列的对焦值的次序来连续地捕捉所述多个图像。
捕捉顺序的生成可以包括:当所述多个框的对焦值的数量大于最大捕捉次数时,组合(group)对焦值并且用代表性值来代替组合的对焦值;而当所述多个框的对焦值的数量小于最大捕捉次数时,在两个相邻的对焦值之间添加对焦值,其中所述两个相邻的对焦值之间的差值高。
该方法还可以包括:确定所述多个图像的代表性图像;以及使用所述多个图像来生成代表性图像的深度地图,其中场景的对焦值信息可以是深度地图。
该方法还可以包括:从所述多个图像当中再现至少一个图像;根据在显示再现的至少一个图像时对深度地图的点的输入选择,将所述多个图像中具有与位于深度地图的点处的深度值对应的对焦值的一个图像确定为再现图像;以及再现所述再现图像。
该方法还可以包括:确定所述多个图像的代表性图像;使用所述多个图像来生成代表性图像的深度地图;通过使用深度地图来将代表性图像的每个像素的深度值匹配到所述多个图像的对焦值,来将代表性图像的每个像素匹配到所述多个图像之一;以及生成指示匹配到代表性图像的每个像素的再现图像的文件索引地图,其中场景的对焦值信息可以是文件索引地图。
该方法还可以包括:从所述多个图像当中再现至少一个图像;在显示所再现的至少一个图像时,使用文件索引地图将匹配根据输入选择而选择的点的所述多个图像之一确定为再现图像;以及再现所述再现图像。
该方法还可以包括:在连续地捕捉所述多个图像时,当电子装置的移动在整体运动可补偿范围之外时,停止对所述多个图像的连续的捕捉;以及在连续地捕捉所述多个图像之后,补偿所述多个图像的整体运动。
根据一个或多个实施例,提供了一种用于再现图像文件的图像再现方法,其中图像文件包括具有不同的对焦值的多个图像、所述多个图像的每个的对焦值信息以及场景的对焦值信息。图像再现方法包括:从所述多个图像当中再现至少一个图像;在显示所再现的至少一个图像时,使用所述多个图像的每个的对焦值信息和场景的对焦值信息,将所述多个图像中具有与位于根据输入选择所选择的点处的对焦值对应的对焦值的一个图像确定为再现图像;以及再现所述再现图像。
场景的对焦值信息可以是指示代表性图像的每个像素的深度值的深度地图。
图像再现方法还可以包括:使用所述多个图像来生成代表性图像的深度地图;以及将深度地图存储为场景的对焦值信息。
场景的对焦值信息可以是指示再现图像匹配到代表性图像的每个像素的文件索引地图。
图像再现方法还可以包括:使用所述多个图像来生成代表性图像的深度地图;通过使用深度地图来将代表性图像的每个像素的深度值匹配到所述多个图像的对焦值,来将代表性图像的每个像素匹配到所述多个图像之一;生成指示匹配到代表性图像的每个像素的再现图像的文件索引地图;以及将文件索引地图存储为观看时场景的对焦值信息。
根据一个或多个实施例,电子装置包括:拍摄单元,通过光电转换入射光来拍摄图像;对焦地图生成单元,生成指示通过拆分场景来定义的多个框的对焦值的对焦地图;拍摄控制单元,控制拍摄单元连续地捕捉与对焦地图的对焦值对应的多个图像;以及文件生成单元,存储多个图像、多个图像的每个的对焦值信息以及场景的对焦值信息。
电子装置还可以包括捕捉顺序生成单元,该捕捉顺序生成单元通过按次序排列所述多个框的对焦值来生成捕捉顺序,其中拍摄控制单元可以控制拍摄单元根据捕捉顺序中的对焦值的次序来连续地捕捉所述多个图像。
当所述多个框的对焦值的数量大于最大捕捉次数时,捕捉顺序生成单元可以组合对焦值并且通过组合对焦值用代表性值来代替组合的对焦值。当所述多个框的对焦值的数量小于最大捕捉次数时,捕捉顺序生成单元可以在两个相邻的对焦值之间添加对焦值,其中所述两个相邻的对焦值之间的差值高。
电子装置还可以包括深度地图生成单元,该深度地图生成单元确定所述多个图像的代表性图像,并且使用所述多个图像来生成代表性图像的深度地图,其中场景的对焦值信息可以是深度地图。
电子装置还可以包括:再现图像确定单元,其在从所述多个图像当中显示至少一个图像时根据对深度地图的一个点的输入选择来将所述多个图像中具有与位于深度地图的该一个点处的深度值对应的对焦值的一个图像确定为再现图像;以及再现单元,其再现所述再现图像。
电子装置还可以包括:深度地图生成单元,其确定所述多个图像的代表性图像,并且使用所述多个图像来生成代表性图像的深度地图;以及文件索引地图生成单元,其通过使用深度地图将代表性图像的每个像素的深度值匹配到所述多个图像的对焦值,来将代表性图像的每个像素匹配到所述多个图像之一,并且生成指示匹配到代表性较图像的每个像素的再现图像的文件索引地图,其中场景的对焦值信息可以是文件索引地图。
电子装置还可以包括:再现图像确定单元,其在从所述多个图像当中显示至少一个图像时,使用文件索引地图将所述多个图像中匹配根据输入选择而选择的一个点的一个图像确定为再现图像;以及再现单元,其再现所述再现图像。
电子装置还可以包括:整体运动检测单元,其在拍摄单元正在捕捉所述多个图像时,当电子装置的移动在整体运动可补偿范围之外时,使拍摄单元停止对所述多个图像的捕捉;以及整体运动补偿单元,其在所述多个图像被捕捉之后补偿所述多个图像的整体运动。
根据一个或多个实施例,提供了一种用于再现图像文件的图像再现装置,其中图像文件包括具有不同的对焦值的多个图像、所述多个图像的每个的对焦值信息以及场景的对焦值信息。图像再现装置包括:再现图像确定单元,其在来自所述多个图像当中的至少一个图像被显示时,使用所述多个图像的每个的对焦值信息以及场景的对焦值信息,将所述多个图像中的具有与位于根据输入选择而选择的点处的对焦值对应的对焦值的一个图像确定为再现图像;以及再现单元,其再现所述再现图像。
场景的对焦值信息可以是指示代表性图像的每个像素的深度值的深度地图。
图像再现装置还可以包括:深度地图生成单元,其使用所述多个图像来生成代表性图像的深度地图;以及文件更新单元,其将深度地图存储为场景的对焦值信息。
场景的对焦值信息可以是指示再现图像匹配到代表性图像的每个像素的文件索引地图。
图像再现装置还可以包括:深度地图生成单元,其使用所述多个图像来生成代表性图像的深度地图;文件索引地图产生单元,其通过使用深度地图将代表性图像的每个像素的深度值匹配到所述多个图像的对焦值,来将代表性图像的每个像素匹配到所述多个图像之一,并且生成指示匹配到代表性较图像的每个像素的再现图像的文件索引地图;以及文件更新单元,其将文件索引地图存储为场景的对焦值信息。
根据一个或多个实施例,非瞬时性计算机可读记录介质已经在其上记录有用于运行方法的计算机程序代码,该方法在被处理器运行时控制电子装置,该方法包括:生成指示通过拆分场景来定义的多个框的对焦值的对焦地图;连续地捕捉与对焦地图中的对焦值对应的多个图像;以及存储所述多个图像、所述多个图像的每个的对焦值信息以及场景的对焦值信息。
根据一个或多个实施例,非瞬时性计算机可读记录介质已经在其上记录有用于运行图像再现方法的计算机程序代码,该图像再现方法被处理器运行再现图像文件,其中图像文件包括具有不同的对焦值的多个图像、所述多个图像的每个的对焦值信息以及场景的对焦值信息,该图像再现方法包括:从所述多个图像当中再现至少一个图像;在显示所再现的至少一个图像时,使用所述多个图像的每个的对焦值信息和场景的对焦值信息,将所述多个图像中具有与位于根据输入选择所选择的点处的对焦值对应的对焦值的一个图像确定为再现图像;以及再现所述再现图像。
本发明的有益效果
根据以上一个或多个本发明的实施例,用户可以在图像被捕捉之后调节场景中的在预定位置处的图像的对焦。
附图说明
根据以下结合附图对实施例的描述,这些和/或其它方面将变得清楚和更容易理解,附图中:
图1是根据实施例的电子装置的框图;
图2是根据实施例的拆分成多个框的场景的图;
图3是根据实施例的焦点地图的示图;
图4是根据实施例的控制电子装置的方法的流程图;
图5是根据另一实施例的电子装置的框图;
图6是用于描述根据实施例的生成捕捉顺序的过程的示图;
图7是用于描述根据实施例的移动焦点透镜的过程的示图;
图8是根据另一实施例的控制电子装置的方法的流程图;
图9是根据另一实施例的电子装置的框图;
图10是用于描述根据实施例的确定再现图像的过程的图像;
图11是根据另一实施例的控制电子装置的方法的流程图;
图12是根据另一实施例的电子装置的框图;
图13是用于描述根据实施例的生成文件索引地图的过程的图像;
图14是根据另一实施例的控制电子装置的方法的流程图;
图15是根据实施例的图像再现装置的框图;
图16是根据实施例的图像再现方法的流程图;
图17是根据另一实施例的图像再现装置的框图;
图18是根据另一实施例的图像再现方法的流程图;
图19是根据另一实施例的图像再现装置的框图;以及
图20是根据另一实施例的图像再现方法的流程图。
具体实施方式
现在将详细参考实施例,其示例在附图中示出,其中遍及附图相似的参考标号指代相似的元素。在这点上,本实施例可以具有不同的形式,并且不应该被解释为限于在此阐述的描述。因此,通过参照附图,下面仅仅描述实施例来解释本公开的各方面。
提供以下描述和附图用于理解本实施例的各种操作,并且可以省略可以被本领域一位普通技术人员所容易地实现的细节。
此外,本公开和附图不是提供来限制本发明的实施例的,并且实施例的范围应该由权利要求来确定。在此使用的术语应该被解释为具有最适合于代表实施例的技术方面的意思和概念。
在下文中,将参照附图来描述实施例。
图1是根据实施例的电子装置(例如,数字拍摄装置100a)的框图。电子装置可以包括数字相机、移动电话或便携式设备中的相机模块或者具有图像捕捉能力的任何装置。数字拍摄装置100a包括拍摄单元110、对焦地图生成单元120、拍摄控制单元130、文件生成单元140a和存储单元150。
拍摄单元110是用于从已经从光信号转换而来的电信号生成图像的组件。拍摄单元110包括镜头、光圈和图像拾取(pickup)设备。镜头可以包括多个镜头,诸如对焦镜头和缩放镜头。此外,每个镜头的位置可以通过步进马达等来调节,从而可以调节每个镜头的变焦放大和焦距。调节光圈的开闭程度来调节入射在图像拾取设备上的光量,并调节捕捉的图像的深度。
穿透镜头和光圈的光信号在图像拾取设备的光接收表面上形成对象的图像。图像拾取设备可以是电荷耦合器件(CCD)图像传感器或互补金属氧化物半导体图像传感器(CIS),其将光信号转换为电信号。
对焦地图生成单元120生成指示通过拆分场景来定义的多个框的每个框的对焦值的对焦地图。因此,在捕捉图像之前,对焦地图生成单元120在预定的扫描范围之内移动对焦镜头来检测多个框的每个框的对焦值。
图2是根据实施例的拆分成多个框B11到B75的场景的图。
如图2中所示,通过拆分场景可以定义多个框B11至B75。根据实施例,可以不同地设定框B11至B75的数量。此外,如图2中所示,框B11至B75可以具有相同大小。或者,框B11至B75的大小可以不同。例如,框B11至B75的大小可以朝向场景的中心减小,而朝向场景的边缘增大。
图3是根据实施例的对焦地图的示图。
根据一个或多个实施例的对焦地图指示场景的多个框的每个框的对焦值。每个框的对焦值表示相应框的代表性对焦值。因而,即使当多个对焦值存在于一个框中时,框也可以具有一个代表性对焦值。例如,每个框的代表性对焦值可以被定义为相应框的峰对焦值。
对焦镜头的扫描范围可以是当移动对焦镜头时由对焦镜头覆盖的整个区域。根据缩放位置,通过移动对焦镜头而覆盖的区域可以不同。因此,可以通过参考镜头信息和缩放位置信息来确定对焦镜头的扫描范围。
拍摄控制单元130控制拍摄单元110连续捕捉与对焦地图的对焦值对应的多个图像。一旦从对焦地图生成单元120接收到对焦地图,拍摄控制单元130就提取对焦地图的对焦值。例如,当生成图3中所示的对焦地图时,对焦地图中的对焦值是425、482、500、519、543、566、569和581。拍摄控制单元130通过使用从对焦地图提取的对焦值来控制拍摄单元110执行连续的图像捕捉操作。换言之,连续地捕捉与所提取的对焦值对应的多个图像。根据一个或多个实施例,通过从对焦地图提取要被连续捕捉的对焦值,即使当有限次地执行连续的图像捕捉操作时,也可以全面地覆盖场景中的多个焦距。
当相对于多个焦距执行了连续的图像捕捉操作时,可以获得分别对应于焦距的多个图像。然而,此时,连续捕捉的次数增加,因而由于数字拍摄装置100a在图像捕捉期间的移动,而导致在多个图像之间可能生成整体运动。此外,因为连接捕捉的多个图像的数量增加,所以可能需要大存储空间。根据一个或多个实施例,通过从对焦地图提取要连接捕捉的对焦值,连接捕捉图像的次数没有过度增加,从而减小了在捕捉操作期间可能生成的整体运动的大小或可能性。此外,通过在提取场景中的焦距之后执行连接的图像捕捉操作,可以进一步有效地提取焦距。此外,可以减少连续捕捉的多个图像的数量,从而使用更少的存储空间。
文件生成单元140a存储连续捕捉的多个图像、多个图像的每个的对焦值信息以及场景的对焦值信息。多个图像、多个图像的每个的对焦值信息以及场景的对焦值信息可以被存储在一个文件中。
每个图像的对焦值信息是指示哪个图像对应于哪个对焦值的信息。例如,来自多个图像当中的第一图像的对焦值信息指示第一图像对应于425的对焦值。
场景的对焦值信息是指示场景的哪个区域或像素对应于哪个对焦值的信息。这里,场景的对焦值信息可以表示对焦值自身或者与对焦值有关的信息。与对焦值有关的信息可以是图像的深度信息。场景的对焦值信息可以用任何方式来定义,例如,相对于对焦地图中的框来定义,相对于像素来定义,或者相对于比对焦地图的框更小的框来定义。或者,场景的对焦值信息可以是对焦地图。此外,可以与对焦地图分开地生成或不同地生成场景的对焦值信息。
存储单元150存储由文件生成单元140a生成的文件。存储单元150是非易失性存储介质,例如,硬盘驱动、闪存、固态盘(SSD)或磁性记录介质。
图4是根据实施例的控制电子装置的方法的流程图。
首先,在操作S402中通过移动对焦镜头来生成对焦地图。对焦地图可以包括通过拆分场景来定义的多个框的每个的对焦值信息。
然后,在操作S404中连续捕捉与从对焦地图中提取的对焦值对应的多个图像。
然后,在操作S406中一起存储多个图像、多个图像的每个的对焦值信息以及场景的对焦值信息。多个图像、多个图像的每个的对焦值信息以及场景的对焦值信息可以被存储在一个文件中。
图5是根据另一实施例的电子装置(例如,数字拍摄装置100b)的框图。数字拍摄装置100b包括拍摄单元110、对焦地图生成单元120、捕捉顺序生成单元510、拍摄控制单元130、文件生成单元140b、存储单元150、整体运动检测单元520和整体运动补偿单元530。
拍摄单元110是用于从已经从光信号转换而来的电信号生成图像的组件。拍摄单元110包括镜头、光圈和图像拾取设备。
对焦地图生成单元120生成指示通过拆分场景来定义的多个框的每个框的对焦值的对焦地图。因此,在图像捕捉之前,对焦地图生成单元120在预定的扫描范围之内移动对焦镜头来检测多个框的对焦值。
捕捉顺序生成单元510从对焦地图中提取要连续捕捉的对焦值,并且生成要连续捕捉的对焦值的捕捉顺序。
图6是用于描述根据实施例的生成捕捉顺序的过程的示图。
当生成图3中所示的对焦地图时,可以从对焦地图中提取对焦值425、482、500、519、543、566、569和581。在从对焦地图提取对焦值之后,捕捉顺序生成单元510按降序或升序来排列对焦值。根据对焦镜头在连续的图像捕捉操作期间的移动方向来确定按降序还是升序来排列对焦值。
根据另一实施例,当所提取的对焦值的数量高于最大捕捉次数时,捕捉顺序生成单元510可以组合一些提取的对焦值,用代表性值来代替组合的对焦值,并且将捕捉顺序中的对焦值的数量调整为最大捕捉次数。例如,当最大捕捉次数是7时,捕捉顺序生成单元510可以将所提取的对焦值当中彼此最邻近(或者在值上彼此最接近)的对焦值566和569组合成一个对焦值。组合的对焦值566和569可以被代表性值所代替,通过:例如,将两个对焦值匹配为在更多框中检测到的对焦值,或者,将两个对焦值匹配为566和569之间的中间值。
根据另一实施例,当提取的对焦值的数量小于最大捕捉次数时,捕捉顺序生成单元510可以添加对焦值到捕捉顺序。例如,对焦值可以被添加到捕捉顺序中对焦值之间的差值高的范围。例如,当如图6中所示从对焦地图中提取出对焦值时,对焦值可以被添加到对焦值之间的差值最高的范围,例如,对焦值425和482之间。所添加的对焦值可以是425和482之间的中间值。
这里,根据数字拍摄装置100b的类型,或者根据缩放位置,最大捕捉次数可以不同。或者,用户可以设定最大捕捉次数。
拍摄控制单元130通过使用由捕捉顺序生成单元510所生成的捕捉顺序来执行连续的图像捕捉操作。换言之,拍摄控制单元130可以控制拍摄单元110通过根据捕捉顺序中的对焦值来移动对焦镜头来执行连续的图像捕捉操作。
图7是用于描述移动对焦镜头710的过程的示图。
根据当前实施例,当根据对焦地图生成单元120的控制在一个方向上移动对焦镜头710时,在操作S702中执行捕捉对焦扫描。接着,当捕捉顺序生成单元510生成捕捉顺序并且拍摄控制单元130控制拍摄单元110执行连续的图像捕捉操作时,按照捕捉顺序中的对焦值的次序来移动对焦镜头710,来在操作S704中连续地捕捉多个图像。
根据实施例,当按照对焦值的升序来执行操作S702时,通过按照降序排列对焦值来确定捕捉顺序。另一方面,当按照对焦值的降序来执行操作S702时,通过按升序来排列对焦值来确定捕捉顺序。
根据另一实施例,当按照对焦值的升序来执行操作S702时,也可以通过按照升序排列对焦值来确定捕捉顺序。当按照对焦值的降序来执行操作S702时,也可以通过按降序排列对焦值来确定捕捉顺序。
整体运动检测单元520检测由拍摄单元110捕捉的多个图像之间的整体运动,并且当检测到的整体运动在整体运动可补偿范围之外时,停止连续的图像捕捉操作。整体运动是在图像捕捉期间可能发生的数字拍摄装置100b的移动或者场景的移动。因为在一个或多个实施例中相对于相同场景获得多个图像,所以期望在连续地捕捉多个图像时不生成整体运动。然而,当整体运动的大小在整体运动可补偿范围之外时,整体运动检测单元520可以停止连续的图像捕捉操作并且引导或促使用户重新捕捉图像。这里,整体运动可补偿范围是通过整体运动补偿单元530可补偿的整体运动的大小。例如,整体运动检测单元520可以向用户提供用于引导或促使重新捕捉图像的消息。或者,当整体运动的大小在整体运动可补偿范围之外时,整体运动检测单元520可以控制拍摄控制单元130自动地再次执行连续的图像捕捉操作。
为了检测整体运动,整体运动检测单元520可以使用例如包括在数字拍摄装置100b中的陀螺仪传感器或加速度传感器。或者,整体运动检测单元520可以通过检测多个图像的捕捉之间的运动分量信息来检测整体运动。
当多个图像之间的整体运动在整体运动可补偿范围之内时,整体运动补偿单元530补偿多个图像之间的整体运动。例如,整体运动补偿单元530可以处理多个图像,以便使用整体运动对齐算法经由上/下/左/右平移或旋转来匹配图像的边缘,从而抵消多个图像之间的整体运动。
文件生成单元140b一起存储连续捕捉的多个图像、多个图像的每个的对焦值信息以及场景的对焦值信息。根据当前实施例,多个图像可以是整体运动已经被补偿的图像。多个图像、每个图像的对焦值信息以及场景的对焦值信息可以被存储在一个文件中。
存储单元150存储由文件生成单元140a生成的文件。存储单元150是非易失性存储介质,例如,硬盘驱动、闪存、SSD或磁性记录介质。
图8是根据另一实施例的控制电子装置的方法的流程图。
首先,在操作S802中在对焦镜头可移动范围之内扫描对焦镜头来在操作S804中生成对焦地图。对焦地图可以包括通过拆分场景来定义的多个框的每个的对焦值。对焦镜头可移动范围可以基于电子装置(例如,数字拍摄装置100b)的类型或缩放位置来确定。
然后,在操作S806中,排列从对焦地图中提取的对焦值来生成捕捉顺序。如上所述,根据对焦镜头在执行连续的图像捕捉操作期间的扫描方向来确定是按升序还是降序来排列对焦值。换言之,可以根据扫描方向排列对焦值来生成捕捉顺序,或者根据与扫描方向相反的方向排列对焦值来生成捕捉顺序。
根据另一实施例,当从对焦地图中提取的对焦值的数量高于最大捕捉次数时,一些提取的对焦值可以被组合到一起,并且组合的对焦值可以被代表性值代替,以便将捕捉顺序中的对焦值的数量调整为在最大捕捉次数之内。
根据另一实施例,当从对焦地图中提取的对焦值的数量低于最大捕捉次数时,对焦值可以被添加到捕捉顺序。这里,对焦值可以被添加到捕捉顺序中对焦值之间的差值最高的范围(例如,两个对焦值之间)。
然后,在操作S808中根据捕捉顺序来连续地捕捉多个图像。
在操作S810中,当在连续地捕捉多个图像时,确定多个图像之间的整体运动在整体运动可补偿范围之外时(操作S810的否),停止连续的图像捕捉操作。当停止连续的图像捕捉操作时,向用户提供引导或促使重新捕捉图像的消息,或者可以自动地执行重新捕捉。在重新捕捉期间,可以执行操作S802,或者可以执行操作S808。
当在操作S810中确定多个图像之间的整体运动在整体运动可补偿范围之内时(操作S810的是),在操作S812中补偿整体运动。
然后,在操作S814中将多个图像、多个图像的对焦值信息、场景的对焦值信息存储在一个文件中。
图9是根据另一实施例的电子装置(例如,数字拍摄装置100c)的框图。根据当前实施例的数字拍摄装置100c包括拍摄单元110、对焦地图生成单元120、拍摄控制单元130、深度地图生成单元910a、文件生成单元140c、存储单元150、再现图像确定单元920a和再现单元930。
拍摄单元110是用于从已经从光信号转换而来的电信号生成图像的组件。拍摄单元110包括镜头、光圈和图像拾取设备。
对焦地图生成单元120生成包括通过拆分场景来定义的多个框的每个框的对焦值的对焦地图。因此,在执行图像捕捉之前,对焦地图生成单元120通过在预定扫描范围之内移动对焦镜头来检测多个框的对焦值。
拍摄控制单元130控制拍摄单元110连续地捕捉与对焦地图中的对焦值对应的多个图像。
深度地图生成单元910a确定多个图像的代表性图像,并且生成代表性图像的深度地图。生成深度地图以便比对焦地图更详细地指示场景的焦距信息。因此,当通过使用深度地图来生成多个图像时,可以以比对焦地图的框单位更详细的单位来向用户提供每个点(例如,由用户选择的每个点)的对焦的图像。
多个图像的代表性图像可以用任何方式来确定,例如,可以是多个图像的第一图像、中间图像或者最后的图像。
深度地图可以经由预定的深度地图生成算法来生成。根据当前实施例,因为用多个焦距捕捉多个图像,所以可以通过使用多个图像来生成深度地图。此外,可以通过使用在扫描对焦镜头来生成对焦地图时获得的对焦信息来生成深度地图。
文件生成单元140c一起存储连续捕捉的多个图像、多个图像的每个的对焦值信息以及深度地图。多个图像、多个图像的每个的对焦值信息和深度地图可以被存储在一个文件中。
存储单元150存储由文件生成单元140c生成的文件。
当根据一个或多个实施例捕捉并生成图像文件时,再现图像确定单元920a确定要再现的再现图像。
图10是用于描述根据实施例的确定再现图像的过程的图像。图10中所示的图像对应于在对焦地图的第n行和第m列中的框Bnm。
如图10中所示,至少一个边缘可以存在于对焦地图的一个框中,并且多个焦距也可以存在。在当前实施例中,通过使用深度地图获得比对焦地图更详细的焦距信息,并且当再现图像文件时,用户能够再现进一步对焦在所选择的点的图像。例如,如图10中所示,区域1具有与对焦值425对应的焦距,并且区域2具有与对焦值502对应的焦距。当用户选择区域1中的一个点时,电子装置(例如,数字拍摄装置100c)再现与对焦值425对应的图像,而当用户选择区域2中的一个点时,数字拍摄装置100c再现与对焦值502对应的图像。如果通过使用图3的对焦地图捕捉了多个图像,并且与对焦值502对应的图像不存在,从而具有最接近对焦值502的对焦值500的图像可以被确定并且再现为再现图像。
当再现图像文件时,首先可以再现代表性图像。当在代表性图像被再现时用户选择了代表性图像中的一个点时,再现图像确定单元920a通过使用深度地图获得所选择的点的深度值,并且将具有最接近与深度值对应的对焦值的对焦值的图像确定为再现图像。
甚至在显示从多个图像当中确定的再现图像时,也可以接收用于选择点的用户输入。在这种情况中,再现图像确定单元920a通过使用深度地图而获得该点的深度值,并且将具有最接近与该点的深度值对应的对焦值的对焦值的图像确定为再现图像。根据实施例,应该理解多个图像具有相同的坐标值,从而深度地图可以被匹配到多个图像的每个。根据另一实施例,可以与图像文件一起存储关于多个图像的坐标值如何被匹配到代表性图像的坐标值的匹配信息,并且通过使用匹配信息,多个图像的每个可以被匹配到深度地图。
再现单元930再现由再现图像确定单元920a所确定的再现图像。例如,再现单元930可以在数字拍摄装置100c中包括的显示单元(未示出)上再现所述再现图像。
根据另一实施例,当在再现根据一个或多个实施例捕捉和存储的图像文件时用户输入用于将多个图像之一存储为分开的文件的控制信号时,文件生成单元140c可以将所选择的图像生成为分开的图像文件,并且在存储单元150中存储分开的图像文件。
图11是根据另一实施例的控制电子装置的方法的流程图。
首先,在操作S1102中通过移动对焦镜头来生成对焦地图。对焦地图可以包括通过拆分场景来定义的多个框的每个框的对焦值信息。
然后,在操作S1104中连续捕捉与从对焦地图中提取的对焦值对应的多个图像。
然后,从多个图像当中确定代表性图像,并且在操作S1106中生成代表性图像的深度地图。代表性图像可以用任何方式来确定,例如,可以是多个图像的第一图像、中间图像或者最后的图像。
然后,在操作S1108中一起存储多个图像、多个图像的每个的对焦值信息以及深度地图。多个图像、多个图像的每个的对焦值信息和深度地图可以被存储在一个文件中。
图12是根据另一实施例的电子装置(例如,数字拍摄装置100d)的框图。根据当前实施例的数字拍摄装置100d包括拍摄单元110、对焦地图生成单元120、拍摄控制单元130、深度地图生成单元910a、文件索引地图生成单元1210、文件生成单元140d、存储单元150、再现图像确定单元920b和再现单元930。
拍摄单元110是用于根据从光信号转换而来的电信号生成图像的组件。拍摄单元110包括镜头、光圈和图像拾取设备。
对焦地图生成单元120生成指示通过拆分场景来定义的多个框的每个框的对焦值的对焦地图。因此,在捕捉之前,对焦地图生成单元120通过在预定扫描范围之内移动对焦镜头来检测多个框的每个框的对焦值。
拍摄控制单元130控制拍摄单元110连续地捕捉与对焦地图中的对焦值对应的多个图像。
深度地图生成单元910a确定多个图像的代表性图像,并且生成代表性图像的深度地图。
通过使用深度地图来将代表性图像的每个像素的深度值匹配到多个图像的每个的对焦值,文件索引地图生成单元1210将代表性图像的每个像素匹配到多个图像的一个图像。文件索引地图生成单元1210然后生成指示匹配到代表性图像的每个像素的图像信息的文件索引地图。换言之,文件索引地图指示代表性图像的哪个像素对应于多个图像的哪个图像。
根据另一实施例,文件索引地图生成单元1210可以从对焦地图生成文件索引地图。在这种情况中,可以省略深度地图生成单元910a。
图13是用于描述根据实施例的生成文件索引地图的过程的图像。图13中所示的图像对应于在对焦地图的第n行和第m列中的框Bnm。
如图13中所示,边缘存在于对焦地图的一个框中,因而可能存在多个焦距。在当前实施例中,通过使用深度地图获得比对焦地图更详细的焦距信息,并且通过使用深度地图预存储关于与代表性图像的每个像素对应的图像的信息。因此,当再现图像文件时,可以再现进一步对焦到用户选择的点的图像,并且可以缩小确定再现图像所花费的时间。例如,如图13中所示,当区域1具有与对焦值425对应的焦距,并且区域2具有与对焦值502对应的焦距时,根据当前实施例的电子装置(例如,数字拍摄装置100d)在文件索引地图中存储图像100(其为多个图像当中与对焦值425对应的图像)作为再现图像。此外,相对于区域2,文件索引地图生成单元1210在文件索引地图中存储与对焦值502对应的图像作为再现图像。当通过使用图3的对焦地图来捕捉多个图像时,与对焦值500对应的图像不存在,因而文件索引地图生成单元1210在文件索引地图中存储图像102(其为具有最接近对焦值502的对焦值500的图像)作为再现图像。
文件生成单元140d将连续捕捉的多个图像、多个图像的每个的对焦值信息以及文件索引地图一起存储。多个图像、多个图像的每个的对焦值信息和文件索引地图可以被存储在一个文件中。
存储单元150存储由文件生成单元140d生成的文件。
当再现根据一个或多个实施例捕捉和生成的图像文件时,再现图像确定单元920b确定要再现的图像。在再现图像文件时,首先再现代表性图像,然后可以由用户来确定再现图像。当用户在再现多个图像之一时选择一个点时,根据当前实施例的再现图像确定单元920b从文件索引地图中搜索与位于所选择的点的像素对应的再现图像,并且确定所述再现图像。
再现单元930再现由再现图像确定单元920b所确定的再现图像。
图14是根据另一实施例的控制电子装置的方法的流程图。
首先,在操作S1402中通过移动对焦镜头来生成对焦地图。对焦地图可以包括通过拆分场景来定义的多个框的每个框的对焦值信息。
然后,在操作S1404中连续捕捉与从对焦地图中提取的对焦值对应的多个图像。
然后,从多个图像当中确定代表性图像,并且在操作S1406中生成代表性图像的深度地图。代表性图像可以用任何方式来确定,例如,可以是多个图像的第一图像、中间图像或者最后的图像。
然后,通过使用深度地图将代表性图像的每个像素的深度值匹配到多个图像的每个的对焦值,代表性图像的每个像素被匹配到多个图像之一,并且在操作S1408中生成指示关于匹配到代表性较图像的每个像素的图像的信息的文件索引地图。
然后,在操作S1410中一起存储多个图像、多个图像的每个的对焦值信息以及文件索引地图。多个图像、多个图像的每个的对焦值信息和文件索引地图可以被存储在一个文件中。
图15是根据实施例的图像再现装置1500a的框图。根据当前实施例的图像再现装置1500a包括存储单元150、再现图像确定单元920c和再现单元930。
存储单元150存储根据一个或多个实施例生成的至少一个图像文件。如上所述,图像文件可以包括多个图像、多个图像的对焦值信息以及场景的对焦值信息。场景的对焦值信息可以是对焦地图、深度地图和文件索引地图中的一个。存储单元150是非易失性存储介质,诸如硬盘驱动、闪存、SSD或磁性记录介质。
再现图像确定单元920c确定当根据一个或多个实施例捕捉和生成图像文件时要再现的再现图像。当再现图像文件时,首先再现代表性图像,然后可以由用户来确定再现图像。当用户在再现多个图像之一时选择一个点时,根据当前实施例的再现图像确定单元920c通过使用在相应点处的场景的对焦值信息来确定再现图像。根据实施例,场景的对焦值信息可以是对焦地图、深度地图和文件索引地图中的一个。
图16是根据实施例的图像再现方法的流程图。
当用户请求再现根据一个或多个实施例生成的图像文件时,在操作S1602中再现图像文件的代表性图像。如上所述,图像文件可以包括多个图像、多个图像的每个的对焦值信息以及场景的对焦值信息。场景的对焦值信息可以是对焦地图、深度地图和文件索引地图中的一个。
然后,当用户选择代表性图像中的一点时,在操作S1604中将具有与用户选择的点的对焦值对应的对焦值的图像确定为再现图像。这里,为了确定再现图像,可以使用场景的对焦值信息。可以如上相对于数字拍摄装置100c或100d所述的,确定再现图像。此外,当正再现被确定为再现图像的多个图像之一时用户选择了再现图像中的一点时,通过使用场景的对焦值信息来再次确定再现图像。
当确定了再现图像时,在操作S1606中再现所述再现图像。
图17是根据另一实施例的图像再现装置1500b的框图。根据当前实施例的图像再现装置1500b包括存储单元150、深度地图生成单元910b、文件更新单元1710a、再现图像确定单元920a和再现单元930。
存储单元150存储根据一个或多个实施例生成的至少一个图像文件。如上所述,图像文件可以包括多个图像、多个图像的每个的对焦值信息以及场景的对焦值信息。
深度地图生成单元910b确定存储在图像文件中的多个图像的代表性图像,并且生成代表性图像的深度地图。根据当前实施例,当因为例如低规格或者为了缩减文件生成时间,电子装置没有生成深度地图时,图像再现装置1500b可以生成深度地图并且将深度地图存储在图像文件中。或者,即使当图像文件包括深度地图时,图像再现装置1500b也可以为了精度而再次生成深度地图。因而,根据当前实施例,当图像再现装置1500b再现对焦到由用户选择的点的图像时,确定更加精确的再现图像是可能的。
文件更新单元1710a将深度地图生成单元910b生成的深度地图存储在图像文件中。这里,存储在图像文件中的场景的对焦值信息可以被深度地图来代替。
当再现根据一个或多个实施例捕捉并生成的图像文件时,再现图像确定单元920a通过使用深度地图来确定要再现的再现图像。
当再现图像文件时,首先可以再现代表性图像。当在代表性图像被再现时用户选择了代表性图像中的一个点时,再现图像确定单元920a通过使用深度地图获得所选择的点的深度值,并且将对焦值最接近与深度值对应的对焦值的图像确定为再现图像。
甚至在再现多个图像之一时,也可以接收用于选择一个点的用户输入。这时,再现图像确定单元920a可以通过使用深度地图来获得所选择的点的深度值,并且将具有最接近与深度值对应的对焦值的对焦值的图像确定为再现图像。
再现单元930再现由再现图像确定单元920a所确定的再现图像。
图18是根据另一实施例的图像再现方法的流程图。
当用户选择再现图像文件时,在操作S1802中生成图像文件的代表性图像的深度地图。图像文件中的场景的对焦值信息被深度地图所代替,因而在操作S1804中更新图像文件。
然后,在操作S1806中再现代表性图像。当在再现代表性图像时输入用于选择代表性图像的一个点的用户输入时,在操作S1808中从深度地图搜索所选择的点的深度值。然后,在操作S1810中,具有与深度值对应的对焦值或者最接近深度值的对焦值的对焦值的图像被确定为再现图像。在再现图像被确定之后,再现图像在操作S1812中被再现。
甚至在再现所述再现图像时,也可以接收用于选择一个点的用户输入。此时,通过使用深度地图,具有最接近该点的深度值的对焦值的图像可以被确定为再现图像。
图19是根据另一实施例的图像再现装置1500c的框图。根据当前实施例的图像再现装置1500c包括存储单元150、深度地图生成单元910b、文件索引地图生成单元1210、文件更新单元1710b、再现图像确定单元920b和再现单元930。
存储单元150存储根据一个或多个实施例生成的至少一个图像文件。如上所述,图像文件可以包括多个图像、多个图像的每个的对焦值信息以及场景的对焦值信息。
深度地图生成单元910b确定图像文件中的多个图像的代表性图像,并且生成代表性图像的深度地图。
通过使用深度地图来将代表性图像的每个像素的深度值匹配到多个图像的每个的对焦值,文件索引地图生成单元1210将代表性图像的每个像素匹配到多个图像的一个图像。文件索引地图生成单元1210然后生成指示匹配到代表性图像的每个像素的图像的信息的文件索引地图。换言之,文件索引地图指示代表性图像的哪个像素对应于多个图像的哪个图像。
根据当前实施例,当电子装置不生成文件索引地图从而缩减文件生成时间时,图像再现装置1500c可以生成文件索引地图并将它存储在图像文件中。此外,即使当深度地图被存储在图像文件中时,图像再现装置1500c为了精度也可以再次生成深度地图,然后通过使用深度地图来生成文件索引地图,并且将文件索引地图存储在图像文件中。因而,根据当前实施例,当图像再现装置1500c再现对焦到由用户选择的点的图像时,精确并快速地确定再现图像是可能的。
文件更新单元1710b将文件索引地图生成单元1210生成的文件索引地图存储在图像文件中。这里,存储在图像文件中的场景的对焦值信息可以被文件索引地图来代替。
当再现根据一个或多个实施例捕捉和生成的图像文件时,再现图像确定单元920b可以通过使用文件索引地图来确定再现图像。
当再现图像文件时,首先可以再现代表性图像。当在正再现代表性图像时用户选择了代表性图像的一个点时,再现图像确定单元920b可以通过使用文件索引地图来搜索并确定与所选择的点对应的再现图像。
甚至在再现多个图像之一时,也可以接收用于选择一个点的用户输入。此时,再现图像确定单元920b可以通过使用文件索引地图来搜索并确定与所选择的点对应的再现图像。
再现单元930再现由再现图像确定单元920b所确定的再现图像。
图20是根据另一实施例的图像再现方法的流程图。
当用户选择再现图像文件时,在操作S2002中生成图像文件的代表性图像的深度地图。如上所述,通过使用根据多个焦距捕捉的多个图像,可以生成深度地图。此外,通过使用在扫描对焦镜头来生成对焦地图时获得的对焦信息来生成深度地图是可能的。如果深度地图已经存在于图像文件中,可以省略操作S2002。
在生成深度地图之后,在操作S2004中通过使用深度地图来生成指示与代表性图像的每个像素对应的再现图像的文件索引地图。然后,在操作S2006中将文件索引地图存储在图像文件中。这里,存储在图像文件中的场景的对焦值信息可以被文件索引地图所代替,或者图像文件可以被更新来存储场景的对焦值信息和文件索引地图两者。
然后,在操作S2008中再现代表性图像。当在再现代表性图像时输入用于选择代表性图像中的一个点的用户输入时,在操作S2010中在文件索引地图中搜索与所选择的点对应的再现图像。当确定了再现图像时,在操作S2012中再现所述再现图像。
甚至在再现所述再现图像时,也可以接收用于选择一个点的用户输入。此时,可以通过使用文件索引地图来搜索与所选择的点对应的再现图像,并且可以确定再现图像。
如上所述,根据一个或多个以上的实施例,用户可以在图像被捕捉之后调节场景中的预定位置处的图像的对焦。
通过相同程度的参考将在此引用的所有参考文献,包括出版物、专利申请和专利合并于此,就像每个参考文献被单独且明确地指示通过引用被合并并且被全部阐述于此一样。
为了促进对本发明的原理的理解的目的,已经对图中示出的实施例进行了参考,并且已经使用了特定的语言来描述这些实施例。然而,此特定语言并不意在对本发明的范围的限制,并且本发明应该被解释为涵盖本领域一位技术人员将正常地想到的所有实施例。在此使用的术语是用于描述特定实施例的目的,而不是意在限制本发明的示范性实施例。在实施例的描述中,当认为相关技术的某些详细说明可能不必要地模糊本发明的本质时,省略它们。
在此描述的装置可以包括处理器、用于存储要由处理器运行的程序数据的存储器、诸如硬盘的永久性储存器、用于处理与外部设备的通信的通信端口以及用户接口设备,包括显示器、触摸面板、键、按钮等。当涉及软件模块时,这些软件模块可以被存储为非瞬时性计算机可读媒体上可由处理器运行的程序指令或计算机可读代码,其中非瞬时性计算机可读媒体诸如磁性储存媒体(例如,磁带、硬盘、软盘)、光学记录媒体(例如,CD-ROM、数字多功能盘(DVD)等)以及固态存储器(例如,随机存取存储器(RAM)、只读存储器(ROM)、静态随机存取存储器(SRAM)、电可擦除可编程只读存储器(EEPROM)、闪存、拇指驱动器等)。计算机可读记录媒体也可以分布在网络耦合的计算机***上,以便计算机可读代码以分布式方式被存储和运行。此计算机可读记录媒体可以被计算机读取、存储在存储器中并且由处理器运行。
此外,使用在此的公开,本发明所属的领域的普通程序员可以容易地实现用于进行和使用本发明的功能泛函程序、代码和代码段。
本发明可以以功能块组件和各种处理步骤的方式来描述。这样的功能块可以由被配置为执行指定功能的任何数量的硬件和/或软件组件来实现。例如,本发明可以采用各种集成电路组件,例如,存储器元件、处理元件、逻辑元件、查找表等,其可以在一个或多个微处理器或其它控制设备的控制下实行各种功能。类似地,当本发明的元素使用软件编程或软件元件来实施时,本发明可以用任何编程或脚本语言来实施,诸如C、C++、JAVA、汇编程序等,其中各种算法用数据结构、对象、进程、例程或其它编程元素的任何组合来实施。功能方面可以用在一个或多个处理器上运行的算法来实施。此外,本发明可以采用任何数量的传统技术用于电子配置、信号处理和/或控制、数据处理等。最后,在此描述的所有方法的步骤可以以任何适当的次序来执行,除非在此另外指示,或者上下文清楚地抵触。
为了简洁起见,可能不详细描述***的传统电子件、控制***、软件开发和其它功能方面(以及***的个别操作***的组件)。此外,在呈现的各个图中所示的连接线或连接器意在代表各个元件之间的示范性功能关系和/或物理或逻辑耦合。应该注意,在实际的设备中可以存在很多替换的或额外的功能关系、物理连接或逻辑连接。词语“机械”、“元件”、“单元”、“结构”、“手段”和“结构”被广泛地使用,并且不限于机械或物理的实施例,但是可以包括与处理器结合的软件例程等。
任何和所有示例的使用或者以此提供的示范性语言(例如,“诸如”)仅仅意在说明本发明,而不是对本发明的范围施加限制,除非另外声明。众多修改和适配将对此领域普通技术人员来说显而易见,而不脱离由所附的权利要求定义的本发明的精神和范围。因此,本发明的范围不是由本发明的详细描述定义而是由所附的权利要求来定义,并且该范围之内的所有差异将被解释为被包括在本发明中。
没有项目或组件对于本发明的实践是必不可少的,除非该元素被明确地描述为“本质的”或“关键的”。还将认识到,如在此使用的术语“包括了”、“包括”、“包含了”、“包含”、“具有”和“含有”明确地意欲被读作领域中的开放的术语。在描述本发明的上下文中(尤其是在所附的权利要求的上下文中)对术语“一”和“一个”和“所述”及类似指代的使用要被解释为覆盖单数和复数两者,除非上下文清楚地指示除外。另外,应该理解,虽然在此可以使用术语“第一”、“第二”等来描述各种元素,但是这些元素不应该被这些术语限制,其仅仅用来区分一个元素与另一个。此外,在此对值的范围的叙述仅仅意在充当单独地提及落在范围之内的单独的值的便捷方法,除非在此另外指示,并且每个单独的值被合并在说明书中就像它在此被单独地叙述一样。
应该理解,在其中描述的示范性实施例应该以描述性意义来考虑,而不是为了限制的目的。在每个示范性实施例之内的特征或方面的描述应该典型地被认为可用于其它实施例中的其它相似的特征或方面。虽然已经参考附图描述了本发明的一个或多个实施例,但是本领域普通技术人员将理解,可以在其中进行形式和细节上的各种改变,而不脱离由所附权利要求所定义的发明的精神和范围。

Claims (15)

1.一种控制电子装置的方法,该方法包括:
生成指示通过拆分场景来定义的多个框的对焦值的对焦地图;
连续地捕捉与对焦地图中的对焦值对应的多个图像;以及
存储所述多个图像、所述多个图像的每个的对焦值信息以及场景的对焦值信息。
2.如权利要求1所述的方法,还包括:
通过按次序排列所述多个框的对焦值来生成捕捉顺序,
其中连续地捕捉包括根据捕捉顺序中排列的对焦值的次序来连续地捕捉所述多个图像。
3.如权利要求2所述的方法,其中生成捕捉顺序的步骤包括:
当所述多个框的对焦值的数量大于最大捕捉次数时,组合对焦值并且用代表性值来代替组合的对焦值;而
当所述多个框的对焦值的数量小于最大捕捉次数时,在两个相邻的对焦值之间添加对焦值,其中所述两个相邻的对焦值之间的差值大。
4.如权利要求1所述的方法,还包括:
确定所述多个图像的代表性图像;以及
使用所述多个图像来生成代表性图像的深度地图,
其中场景的对焦值信息是深度地图。
5.如权利要求4所述的方法,进一步包括:
从所述多个图像当中再现至少一个图像;
在显示所再现的至少一个图像时,根据对深度地图的点的输入选择,将所述多个图像中具有与位于深度地图的该点处的深度值对应的对焦值的一个图像确定为再现图像;以及
再现所述再现图像。
6.如权利要求1所述的方法,还包括:
确定所述多个图像的代表性图像;
使用所述多个图像来生成代表性图像的深度地图;
通过使用深度地图来将代表性图像的每个像素的深度值匹配到所述多个图像的对焦值,来将代表性图像的每个像素匹配到所述多个图像之一;以及
生成指示匹配到代表性图像的每个像素的再现图像的文件索引地图,
其中场景的对焦值信息是文件索引地图。
7.一种电子装置,包括:
拍摄单元,通过光电转换入射光来拍摄图像;
对焦地图生成单元,生成指示通过拆分场景来定义的多个框的对焦值的对焦地图;
拍摄控制单元,控制拍摄单元连续地捕捉与对焦地图的对焦值对应的多个图像;以及
文件生成单元,存储多个图像、多个图像的每个的对焦值信息以及场景的对焦值信息。
8.如权利要求7所述的电子装置,进一步包括:
捕捉顺序生成单元,通过按次序排列所述多个框的对焦值来生成捕捉顺序,
其中拍摄控制单元控制拍摄单元根据捕捉顺序中的对焦值的次序来连续地捕捉所述多个图像。
9.如权利要求8所述的电子装置,其中:
当所述多个框的对焦值的数量大于最大捕捉次数时,捕捉顺序生成单元组合对焦值并且用代表性值来代替组合的对焦值;而
当所述多个框的对焦值的数量小于最大捕捉次数时,捕捉顺序生成单元在两个相邻的对焦值之间添加对焦值,其中所述两个相邻的对焦值之间的差值高。
10.如权利要求7所述的电子装置,还包括:
深度地图生成单元,其确定所述多个图像的代表性图像,并且使用所述多个图像来生成代表性图像的深度地图,
其中场景的对焦值信息是深度地图。
11.如权利要求10所述的电子装置,还包括:
再现图像确定单元,其在所述多个图像当中的至少一个图像被显示时,根据对深度地图的一个点的输入选择来将所述多个图像中具有与位于深度地图的该点处的深度值对应的对焦值的一个图像确定为再现图像;以及
再现单元,其再现所述再现图像。
12.如权利要求7所述的电子装置,还包括:
深度地图生成单元,其确定所述多个图像的代表性图像,并且使用所述多个图像来生成代表性图像的深度地图;以及
文件索引地图生成单元,其通过使用深度地图将代表性图像的每个像素的深度值匹配到所述多个图像的对焦值,来将代表性图像的每个像素匹配到所述多个图像之一,并且生成指示匹配到代表性较图像的每个像素的再现图像的文件索引地图,
其中场景的对焦值信息是文件索引地图。
13.如权利要求12所述的电子装置,还包括:
再现图像确定单元,其在所述多个图像当中的至少一个图像被显示时,使用文件索引地图将所述多个图像中匹配根据输入选择而选择的一个点的一个图像确定为再现图像;以及
再现单元,用于再现所述再现图像。
14.如权利要求7所述的电子装置,还包括:
整体运动检测单元,其在所述多个图像正在被捕捉时,当电子装置的移动在整体运动可补偿范围之外时,使拍摄单元停止捕捉所述多个图像;以及
整体运动补偿单元,其在所述多个图像被捕捉之后补偿所述多个图像的整体运动。
15.一种非瞬时性计算机可读记录介质,已经在其上记录有用于运行方法的计算机程序代码,该方法在被处理器运行时控制电子装置,该方法包括:
生成指示通过拆分场景来定义的多个框的对焦值的对焦地图;
连续地捕捉与对焦地图中的对焦值对应的多个图像;以及
存储所述多个图像、所述多个图像的每个的对焦值信息以及场景的对焦值信息。
CN201480042939.2A 2013-07-31 2014-07-31 电子装置及其控制方法,以及非瞬时性计算机可读记录介质 Expired - Fee Related CN105453538B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020130091167A KR102068748B1 (ko) 2013-07-31 2013-07-31 디지털 촬영 장치, 그 제어 방법, 및 영상 재생 장치 및 방법
KR10-2013-0091167 2013-07-31
PCT/KR2014/007019 WO2015016619A1 (en) 2013-07-31 2014-07-31 Electronic apparatus, method of controlling the same, and image reproducing apparatus and method

Publications (2)

Publication Number Publication Date
CN105453538A true CN105453538A (zh) 2016-03-30
CN105453538B CN105453538B (zh) 2019-09-06

Family

ID=52427256

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480042939.2A Expired - Fee Related CN105453538B (zh) 2013-07-31 2014-07-31 电子装置及其控制方法,以及非瞬时性计算机可读记录介质

Country Status (5)

Country Link
US (1) US10237491B2 (zh)
EP (1) EP3028445A4 (zh)
KR (1) KR102068748B1 (zh)
CN (1) CN105453538B (zh)
WO (1) WO2015016619A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106101555A (zh) * 2016-07-29 2016-11-09 广东欧珀移动通信有限公司 移动终端的对焦处理方法、装置及移动终端
CN109151302A (zh) * 2018-08-17 2019-01-04 北京随闻科技有限公司 一种穿戴设备的交互式智能对焦装置、对焦方法及其应用
CN109154711A (zh) * 2016-06-30 2019-01-04 Lg 电子株式会社 相机模块和及其自动对焦的方法

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9838594B2 (en) 2016-03-02 2017-12-05 Qualcomm Incorporated Irregular-region based automatic image correction
JP6808420B2 (ja) * 2016-09-27 2021-01-06 キヤノン株式会社 撮像素子および撮像装置
CN107124557A (zh) * 2017-05-31 2017-09-01 广东欧珀移动通信有限公司 对焦方法、装置、计算机可读存储介质和终端
US10582111B2 (en) 2018-03-30 2020-03-03 Qualcomm Incorporated Systems and methods for autofocus and depth map generation
US10609274B2 (en) * 2018-03-30 2020-03-31 Qualcomm Incorporated Systems and methods for autofocus and depth map generation
CN109842760A (zh) * 2019-01-23 2019-06-04 罗超 一种模拟人眼视物的影像拍摄与回放方法
US11405547B2 (en) * 2019-02-01 2022-08-02 Electronics And Telecommunications Research Institute Method and apparatus for generating all-in-focus image using multi-focus image
US11985420B2 (en) * 2019-03-27 2024-05-14 Sony Group Corporation Image processing device, image processing method, program, and imaging device
KR20210149542A (ko) * 2020-06-02 2021-12-09 삼성에스디에스 주식회사 이미지 촬영 및 판독 방법, 이를 위한 장치

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080131019A1 (en) * 2006-12-01 2008-06-05 Yi-Ren Ng Interactive Refocusing of Electronic Images
US20090310885A1 (en) * 2008-06-13 2009-12-17 Fujifilm Corporation Image processing apparatus, imaging apparatus, image processing method and recording medium
CN101853500A (zh) * 2010-05-13 2010-10-06 西北工业大学 一种彩色多聚焦图像融合方法
CN102053339A (zh) * 2010-11-23 2011-05-11 天津市亚安科技电子有限公司 自动聚焦方法
CN102082864A (zh) * 2010-11-22 2011-06-01 徐灏 Camare360手机摄影平台及瞬间处理方法
US20120188394A1 (en) * 2011-01-21 2012-07-26 Samsung Electronics Co., Ltd. Image processing methods and apparatuses to enhance an out-of-focus effect
US20130044254A1 (en) * 2011-08-18 2013-02-21 Meir Tzur Image capture for later refocusing or focus-manipulation
JP2013088579A (ja) * 2011-10-17 2013-05-13 Olympus Imaging Corp 撮像装置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006039486A2 (en) 2004-10-01 2006-04-13 The Board Of Trustees Of The Leland Stanford Junior University Imaging arrangements and methods therefor
US20080231714A1 (en) 2007-03-22 2008-09-25 Texas Instruments Incorporated System and method for capturing images
KR20080090174A (ko) 2007-04-04 2008-10-08 삼성테크윈 주식회사 디지털 영상 처리장치의 제어방법 및 그 장치
KR101431535B1 (ko) 2007-08-30 2014-08-19 삼성전자주식회사 얼굴인식 기능을 이용한 영상 촬영 장치 및 방법
KR20090032294A (ko) 2007-09-27 2009-04-01 삼성테크윈 주식회사 효과적 포커싱을 위한 디지털 영상 처리 장치의 제어 방법및 이 방법을 채용한 디지털 영상 처리 장치
JP5005570B2 (ja) 2008-02-04 2012-08-22 株式会社リコー 画像処理装置およびプログラム
US8279325B2 (en) * 2008-11-25 2012-10-02 Lytro, Inc. System and method for acquiring, editing, generating and outputting video data
JP5387949B2 (ja) * 2009-03-03 2014-01-15 株式会社リコー 撮像装置、再生表示装置、撮像記録方法および再生表示方法
KR101612443B1 (ko) 2009-03-05 2016-04-26 삼성전자주식회사 디지털 영상 촬영 장치 및 그의 제어 방법
US8228417B1 (en) 2009-07-15 2012-07-24 Adobe Systems Incorporated Focused plenoptic camera employing different apertures or filtering at different microlenses
US8436893B2 (en) 2009-07-31 2013-05-07 3Dmedia Corporation Methods, systems, and computer-readable storage media for selecting image capture positions to generate three-dimensional (3D) images
US20120019703A1 (en) 2010-07-22 2012-01-26 Thorn Karl Ola Camera system and method of displaying photos
KR101142701B1 (ko) 2010-10-18 2012-05-10 한양대학교 산학협력단 카메라 포커스 수치 계산에 기반한 관심 영역 추출 방법 및 장치
JP6080417B2 (ja) 2011-08-19 2017-02-15 キヤノン株式会社 画像処理装置、及び画像処理方法
US9959634B2 (en) * 2012-03-13 2018-05-01 Google Llc Method and system for identifying depth data associated with an object
US9191578B2 (en) 2012-06-29 2015-11-17 Broadcom Corporation Enhanced image processing with lens motion

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080131019A1 (en) * 2006-12-01 2008-06-05 Yi-Ren Ng Interactive Refocusing of Electronic Images
US20090310885A1 (en) * 2008-06-13 2009-12-17 Fujifilm Corporation Image processing apparatus, imaging apparatus, image processing method and recording medium
CN101853500A (zh) * 2010-05-13 2010-10-06 西北工业大学 一种彩色多聚焦图像融合方法
CN102082864A (zh) * 2010-11-22 2011-06-01 徐灏 Camare360手机摄影平台及瞬间处理方法
CN102053339A (zh) * 2010-11-23 2011-05-11 天津市亚安科技电子有限公司 自动聚焦方法
US20120188394A1 (en) * 2011-01-21 2012-07-26 Samsung Electronics Co., Ltd. Image processing methods and apparatuses to enhance an out-of-focus effect
US20130044254A1 (en) * 2011-08-18 2013-02-21 Meir Tzur Image capture for later refocusing or focus-manipulation
JP2013088579A (ja) * 2011-10-17 2013-05-13 Olympus Imaging Corp 撮像装置

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109154711A (zh) * 2016-06-30 2019-01-04 Lg 电子株式会社 相机模块和及其自动对焦的方法
US11002939B2 (en) 2016-06-30 2021-05-11 Lg Electronics Inc. Camera module and method for auto focus thereof
CN106101555A (zh) * 2016-07-29 2016-11-09 广东欧珀移动通信有限公司 移动终端的对焦处理方法、装置及移动终端
CN106101555B (zh) * 2016-07-29 2018-05-29 广东欧珀移动通信有限公司 移动终端的对焦处理方法、装置及移动终端
CN109151302A (zh) * 2018-08-17 2019-01-04 北京随闻科技有限公司 一种穿戴设备的交互式智能对焦装置、对焦方法及其应用

Also Published As

Publication number Publication date
KR20150015286A (ko) 2015-02-10
US20150035855A1 (en) 2015-02-05
EP3028445A4 (en) 2017-03-08
WO2015016619A1 (en) 2015-02-05
KR102068748B1 (ko) 2020-02-11
US10237491B2 (en) 2019-03-19
EP3028445A1 (en) 2016-06-08
CN105453538B (zh) 2019-09-06

Similar Documents

Publication Publication Date Title
CN105453538A (zh) 电子装置及其控制方法,以及图像再现装置和方法
CN101729781B (zh) 显示控制设备和显示控制方法
JP6324063B2 (ja) 画像再生装置及びその制御方法
US10257502B2 (en) Methods and apparatus for controlling light field capture
US10419661B2 (en) Shooting method and shooting device
US20130063555A1 (en) Image processing device that combines a plurality of images
KR20170135855A (ko) 패닝 샷들의 자동 생성
JP2012123296A (ja) 電子機器
CN107787463B (zh) 优化对焦堆栈的捕获
CN103716534A (zh) 摄像装置及合成图像的方法
CN103813094A (zh) 捕捉图像的方法、电子装置与机器可读存储介质
CN102595038A (zh) 数字拍摄设备及其控制方法
CN102811312A (zh) 摄像设备及其控制方法
CN102611835A (zh) 数字拍摄设备及其控制方法
US20200304887A1 (en) Display overlays for prioritization of video subjects
CN102761694B (zh) 摄像设备及其控制方法
US8717491B2 (en) Auto focusing method, recording medium for recording the method, and auto focusing apparatus
US20230306564A1 (en) System and Methods for Photo In-painting of Unwanted Objects with Auxiliary Photos on Smartphone
JP2013121173A (ja) 撮像装置
US9948867B2 (en) Apparatus, method, and computer-readable storage device for generating composite image
JP6294703B2 (ja) 画像処理装置、画像処理方法およびプログラム
JP6087719B2 (ja) 画像処理装置及び画像処理方法
JP6210836B2 (ja) 撮像装置、撮像制御装置、その制御方法およびプログラム
JP2022131642A (ja) 画像処理装置およびその制御方法、撮像装置、プログラム
US8988555B2 (en) Digital image signal processing apparatus and method for performing continuous photographing

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190906