CN103139473A - 消除快门迟滞的方法、照相机模块和具有其的移动设备 - Google Patents
消除快门迟滞的方法、照相机模块和具有其的移动设备 Download PDFInfo
- Publication number
- CN103139473A CN103139473A CN2012104955968A CN201210495596A CN103139473A CN 103139473 A CN103139473 A CN 103139473A CN 2012104955968 A CN2012104955968 A CN 2012104955968A CN 201210495596 A CN201210495596 A CN 201210495596A CN 103139473 A CN103139473 A CN 103139473A
- Authority
- CN
- China
- Prior art keywords
- resolution
- sensor
- output image
- signal
- sensor output
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 129
- 230000008859 change Effects 0.000 claims abstract description 82
- 230000004044 response Effects 0.000 claims abstract description 46
- 238000012545 processing Methods 0.000 claims description 73
- 238000001514 detection method Methods 0.000 claims description 47
- 230000001815 facial effect Effects 0.000 claims description 30
- 230000008569 process Effects 0.000 claims description 10
- 238000006243 chemical reaction Methods 0.000 claims description 8
- 230000005693 optoelectronics Effects 0.000 claims description 8
- 238000012958 reprocessing Methods 0.000 claims description 4
- 238000013461 design Methods 0.000 description 51
- 238000010586 diagram Methods 0.000 description 34
- 230000008030 elimination Effects 0.000 description 26
- 238000003379 elimination reaction Methods 0.000 description 26
- 230000006870 function Effects 0.000 description 21
- 230000000717 retained effect Effects 0.000 description 16
- 238000004891 communication Methods 0.000 description 11
- 102100031699 Choline transporter-like protein 1 Human genes 0.000 description 7
- 101000940912 Homo sapiens Choline transporter-like protein 1 Proteins 0.000 description 7
- 102100035954 Choline transporter-like protein 2 Human genes 0.000 description 5
- 101000948115 Homo sapiens Choline transporter-like protein 2 Proteins 0.000 description 5
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 229920001621 AMOLED Polymers 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 230000004913 activation Effects 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000006303 photolysis reaction Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000000712 assembly Effects 0.000 description 1
- 238000000429 assembly Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
一种减少照相机图像感测器中的快门迟滞的方法可以包括:在照相机图像感测器的预览模式中保持感测器输出图像具有低分辨率;响应于捕捉准备信号将感测器输出图像的分辨率从低分辨率改变到高分辨率,以便将照相机图像感测器的操作模式从预览模式改变到捕捉准备模式,所述低分辨率是等于或低于参考分辨率的分辨率,所述高分辨率是高于参考分辨率的分辨率;以及在照相机图像感测器的捕捉准备模式中响应于捕捉信号捕捉感测器输出图像。
Description
相关申请的交叉引用
本申请要求2011年11月28日在韩国知识产权局(KIPO)提交的韩国专利申请第10-2011-0124906号的优先权,其全部内容通过引用合并于此。
技术领域
示例实施例一般涉及电子设备(例如,移动设备)。更具体来说,本发明构思的示例实施例涉及具有照相机模块的移动设备。
背景技术
根据移动集合倾向(mobile convergence tendency),移动设备可以包括照相机模块。通常,快门迟滞(shutter-lag)可以指示用户按下(例如,触发)快门的时刻(timing)和实际捕捉到图像的时刻之间的延迟。因此,快门迟滞可以是用于评估照相机模块的性能的重要评估因素。例如,对于具有长快门迟滞的照相机模块,用户不可能准确地获得该用户想要的时刻的图像。
为了降低快门迟滞,传统的照相机模块可以保持感测器输出图像具有用户设置的捕捉尺寸,即使在预览模式中也是这样。在这种情况下,因为感测器输出图像在预览模式中具有高分辨率,所以传统的照相机模块可能因此消耗了不必要的电力(power)。因此,在传统的照相机模块中,快门迟滞的长度和不必要的耗电量之间可能存在折衷关系(trade-offrelation)。
发明内容
示例实施例提供消除快门迟滞的方法,该方法能够在照相机图像感测器(CIS)的预览模式中保持感测器输出图像具有低分辨率,并且能够在照相机图像感测器的捕捉准备模式中防止在捕捉图像时引起快门迟滞。
示例实施例提供一种照相机模块,该照相机模块能够在照相机图像感测器的预览模式中保持感测器输出图像具有低分辨率,并且能够在照相机图像感测器的捕捉准备模式中防止在捕捉图像时引起快门迟滞。
一些示例实施例提供具有所述照相机模块的移动设备。
根据本发明构思的示例实施例,一种减少照相机图像感测器中的快门迟滞的方法可以包括:在照相机图像感测器的预览模式中保持感测器输出图像具有低分辨率;响应于捕捉准备信号将感测器输出图像的分辨率从低分辨率改变到高分辨率,以便将照相机图像感测器的操作模式从预览模式改变到捕捉准备模式,所述低分辨率是等于或低于参考分辨率的分辨率,所述高分辨率是高于参考分辨率的分辨率;以及在照相机图像感测器的捕捉准备模式中响应于捕捉信号捕捉感测器输出图像。
在示例实施例中,所述方法还可以包括这样的步骤:当在捕捉准备模式中捕捉到感测器输出图像之后,将感测器输出图像的分辨率从高分辨率改变到低分辨率,以便将照相机图像感测器的操作模式从捕捉准备模式改变到预览模式。
在示例实施例中,所述方法还可以包括这样的步骤:当在捕捉准备模式中经过了预定时间时,将感测器输出图像的分辨率从高分辨率改变到低分辨率,以便将照相机图像感测器的操作模式从捕捉准备模式改变到预览模式。
在示例实施例中,所述方法还可以包括这样的步骤:当在捕捉准备模式中输入了模式改变信号时,将感测器输出图像的分辨率从高分辨率改变到低分辨率,以便将照相机图像感测器的操作模式从捕捉准备模式改变到预览模式。
在示例实施例中,当在照相机图像感测器的预览模式中输入了捕捉准备信号时,可以将感测器输出图像的分辨率从低分辨率改变高分辨率。
在示例实施例中,当在照相机图像感测器的预览模式中输入捕捉准备信号之后经过了预定时间时,可以将感测器输出图像的分辨率从低分辨率改变到高分辨率。
在示例实施例中,捕捉准备信号可以对应于用于执行聚焦操作的自动聚焦开始信号。
在示例实施例中,捕捉准备信号可以对应于用于执行聚焦操作的外部输入信号。
在示例实施例中,捕捉准备信号可以对应于从触摸输入信号、按钮输入信号和声音输入信号当中选择的至少一个信号。
在示例实施例中,捕捉准备信号可以对应于用于执行微笑检测操作的微笑检测信号。
在示例实施例中,捕捉准备信号可以对应于用于执行面部检测操作的面部检测信号。
在示例实施例中,具有低分辨率的感测器输出图像的尺寸可以对应于显示输出尺寸,并且具有低分辨率的感测器输出图像的尺寸可以随着显示输出尺寸的改变而改变。
在示例实施例中,具有高分辨率的感测器输出图像的尺寸可以对应于预定尺寸,并且该预定尺寸可以由用户来改变。
根据本发明构思的示例实施例,一种照相机模块可以包括:图像感测器单元,其通过执行光电转换来生成感测器输出图像;模式控制单元,其在照相机模块的预览模式中保持感测器输出图像具有低分辨率,其响应于捕捉准备信号将感测器输出图像的分辨率从低分辨率该改变到高分辨率,而且其在照相机模块的捕捉准备模式中保持感测器输出图像具有高分辨率,所述低分辨率是等于或低于参考分辨率的分辨率,所述高分辨率是高于所述参考分辨率的分辨率;以及图像信号处理单元,其处理所述感测器输出图像以生成图像数据。
在示例实施例中,照相机模块可以通过片上***(SOC)来实现。
在示例实施例中,模式控制单元可以在照相机模块的预览模式中将感测器输出图像设置为具有低分辨率,并且模式控制单元可以在照相机模块的捕捉准备模式中将感测器输出图像设置为具有高分辨率。
在示例实施例中,当在照相机模块的捕捉准备模式中捕捉到感测器输出图像时,模式控制单元可以将照相机模块的操作模式从捕捉准备模式改变到预览模式。
在示例实施例中,当在照相机模块的捕捉准备模式中经过了预定时间时,模式控制单元可以将照相机模块的操作模式从捕捉准备模式改变到预览模式。
在示例实施例中,当在照相机模块的捕捉准备模式中输入了模式改变信号时,模式控制单元可以将照相机模块的操作模式从捕捉准备模式改变到预览模式。
在示例实施例中,捕捉准备信号可以对应于用于执行聚焦操作的自动聚焦开始信号。
在示例实施例中,捕捉准备信号可以对应于用于执行聚焦操作的外部输入信号。
在示例实施例中,捕捉准备信号可以对应于用于执行微笑检测操作的微笑检测信号。
在示例实施例中,捕捉准备信号可以对应于用于执行面部检测操作的面部检测信号。
根据本发明构思的示例实施例,一种移动设备可以包括生成感测器输出图像的照相机图像感测器、处理所述感测器输出图像的应用处理器、以及基于所述感测器输出图像生成显示的至少一个显示设备。这里,所述应用处理器可以包括:模式控制器,其在照相机图像感测器的预览模式中保持感测器输出图像具有低分辨率,其响应于捕捉准备信号将感测器输出图像的分辨率从低分辨率该改变到高分辨率,并且其在照相机图像感测器的捕捉准备模式中保持感测器输出图像具有高分辨率;图像信号处理器,其处理感测器输出图像以生成第一图像数据;后处理器,其对第一图像数据执行后处理以生成第二图像数据;以及显示控制器,其提供第二图像数据,所述显示是基于第二图像数据生成的。
在示例实施例中,应用处理器还可以包括存储设备,其临时存储第一图像数据以将第一图像数据输出到后处理器。
在示例实施例中,模式控制器可以包括实时操作***(RTOS)。
在示例实施例中,移动设备可以对应于蜂窝电话、智能电话、数字照相机,平板电脑、或摄像机。
在示例实施例中,所述应用处理器通过至少一个输入/输出(I/O)端子耦合到外部显示设备,并且所述应用处理器可以将所述图像数据输出到所述外部显示设备。
在示例实施例中,所述应用处理器可以基于MIPI、ITU-R BT.601、ITU-BT.656、或ITU-R BT.709,与所述照相机图像感测器通信。
在示例实施例中,捕捉准备信号可以对应于用于执行聚焦操作的自动聚焦开始信号。
在示例实施例中,捕捉准备信号可以对应于用于执行聚焦操作的外部输入信号。
在示例实施例中,捕捉准备信号可以对应于用于执行微笑检测操作的微笑检测信号。
在示例实施例中,捕捉准备信号可以对应于用于执行面部检测操作的面部检测信号。
根据本发明构思的示例实施例,一种操作照相机模块的图像感测器的方法可以包括:使用第一分辨率作为图像感测器的图像输出分辨率从图像感测器输出预览图像;响应于在照相机模块处接收的捕捉准备信号将图像感测器的图像输出分辨率从第一分辨率改变到第二分辨率,第二分辨率高于第一分辨率;以及使用第二分辨率作为图像感测器的图像输出分辨率来捕捉选择的图像,所选择的图像是响应于在照相机模块处接收的捕捉信号而捕捉的,捕捉准备信号是在捕捉信号之前在照相机模块处接收的。
因此,根据本发明构思的示例实施例的消除快门迟滞的方法通过在照相机图像感测器的预览模式中保持感测器输出图像具有低分辨率,通过响应于捕捉准备信号将感测器输出图像的分辨率从低分辨率改变到高分辨率,以及通过在照相机图像感测器的捕捉准备模式中保持感测器输出图像具有高分辨率,可以在照相机图像感测器的预览模式中防止不必要的电力消耗,并且可以在照相机图像感测器的捕捉准备模式中防止在捕捉图像时引起快门迟滞。
此外,根据本发明构思的示例实施例的照相机模块以及具有所述照相机模块的移动设备通过在照相机图像感测器的预览模式中保持感测器输出图像具有低分辨率,通过响应于捕捉准备信号将感测器输出图像的分辨率从低分辨率改变到高分辨率,以及通过在照相机图像感测器的捕捉准备模式中保持感测器输出图像具有高分辨率,可以在照相机图像感测器的预览模式中防止不必要的电力消耗,并且可以在照相机图像感测器的捕捉准备模式中防止在捕捉图像时引起快门迟滞。
附图说明
通过参考附图详细描述本发明的示例实施例,示例实施例的以上及其他特征和优点将变得更清楚。附图意图用于描绘示例实施例并且不应当被解释为限制权利要求的意图的范围。不要认为附图是按比例绘制的,除非明确地这样指出。
图1是示出根据示例实施例的消除快门迟滞的方法的流程图。
图2是示出通过图1的方法执行的操作的示图。
图3是示出根据示例实施例的消除快门迟滞的方法的流程图。
图4是示出通过图3的方法执行的操作的示图。
图5是示出根据示例实施例的消除快门迟滞的方法的流程图。
图6是示出通过图5的方法执行的操作的示图。
图7是示出根据示例实施例的消除快门迟滞的方法的流程图。
图8是示出通过图7的方法执行的操作的示图。
图9是示出根据示例实施例的消除快门迟滞的方法的概念图。
图10是示出根据示例实施例的消除快门迟滞的方法的时序图。
图11是示出根据示例实施例的照相机模块的框图。
图12是示出图11的照相机模块中的图像感测器单元的示例的框图。
图13是示出图11的照相机模块中的图像信号处理单元的示例的框图。
图14是示出图11的照相机模块中的模式控制单元的示例的框图。
图15是示出图11的照相机模块应用到移动设备的示例的框图。
图16是示出图11的照相机模块应用到移动设备的另一个示例的框图。
图17是示出图11的照相机模块应用到移动设备的又一个示例的框图。
图18是示出图11的照相机模块应用到移动设备的再一个示例的框图。
图19是示出根据示例实施例的移动设备的框图。
图20是示出图19的移动设备耦合到至少一个外部显示设备的示例的示图。
图21到图24是示出通过图19的移动设备实现的各种示例的示图。
图25是示出根据示例实施例的电子设备的框图。
图26是示出被用于图25的电子设备的接口的示例的框图。
具体实施方式
在这里公开具体示例实施例。然而,这里公开的特定结构和功能的细节仅仅是代表性的,目的在于描述示例实施例。然而,示例实施例可以以许多替换形式来实现并且不应当理解为仅仅限于这里阐述的实施例。
因此,虽然示例实施例能够具有各种修改并且替换形式,但是其实施例在附图中作为示例而示出,并且将在这里被详细描述。然而,应当理解,并非意欲将示例实施例限制到所公开的特定形式,而是相反,示例实施例将涵盖落在示例实施例的范围内的所有修改、等效物和替换物。贯穿对附图的描述,相同的数字指代相同的元素。
应当理解,尽管术语第一、第二等等在这里可以用来描述各种元件,但是这些元件不应当受这些术语限制。这些术语仅仅用于将一个元件与另一个元件区分开。例如,第一元件可以被称为第二元件,并且类似地,第二元件可以被称为第一元件,而不会脱离示例实施例的范围。如这里所使用的,术语"和/或"包括关联的列出项中的一个或多个中的任意一个和所有组合。
应当理解,当一个元件被称为“连接”或“耦合”到另一个元件时、其可能直接连接或耦合到另一个元件或者可能存在居间的元件。相比之下,当一个元件被称为“直接连接”或“直接耦合”到另一个元件时、不存在居间的元件。其他用于描述元件之间的关系的用语应当以类似的方式解释(例如,“在...之间”与“直接在...之间”,“相邻”与“直接相邻”等等)。
在这里使用的术语目的在于仅仅描述特定实施例并且并不意欲限制示例实施例。如这里所使用的,单数形式的“一”、“一个”和“该”包括复数的所指物,除非上下文明确地另有规定。还要理解,术语“包含”、“包括”,当在这里使用时,说明所陈述的特征、整体、步骤、操作、元件和/或组件的存在,但是并不排除一个或多个其它特征、整体、步骤、操作、元件、组件和/或它们的组合存在或添加。
也应当注意,在某些替换实施方案中,所记载的功能/动作可以不按附图中记载的顺序出现。例如,连续示出的两个图,按照所涉及的功能/动作,实际上可以实质上同时执行,或者有时可以以相反顺序执行。
图1是示出根据示例实施例的消除快门迟滞的方法的流程图。
参考图1,图1中示出的方法可以包括:在步骤S120中,保持感测器输出图像在照相机图像感测器的预览模式中具有低分辨率;在步骤S140中,响应于捕捉准备信号通过将感测器输出图像的分辨率从低分辨率改变到高分辨率来将照相机图像感测器的操作模式从预览模式改变到捕捉准备模式;以及在步骤S160中,在照相机图像感测器的捕捉准备模式中响应于捕捉信号捕捉感测器输出图像。此外,图1的方法可以包括:在步骤S180中,在感测器输出图像的捕捉完成时刻(timing),通过将感测器输出图像的分辨率从高分辨率改变到低分辨率来将照相机图像感测器的操作模式从捕捉准备模式改变到预览模式。
通常,当用户选择具有照相机模块的移动设备的照相机功能时,照相机模块的照相机图像感测器可以进入预览模式。这里,用户在预览模式中实时地预览图像。因此,用户可以在在预览模式中观看预览图像的同时确定拍摄的主题。例如,预览模式可以为用户提供方便。然而,当照相机图像感测器以预览模式操作时,如果从照相机图像感测器输出的感测器输出图像被设置为具有高分辨率(即,称为全帧预览),照相机图像感测器可能消耗不必要的电力。因此,已经使用了传统的方法,利用该方法,感测器输出图像被设置为在照相机图像感测器的预览模式中具有低分辨率,并且响应于当用户触发快门释放操作时生成的捕捉信号,将感测器输出图像改变为具有高分辨率。例如,用户可以通过按下快门释放按钮或者执行一些其它的激活(activation)操作来触发快门释放操作,从而使快门根据图像捕捉操作而打开和关闭。为了清楚,启动快门释放操作的操作在下文中将被称为触发快门或者按下快门释放按钮。然而,本发明构思的示例实施例不限于包括按下按钮的启动快门释放操作的方法,并且可以被应用于用户启动快门释放操作的任何方法。
因为改变感测器输出图像的分辨率的操作,例如,从低分辨率改变到高分辨率的操作,导致延迟,所以用户按下快门释放按钮的时刻可能与实际捕捉到图像的时刻不同。因此,传统的方法导致了用户按下快门释放按钮的时刻和实际捕捉到图像的时刻之间的延迟(即,快门迟滞)。结果,用户不可能准确地获得该用户想要的时刻的图像。举例来说,因为蜂窝电话中的照相机模块的快门迟滞可能为例如0.1~0.3秒,所以用户可能获得从用户按下快门释放按钮的时刻延迟了0.1~0.3秒的时刻的图像。
为了克服以上问题,图1的方法可以包括保持感测器输出图像在照相机图像感测器的预览模式中具有低分辨率,如参考步骤S120所描述的。如果为了防止引起快门迟滞而使感测器输出图像在照相机图像感测器的预览模式中具有高分辨率,则可能因此而消耗不必要的电力。因此,可以保持感测器输出图像在照相机图像感测器的预览模式中具有低分辨率。在某些示例实施例中,图1的方法可以使用子采样功能,以保持感测器输出图像在照相机图像感测器的预览模式中具有低分辨率。这里,应当理解感测器输出图像的“分辨率”是这样的术语,其可以包括感测器输出图像的“像素”、感测器输出图像的“尺寸”、感测器输出图像的“容量”、感测器输出图像的“采样率”等等。根据本发明构思的示例实施例,具有低分辨率的感测器输出图像的尺寸可以对应于显示器输出尺寸。例如,具有低分辨率的感测器输出图像的尺寸可以是VGA(640*480个像素)的尺寸。因此,如这里所使用的,低分辨率可以等于或者低于参考分辨率,例如VGA(640*480)的任何分辨率,而高分辨率可以是高于该参考分辨率的任何分辨率。此外,随着显示输出尺寸的改变,具有低分辨率的感测器输出图像的尺寸可以改变。例如,当采用图1的方法的照相机模块耦合到外部显示设备,并且图像数据被输出到该外部显示设备上时,具有低分辨率的感测器输出图像的尺寸可以改变为该外部显示设备的显示输出尺寸。
如上参考步骤S140所述,图1的方法可以包括:当在照相机图像感测器的预览模式中输入捕捉准备信号时,响应于该捕捉准备信号,通过将感测器输出图像的分辨率从低分辨率改变到高分辨率,来将照相机图像感测器的操作模式从预览模式改变到捕捉准备模式。例如,图1的方法不包括:当在照相机图像感测器的捕捉准备模式中快门被按下或者被以其它方式触发时,改变感测器输出图像的分辨率,例如从低分辨率改变到高分辨率。而是,图1的方法在感测器输出图像的操作模式被从预览模式改变到捕捉准备模式时,改变感测器输出图像的分辨率,例如从低分辨率改变到高分辨率。结果,感测器输出图像可以在捕捉信号被输入之前,例如在用户按下快门释放按钮之前,就已经具有了高分辨率。因此,在用户按下快门释放按钮之后可以不需要用于改变感测器输出图像的分辨率的操作,例如将感测器输出图像的分辨率从低分辨率改变到高分辨率的操作。因此,不会引起与用户按下快门释放按钮的时刻和实际捕捉到图像的时刻之间的延迟相对应的快门迟滞。根据本发明构思的示例实施例,具有高分辨率的感测器输出图像的尺寸可以对应于预定尺寸或参考尺寸。此外,预定尺寸或参考尺寸可以由用户来改变。例如,具有高分辨率感测器输出图像的尺寸可以是全帧尺寸,例如,5兆像素(2608*1960个像素)、8兆像素(3264*2448个像素)等等。如上所述,采用图1的方法的照相机模块可以以预览模式操作,用于用户实时观看预览图像,或者可以以捕捉准备模式操作,用于用户捕捉图像。同时,预览模式实质上可以称为低分辨率预览模式,而捕捉准备模式实质上可以称为高分辨率预览模式。
根据本发明构思的示例实施例,捕捉准备信号可以是用于执行聚焦操作的自动聚焦开始信号。例如,当用户在照相机功能设置菜单上选择自动聚焦功能时,感测器输出图像的分辨率被从低分辨率改变到高分辨率的时刻可以对应于自动聚焦开始信号被输入的时刻。根据本发明构思的示例实施例,捕捉准备信号可以是用于执行聚焦操作的外部输入信号。这里,外部输入信号可以是从触摸输入信号、按钮输入信号和声音输入信号当中选择的至少一个信号。例如,当用户在显示器设备上触摸拍摄的对象,按下照相机聚焦按钮或者产生执行聚焦操作的声音时,感测器输出图像的分辨率被从低分辨率改变到高分辨率的时刻可以对应于外部输入信号被输入的时刻。
根据本发明构思的示例实施例,捕捉准备信号可以是用于执行微笑检测操作的微笑检测信号。例如,当用户在照相机功能设置菜单上选择微笑检测功能时,感测器输出图像的分辨率被从低分辨率改变到高分辨率的时刻可以对应于当检测到对象(例如,人)的面部上的微笑时生成微笑检测信号的时刻。根据本发明构思的示例实施例,捕捉准备信号可以是用于执行面部检测操作的面部检测信号。例如,当用户在照相机功能设置菜单上选择面部检测功能时,感测器输出图像的分辨率被从低分辨率改变到高分辨率的时刻可以对应于当检测到对象(例如,人)的面部时生成面部检测信号的时刻。在某些示例实施例中,捕捉准备信号可以是从在用户按下快门之前为照相机模块生成的各种信号当中选择的。
如上所述,感测器输出图像的分辨率可以响应于捕捉准备信号而从低分辨率改变到高分辨率。根据本发明构思的示例实施例,在照相机图像感测器的预览模式中一旦输入了捕捉准备信号,感测器输出图像的分辨率就可以被从低分辨率改变到高分辨率。根据本发明构思的示例实施例,当在照相机图像感测器的预览模式中输入捕捉准备信号之后经过预定时间或参考时间时,感测器输出图像的分辨率可以被从低分辨率改变到高分辨率。因为当感测器输出图像的分辨率从低分辨率改变高分辨率时,照相机图像感测器的操作模式从预览模式改变到捕捉准备模式,所以期望在照相机图像感测器的预览模式中一旦输入了捕捉准备信号,感测器输出图像的分辨率就从低分辨率改变到高分辨率。然而,如果在照相机图像感测器的预览模式中一旦输入了捕捉准备信号,感测器输出图像的分辨率就从低分辨率改变到高分辨率,那么可能在显示设备上显示的图像中引起噪声。在这种情况下,为了对齐时钟沿等,当在照相机图像感测器的预览模式中输入捕捉准备信号之后经过预定时间或参考时间时,感测器输出图像的分辨率可以被从低分辨率改变到高分辨率。
如以上参考步骤S160所述,图1的方法可以包括:在照相机图像感测器的捕捉准备模式中响应于捕捉信号捕捉感测器输出图像,所述捕捉信号是在用户触发快门时生成的。如上所述,因为在照相机图像感测器的捕捉准备模式中感测器输出图像已经具有高分辨率,所以在照相机图像感测器的捕捉准备模式中输入了捕捉信号之后,例如在用户触发快门之后,可以不需要改变感测器输出图像的分辨率的操作,例如,将感测器输出图像的分辨率从低分辨率改变到高分辨率的操作。因此,不会引起与用户按下快门释放按钮的时刻和实际捕捉到图像的时刻之间的延迟相对应的快门迟滞。此外,因为捕捉准备信号可以是与例如下列各项中的一个或多个相关的信号,所述各项为:i)聚焦操作,例如自动聚焦开始信号;ii)外部输入信号,例如触摸输入信号、按钮输入信号、声音输入信号等等;iii)微笑检测信号;以及iv)面部检测信号,所以在照相机图像感测器的捕捉准备模式中也可以执行聚焦操作。因此,用户不会认出由于聚焦操作而引起的延迟,该延迟实质上是照相机模块中产生的最大的延迟。在示例实施例中,图1的方法可以以可听或可视的方式通知用户聚焦操作的完成。
接下来,如以上参考步骤S180所述,图1的方法可以包括:在感测器输出图像的捕捉完成时刻,通过将感测器输出图像的分辨率从高分辨率改变到低分辨率,将照相机图像感测器的操作模式从捕捉准备模式改变到预览模式。此外,根据本发明构思的示例实施例,图1的方法可以包括连续地重复步骤S120、S140、S160和S180以捕捉新的图像。如上所述,图1的方法通过在照相机图像感测器的预览模式中保持感测器输出图像具有低分辨率,通过响应于捕捉准备信号将感测器输出图像的分辨率从低分辨率改变到高分辨率,以及通过在照相机图像感测器的捕捉准备模式中保持感测器输出图像具有高分辨率,可以在照相机图像感测器的预览模式中防止不必要的电力消耗,并且可以在照相机图像感测器的捕捉准备模式中防止在捕捉图像时引起快门迟滞。
图2是示出通过图1的方法执行的操作的示图。
参考图2,按照图1方法,照相机图像感测器的操作模式可以在预览模式11和13以及捕捉准备模式12之间改变。在照相机图像感测器的预览模式11和13中,感测器输出图像可以被保持为具有低分辨率。在照相机图像感测器的捕捉准备模式12中,感测器输出图像可以被保持为具有高分辨率。因此,照相机图像感测器的预览模式11和13实质上可以被称为低分辨率预览模式,而照相机图像感测器的捕捉准备模式12实质上可以被称为高分辨率预览模式。如图2中所示,当在照相机图像感测器的预览模式11中输入捕捉准备信号PSE时,图1的方法可以响应于捕捉准备信号PSE将感测器输出图像的分辨率从低分辨率改变到高分辨率,以便将照相机图像感测器的操作模式从预览模式11改变到捕捉准备模式12。这里,捕捉准备信号PSE可以包括例如自动聚焦开始信号、外部输入信号、微笑检测信号和面部检测信号中的一个或多个。外部输入信号的示例包括触摸输入信号、按钮输入信号、声音输入信号等等。
通常,捕捉信号SS可以在用户按下快门释放按钮时生成。因此,在照相机图像感测器的捕捉准备模式12中输入捕捉信号SS时,图1的方法可以响应于捕捉信号SS而捕捉感测器输出图像。这里,因为在照相机图像感测器的捕捉准备模式12中感测器输出图像已经具有高分辨率,所以在照相机图像感测器的捕捉准备模式12中输入了捕捉信号SS之后可以不需要改变感测器输出图像的分辨率的操作,例如,将感测器输出图像的分辨率从低分辨率改变到高分辨率的操作。因此,不会引起与用户按下快门释放按钮的时刻和实际捕捉到图像的时刻之间的延迟相对应的快门迟滞。此外,当在照相机图像感测器的捕捉准备模式12中捕捉到感测器输出图像时,图1的方法可以在感测器输出图像的捕捉完成时刻CS将感测器输出图像的分辨率从高分辨率改变到低分辨率。结果,照相机图像感测器的操作模式可以从捕捉准备模式12改变到预览模式13。例如,感测器输出图像可以被保持为具有低分辨率,直到在照相机图像感测器的预览13中输入用于捕捉新的图像的捕捉准备信号PSE为止。如上所述,图1的方法可以在照相机图像感测器的预览模式11和13中防止不必要的电力消耗,并且在照相机图像感测器的捕捉准备模式12中防止在捕捉图像时引起快门迟滞。
图3是示出根据示例实施例的消除快门迟滞的方法的流程图
参考图3,图3中示出的方法可以包括:在步骤S220中,在照相机图像感测器的预览模式中保持感测器输出图像具有低分辨率;在步骤S240中,响应于捕捉准备信号通过将感测器输出图像的分辨率从低分辨率改变到高分辨率来将照相机图像感测器的操作模式从预览模式改变到捕捉准备模式;以及在步骤S260中,在照相机图像感测器的捕捉准备模式中响应于捕捉信号捕捉感测器输出图像。步骤S220、S240和S260可以与以上参考图1描述的步骤S120、S140并且S160相同。因此,下面将省略对它们的描述。
在步骤S270,在照相机图像感测器的捕捉准备模式中捕捉到感测器输出图像之后,图3的方法可以从感测器输出图像的捕捉完成时刻开始保持照相机图像感测器以捕捉准备模式操作,直到经过了预定时间或参考时间为止。然后,在步骤S280中,当从感测器输出图像的捕捉完成时刻开始经过了预定时间或者参考时间时,可以通过将感测器输出图像的分辨率从高分辨率改变到低分辨率来将照相机图像感测器的操作模式从捕捉准备模式改变到预览模式。通常,由于聚焦操作而引起的延迟实质上可能是照相机模块中产生的最大的延迟。此外,照相机模块为用户需要提供一次捕捉多个图像的功能。因此,图3的方法可以使照相机模块能够连续捕捉已经对其完成了聚焦操作的多个图像,这是因为图3的方法从感测器输出图像的捕捉完成时刻开始保持照相机图像感测器以捕捉准备模式操作直到经过了预定时间或参考时间为止。结果,图3的方法可以减少操作模式在预览模式和捕捉准备模式之间改变的次数。如上所述,图3的方法通过在照相机图像感测器的预览模式中保持感测器输出图像具有低分辨率,通过响应于捕捉准备信号将感测器输出图像的分辨率从低分辨率改变到高分辨率,以及通过在照相机图像感测器的捕捉准备模式中保持感测器输出图像具有高分辨率,可以在照相机图像感测器的预览模式中防止不必要的电力消耗,并且可以在照相机图像感测器的捕捉准备模式中防止在捕捉图像时引起快门迟滞。
图4是示出通过图3的方法执行的操作的示图。
参考图4,按照图3方法,照相机图像感测器的操作模式可以在预览模式21和23以及捕捉准备模式22之间改变。在照相机图像感测器的预览模式21和23中,感测器输出图像可以被保持为具有低分辨率。在照相机图像感测器的捕捉准备模式22中,感测器输出图像可以被保持为具有高分辨率。因此,照相机图像感测器的预览模式21和23实质上可以被称为低分辨率预览模式,而照相机图像感测器的捕捉准备模式22实质上可以被称为高分辨率预览模式。如图4中所示,当在照相机图像感测器的预览模式21中输入捕捉准备信号PSE时,图3的方法可以响应于捕捉准备信号PSE将感测器输出图像的分辨率从低分辨率改变到高分辨率,以便将照相机图像感测器的操作模式从预览模式21改变到捕捉准备模式22。这里,捕捉准备信号PSE可以包括自动聚焦开始信号、外部输入信号(例如,触摸输入信号、按钮输入信号、声音输入信号等等)、微笑检测信号和面部检测信号。
通常,捕捉信号SS可以在用户按下快门释放按钮时生成。因此,在照相机图像感测器的捕捉准备模式22中输入捕捉信号SS时,图3的方法可以响应于捕捉信号SS而捕捉感测器输出图像。这里,因为在照相机图像感测器的捕捉准备模式22中感测器输出图像已经具有高分辨率,所以在照相机图像感测器的捕捉准备模式22中输入了捕捉信号SS之后可以不需要改变感测器输出图像的分辨率的操作,例如,将感测器输出图像的分辨率从低分辨率改变到高分辨率的操作。因此,不会引起与用户按下快门释放按钮的时刻和实际捕捉到图像的时刻之间的延迟相对应的快门迟滞。此外,当在照相机图像感测器的捕捉准备模式22中捕捉到感测器输出图像时,图3的方法可以当从感测器输出图像的捕捉完成时刻CS开始经过了预定时间或者参考时间PT时,将感测器输出图像的分辨率从高分辨率改变到低分辨率。结果,照相机图像感测器的操作模式可以从捕捉准备模式22改变到预览模式23。例如,图3的方法可以使照相机模块能够捕捉附加的图像ASS,这是因为图3的方法从感测器输出图像的捕捉完成时刻CS开始保持照相机图像感测器以捕捉准备模式22操作,直到经过了预定时间或参考时间PT为止。
在从感测器输出图像的捕捉完成时刻CS开始经过了预定时间或者参考时间PT之后,照相机图像感测器的操作模式可以被从捕捉准备模式22改变到预览模式23。然后,感测器输出图像可以被保持为具有低分辨率,直到在照相机图像感测器的预览模式23中输入了用于捕捉新的图像的捕捉准备信号PSE为止。如上所述,图3的方法可以在照相机图像感测器的预览模式21和23中防止不必要的电力消耗,并且在照相机图像感测器的捕捉准备模式22中防止在捕捉图像时引起快门迟滞。此外,图3的方法可以通过使照相机模块能够连续地捕捉对其的聚焦操作已经完成的多个图像,来减少操作模式在预览模式21和23与捕捉准备模式22之间改变的次数。
图5是示出根据示例实施例的消除快门迟滞的方法的流程图。
参考图5,图5的方法可以包括:在步骤S320中,在照相机图像感测器的预览模式中保持感测器输出图像具有低分辨率,以及在步骤S340中,响应于捕捉准备信号,通过将感测器输出图像的分辨率从低分辨率改变到高分辨率来将照相机图像感测器的操作模式从预览模式改变到捕捉准备模式。步骤S320和S340可以与以上参考图1描述的步骤S120和S140相同。因此,下面将省略对它们的描述。
图5的方法可以包括:当在步骤S360中在照相机图像感测器的捕捉准备模式中接收到模式改变信号时,在步骤S580中通过将感测器输出图像的分辨率从高分辨率改变到低分辨率来将照相机图像感测器的操作模式从捕捉准备模式改变到预览模式。模式改变信号可以是例如在输入模式改变信号时接收到的。例如,当用户按下按钮,将照相机图像感测器的操作模式从捕捉准备模式改变到预览模式时,可以生成用于将照相机图像感测器的操作模式从捕捉准备模式改变预览模式的模式改变信号。然后,感测器输出图像的分辨率可以响应于该模式改变信号而从高分辨率改变到低分辨率,从而照相机图像感测器的操作模式可以从捕捉准备模式改变到预览模式。在照相机图像感测器响应于捕捉准备信号进入捕捉准备模式之后,用户可以故意地将照相机图像感测器的操作模式从捕捉准备模式改变到预览模式。例如,可以在不进行任何图像捕捉的情况下由用户将照相机图像感测器的操作模式从捕捉准备模式改变到预览模式。因此,图5的方法可以响应于用户输入的模式改变信号将照相机图像感测器的操作模式从捕捉准备模式改变到预览模式。如上所述,图5的方法通过在照相机图像感测器的预览模式中保持感测器输出图像具有低分辨率,通过响应于捕捉准备信号将感测器输出图像的分辨率从低分辨率改变到高分辨率,以及通过在照相机图像感测器的捕捉准备模式中保持感测器输出图像具有高分辨率,可以在照相机图像感测器的预览模式中防止不必要的电力消耗,并且可以在照相机图像感测器的捕捉准备模式中防止在捕捉图像时引起快门迟滞。此外,图5的方法可以通过允许用户直接结束消耗相对较高电力的照相机图像感测器的捕捉准备模式,来减少照相机模块的电力消耗。
图6是示出通过图5的方法执行的操作的示图。
参考图6,按照图5方法,照相机图像感测器的操作模式可以在预览模式31和33以及捕捉准备模式32之间改变。在照相机图像感测器的预览模式31和33中,感测器输出图像可以被保持为具有低分辨率。在照相机图像感测器的捕捉准备模式32中,感测器输出图像可以被保持为具有高分辨率。因此,照相机图像感测器的预览模式31和33实质上可以被称为低分辨率预览模式,而照相机图像感测器的捕捉准备模式32实质上可以被称为高分辨率预览模式。如图6中所示,当在照相机图像感测器的预览模式31中输入捕捉准备信号PSE时,图5的方法可以响应于捕捉准备信号PSE将感测器输出图像的分辨率从低分辨率改变到高分辨率,以便将照相机图像感测器的操作模式从预览模式31改变到捕捉准备模式32。这里,捕捉准备信号PSE可以包括例如自动聚焦开始信号、外部输入信号(例如,触摸输入信号、按钮输入信号、声音输入信号)、微笑检测信号和面部检测信号。
当在照相机图像感测器的捕捉准备模式32中输入模式改变信号MCS时,图5的方法可以通过将感测器输出图像的分辨率从高分辨率改变到低分辨率来将照相机图像感测器的操作模式从捕捉准备模式32改变到预览模式33。例如,当用户按下按钮以将照相机图像感测器的操作模式从捕捉准备模式32改变到预览模式33时,可以生成用于将照相机图像感测器的操作模式从捕捉准备模式32改变预览模式33的模式改变信号MCS。例如,图5的方法可以允许用户故意将照相机图像感测器的操作模式从捕捉准备模式32改变到预览模式33。如上所述,图5的方法可以在照相机图像感测器的预览模式31和33中防止不必要的电力消耗,并且在照相机图像感测器的捕捉准备模式32中防止在捕捉图像时引起快门迟滞。此外,图5的方法可以通过允许用户直接结束消耗相对较高电力的照相机图像感测器的捕捉准备模式32,来减少照相机模块的电力消耗。
图7是示出根据示例实施例的消除快门迟滞的方法的流程图。
参考图7,图7的方法可以包括:在步骤S420中,在照相机图像感测器的预览模式中保持感测器输出图像具有低分辨率,以及在步骤S440中,响应于捕捉准备信号,通过将感测器输出图像的分辨率从低分辨率改变到高分辨率,将照相机图像感测器的操作模式从预览模式改变到捕捉准备模式。步骤S420和S440可以与上面描述的参考图1描述的步骤S120和S140相同。因此,下面将省略对它们的描述。
图7的方法可以包括:在步骤S460中,在照相机图像感测器的捕捉准备模式中在预定时间或者参考时间期间、等待用户输入例如触发快门的行为之后,在步骤S480中,通过将感测器输出图像的分辨率从高分辨率改变到低分辨率,来将照相机图像感测器的操作模式从捕捉准备模式改变到预览模式。例如,图7的方法可以当在照相机图像感测器的捕捉准备模式中经过了预定时间或者参考时间时,将照相机图像感测器的操作模式从捕捉准备模式改变到预览模式。例如,当在照相机图像感测器的捕捉准备模式中、在预定时间或者参考时间期间用户没有按下快门释放按钮时,照相机图像感测器的操作模式可以从捕捉准备模式改变到预览模式。例如,感测器输出图像的分辨率可以从高分辨率改变到低分辨率。例如,当在照相机图像感测器的操作模式从预览模式改变到捕捉准备模式之后、在预定时间或者参考时间期间用户没有按下快门释放按钮时,可以确定用户不打算按下快门释放按钮。因此,图7的方法可以通过将照相机图像感测器的操作模式从捕捉准备模式改变到预览模式来减少电力消耗。这里,可以根据一个或多个条件对预定时间或者参考时间进行各种不同的设置。根据本发明构思的示例实施例,预定时间或者参考时间可以从捕捉准备信号的输入时刻开始计算。根据本发明构思的示例实施例,当由用户输入特定信号时,预定时间或者参考时间可以从该特定信号的输入时刻开始计算。特定信号的示例包括与被半按(half-pressed)的快门按钮相关联的信号。如上所述,图7的方法可以通过在照相机图像感测器的预览模式中保持感测器输出图像具有低分辨率,通过响应于捕捉准备信号将感测器输出图像的分辨率从低分辨率改变到高分辨率,以及通过在照相机图像感测器的捕捉准备模式中保持感测器输出图像具有高分辨率,在照相机图像感测器的预览模式中防止不必要的电力消耗,以及在照相机图像感测器的捕捉准备模式中防止在捕捉图像时引起快门迟滞。此外,图7的方法可以通过将消耗相对较高电力的照相机图像感测器的捕捉准备模式限制到预定时间或者参考时间来减少照相机模块的电力消耗。
图8是示出通过图7的方法执行的操作的示图。
参照图8,通过图7的方法,照相机图像感测器的操作模式可以在预览模式41和43以及捕捉准备模式32之间改变。在照相机图像感测器的预览模式41和43中,可以保持感测器输出图像具有低分辨率。在照相机图像感测器的捕捉准备模式42中,可以保持感测器输出图像具有高分辨率。因此,照相机图像感测器的预览模式41和43实质上可以被称为低分辨率预览模式,而照相机图像感测器的捕捉准备模式42实质上可以被称为高分辨率预览模式。如图8中所示,当在照相机图像感测器的预览模式41中输入捕捉准备信号PSE时,图7的方法可以响应于捕捉准备信号PSE将感测器输出图像的分辨率从低分辨率改变到高分辨率,以便将照相机图像感测器的操作模式从预览模式41改变到捕捉准备模式42。这里,捕捉准备信号PSE可以包括自动聚焦开始信号、外部输入信号、微笑检测信号和面部检测信号。外部输入信号的示例可以包括触摸输入信号、按钮输入信号、声音输入信号、等等。
当在照相机图像感测器的捕捉准备模式42中经过了预定时间或者参考时间PCT时,图7的方法可以通过将感测器输出图像的分辨率从高分辨率改变到低分辨率,来将照相机图像感测器的操作模式从捕捉准备模式42改变到预览模式43。例如,当在照相机图像感测器的捕捉准备模式42中、在预定时间或者参考时间PCT期间用户没有按下快门释放按钮时,照相机图像感测器的操作模式可以从捕捉准备模式42改变到预览模式43。例如,感测器输出图像的分辨率可以从高分辨率改变到低分辨率。根据本发明构思的示例实施例,预定时间或者参考时间PCT可以从捕捉准备信号PSE的输入时刻开始计算。根据本发明构思的示例实施例,当由用户输入特定信号时,预定时间或者参考时间可以从该特定信号(例如,半按快门信号)的输入时刻开始计算。例如,当在照相机图像感测器的操作模式从预览模式41改变到捕捉准备模式42之后、在预定时间或者参考时间PCT期间用户没有按下快门释放按钮时,可以确定用户不打算按下快门释放按钮。因此,图7的方法可以将照相机图像感测器的操作模式从捕捉准备模式42改变到预览模式43。如上所述,图7的方法可以在照相机图像感测器的预览模式41和43中防止不必要的电力消耗,并且在照相机图像感测器的捕捉准备模式42中防止在捕捉图像时引起快门迟滞。此外,图7的方法可以通过将消耗相对较高电力的照相机图像感测器的捕捉准备模式42限制到预定时间或者参考时间PCT,来减少照相机模块的电力消耗。
以上参考图1、3、5和7所述的方法可以例如通过以下参考图11-26所述的设备中的任何一个来执行。
图9是示出根据示例实施例的消除快门迟滞的方法的概念图。
参考图9,照相机模块中的照相机图像感测器可以以预览模式50操作或者以捕捉准备模式60操作。照相机图像感测器的预览模式50指示用于实时观看预览图像的模式。照相机图像感测器的捕捉准备模式60指示用于准备图像捕捉的模式。这里,在照相机图像感测器的捕捉准备模式60中,用户可以实时观看预览图像,直到开始捕捉图像为止。图像捕捉可以例如在用户按下快门释放按钮时开始。然而,在照相机图像感测器的预览模式50中感测器输出图像可以被保持为具有低分辨率,而在照相机图像感测器的捕捉准备模式60中感测器输出图像可以被保持为具有高分辨率。例如,照相机图像感测器的预览模式50实质上可以被称为低分辨率预览模式,而照相机图像感测器的捕捉准备模式60实质上可以被称为高分辨率预览模式。例如,具有低分辨率的感测器输出图像的尺寸可以是VGA(640*480)尺寸、而具有高分辨率的感测器输出图像的尺寸可以是全帧尺寸(例如,5兆(2608*1960)、8兆(3264*2448)等等)。总之,根据示例实施例的消除快门迟滞的方法在预览模式50和捕捉准备模式60之间执行模式改变操作。
如上所述,照相机图像感测器的预览模式50中的感测器输出图像的分辨率与照相机图像感测器的捕捉准备模式60中的感测器输出图像的分辨率不同。在传统的方法中,感测器输出图像的分辨率基于捕捉信号从低分辨率改变到高分辨率,该捕捉信号是在用户按下快门释放按钮时生成的。然而,因为传统的方法导致了用户按下快门释放按钮的时刻和实际捕捉到图像的时刻之间的延迟,例如被称为快门迟滞,所以用户不可能准确地获得该用户想要的时刻的图像。为了克服以上问题,根据示例实施例的消除快门迟滞的方法可以响应于与聚焦操作相关的捕捉准备信号,将照相机图像感测器的操作模式从预览模式50改变到捕捉准备模式60。根据本发明构思的示例实施例,与传统方法不同,根据示例实施例的消除快门迟滞的方法可以将照相机图像感测器的操作模式从预览模式50改变到捕捉准备模式60,而不考虑捕捉信号。这里,捕捉准备信号可以包括自动聚焦开始信号、外部输入信号、微笑检测信号和面部检测信号。外部输入信号的示例可以包括触摸输入信号、按钮输入信号、声音输入信号等等。在某些示例实施例中,捕捉准备信号还可以包括用于执行指纹检测操作的指纹检测信号、用于执行特定对象检测操作的对象检测信号、等等。在照相机图像感测器的预览模式50中,感测器输出图像的分辨率可以响应于捕捉准备信号从低分辨率(LOW_RES)改变到高分辨率(HIGH_RES)。结果,因为在照相机图像感测器的捕捉准备模式60中感测器输出图像已经具有高分辨率,所以不会引起与用户按下快门释放按钮的时刻和实际捕捉到图像的时刻之间的延迟相对应的快门迟滞。
此外,根据示例实施例的消除快门迟滞的方法可以通过各种方式将照相机图像感测器的操作模式从捕捉准备模式60改变到预览模式50。例如,在照相机图像感测器的捕捉准备模式60中,可以通过各种方式将感测器输出图像的分辨率从高分辨率HIGH_RES改变到低分辨率LOW_RES。根据本发明构思的示例实施例,当照相机图像感测器的捕捉准备模式60中捕捉到感测器输出图像时,可以在感测器输出图像的捕捉完成时刻将感测器输出图像的分辨率从高分辨率改变到低分辨率。根据本发明构思的示例实施例,可以当从感测器输出图像的捕捉完成时刻开始经过了预定时间或者参考时间时,将感测器输出图像的分辨率从高分辨率改变到低分辨率。根据本发明构思的示例实施例,当在照相机图像感测器的捕捉准备模式60中输入模式改变信号时,可以将感测器输出图像的分辨率从高分辨率改变到低分辨率。根据本发明构思的示例实施例,当在照相机图像感测器的捕捉准备模式60中经过了预定时间或者参考时间时,可以将感测器输出图像的分辨率从高分辨率改变到低分辨率。如上所述,根据示例实施例的消除快门迟滞的方法可以在照相机图像感测器的预览模式50中防止不必要的电力消耗,并且在照相机图像感测器的捕捉准备模式60中防止在捕捉图像时引起快门迟滞。此外,根据示例实施例的消除快门迟滞的方法可以使消耗相对较高电力的照相机图像感测器的捕捉准备模式60最小化。
图10是示出根据示例实施例的消除快门迟滞的方法的时序图。
参考图10,根据示例实施例的消除快门迟滞的方法可以将照相机图像感测器的操作模式在预览模式和捕捉准备模式之间改变。这里,第一模式改变MODE CHANGE_1指示照相机图像感测器的操作模式从预览模式改变到捕捉准备模式,而第二模式改变MODE CHANGE_2指示照相机图像感测器的操作模式从捕捉准备模式改变到预览模式。如图10所示,因为在照相机图像感测器的预览模式中感测器输出图像被保持为具有低分辨率,所以用于操作照相机图像感测器的时钟频率相对较低,并且用于执行预览模式的电力消耗相对较低。另一方面,因为在照相机图像感测器的捕捉准备模式中感测器输出图像被保持为具有高分辨率,所以用于操作照相机图像感测器的时钟频率相对较高,并且用于执行捕捉准备模式的电力消耗相对较高。因此,为了减少照相机图像感测器的电力消耗,期望使消耗相对较高的电量的捕捉准备模式最小化。因此,根据示例实施例的消除快门迟滞的方法可以捕捉准备信号,该捕捉准备信号被期望在用户通过例如按下快门释放按钮来启动图像捕捉之前生成。
具体来说,第一模式改变MODE CHANGE_1可以当在预览模式中输入捕捉准备信号时响应于捕捉准备信号通过将感测器输出图像的分辨率从低分辨率改变到高分辨率来执行。例如,照相机图像感测器的操作模式可以响应于该捕捉准备信号从预览模式改变到捕捉准备模式。通常,因为聚焦操作被期望在执行图像捕捉时执行,捕捉准备信号可能是与聚焦操作相关的信号。例如,捕捉准备信号可以包括用于执行聚焦操作的自动聚焦开始信号、用于执行聚焦操作的外部输入信号(例如触摸输入信号)、用于执行微笑检测操作的微笑检测信号、以及用于执行面部检测操作的面部检测信号。在某些示例实施例中,捕捉准备信号还可以包括用于执行指纹检测操作的指纹检测信号、用于执行特定对象检测操作的对象检测信号、等等。如上所述,根据示例实施例的消除快门迟滞的方法可以在捕捉信号被输入之前使用捕捉准备信号执行第一模式改变MODE CHANGE_1。结果,因为感测器输出图像在照相机图像感测器的捕捉准备模式中被保持为具有高分辨率,所以不会引起由于感测器输出图像的分辨率的改变而引起的快门迟滞。
第二模式改变MODE CHANGE_2可以根据需要的条件通过各种方式来执行。例如,第二模式改变MODE CHANGE_2可以通过将感测器输出图像的分辨率从高分辨率改变到低分辨率来执行。根据本发明构思的示例实施例,第二模式改变MODE CHANGE_2可以在当在照相机图像感测器的捕捉准备模式中捕捉到感测器输出图像时的感测器输出图像的捕捉完成时刻执行。根据本发明构思的示例实施例,当从感测器输出图像的捕捉完成时刻开始经过了预定时间或者参考时间时,可以执行第二模式改变MODE CHANGE_2。根据本发明构思的示例实施例,当在照相机图像感测器的输入准备模式中输入了模式改变信号时,可以执行第二模式改变MODE CHANGE_2。根据本发明构思的示例实施例,当在照相机图像感测器的输入准备模式中经过了预定时间或者参考时间时,可以执行第二模式改变MODE CHANGE_2。如上所述,根据示例实施例的消除快门迟滞的方法可以在照相机图像感测器的预览模式中防止不必要的电力消耗,并且在照相机图像感测器的捕捉准备模式中防止在捕捉图像时引起快门迟滞。此外,根据示例实施例的消除快门迟滞的方法可以使可能消耗相对较高的电量的照相机图像感测器的捕捉准备模式60最小化。
根据本发明构思的示例实施例,使用测量用于操作照相机模块的时钟频率和用于操作照相机模块的电力消耗的方法,可以检查根据示例实施例的消除快门迟滞的方法是否被照相机模块和具有该照相机模块的电子设备采用。在对于照相机模块,例如,在应用处理器和照相机图像感测器之间,基于移动工业处理器接口(Mobile Industry Processor Interface,MIPI)、国际电信联盟-无线电通信(International Telecommunication Union-Radio communication,ITU-R)BT.601、ITU-R BT.656、或ITU-R BT.709执行通信的情况中,可以通过测量对于照相机模块执行MIPI、ITU-R BT.601、ITU-R BT.656、或ITU-RBT.709的时钟频率和电力消耗,来检查根据示例实施例的消除快门迟滞的方法是否被照相机模块和具有该照相机模块的电子设备采用。
图11是示出根据示例实施例的照相机模块的框图。
参考图11,照相机模块100可以包括图像感测器单元120、图像信号处理单元140和模式控制单元160。在某些示例实施例中,照相机模块100可以由片上***(SOC)实现。
图像感测器单元120可以通过接收与用于拍摄的主体相对应的光信号LIG以及通过对光信号LIG执行光电转换来生成感测器输出图像SOI。对于这个操作,图像感测器单元120可以包括至少一个图像感测器,并且该图像感测器可以是互补金属氧化物半导体(CMOS)图像感测器或者电荷耦合器件(CCD)图像感测器。基于从模式控制单元160输出的控制信号CTL1,感测器输出图像SOI在预览模式中可以具有低分辨率,并且在捕捉准备模式中可以具有高分辨率。这里,应当理解感测器输出图像SOI的“分辨率”是这样的术语,其可以包括感测器输出图像SOI的“像素”、感测器输出图像SOI的“尺寸”、感测器输出图像SOI的“容量”、感测器输出图像SOI的“采样率”等等。根据本发明构思的示例实施例,具有低分辨率的感测器输出图像SOI的尺寸可以对应于显示输出尺寸。例如,具有低分辨率的感测器输出图像SOI的尺寸可以是VGA(640*480)的尺寸。此外,随着显示输出尺寸的改变,具有低分辨率的感测器输出图像SOI的尺寸可以改变。例如,当具有照相机模块100的移动设备耦合到外部显示设备时,具有低分辨率的感测器输出图像SOI的尺寸可以改变为该外部显示设备的显示输出尺寸。此外,具有高分辨率的感测器输出图像的尺寸可以对应于预定尺寸,并且该预定尺寸可以由用户来改变。例如,具有高分辨率感测器输出图像SOI的尺寸可以是全帧尺寸(例如,5兆(2608*1960)、8兆(3264*2448)等等)。图像感测器单元120可以根据照相机模块100的操作模式或照相机图像感测器的操作提供分辨率被改变的感测器输出图像SOI。在某些示例实施例中,当照相机模块100的操作模式被改变时,图像感测器单元120可以向图像信号处理单元140输出中断信号,以确保感测器输出图像SOI的连续性。
图像信号处理单元140可以处理从图像感测器单元120输出的感测器输出图像SOI以生成图像数据IDA。对于这个操作,图像信号处理单元可以包括至少一个图像信号处理器(ISP)。例如,图像信号处理单元140可以执行用于自动曝光(auto exposure,AE)、自动白平衡(auto white balance,AWB)、自动聚焦(auto focus,AF)等等的处理。此外,图像信号处理单元140还可以执行用于定标(scaler)、输出格式、色彩校正、伽马校正、阴影补偿(shadingcompensation)等等的处理。具体来说,图像信号处理单元140可以基于从模式控制单元160输出的控制信号CTL2处理具有低分辨率的感测器输出图像SOI或具有高分辨率的感测器输出信号SOI。例如,当在预览模式中从图像感测器单元120输入具有低分辨率的感测器输出图像SOI时,图像信号处理单元140可以处理具有低分辨率的感测器输出图像SOI以输出适合于预览模式的图像数据IDA。另一方面,当在捕捉准备模式中从图像感测器单元120输入具有高分辨率的感测器输出图像SOI时,图像信号处理单元140可以处理具有高分辨率的感测器输出图像SOI以输出适合于捕捉准备模式的图像数据IDA。在某些示例实施例中,图像感测器单元120基于MIPI和集成电路间(Inter-Integrated Circuit,I2C)耦合到图像信号处理单元140。然而,其不限于此。
模式控制单元160可以基于捕捉准备信号SPS将照相机模块100的操作模式从预览模式改变到捕捉准备模式。具体来说,当在预览模式中输入捕捉准备信号SPS时,模式控制单元160可以通过向图像感测器单元120输出控制信号CTL1,将从感测器图像单元120输出的感测器输出图像SOI的分辨率从低分辨率改变到高分辨率。通常,因为聚焦操作是在执行图像捕捉时必须执行的,所以捕捉准备信号SPS可以是与照相机模块100的聚焦操作相关的信号。根据本发明构思的示例实施例,捕捉准备信号可以是用于执行聚焦操作的自动聚焦开始信号。根据本发明构思的示例实施例,捕捉准备信号SPS可以是用于执行聚焦操作的外部输入信号,例如,触摸输入信号。根据本发明构思的示例实施例,捕捉准备信号SPS可以是用于执行微笑检测操作的微笑检测信号。根据本发明构思的示例实施例,捕捉准备信号SPS可以是用于执行面部检测操作的面部检测信号。因为模式控制单元160在用户按下快门释放按钮之前使用在照相机模块中必然生成的捕捉准备信号SPS,所以当用户在捕捉准备模式中按下快门释放按钮时,模式控制单元160可以控制感测器输出图像SOI具有高分辨率。结果,因为在捕捉准备模式中感测器输出图像SOI被保持为具有高分辨率,所以不会引起与用户按下快门释放按钮的时刻和实际捕捉到图像的时刻之间的延迟相对应的快门迟滞。
此外,模式控制单元160根据一个或多个条件通过各种方式将照相机模块100的操作模式从捕捉准备模式改变到预览模式。如上所述,图像感测器单元120在预览模式中可以输出具有低分辨率的感测器输出图像SOI,并且在捕捉准备模式中可以输出具有高分辨率的感测器输出图像SOI。因此,模式控制单元120在特定条件下可能需要将照相机模块100的操作模式从捕捉准备模式改变到预览模式。根据本发明构思的示例实施例,模式控制单元160可以在当在捕捉准备模式中捕捉到感测器输出图像SOI时的感测器输出图像SOI的捕捉完成时刻,将照相机模块100的操作模式从捕捉准备模式改变到预览模式。根据本发明构思的示例实施例,模式控制单元160可以当从感测器输出图像SOI的捕捉完成时刻经过了预定时间或者参考时间时,将照相机模块100的操作模式从捕捉准备模式改变到预览模式。根据本发明构思的示例实施例,模式控制单元160可以当在捕捉准备模式中输入了模式改变信号时,将照相机模块100的操作模式从捕捉准备模式改变到预览模式。根据本发明构思的示例实施例,模式控制单元160可以当在捕捉准备模式中经过了预定时间或者参考时间时,将照相机模块100的操作模式从捕捉准备模式改变到预览模式。结果,模式控制单元160在特定条件下通过将照相机模块的操作模式从消耗相对较高电力的捕捉准备模式改变到预览模式,来减少照相机模块100的电力消耗。
如上所述,模式控制单元160可以通过向图像感测器单元120和图像信号处理单元140输出控制信号CTL1和CTL2,来控制图像感测器单元120和图像信号处理单元140。因此,图像感测器单元120在预览模式中可以输出具有低分辨率的感测器输出图像SOI,并且在捕捉准备模式中可以输出具有高分辨率的感测器输出图像SOI。此外,图像信号处理单元140在预览模式中可以处理和输出具有低分辨率的感测器输出图像SOI,并且在捕捉准备模式中可以处理和输出具有高分辨率的感测器输出图像SOI。结果,照相机模块100在预览模式中可以防止不必要的电力消耗,并且在捕捉准备模式中可以防止在捕捉图像时引起快门迟滞。此外,照相机模块100可以使消耗相对较高电力的捕捉准备模式最小化。根据本发明构思的示例实施例,图像信号处理单元140和/或模式控制单元160可以实现在应用处理器内部。根据本发明构思的示例实施例,图像信号处理单元140和/或模式控制单元160可以实现在应用处理器外部。在移动设备中,可能期望图像信号处理单元140和/或模式控制单元160实现在应用处理器内部。在这种情况下,模式控制单元160可以包括实时操作***(RTOS),并且图像信号处理单元140可以由RTOS来控制。
图12是示出图11的照相机模块中的图像感测器单元的示例的框图。
参考图12,图像感测器单元120可以包括镜头121、照相机图像感测器122、马达123和感测器控制器124。
镜头121可以将光(即,与用于拍摄的对象相对应的光信号LIG)会聚在光接收区域(例如,单位像素阵列中的多个单位像素)上。照相机图像感测器122可以基于通过镜头121输入的光信号LIG,生成具有该对象的信息的数据DATA。在某些示例实施例中,照相机图像感测器122可能是CMOS图像感测器或CCD图像感测器。照相机图像感测器122可以基于时钟信号CLK向感测器控制器124提供数据DATA。马达123可以基于从感测器控制器124提供的控制信号执行镜头121的聚焦操作或快门操作。感测器控制器124可以控制照相机图像感测器122和马达123,并且可以处理从照相机图像感测器122输入的数据DATA以输出感测器输出图像SOI。同时,感测器控制器124可以耦合到图像信号处理单元140的图像信号处理器(ISP),以将感测器输出图像SOI提供给图像信号处理单元140的图像信号处理器。在某些示例实施例中,感测器控制器124可以基于MIPI和I2C总线耦合到图像信号处理单元140的图像信号处理器。然而,其不限于此。
如上所述,图像感测器单元120可以接收光信号LIG,并且可以通过对光信号LIG执行光电转换来生成感测器输出图像SOI。这里,感测器输出图像SOI在预览模式中可以具有低分辨率,而在捕捉准备模式中可以具有高分辨率。具有低分辨率的感测器输出图像SOI的尺寸可以对应于显示输出尺寸,并且具有低分辨率的感测器输出图像SOI的尺寸可以随着显示输出尺寸的改变而改变。此外,具有高分辨率的感测器输出图像SOI的尺寸可以对应于预定尺寸,并且该预定尺寸可以由用户来改变。总之,照相机模块100的操作模式可以基于捕捉准备信号SPS从预览模式改变到捕捉准备模式。结果,当用户在捕捉准备模式中按下快门释放按钮时,图像感测器单元120可以输出具有高分辨率的感测器输出图像SOI。此外,可以根据需要的条件通过各种方式将照相机模块100的操作模式从捕捉准备模式改变到预览模式。结果,因为在其中图像感测器单元120输出具有高分辨率的感测器输出图像SOI的捕捉准备模式被最小化,所以照相机模块100的电力消耗可以减少。
图13是示出图11的照相机模块中的图像信号处理单元的示例的框图。
参考图13,图像信号处理单元140可以包括图像信号处理器142、存储设备144、后处理器146、并且显示控制器148。
图像信号处理器142可以接收从图像感测器单元120输出的感测器输出图像SOI,并且可以通过处理感测器输出图像SOI来生成第一图像数据ID_1。实际上,用户不能识别出从图像感测器单元120输出的感测器输出图像SOI。因此,图像信号处理器142可以将感测器输出图像SOI转换成用户能够识别的信号,例如,第一图像数据ID_1。例如,图像信号处理器142可以通过控制从图像感测器单元120输出的感测器输出图像SOI的颜色类型、图像尺寸、帧速率等等,来生成第一图像数据ID_1。在图13中,示出图像信号处理器142执行预处理器的功能。然而,预处理器可以单独地包括在图像信号处理单元140中。在这种情况下,预处理器可以将第一图像数据ID_1转换成适合于后处理器146的信号。
存储设备144可以临时存储从图像信号处理器142输出的感测器输出图像SOI,并且可以将感测器输出图像SOI输出到后处理器146。例如,存储设备144可以包括:易失性存储设备,比如,动态随机存取存储(DRAM)设备、静态随机存取存储(SRAM)设备、等等;以及非易失性存储器设备,比如,可擦除可编程只读存储(EPROM)设备、电可擦除可编程只读存储(EEPROM)设备、快闪存储器、等等。存储设备144可以执行缓存功能。在某些示例实施例中,存储设备144根据需要的条件可以不被包括在图像信号处理单元140中。后处理器146可以通过对从图像信号处理器142输出的第一图像数据ID_1执行后处理来生成第二图像数据ID_2。例如,后处理器146可以将第一图像数据ID_1转换成能够被显示控制器148显示在显示设备上的第二图像数据ID_2,第一图像数据ID_1是例如从图像信号处理器142或预处理器输入的。接下来,显示控制器148可以将第二图像数据ID_2作为图像数据IDA显示在该显示设备上。
图像信号处理单元140可以通过处理从图像感测器单元120输出的感测器输出图像SOI来输出图像数据IDA。在某些示例实施例中,图像数据IDA可以在各种编解码(例如JPEG、TIF、GIF、PCX等等)的基础上输出。根据本发明构思的示例实施例,图像信号处理单元140可以实现在应用处理器内部。根据本发明构思的示例实施例,图像信号处理单元140可以实现在应用处理器外部。例如,在图像信号处理单元140被实现在应用处理器内部的情况中,当图像信号处理单元140与模式控制单元160通信时不会引起延迟。因此,如果模式控制单元160包括RTOS,则图像信号处理单元140可以由RTOS来控制。如上所述,基于从模式控制单元160输出的控制信号CTL2,图像信号处理单元140在预览模式中可以处理具有低分辨率的感测器输出图像SOI,并且在捕捉准备模式中可以处理具有高分辨率的感测器输出图像SOI。结果,照相机模块100可以减少预览模式的电力消耗。
图14是示出图11的照相机模块中的模式控制单元的示例的框图。
参考图14,模式控制单元160可以包括输入块162、控制块164和输出块166。
输入块162可以接收捕捉准备信号SPS,并且可以将第一内部信号IS_1输出到控制块164。这里,捕捉准备信号SPS可以包括用于执行聚焦操作的自动聚焦开始信号、用于执行聚焦操作的外部输入信号(例如,触摸输入信号)、用于执行微笑检测操作的微笑检测信号、以及用于执行面部检测操作的面部检测信号。因此,输入块162可以基于捕捉准备信号SPS向控制块164提供与自动聚焦开始信号、外部输入信号、微笑检测信号或面部检测信号相对应的内部信号IS_1。控制块164可以基于第一内部信号IS_1生成用于控制图像感测器单元120和图像信号处理单元140的第二内部信号IS_2,并且可以将该第二内部信号IS_2提供给输出块166。这里,第二内部信号IS_2可以对应于用于控制图像感测器单元120和图像信号处理单元160的控制信号CTL1和CTL2。接下来,输出块166可以基于第二内部信号IS_2将控制信号CTL1和CTL2提供给图像感测器单元120和图像信号处理单元140。
模式控制单元160可以基于捕捉准备信号SPS将照相机模块100的操作模式从预览模式改变到捕捉准备模式。此外,模式控制单元160在特定条件下可以将照相机模块100的操作模式从捕捉准备模式改变到预览模式。如上所述,模式控制单元160可以控制图像感测器单元120在预览模式中输出具有低分辨率的感测器输出图像,并且可以控制图像信号处理单元140在预览模式中处理具有低分辨率的感测器输出图像SOI。另一方面,模式控制单元160可以控制图像感测器单元120在捕捉准备模式中输出具有高分辨率的感测器输出图像SOI,并且可以控制图像信号处理单元140在捕捉准备模式中输出具有高分辨率的感测器输出图像SOI。结果,照相机模块100在预览模式中可以防止不必要的电力消耗,并且在捕捉准备模式中可以防止在捕捉图像时引起快门迟滞。此外,照相机模块100可以使消耗相对较高电力的捕捉准备模式最小化。
图15是示出图11的照相机模块应用到移动设备的示例的框图。
参考图15,照相机模块200可以包括图像感测器单元220、图像信号处理单元240和模式控制单元260。这里,模式控制单元260可以包括在应用处理器270中。根据本发明构思的示例实施例,照相机模块200可以通过片上***(SOC)来实现。
图像感测器单元220可以通过接收与用于拍摄的对象相对应的光信号LIG以及通过对光信号LIG执行光电转换来生成感测器输出图像SOI。图像信号处理单元240可以处理从图像感测器单元220输出的感测器输出图像SOI以生成图像数据IDA。模式控制单元260可以基于捕捉准备信号SPS将照相机模块200的操作模式从预览模式改变到捕捉准备模式。因为图像感测器单元220、图像信号处理单元240和模式控制单元260在上面进行了描述,所以下面将省略对它们的重复描述。如图15所示,模式控制单元260可以包括在应用处理器270中。通常,因为移动设备主要基于电池来操作,所以随着移动设备变得越小,移动设备需要消耗越少的电力。移动设备的示例可以包括智能电话、智能板(pad)、PDA和便携式游戏控制台。因此,移动设备可以包括用于执行各种功能的应用处理器。例如,移动设备的应用处理器可以对应于计算机的中央处理单元(CPU)。因此,应用处理器270可以包括模式控制单元260,模式控制单元260基于捕捉准备信号SPS将照相机模块200的操作模式从预览模式改变到捕捉准备模式。在这种情况下,当应用处理器270与模式控制单元260通信时引起的延迟可以被最小化。
如上所述,具有模式控制单元260的应用处理器270可以通过当在预览模式中输入了捕捉准备信号SPS时向图像感测器单元220输出控制信号CTL1,来将照相机模块200的操作模式从预览模式改变到捕捉准备模式。因此,图像感测器单元220在预览模式中可以输出具有低分辨率的感测器输出图像SOI,然后从捕捉准备模式的开始时刻起(即,从捕捉准备信号SPS的输入时刻起)可以输出具有高分辨率的感测器输出图像SOI。结果,不会引起与用户按下快门释放按钮的时刻和实际捕捉到图像的时刻之间的延迟相对应的快门迟滞。此外,具有模式控制单元260的应用处理器270可以在特定条件下通过向图像感测器单元220输出控制信号CTL1,来将照相机模块200的操作模式从捕捉准备模式改变到预览模式。例如,当在捕捉准备模式中捕捉到感测器输出图像时,当在捕捉准备模式中经过了预定时间或者参考时间时,或者当在捕捉准备模式中输入了模式改变信号时。结果,因为在其中图像感测器单元220输出具有高分辨率的感测器输出图像SOI的捕捉准备模式被最小化,所以照相机模块200的电力消耗可以减少。在某些示例实施例中,模式控制单元260可以包括实时操作***(RTOS),并且图像信号处理单元240可以由RTOS来控制。
图16是示出图11的照相机模块应用到移动设备的示例的框图。
参考图16,照相机模块300可以包括图像感测器单元320、图像信号处理单元340和模式控制单元360。这里,图像信号处理单元340和模式控制单元360可以包括在应用处理器370中。在某些示例实施例中,照相机模块300可以通过片上***(SOC)来实现。
图像感测器单元320可以通过接收与用于拍摄的对象相对应的光信号LIG以及通过对光信号LIG执行光电转换来生成感测器输出图像SOI。图像信号处理单元340可以处理从图像感测器单元220输出的感测器输出图像SOI来生成图像数据IDA。模式控制单元360可以基于捕捉准备信号SPS将照相机模块300的操作模式从预览模式改变到捕捉准备模式。因为图像感测器单元320、图像信号处理单元340和模式控制单元360在上面进行了描述,所以下面将省略对它们的重复描述。如图16所示,图像信号处理单元340和模式控制单元360可以包括在应用处理器370中。例如,应用处理器370可以包括模式控制单元360和图像信号处理单元340,模式控制单元360基于捕捉准备信号SPS将照相机模块300的操作模式从预览模式改变到捕捉准备模式,图像信号处理单元340通过处理从图像感测器单元320输出的感测器输出图像SOI来输出图像数据IDA。在这种情况下,当应用处理器370与图像信号处理单元340和模式控制单元360通信时引起的延迟可以被最小化。
图17是示出图11的照相机模块应用到移动设备的又一个示例的框图。
参考图17,照相机模块400可以包括图像感测器单元420、图像信号处理单元440和模式控制单元460。这里,模式控制单元460可以耦合到应用处理器470。例如,模式控制单元460可以是独立于应用处理器470的处理器。在某些示例实施例中,照相机模块400可以通过片上***(SOC)来实现。
图像感测器单元420可以通过接收与用于拍摄的对象相对应的光信号LIG以及通过对光信号LIG执行光电转换来生成感测器输出图像SOI。图像信号处理单元440可以处理从图像感测器单元420输出的感测器输出图像SOI以生成图像数据IDA。模式控制单元460可以基于捕捉准备信号SPS将照相机模块400的操作模式从预览模式改变到捕捉准备模式。因为图像感测器单元420、图像信号处理单元440和模式控制单元460在上面进行了描述,所以下面将省略对它们的重复描述。如图17所示,模式控制单元460可以是独立于应用处理器470的处理器。例如,模式控制单元460可以耦合到应用处理器470,并且可以基于从应用处理器470输出的捕捉准备信号SPS将照相机模块400的操作模式从预览模式改变到捕捉准备模式。通常,应用处理器可以为移动设备执行多任务操作。因此,当应用处理器过载时,移动设备的照相机模块可能发生故障。因此,因为模式控制单元460独立于应用处理器470来实现,所以照相机模块400可以获得操作可靠性。
图18是示出图11的照相机模块应用到移动设备的再一个示例的框图。
参考图18,照相机模块500可以包括图像感测器单元520、图像信号处理单元540和模式控制单元560。这里,模式控制单元560可以耦合到应用处理器570。例如,模式控制单元560可以是独立于应用处理器570的处理器。此外,图像信号处理单元540可以包括在应用处理器570中。在某些示例实施例中,照相机模块500可以通过片上***(SOC)来实现。
图像感测器单元520可以通过接收与用于拍摄的对象相对应的光信号LIG以及通过对光信号LIG执行光电转换来生成感测器输出图像SOI。图像信号处理单元540可以处理从图像感测器单元520输出的感测器输出图像SOI以生成图像数据IDA。模式控制单元560可以基于捕捉准备信号SPS将照相机模块500的操作模式从预览模式改变到捕捉准备模式。因为图像感测器单元520、图像信号处理单元540和模式控制单元560在上面进行了描述,所以下面将省略对它们的重复描述。如图18所示,应用处理器570可以包括图像信号处理单元540,图像信号处理单元540通过处理从图像感测器单元520输出的感测器输出图像SOI来输出图像数据IDA。然而,模式控制单元560可以是独立于应用处理器570的处理器,并且可以耦合到应用处理器570。结果,当应用处理器570与图像信号处理单元540通信时引起的延迟可以被最小化。此外,,因为模式控制单元560独立于应用处理器570来实现,所以照相机模块500可以获得操作可靠性。
图19是示出根据示例实施例的移动设备的框图。
参考图19,移动设备600可以包括照相机图像感测器620、应用处理器640以及至少一个显示设备660。在某些示例实施例中,移动设备600还可以包括用于执行移动设备600的各种功能的多个功能电路680。
移动设备600可以根据移动集合倾向来执行各种功能。如图19所示,移动设备600可以包括用于执行照相机功能的照相机模块。这里,除照相机图像感测器620之外,照相机模块的所有组件都可以包括在移动设备600的应用处理器640中。根据本发明构思的示例实施例,应用处理器640可以包括模式控制器、图像信号处理器、后处理器以及显示控制器。模式控制器可以在预览模式中保持感测器输出图像具有低分辨率,可以响应于捕捉准备信号将感测器输出图像的分辨率从低分辨率改变到高分辨率,并且可以在捕捉准备模式中保持感测器输出图像具有高分辨率。这里,感测器输出图像可以是从照相机图像感测器620输出的。图像信号处理器可以处理感测器输出图像以生成第一图像数据。后处理器可以对第一图像数据执行后处理以生成第二图像数据。显示控制器可以将第二数据输出到至少一个显示设备。这里,应用处理器640的模式控制器可以对应于图11的模式控制单元160,并且应用处理器640的图像信号处理器,后处理器和显示控制器对应于图11的图像信号处理单元140。
如上所述,移动设备600可以包括用于执行移动设备600的各种功能的应用处理器640,应用处理器640可以包括模式控制器和组件,模式控制器响应于捕捉准备信号将照相机模块的操作模式从预览模式改变到捕捉准备模式,所述组件处理感测器输出图像以输出图像数据,所述组件包括例如图像信号处理器、后处理器和显示控制器。因此,当应用处理器640与模式控制器、图像信号处理器、后处理器以及显示控制器通信时引起的延迟可以被最小化。同时,应用处理器640可以耦合到用于分别执行移动设备600的特定功能的功能电路680。因此,应用处理器640可以控制功能电路680。总之,当照相机模块在移动设备600中操作时,在预览模式中感测器输出图像可以被保持为具有低分辨率,可以响应于捕捉准备信号将感测器输出图像的分辨率从低分辨率改变到高分辨率,并且在捕捉准备模式中感测器输出图像可以被保持为具有高分辨率。结果,移动设备600在照相机模块的预览模式中可以防止不必要的电力消耗,并且在照相机模块的捕捉准备模式中可以防止在捕捉图像时引起快门迟滞。此外,移动设备600可以使消耗相对较高电力的照相机模块的捕捉准备模式最小化。
图20是示出图19的移动设备耦合到至少一个外部显示设备的示例的示图。
参考图20,移动设备600可以包括至少一个内部显示设备660,并且可以耦合到外部显示设备690_1到690_n。这里,外部显示设备690_1到690_n可以外部设备680_1到680_n的相应的内部显示设备。举例来说,当移动设备600是智能电话时,内部显示设备660可以对应于智能电话的液晶显示(LCD)设备、或智能电话的有源矩阵有机发光二极管(AMOLED)显示设备。外部设备680_1到680_n可以分别对应于能够以无线方式或有线方式连接到智能电话的膝上型计算机、电视、监视器、投影仪等等。因此,当移动设备600执行照相机功能时,在拍摄的对象被显示在内部显示外部显示设备660上的同时,该拍摄的对象也可以显示在外部显示设备690_1到690_n上。对于这个操作,移动设备600可以将图像数据IDA提供给外部设备680_1到680_n。因为移动设备600与外部设备680_1到680-n共享图像数据IDA,所以具有移动设备600的用户和具有外部设备680_1到680_n的用户可以实时地观看相同的图像。根据本发明构思的示例实施例,当具有移动设备600的用户在内部显示设备660上观看并且选择拍摄对象时,具有外部设备680_1到680_n中的一个的用户可以按下快门释放按钮以执行对显示在外部显示设备690-1到690_n中的相应的一个上的拍摄对象的图像捕捉。结果,移动设备600可以被用于各种应用,比如,视频电话会议、视频会议、远程控制、等等。
图21到图24是示出通过图19的移动设备实现的各种示例的示图。
参考图21到24,移动设备600可以被实现为蜂窝电话910、智能电话920、数字照相机930、摄像机940等等。如上所述,移动设备可以根据移动集合倾向来执行各种功能。例如,在蜂窝电话910和智能电话920的情况中,蜂窝电话910和智能电话920可以执行照相机功能,虽然蜂窝电话910和智能电话920的主要功能是通信功能。另一方面,在数字照相机930和摄像机940的情况中,数字照相机930和摄像机940可以执行通信功能,虽然数字照相机930和摄像机940的主要功能是照相机功能。移动设备600可以包括照相机图像感测器620、应用处理器640和至少一个显示设备660来执行照相机功能。此外,移动设备600还可以包括多个功能电路680来执行其它功能。因为在上面描述了移动设备600,所以下面将省略对其的重复描述。在移动设备600中,应用处理器640可以在预览模式中保持感测器输出图像具有低分辨率,可以响应于捕捉准备信号将感测器输出图像的分辨率从低分辨率改变到高分辨率,并且在捕捉准备模式中保持感测器输出图像具有高分辨率。结果,移动设备600在照相机图像感测器620的预览模式中可以防止不必要的电力消耗,并且在照相机图像感测器620的捕捉准备模式中可以防止在捕捉图像时引起快门迟滞。而且,移动设备600可以使消耗相对较高电力的照相机图像感测器620的捕捉准备模式最小化。
图25是示出根据示例实施例的电子设备的框图。
参考图25,电子设备1000可以包括处理器1010、存储器件(memorydevice)1020、存储设备(storage device)1030、输入/输出(I/O)设备1040、电源1050和照相机模块1060。这里,照相机模块1060可以对应于图11的照相机模块100。如图25中所示,电子设备1000还可以包括用于通信视频卡、声卡、存储卡、通用串行总线USB)设备、其它电子设备、等等的多个端口。
处理器1010可以执行各种计算功能。处理器1010可以是微处理器、中央处理单元(CPU)、等等。处理器1010可以经由地址总线、控制总线、数据总线等等耦合到存储器件1020、存储设备1030和I/O器件1040。在某些示例实施例中,处理器1010可以耦合到扩展总线,比如,***组件互连(PCI)总线。存储器件1020可以存储用于电子设备1000的操作的数据。例如,存储器件1020可以包括:易失性半导体存储器件,比如,DRAM器件、SRAM器件、移动DRAM、等等;以及非易失性半导体存储器件,比如,EPROM器件、EEPROM器件、快闪存储器件、等等。存储设备1030可以是固态驱动设备、硬盘驱动设备、CD-ROM设备、等等。I/O设备1040可以包括例如输入设备和输出设备,输入设备例如键盘、键区、鼠标等等,输出设备例如指针、显示设备等等。电源1050可以提供用于电子设备1000的操作的电力。
照相机模块1060可以经由总线其它通信链路与处理器1010通信。在某些示例实施例中,处理器1010可以是应用处理器。这里,照相机模块的所有组件或一些组件可以耦合到应用处理器,或者包括在应用处理器中。如上所述,照相机模块1060可以包括图像感测器单元、图像信号处理单元和模式控制单元。这里,模式控制单元可以控制图像感测器单元在预览模式中输出具有低分辨率的感测器输出图像,并且可以控制图像感测器单元在捕捉准备模式中输出具有高分辨率的感测器输出图像。此外,模式控制单元可以控制图像信号处理单元在预览模式中处理和输出具有低分辨率的感测器输出图像,并且可以控制图像信号处理单元在捕捉准备模式中处理和输出具有高分辨率的感测器输出图像。结果,照相机模块1060在照相机模块1060的预览模式中可以防止不必要的电力消耗,并且在照相机模块1060的捕捉准备模式中可以防止在捕捉图像时引起快门迟滞。此外,照相机模块1060可以使消耗相对较高电力的照相机模块1060的捕捉准备模式最小化。应当理解,电子设备1000被解释为具有照相机模块1060的***。
图26是示出被用于图25的电子设备的接口的示例的框图。
参考图26,电子设备1100可以由使用或支持移动工业处理器接口(MIPI)的数据处理设备来实现。电子设备1100可以包括应用处理器1110、图像感测器1140、显示设备1150、等等。应用处理器1110的CSI主机1112可以使用照相机串行接口(CSI)与图像感测器1140的CSI设备1141执行串行通信。根据本发明构思的示例实施例,CSI主机1112可以包括光解串化器(DES),并且CSI设备1141可以包括光串化器(SER)。应用处理器1110的DSI主机1111可以使用显示器串行接口(DSI)与显示设备1150的DSI设备1151执行串行通信。根据本发明构思的示例实施例,DSI主机1111可以包括光串化器(DES),并且DSI设备1151可以包括光解串化器(DES)。
此外,电子设备1100还可以包括射频(RF)芯片1160。RF芯片1160可以执行与应用处理器1110的通信。电子设备1100的物理层(PHY)1113和RF芯片1160的物理层(PHY)1161可以基于MIPI DigRF(数字射频)执行数据通信。应用处理器1110还可以包括DigRF主(DigRF MASTER)1114,其控制PHY 1161的数据通信。电子设备1100可以包括全球定位***(GPS)1120、存储器1170、MIC 1180、DRAM设备1185和扬声器1190。此外,电子设备1100可以使用超宽带(UWB)1210、无线局域网(WLAN)1220、全球微波接入互操作性(worldwide interoperability for microwave access,WIMAX)1230等等执行通信。然而,电子设备1100的结构和接口不限于此。
本发明构思的示例实施例可以应用于照相机模块和具有照相机模块的电子设备(例如,移动设备)。例如,本发明构思的示例实施例可以应用于这样的电子设备,该电子设备包括,例如,计算机、膝上型计算机、数字照相机、3D照相机、视频摄像机、蜂窝电话、智能电话、个人数字助理(PDA)、便携式多媒体播放器(PMP)、导航***、监视***、自动聚焦***、视频电话、数字电视、等等。
已经对示例实施例进行了如此的描述,很显然示例实施例可以以许多方式变化。这样的变化不应被视为脱离示例实施例的预计的精神和范围,并且所有这样的对本领域技术人员来说显见的修改都意欲包括在所附权利要求的范围之内。
Claims (26)
1.一种减少照相机图像感测器中的快门迟滞的方法,该方法包含:
在照相机图像感测器的预览模式中保持感测器输出图像具有低分辨率;
响应于捕捉准备信号将感测器输出图像的分辨率从低分辨率改变到高分辨率,以便将照相机图像感测器的操作模式从预览模式改变到捕捉准备模式,所述低分辨率是等于或低于参考分辨率的分辨率,所述高分辨率是高于参考分辨率的分辨率;以及
在照相机图像感测器的捕捉准备模式中响应于捕捉信号捕捉感测器输出图像。
2.如权利要求1所述的方法,还包含:
当在捕捉准备模式中捕捉到感测器输出图像之后,将感测器输出图像的分辨率从高分辨率改变到低分辨率,以便将照相机图像感测器的操作模式从捕捉准备模式改变到预览模式。
3.如权利要求2所述的方法,其中在捕捉准备模式中经过了参考时间量之后,将感测器输出图像的分辨率从高分辨率改变到低分辨率,以便将照相机图像感测器的操作模式从捕捉准备模式改变到预览模式。
4.如权利要求2所述的方法,其中在捕捉准备模式中输入了模式改变信号之后,将感测器输出图像的分辨率从高分辨率改变到低分辨率,以便将照相机图像感测器的操作模式从捕捉准备模式改变到预览模式。
5.如权利要求1所述的方法,其中在照相机图像感测器的预览模式中输入了捕捉准备信号之后,将感测器输出图像的分辨率从低分辨率改变到高分辨率。
6.如权利要求1所述的方法,其中当在照相机图像感测器的预览模式中输入了捕捉准备信号之后经过了参考时间量之后,将感测器输出图像的分辨率从低分辨率改变到高分辨率。
7.如权利要求1所述的方法,其中所述捕捉准备信号基于下列信号中的至少一个:用于执行聚焦操作的自动聚焦开始信号、用于执行聚焦操作的外部输入信号、用于执行微笑检测操作的微笑检测信号、以及用于执行面部检测操作的面部检测信号。
8.如权利要求1所述的方法,其中具有低分辨率的感测器输出图像的尺寸对应于显示感测器输出图像的显示器的输出尺寸,并且具有低分辨率的感测器输出图像的尺寸随着显示器的输出尺寸的改变而改变。
9.如权利要求1所述的方法,其中具有高分辨率的感测器输出图像的尺寸对应于参考尺寸,并且所述参考尺寸由用户来改变。
10.一种照相机模块,包含:
图像感测器单元,配置为通过执行光电转换来生成感测器输出图像;
模式控制单元,配置为在照相机模块的预览模式中保持感测器输出图像具有低分辨率,配置为响应于捕捉准备信号将感测器输出图像的分辨率从低分辨率改变到高分辨率,并且配置为在照相机模块的捕捉准备模式中保持感测器输出图像具有高分辨率,所述低分辨率是等于或低于参考分辨率的分辨率,所述高分辨率是高于所述参考分辨率的分辨率;以及
图像信号处理单元,配置为处理所述感测器输出图像以生成图像数据。
11.如权利要求10所述的模块,其中所述照相机模块由片上***(SOC)来实现。
12.如权利要求10所述的模块,其中所述模式控制单元被配置为在照相机模块的预览模式中将感测器输出图像设置为具有低分辨率,并且所述模式控制单元被配置为在照相机模块的捕捉准备模式中将感测器输出图像设置为具有高分辨率。
13.如权利要求12所述的模块,其中所述模式控制单元被配置为使得:在照相机模块的捕捉准备模式中捕捉到感测器输出图像之后,模式控制单元将照相机模块的操作模式从捕捉准备模式改变到预览模式。
14.如权利要求13所述的模块,其中所述模式控制单元被配置为使得:在照相机模块的捕捉准备模式中经过了参考时间量之后,模式控制单元将照相机模块的操作模式从捕捉准备模式改变到预览模式。
15.如权利要求13所述的模块,其中所述模式控制单元被配置为使得:当在照相机模块的捕捉准备模式中输入了模式改变信号时,模式控制单元将照相机模块的操作模式从捕捉准备模式改变到预览模式。
16.如权利要求12所述的模块,其中所述捕捉准备信号基于下列信号中的至少一个:用于执行聚焦操作的自动聚焦开始信号、用于执行聚焦操作的外部输入信号、用于执行微笑检测操作的微笑检测信号、以及用于执行面部检测操作的面部检测信号。
17.一种移动设备,包含:
照相机图像感测器,配置为生成感测器输出图像;
应用处理器,配置为处理所述感测器输出图像;以及
至少一个显示设备,配置为基于所述感测器输出图像生成显示,
其中所述应用处理器包括:
模式控制器,配置为在照相机图像感测器的预览模式中保持感测器输出图像具有低分辨率,配置为响应于捕捉准备信号将感测器输出图像的分辨率从低分辨率改变到高分辨率,并且配置为在照相机图像感测器的捕捉准备模式中保持感测器输出图像具有高分辨率;
图像信号处理器,配置为处理所述感测器输出图像以生成第一图像数据;
后处理器,配置为对第一图像数据执行后处理以生成第二图像数据;以及
显示控制器,配置为提供第二图像数据,所述显示是基于第二图像数据生成的。
18.如权利要求17所述的设备,其中所述应用处理器还包括:
存储设备,配置为临时存储第一图像数据并且将第一图像数据输出到所述后处理器。
19.如权利要求17所述的设备,其中所述模式控制器包括实时操作***(RTOS)。
20.如权利要求17所述的设备,其中所述移动设备是蜂窝电话、智能电话、数字照相机,平板电脑、或摄像机。
21.如权利要求20所述的设备,其中所述应用处理器通过至少一个输入/输出(I/O)端子耦合到外部显示设备,并且所述应用处理器被配置为将所述图像数据输出到所述外部显示设备。
22.如权利要求20所述的设备,其中所述应用处理器被配置为基于MIPI、ITU-R BT.601、ITU-BT.656、或ITU-R BT.709,与所述照相机图像感测器通信。
23.如权利要求20所述的设备,其中所述捕捉准备信号基于下列信号中的至少一个:用于执行聚焦操作的自动聚焦开始信号、用于执行聚焦操作的外部输入信号、用于执行微笑检测操作的微笑检测信号、以及用于执行面部检测操作的面部检测信号。
24.一种应用处理器,包含:
照相机控制单元,配置为控制图像感测器的操作,所述图像感测器在外部耦合到所述应用处理器,
其中所述照相机控制单元使图像感测器在图像感测器的预览模式中保持第一分辨率作为图像感测器的图像输出分辨率,并且响应于触发图像感测器的捕捉准备模式的捕捉准备信号将图像输出分辨率从第一分辨率改变到第二分辨率,第二分辨率高于第一分辨率。
25.如权利要求24所述的应用处理器,其中所述捕捉准备信号基于下列信号中的至少一个:用于执行聚焦操作的自动聚焦开始信号、用于执行聚焦操作的外部输入信号、用于执行微笑检测操作的微笑检测信号、以及用于执行面部检测操作的面部检测信号。
26.如权利要求24所述的应用处理器,其中在捕捉准备模式中捕捉到感测器输出图像之后,照相机控制单元将图像输出分辨率从第二分辨率改变到第三分辨率,以便将图像感测器的操作模式从捕捉准备模式改变到预览模式,第二分辨率高于第三分辨率。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020110124906A KR101796481B1 (ko) | 2011-11-28 | 2011-11-28 | 저전력 셔터랙 제거 방법, 카메라 모듈 및 이를 구비하는 모바일 기기 |
KR10-2011-0124906 | 2011-11-28 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103139473A true CN103139473A (zh) | 2013-06-05 |
Family
ID=48288058
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2012104955968A Pending CN103139473A (zh) | 2011-11-28 | 2012-11-28 | 消除快门迟滞的方法、照相机模块和具有其的移动设备 |
Country Status (6)
Country | Link |
---|---|
US (1) | US9232125B2 (zh) |
JP (1) | JP2013115816A (zh) |
KR (1) | KR101796481B1 (zh) |
CN (1) | CN103139473A (zh) |
DE (1) | DE102012109616A1 (zh) |
TW (1) | TWI562631B (zh) |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104159021A (zh) * | 2013-05-13 | 2014-11-19 | 索尼公司 | 成像设备、成像方法和程序 |
CN106293589A (zh) * | 2016-08-31 | 2017-01-04 | 宇龙计算机通信科技(深圳)有限公司 | 一种设置预览分辨率的方法、装置及终端 |
CN107592450A (zh) * | 2017-08-30 | 2018-01-16 | 珠海市君天电子科技有限公司 | 一种媒体数据处理方法及装置 |
CN107995451A (zh) * | 2016-10-26 | 2018-05-04 | 北京视联动力国际信息技术有限公司 | 一种视联网视频流的查看方法和装置 |
CN111475086A (zh) * | 2015-06-07 | 2020-07-31 | 苹果公司 | 用于捕获增强型数字图像和与之交互的设备和方法 |
CN108810277B (zh) * | 2018-06-15 | 2021-02-26 | Oppo广东移动通信有限公司 | 拍照预览方法及装置 |
CN112565589A (zh) * | 2020-11-13 | 2021-03-26 | 北京爱芯科技有限公司 | 一种拍照预览方法、装置、存储介质和电子设备 |
WO2022095878A1 (zh) * | 2020-11-04 | 2022-05-12 | 维沃移动通信(杭州)有限公司 | 拍摄方法、装置、电子设备及可读存储介质 |
US11740785B2 (en) | 2015-08-10 | 2023-08-29 | Apple Inc. | Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback |
CN116916148A (zh) * | 2023-05-15 | 2023-10-20 | 荣耀终端有限公司 | 一种图像处理方法及电子设备 |
US11947724B2 (en) | 2012-05-09 | 2024-04-02 | Apple Inc. | Device, method, and graphical user interface for providing tactile feedback for operations performed in a user interface |
WO2024087183A1 (en) * | 2022-10-28 | 2024-05-02 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Imaging device, imaging device control method, and computer program product |
US11977726B2 (en) | 2015-03-08 | 2024-05-07 | Apple Inc. | Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object |
Families Citing this family (53)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9417754B2 (en) | 2011-08-05 | 2016-08-16 | P4tents1, LLC | User interface system, method, and computer program product |
WO2013169865A2 (en) | 2012-05-09 | 2013-11-14 | Yknots Industries Llc | Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input |
CN109298789B (zh) | 2012-05-09 | 2021-12-31 | 苹果公司 | 用于针对激活状态提供反馈的设备、方法和图形用户界面 |
WO2013169849A2 (en) | 2012-05-09 | 2013-11-14 | Industries Llc Yknots | Device, method, and graphical user interface for displaying user interface objects corresponding to an application |
CN104487928B (zh) | 2012-05-09 | 2018-07-06 | 苹果公司 | 用于响应于手势而在显示状态之间进行过渡的设备、方法和图形用户界面 |
WO2013169851A2 (en) | 2012-05-09 | 2013-11-14 | Yknots Industries Llc | Device, method, and graphical user interface for facilitating user interaction with controls in a user interface |
WO2013169843A1 (en) | 2012-05-09 | 2013-11-14 | Yknots Industries Llc | Device, method, and graphical user interface for manipulating framed graphical objects |
EP3410287B1 (en) | 2012-05-09 | 2022-08-17 | Apple Inc. | Device, method, and graphical user interface for selecting user interface objects |
EP2847657B1 (en) | 2012-05-09 | 2016-08-10 | Apple Inc. | Device, method, and graphical user interface for displaying additional information in response to a user contact |
WO2013169845A1 (en) | 2012-05-09 | 2013-11-14 | Yknots Industries Llc | Device, method, and graphical user interface for scrolling nested regions |
EP3264252B1 (en) | 2012-05-09 | 2019-11-27 | Apple Inc. | Device, method, and graphical user interface for performing an operation in accordance with a selected mode of operation |
WO2013169875A2 (en) | 2012-05-09 | 2013-11-14 | Yknots Industries Llc | Device, method, and graphical user interface for displaying content associated with a corresponding affordance |
WO2013169842A2 (en) | 2012-05-09 | 2013-11-14 | Yknots Industries Llc | Device, method, and graphical user interface for selecting object within a group of objects |
EP3564806B1 (en) | 2012-12-29 | 2024-02-21 | Apple Inc. | Device, method and graphical user interface for determining whether to scroll or select contents |
KR101958517B1 (ko) | 2012-12-29 | 2019-03-14 | 애플 인크. | 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스 |
WO2014105277A2 (en) | 2012-12-29 | 2014-07-03 | Yknots Industries Llc | Device, method, and graphical user interface for moving a cursor according to a change in an appearance of a control icon with simulated three-dimensional characteristics |
CN109375853A (zh) | 2012-12-29 | 2019-02-22 | 苹果公司 | 对用户界面分级结构导航的设备、方法和图形用户界面 |
WO2014105279A1 (en) | 2012-12-29 | 2014-07-03 | Yknots Industries Llc | Device, method, and graphical user interface for switching between user interfaces |
WO2014105275A1 (en) | 2012-12-29 | 2014-07-03 | Yknots Industries Llc | Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture |
JP5765590B2 (ja) * | 2013-03-15 | 2015-08-19 | カシオ計算機株式会社 | 撮像装置、表示方法及びプログラム |
KR102146854B1 (ko) * | 2013-12-30 | 2020-08-21 | 삼성전자주식회사 | 촬영 장치 및 이의 제어 방법 |
KR102128468B1 (ko) | 2014-02-19 | 2020-06-30 | 삼성전자주식회사 | 복수의 이미지 신호 프로세서들을 포함하는 이미지 처리 장치 및 이미지 처리 방법 |
CN110688081B (zh) * | 2014-04-28 | 2024-05-17 | 华为终端有限公司 | 一种在屏幕上显示数据的方法及显示控制装置 |
KR20160049632A (ko) * | 2014-10-28 | 2016-05-10 | 삼성전자주식회사 | 렌즈를 인식하는 전자 장치 및 동작 방법 |
US9632664B2 (en) | 2015-03-08 | 2017-04-25 | Apple Inc. | Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback |
US9645732B2 (en) | 2015-03-08 | 2017-05-09 | Apple Inc. | Devices, methods, and graphical user interfaces for displaying and using menus |
US10048757B2 (en) | 2015-03-08 | 2018-08-14 | Apple Inc. | Devices and methods for controlling media presentation |
US9990107B2 (en) | 2015-03-08 | 2018-06-05 | Apple Inc. | Devices, methods, and graphical user interfaces for displaying and using menus |
US9639184B2 (en) | 2015-03-19 | 2017-05-02 | Apple Inc. | Touch input cursor manipulation |
US9785305B2 (en) | 2015-03-19 | 2017-10-10 | Apple Inc. | Touch input cursor manipulation |
US20170045981A1 (en) | 2015-08-10 | 2017-02-16 | Apple Inc. | Devices and Methods for Processing Touch Inputs Based on Their Intensities |
US10152208B2 (en) | 2015-04-01 | 2018-12-11 | Apple Inc. | Devices and methods for processing touch inputs based on their intensities |
US10200598B2 (en) | 2015-06-07 | 2019-02-05 | Apple Inc. | Devices and methods for capturing and interacting with enhanced digital images |
US9674426B2 (en) | 2015-06-07 | 2017-06-06 | Apple Inc. | Devices and methods for capturing and interacting with enhanced digital images |
US9830048B2 (en) | 2015-06-07 | 2017-11-28 | Apple Inc. | Devices and methods for processing touch inputs with instructions in a web page |
US10346030B2 (en) | 2015-06-07 | 2019-07-09 | Apple Inc. | Devices and methods for navigating between user interfaces |
US9891811B2 (en) | 2015-06-07 | 2018-02-13 | Apple Inc. | Devices and methods for navigating between user interfaces |
US10248308B2 (en) | 2015-08-10 | 2019-04-02 | Apple Inc. | Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures |
US10235035B2 (en) | 2015-08-10 | 2019-03-19 | Apple Inc. | Devices, methods, and graphical user interfaces for content navigation and manipulation |
US10416800B2 (en) | 2015-08-10 | 2019-09-17 | Apple Inc. | Devices, methods, and graphical user interfaces for adjusting user interface objects |
JP2017158084A (ja) * | 2016-03-03 | 2017-09-07 | ソニー株式会社 | 画像処理装置、画像処理方法、コンピュータプログラム及び電子機器 |
JP6722044B2 (ja) * | 2016-05-27 | 2020-07-15 | ソニーセミコンダクタソリューションズ株式会社 | 処理装置、画像センサ、およびシステム |
US10757377B2 (en) | 2016-06-01 | 2020-08-25 | Pixart Imaging Inc. | Surveillance system and operation method thereof |
TW201743241A (zh) * | 2016-06-01 | 2017-12-16 | 原相科技股份有限公司 | 可攜式電子裝置及其運作方法 |
JP2018160799A (ja) * | 2017-03-23 | 2018-10-11 | ソニーセミコンダクタソリューションズ株式会社 | 制御装置、制御方法、プログラム、及び、電子機器システム |
WO2019233424A1 (en) * | 2018-06-04 | 2019-12-12 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Storage medium, electronic device and image processing method |
US10917582B2 (en) | 2019-01-04 | 2021-02-09 | Gopro, Inc. | Reducing power consumption for enhanced zero shutter lag |
KR20210070528A (ko) | 2019-12-05 | 2021-06-15 | 삼성전자주식회사 | 광학적 객체 인식을 이용한 반셔터 기능 수행 방법 및 이를 이용한 영상 촬영 방법 |
US11223762B2 (en) | 2019-12-06 | 2022-01-11 | Samsung Electronics Co., Ltd. | Device and method for processing high-resolution image |
KR20210090476A (ko) * | 2020-01-10 | 2021-07-20 | 삼성전자주식회사 | 단일 카메라로 줌 시나리오에서 화질 향상 방법과 이를 포함하는 전자장치 |
KR20210108037A (ko) * | 2020-02-25 | 2021-09-02 | 삼성전자주식회사 | 카메라 프리뷰를 제공하는 전자 장치 및 그 동작 방법 |
TWM600051U (zh) * | 2020-04-15 | 2020-08-11 | 聯詠科技股份有限公司 | 影像裝置及其影像處理積體電路 |
KR20220143406A (ko) * | 2021-04-16 | 2022-10-25 | 삼성전자주식회사 | 전자 장치 및 전자 장치의 이미지 촬영 방법 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003125246A (ja) * | 2001-10-12 | 2003-04-25 | Minolta Co Ltd | 撮像印刷システム、デジタルカメラおよびプリンタ |
CN1501695A (zh) * | 2002-11-18 | 2004-06-02 | 矽峰光电科技股份有限公司 | 一种数码相机成像中内在延迟的修正方法 |
US20040212678A1 (en) * | 2003-04-25 | 2004-10-28 | Cooper Peter David | Low power motion detection system |
CN101163221A (zh) * | 2006-10-09 | 2008-04-16 | 三星电子株式会社 | 录制运动图像的同时拍摄静止图像的方法和设备 |
JP2008090059A (ja) * | 2006-10-03 | 2008-04-17 | Samsung Techwin Co Ltd | 撮像装置およびそのオートフォーカス制御方法 |
JP2009010776A (ja) * | 2007-06-28 | 2009-01-15 | Sony Corp | 撮像装置、撮影制御方法及びプログラム |
JP2009302573A (ja) * | 2009-09-24 | 2009-12-24 | Sony Corp | 固体撮像素子 |
US20100177204A1 (en) * | 2007-06-04 | 2010-07-15 | Shinichi Tsuchiya | Mobile terminal, control method of same, control program of same, and computer-readable storage medium storing the control program |
US20100295966A1 (en) * | 2009-05-19 | 2010-11-25 | John Furlan | Digital video camera with high resolution imaging system |
US20100321530A1 (en) * | 2009-06-18 | 2010-12-23 | Samsung Electronics Co., Ltd. | Apparatus and method for reducing shutter lag of a digital camera |
JP2011234360A (ja) * | 2010-04-23 | 2011-11-17 | Alpha Imaging Technology Corp | シャッターラグを回避する画像キャプチャモジュール及び画像キャプチャ方法 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030189647A1 (en) * | 2002-04-05 | 2003-10-09 | Kang Beng Hong Alex | Method of taking pictures |
JP2005159596A (ja) * | 2003-11-25 | 2005-06-16 | Mega Chips Corp | デジタルカメラ |
US7304681B2 (en) | 2004-01-21 | 2007-12-04 | Hewlett-Packard Development Company, L.P. | Method and apparatus for continuous focus and exposure in a digital imaging device |
KR100650871B1 (ko) | 2004-03-04 | 2006-11-27 | 주식회사 팬택 | 단말기의 데이터 처리 장치 및 그 방법 |
KR100602705B1 (ko) | 2004-04-20 | 2006-07-20 | 주식회사 팬택앤큐리텔 | 카메라 기능을 갖는 단말기에 있어서 영상 처리 장치 및방법 |
EP2075696A3 (en) * | 2007-05-10 | 2010-01-27 | Texas Instruments Incorporated | Interrupt- related circuits, systems and processes |
US8724928B2 (en) * | 2009-08-31 | 2014-05-13 | Intellectual Ventures Fund 83 Llc | Using captured high and low resolution images |
KR101106296B1 (ko) | 2009-11-26 | 2012-01-18 | 삼성전자주식회사 | 손떨림 보정 방법 및 이를 적용한 촬영 장치 |
KR101105446B1 (ko) | 2010-05-12 | 2012-01-17 | 한국항공대학교산학협력단 | 검지체계간의 데이터 퓨전을 통한 실시간 통행시간 산정방법 |
KR101701852B1 (ko) * | 2010-12-29 | 2017-02-13 | 엘지전자 주식회사 | 이동단말기 및 그 제어방법 |
US20130021512A1 (en) * | 2011-07-20 | 2013-01-24 | Broadcom Corporation | Framing of Images in an Image Capture Device |
-
2011
- 2011-11-28 KR KR1020110124906A patent/KR101796481B1/ko active IP Right Grant
-
2012
- 2012-08-30 US US13/600,045 patent/US9232125B2/en active Active
- 2012-09-11 JP JP2012199665A patent/JP2013115816A/ja active Pending
- 2012-10-09 TW TW101137194A patent/TWI562631B/zh active
- 2012-10-10 DE DE201210109616 patent/DE102012109616A1/de not_active Withdrawn
- 2012-11-28 CN CN2012104955968A patent/CN103139473A/zh active Pending
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003125246A (ja) * | 2001-10-12 | 2003-04-25 | Minolta Co Ltd | 撮像印刷システム、デジタルカメラおよびプリンタ |
CN1501695A (zh) * | 2002-11-18 | 2004-06-02 | 矽峰光电科技股份有限公司 | 一种数码相机成像中内在延迟的修正方法 |
US20040212678A1 (en) * | 2003-04-25 | 2004-10-28 | Cooper Peter David | Low power motion detection system |
JP2008090059A (ja) * | 2006-10-03 | 2008-04-17 | Samsung Techwin Co Ltd | 撮像装置およびそのオートフォーカス制御方法 |
CN101163221A (zh) * | 2006-10-09 | 2008-04-16 | 三星电子株式会社 | 录制运动图像的同时拍摄静止图像的方法和设备 |
US20100177204A1 (en) * | 2007-06-04 | 2010-07-15 | Shinichi Tsuchiya | Mobile terminal, control method of same, control program of same, and computer-readable storage medium storing the control program |
JP2009010776A (ja) * | 2007-06-28 | 2009-01-15 | Sony Corp | 撮像装置、撮影制御方法及びプログラム |
US20100295966A1 (en) * | 2009-05-19 | 2010-11-25 | John Furlan | Digital video camera with high resolution imaging system |
US20100321530A1 (en) * | 2009-06-18 | 2010-12-23 | Samsung Electronics Co., Ltd. | Apparatus and method for reducing shutter lag of a digital camera |
JP2009302573A (ja) * | 2009-09-24 | 2009-12-24 | Sony Corp | 固体撮像素子 |
JP2011234360A (ja) * | 2010-04-23 | 2011-11-17 | Alpha Imaging Technology Corp | シャッターラグを回避する画像キャプチャモジュール及び画像キャプチャ方法 |
Cited By (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11947724B2 (en) | 2012-05-09 | 2024-04-02 | Apple Inc. | Device, method, and graphical user interface for providing tactile feedback for operations performed in a user interface |
CN104159021B (zh) * | 2013-05-13 | 2019-08-06 | 索尼公司 | 成像设备、成像方法和计算机可读介质 |
CN104159021A (zh) * | 2013-05-13 | 2014-11-19 | 索尼公司 | 成像设备、成像方法和程序 |
US11977726B2 (en) | 2015-03-08 | 2024-05-07 | Apple Inc. | Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object |
US11835985B2 (en) | 2015-06-07 | 2023-12-05 | Apple Inc. | Devices and methods for capturing and interacting with enhanced digital images |
CN111475086A (zh) * | 2015-06-07 | 2020-07-31 | 苹果公司 | 用于捕获增强型数字图像和与之交互的设备和方法 |
US11681429B2 (en) | 2015-06-07 | 2023-06-20 | Apple Inc. | Devices and methods for capturing and interacting with enhanced digital images |
CN111475086B (zh) * | 2015-06-07 | 2023-09-12 | 苹果公司 | 用于捕获增强型数字图像和与之交互的设备和方法 |
US11740785B2 (en) | 2015-08-10 | 2023-08-29 | Apple Inc. | Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback |
CN106293589A (zh) * | 2016-08-31 | 2017-01-04 | 宇龙计算机通信科技(深圳)有限公司 | 一种设置预览分辨率的方法、装置及终端 |
WO2018040174A1 (zh) * | 2016-08-31 | 2018-03-08 | 宇龙计算机通信科技(深圳)有限公司 | 一种设置预览分辨率的方法、装置及终端 |
CN107995451A (zh) * | 2016-10-26 | 2018-05-04 | 北京视联动力国际信息技术有限公司 | 一种视联网视频流的查看方法和装置 |
CN107592450A (zh) * | 2017-08-30 | 2018-01-16 | 珠海市君天电子科技有限公司 | 一种媒体数据处理方法及装置 |
CN107592450B (zh) * | 2017-08-30 | 2021-07-20 | 珠海豹趣科技有限公司 | 一种媒体数据处理方法及装置 |
CN108810277B (zh) * | 2018-06-15 | 2021-02-26 | Oppo广东移动通信有限公司 | 拍照预览方法及装置 |
WO2022095878A1 (zh) * | 2020-11-04 | 2022-05-12 | 维沃移动通信(杭州)有限公司 | 拍摄方法、装置、电子设备及可读存储介质 |
CN112565589A (zh) * | 2020-11-13 | 2021-03-26 | 北京爱芯科技有限公司 | 一种拍照预览方法、装置、存储介质和电子设备 |
WO2024087183A1 (en) * | 2022-10-28 | 2024-05-02 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Imaging device, imaging device control method, and computer program product |
CN116916148B (zh) * | 2023-05-15 | 2024-04-16 | 荣耀终端有限公司 | 一种图像处理方法、电子设备及可读存储介质 |
CN116916148A (zh) * | 2023-05-15 | 2023-10-20 | 荣耀终端有限公司 | 一种图像处理方法及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
KR20130058910A (ko) | 2013-06-05 |
US9232125B2 (en) | 2016-01-05 |
KR101796481B1 (ko) | 2017-12-04 |
TW201322750A (zh) | 2013-06-01 |
US20130135499A1 (en) | 2013-05-30 |
JP2013115816A (ja) | 2013-06-10 |
DE102012109616A1 (de) | 2013-05-29 |
TWI562631B (en) | 2016-12-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103139473A (zh) | 消除快门迟滞的方法、照相机模块和具有其的移动设备 | |
US20130201360A1 (en) | Method of changing an operation mode of a camera image sensor | |
KR20150098094A (ko) | 복수의 이미지 신호 프로세서들을 포함하는 이미지 처리 장치 및 이미지 처리 방법 | |
US10306196B2 (en) | Pixel mixing device and method for controlling operation of same | |
US20130208153A1 (en) | Imaging apparatus | |
CN102984456A (zh) | 移动终端和移动终端拍照的控制方法 | |
US20240031706A1 (en) | Imaging element, imaging apparatus, operation method of imaging element, and program | |
WO2019054031A1 (ja) | 撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラム | |
US20240080410A1 (en) | Imaging apparatus, image data processing method of imaging apparatus, and program | |
JP2023169254A (ja) | 撮像素子、撮像素子の作動方法、プログラム、及び撮像システム | |
US11758292B2 (en) | Imaging element, imaging apparatus, imaging method, and program | |
US20190215470A1 (en) | Imaging apparatus, operation method of imaging apparatus, and operation program of imaging apparatus | |
US11910115B2 (en) | Imaging element, imaging apparatus, operation method of imaging element, and program | |
US10742876B2 (en) | Imaging device, imaging method, and imaging program | |
CN114298889A (zh) | 图像处理电路和图像处理方法 | |
US10939056B2 (en) | Imaging apparatus, imaging method, imaging program | |
CN109792494B (zh) | 摄像装置、静态图像摄像方法及记录介质 | |
JP7474342B2 (ja) | 撮像装置、電力制御方法、及び電力制御プログラム | |
US20220141420A1 (en) | Imaging element, imaging apparatus, operation method of imaging element, and program | |
CN103037162A (zh) | 一种零延时照相***和方法 | |
CN114365477A (zh) | 摄像装置、摄像方法及摄像程序 | |
KR20050098130A (ko) | 고용량 화상 데이터 처리 기능을 가지는 무선통신 단말기및 그 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20130605 |
|
RJ01 | Rejection of invention patent application after publication |