CN101521750A - 摄像设备和摄像设备控制方法 - Google Patents

摄像设备和摄像设备控制方法 Download PDF

Info

Publication number
CN101521750A
CN101521750A CN200910118643A CN200910118643A CN101521750A CN 101521750 A CN101521750 A CN 101521750A CN 200910118643 A CN200910118643 A CN 200910118643A CN 200910118643 A CN200910118643 A CN 200910118643A CN 101521750 A CN101521750 A CN 101521750A
Authority
CN
China
Prior art keywords
pattern
signal
accumulation period
image
duration
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN200910118643A
Other languages
English (en)
Other versions
CN101521750B (zh
Inventor
石田俊树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN101521750A publication Critical patent/CN101521750A/zh
Application granted granted Critical
Publication of CN101521750B publication Critical patent/CN101521750B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144—Devices controlled by radiation
    • H01L27/146—Imager structures
    • H01L27/14683—Processes or apparatus peculiar to the manufacture or treatment of these devices or parts thereof
    • H01L27/14685—Process for coatings or optical elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/42—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by switching between different modes of operation using different resolutions or aspect ratios, e.g. switching between interlaced and non-interlaced mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N3/00—Scanning details of television systems; Combination thereof with generation of supply voltages
    • H04N3/10—Scanning details of television systems; Combination thereof with generation of supply voltages by means not exclusively optical-mechanical
    • H04N3/14—Scanning details of television systems; Combination thereof with generation of supply voltages by means not exclusively optical-mechanical by means of electrically scanned solid-state devices
    • H04N3/15—Scanning details of television systems; Combination thereof with generation of supply voltages by means not exclusively optical-mechanical by means of electrically scanned solid-state devices for picture signal generation
    • H04N3/155—Control of the image-sensor operation, e.g. image processing within the image-sensor
    • H04N3/1562—Control of the image-sensor operation, e.g. image processing within the image-sensor for selective scanning, e.g. windowing, zooming

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Power Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • Electromagnetism (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Hardware Design (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Studio Devices (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

本发明涉及一种摄像设备和摄像设备控制方法。***控制单元(107)在将模式从第一模式切换至第二模式时，执行以下控制。当第一累积期间短于第一读出期间时，***控制单元(107)控制图像传感器驱动单元(109)和读出电路，从而使得第一读出期间和第二读出期间的总和在2帧期间内。当第一累积期间长于第一读出期间时，***控制单元(107)控制图像传感器驱动单元(109)和读出电路，从而使得第二累积期间和第二读出期间的总和在2帧期间内。

Description

摄像设备和摄像设备控制方法
技术领域
本发明涉及一种摄像设备和摄像设备控制方法。
背景技术
如数字照相机和数字摄像机等的一些摄像设备具有进行运动图像拍摄的功能和进行静止图像拍摄的功能这两者。在摄像设备中，如CCD传感器或CMOS传感器等的图像传感器包括像素阵列和用于从像素阵列读出信号的读出电路，其中，在像素阵列中，沿行方向和列方向排列包括光电转换单元的多个像素。
根据在日本特开2001-352483号公报中公开的技术，摄像设备在连续的帧期间之间将读出电路驱动方法从适合于运动图像拍摄的第一驱动方法切换至适合于静止图像拍摄的第二驱动方法。根据第一驱动方法，驱动读出电路，从而以适合于运动图像拍摄的低像素密度从像素阵列读出信号。根据第二驱动方法，驱动读出电路，从而以适合于静止图像拍摄的高像素密度从像素阵列读出信号。根据日本特开2001-352483号公报，可以实现运动图像拍摄和静止图像拍摄之间的连续拍摄。
日本特开2001-352483号公报中的技术是以在静止图像拍摄期间未进行运动图像拍摄为前提。
然而，一些摄像设备提供了仅进行运动图像拍摄的模式(下文中称为第一模式)以及进行静止图像和运动图像的并行拍摄的模式(下文中称为第二模式)。
在第一模式下，摄像设备进行适合于运动图像拍摄的操作。更具体地，摄像设备驱动读出电路，使得以通过相加、间取(decimation)、提取等而减少的像素密度从像素阵列读出信号，从而在比适合于运动图像拍摄的帧期间短的读出期间内读出信号。
在第二模式下，摄像设备进行使静止图像拍摄优先的操作。更具体地，摄像设备驱动读出电路以在比适合于运动图像拍摄的帧期间长的读出期间内读出信号，从而以适合于静止图像拍摄的高像素密度从像素阵列读出信号。此外，摄像设备控制像素阵列的各个像素以在比适合于运动图像拍摄的累积期间短的累积期间内累积信号，从而使得像素阵列的各个像素以适合于静止图像拍摄的快门速度即累积期间累积信号。在静止图像拍摄时，为了防止在被摄体移动时图像的模糊，需要将快门速度即累积期间设置为短于适合于运动图像拍摄的累积期间(在第一模式下的累积期间)。
在摄像设备中，有时在连续的帧之间将摄像设备的模式从第一模式切换至第二模式。在这种情况下，如果摄像设备维持适合于运动图像拍摄的帧频，则在第二模式下的读出期间变得长于1帧期间，并且获得的运动图像可能出现掉帧(drop frame)。
例如，如图6所示，摄像设备不管模式如何都保持帧期间FT1～FT9的长度恒定，以实现适合于运动图像拍摄的帧频。摄像设备在帧期间FT1和FT2之间从第一模式切换至第二模式。摄像设备在帧期间FT2和FT3之间从第二模式切换至第一模式。摄像设备在帧期间FT3和FT4之间从第一模式切换至第二模式。摄像设备在帧期间FT4和FT5之间从第二模式切换至第一模式。
在图6中，VD表示帧同步信号(脉冲)，并且相对于NTSC标准信号以1/60秒的间隔而生成。读出操作、运动图像生成操作和静止图像生成操作在与帧同步信号VD同步的定时开始。
A、C、E、F、G、H和I表示运动图像的信号，并且B和D表示静止图像的信号。将光电转换单元在第一模式下执行累积操作的第一累积期间Tsa_A、Tsa_C、Tsa_E、Tsa_F、Tsa_G、Tsa_H和Tsa_I固定为1/60秒。光电转换单元在第二模式下执行累积操作的第二累积期间Tsa_B和Tsa_D比第一累积期间短并且短于1/60秒。
根据读出时钟速率和输出信道数量，读出电路在第一模式下执行读出操作的第一读出期间Tsr_A、Tsr_F、Tsr_G、Tsr_H和Tsr_I短于1/60秒。第一读出期间比各个帧期间FT1～FT9都短。读出电路在第二模式下执行读出操作的第二读出期间Tsr_B和Tsr_D比帧期间FT1～FT9长。由于第二读出期间Tsr_B和Tsr_D比帧期间FT1～FT9长，因此读出电路在与帧同步信号VD同步的定时不能开始对信号C和E进行读出操作。
在运动图像生成操作中，信号A、B、D、F、G和H用于生成1帧运动图像的图像信号(Tmv_A、Tmv_B、Tmv_D、Tmv_F、Tmv_G和Tmv_H)。如上所述，读出电路不能进行信号C和E的读出操作，因此不能生成与信号C和E相对应的运动图像的图像信号。结果，与信号C和E相对应的帧中将出现掉帧。
在静止图像生成操作中，信号B和D用于生成1帧静止图像的图像信号。
发明内容
本发明的首要目的是即使在进行静止图像和运动图像的并行拍摄时，也能获得高分辨率的静止图像并防止所获得的运动图像出现掉帧。
本发明的第二目的是即使在前一帧期间内开始的累积期间在下一帧期间中完成时也能获得适当曝光的运动图像并且防止所获得的运动图像出现掉帧。
根据本发明的第一方面，提供一种摄像设备，包括：像素阵列，在所述像素阵列中，沿行方向和列方向排列各自包括光电转换单元的多个像素；驱动单元，用于驱动所述像素阵列的各个像素的所述光电转换单元，以在第一模式下在第一累积期间内累积信号，并在第二模式下在比所述第一累积期间短的第二累积期间内累积信号；读出单元，用于在比预定的1帧期间短的第一读出期间内从所述像素阵列读出第一图像信号，并在比所述1帧期间长的第二读出期间内从所述像素阵列读出第二图像信号；以及控制单元，用于当将模式从所述第一模式切换至所述第二模式时，控制所述读出单元以在读出所述第一图像信号的帧期间内开始所述第二图像信号的读出操作。
根据本发明的第二方面，提供一种摄像设备，包括：像素阵列，在所述像素阵列中，沿行方向和列方向排列各自包括光电转换单元的多个像素；驱动单元，用于驱动所述像素阵列的各个像素的所述光电转换单元，以在累积期间内累积信号；读出单元，用于从所述像素阵列读出图像信号；控制单元，用于当在第一帧期间内开始的图像信号的第一累积期间在紧接所述第一帧期间的第二帧期间中完成时，控制所述驱动单元以使在所述第一累积期间完成之后开始的图像信号的第二累积期间比所述第一帧期间短，从而使得所述第二累积期间在所述第二帧期间内完成；以及放大单元，用于根据累积期间的长度放大所述图像信号以获得适当曝光的图像。
根据本发明的第三方面，提供一种摄像设备的控制方法，所述摄像设备具有沿行方向和列方向排列各自包括光电转换单元的多个像素的像素阵列，所述控制方法包括以下步骤：驱动步骤，用于驱动所述像素阵列的各个像素的所述光电转换单元，以在第一模式下在第一累积期间内累积信号，并在第二模式下在比所述第一累积期间短的第二累积期间内累积信号；读出步骤，用于在比预定的1帧期间短的第一读出期间内从所述像素阵列读出第一图像信号，并在比所述1帧期间长的第二读出期间内从所述像素阵列读出第二图像信号；以及控制步骤，用于在将模式从所述第一模式切换至所述第二模式时，控制在所述读出步骤中的操作以在读出所述第一图像信号的帧期间内开始所述第二图像信号的读出操作。
根据本发明的第四方面，提供一种摄像设备的控制方法，所述摄像设备包括：像素阵列，在所述像素阵列中，沿行方向和列方向排列各自包括光电转换单元的多个像素；驱动单元，用于驱动所述像素阵列的各个像素的所述光电转换单元以在累积期间内累积信号；以及读出单元，用于从所述像素阵列读出图像信号，所述控制方法包括以下步骤：控制步骤，用于当在第一帧期间内开始的图像信号的第一累积期间在紧接所述第一帧期间的第二帧期间中完成时，控制所述驱动单元以使在所述第一累积期间完成之后开始的图像信号的第二累积期间比所述第一帧期间短，从而使得所述第二累积期间在所述第二帧期间内完成；以及放大步骤，用于根据累积期间的长度放大所述图像信号以获得适当曝光的图像。
本发明即使在进行静止图像和运动图像的并行拍摄时也能够获得高分辨率的静止图像并防止所获得的运动图像出现掉帧。
本发明即使在前一帧期间内开始的累积期间在下一帧期间中完成时也能够获得适当曝光的运动图像并防止所获得的运动图像出现掉帧。
通过以下参考附图对典型实施例的说明，本发明的其它特征将变得明显。
附图说明
图1是根据本发明第一实施例的摄像设备100的结构的框图；
图2是示出在根据本发明第一实施例的摄像设备100中的累积操作、读出操作、运动图像生成操作和静止图像生成操作的定时的时序图；
图3是示出在本发明第一实施例的变形例中的用于由信号处理单元106进行增益校正操作的增益校正函数的图；
图4是示出在根据本发明第二实施例的摄像设备200中的累积操作、读出操作、运动图像生成操作和静止图像生成操作的定时的时序图；
图5是示出在根据本发明第三实施例的摄像设备300中的累积操作、读出操作、运动图像生成操作和静止图像生成操作的定时的时序图；以及
图6是用于说明本发明要解决的问题的时序图。
具体实施方式
本发明涉及在进行静止图像和运动图像的并行拍摄时具有图像传感器的摄像设备的操作。摄像设备是例如具有并行拍摄功能的数字照相机或数字摄像机。图像传感器是例如CCD图像传感器或CMOS图像传感器。
将参考图1说明根据本发明第一实施例的摄像设备100。图1是根据本发明第一实施例的摄像设备100的结构的框图。
摄像设备100具有第一模式和第二模式。在第一模式下，仅进行运动图像拍摄。在第二模式下，进行静止图像和运动图像的并行拍摄。
透镜101在图像传感器103的摄像面(像素阵列103a)上形成被摄体的光学图像。此时，光圈(iris)102调整从透镜101引导至图像传感器103的光量。
图像传感器103对光学图像进行光电转换以生成图像信号，并将所生成的图像信号输出至A/D转换器104。图像传感器103包括像素阵列103a、读出电路103b和输出电路103c。
在像素阵列103a中，二维地(沿行方向和列方向)排列包括光电转换单元(未示出)的多个像素(未示出)。光电转换单元进行累积操作以在预定的累积期间内累积信号。光电转换单元是例如光电二极管。在第一模式下，光电转换单元在第一累积期间内累积信号。在第二模式下，光电转换单元在比第一累积期间短的第二累积期间内累积信号。
在预定模式下，读出电路103b进行读出操作，以在预定的读出期间内以预定的像素密度从像素阵列读出图像信号。例如，在第一模式下，读出电路103b在比预定的1帧期间短的第一读出期间内以第一像素密度从像素阵列读出第一图像信号。例如，在第二模式下，读出电路103b在比1帧期间长的第二读出期间内以高于第一像素密度的第二像素密度从像素阵列读出第二图像信号。读出电路103b将图像信号提供给输出电路103c。
输出电路103c对图像信号进行放大以将放大后的图像信号输出至后级(A/D转换器104)。
A/D转换器104对从图像传感器103接收到的图像信号(模拟信号)进行A/D转换以生成图像信号(数字信号)，并将转换后的图像信号(第一图像信号和第二图像信号)输出至定时调整单元105。定时调整单元105将图像信号校正为与帧期间同步的定时的信号，并将校正后的图像信号(第一图像信号和第二图像信号)输出至信号处理单元106。
信号处理单元(生成单元)106进行运动图像生成操作，以对第一图像信号进行运动图像信号处理并生成运动图像的图像信号(第一图像信号)。此外，信号处理单元106进行静止图像生成操作，以对第二图像信号进行静止图像信号处理并生成静止图像的图像信号(第二图像信号)。信号处理单元106根据模式执行运动图像生成操作和静止图像生成操作中的至少一个。
例如，信号处理单元106对在第一模式下由读出电路在第一读出期间内读出的1帧的第一图像信号进行放大。通过使用放大后的第一图像信号，信号处理单元106在第一模式下的操作期间生成1帧的第一图像信号。信号处理单元106通过使用在第二模式下由读出电路在第二读出期间读出的1帧的第二图像信号，在第二模式下的操作期间生成1帧的第二图像信号。这样，信号处理单元106执行运动图像生成操作，以对第一图像信号或第二图像信号进行运动图像信号处理并生成运动图像的图像信号(第一图像信号)。
信号处理单元106将所生成的运动图像和/或静止图像的图像信号作为记录/显示图像数据(运动图像数据和/或静止图像数据)而输出。运动图像信号处理包括用于将运动图像的图像信号放大预定增益(放大系数)的处理。静止图像信号处理包括用于将静止图像的图像信号放大预定增益的处理。
光圈电动机110驱动光圈102。光圈驱动电路108驱动光圈电动机110。
***控制单元107通过输入单元(未示出)接收来自用户的指令以指定模式。***控制单元107根据所指定的模式控制各单元。例如，在接受静止/运动图像并行拍摄指令时，***控制单元107判断为指定了第二模式，并将模式从第一模式切换至第二模式。
根据模式，***控制单元107确定光圈102的开口度(opening rate)以及用于由信号处理单元106对运动图像的图像信号进行放大的增益，从而获得具有适当曝光值的图像。***控制单元107生成与所确定的开口度相对应的控制信号，并将其提供给光圈驱动电路108。***控制单元107生成与所确定的增益相对应的控制信号，并将其提供给信号处理单元106。
例如，在将摄像设备的模式从第一模式切换至第二模式然后再将其切换回第一模式时，***控制单元107将光电转换单元在切换回的第一模式下累积信号的期间确定为第三累积期间。***控制单元107确定第三累积期间从而使其比第一累积期间短并且短于1帧期间。第三累积期间还可以比第二累积期间长。***控制单元107生成与所确定的第三累积期间相对应的控制信号，并将其提供给图像传感器驱动电路109以控制该图像传感器驱动电路109。根据所确定的第三累积期间，***控制单元107确定在信号处理单元106对第一图像信号进行放大时使用的增益(放大系数)，从而获得具有适当曝光值的图像。***控制单元107生成与所确定的增益相对应的控制信号，并将其提供给信号处理单元106以控制该信号处理单元106。
根据模式，***控制单元107确定光电转换单元进行累积操作的累积期间以及读出电路103b进行读出操作的读出期间。***控制单元107生成与所确定的累积期间和读出期间相对应的控制信号，并将它们提供给图像传感器驱动电路109。
例如，当将模式从第一模式切换至第二模式时，***控制单元107控制图像传感器驱动电路109和读出电路，以在摄像设备在第一模式下工作的帧期间内开始第二读出期间。
更具体地，在将模式从第一模式切换至第二模式时，***控制单元107执行以下控制。当第二累积期间等于或短于第一读出期间时，***控制单元107控制图像传感器驱动电路109和读出电路，从而使第一读出期间和第二读出期间的总和在2帧期间内。当第二累积期间长于第一读出期间时，***控制单元107控制图像传感器驱动电路109和读出电路，从而使第二累积期间和第二读出期间的总和在2帧期间内。
可选地，在将模式从第一模式切换至第二模式然后再将其切换回第一模式时，***控制单元107执行以下控制。当第二累积期间等于或短于第一读出期间时，***控制单元107控制图像传感器驱动电路109和读出电路，从而使第一读出期间、第二读出期间和下一第一读出期间的总和在3帧期间内。当第二累积期间长于第一读出期间时，***控制单元107控制图像传感器驱动电路109和读出电路，从而使第二累积期间、第二读出期间和下一第一读出期间的总和在3帧期间内。
根据所提供的控制信号，图像传感器驱动电路109控制光电转换单元的累积操作和读出电路103b的读出操作。
例如，图像传感器驱动电路109驱动像素阵列103a的各个像素，从而使光电转换单元在第一模式下在第一累积期间内累积信号，并在第二模式下在比第一累积期间短的第二累积期间内累积信号。这样，图像传感器驱动电路109控制光电转换单元的累积操作。另外，图像传感器驱动电路109控制读出电路，以在第一模式下在比1帧期间短的第一读出期间内以第一像素密度从像素阵列读出第一图像信号。图像传感器驱动电路109控制读出电路，以在第二模式下在比1帧期间长的第二读出期间内以高于第一像素密度的第二像素密度从像素阵列读出第二图像信号。
将参考图2说明摄像设备100的操作。图2是示出摄像设备100中的累积操作、读出操作、运动图像生成操作和静止图像生成操作的定时的时序图。
如图2所示，不管模式如何，摄像设备100都保持帧期间FT1～FT9的长度恒定以实现适合于运动图像拍摄的帧频。摄像设备100在帧期间FT1和FT102之间从第一模式切换至第二模式。在第一模式下，仅进行运动图像拍摄。在第二模式下，进行静止图像和运动图像的并行拍摄。摄像设备100在帧期间FT102和FT103之间从第二模式切换至第一模式。换言之，摄像设备100在帧期间FT1～FT103之间先从第一模式切换至第二模式然后再切换回第一模式。摄像设备100在帧期间FT103和FT104之间从第一模式切换至第二模式。摄像设备100在帧期间FT104和FT105之间从第二模式切换至第一模式。换言之，摄像设备100在帧期间FT103～FT105之间先从第一模式切换至第二模式然后再切换回第一模式。
在图2中，VD表示帧同步信号(脉冲)，并且相对于NTSC标准信号以1/60秒(Tvcyc)的间隔而生成。读出操作、运动图像生成操作和静止图像生成操作在与帧同步信号VD同步的定时开始。
A、C、E、F、G、H和I表示运动图像的图像信号(第一图像信号)，并且B和D表示静止图像的图像信号(第二图像信号)。
图像传感器103执行狭缝卷动(slit rolling)快门操作。更具体地，图像传感器103进行以下操作。
像素阵列中第1行～第N(N为整数)行上的像素的光电转换单元顺序开始信号累积操作。在图2中示出的“累积操作(第一行)”表示第1行上的像素的光电转换单元进行累积操作的累积期间，该累积操作是各行上的像素的光电转换单元的代表累积操作。在第1行上的像素的光电转换单元的累积操作的开始定时之后，剩余的第2行～第N行上的像素的光电转换单元的累积操作顺序开始。在具有与第一行的长度相同的长度的累积期间内，并行执行多个行上的像素的光电转换单元的累积操作(参见图5)。
读出电路按如下方式从第1行～第N行上的像素顺序读出信号，即在比各行上的像素的光电转换单元的累积操作的开始定时晚预定累积期间的定时处从各行上的像素读出信号(参见图5)。在图2中示出的“读出操作(全部行)”表示从当从第1行上的像素读出信号时开始直到从最末行(第N行)上的像素读出信号为止的读出期间。即，“读出操作(全部行)”表示读出电路进行读出操作的读出期间。
信号处理单元106对通过A/D转换器104和定时调整单元105从图像传感器103接收到的图像信号执行信号处理。更具体地，信号处理单元106进行以下处理。
信号处理单元106执行运动图像生成操作，以对第一图像信号(或第二图像信号)进行运动图像信号处理并生成运动图像的图像信号。“运动图像生成操作”表示信号处理单元106进行运动图像生成操作的期间。
信号处理单元106执行静止图像生成操作，以对第二图像信号进行静止图像信号处理并生成静止图像的图像信号。“静止图像生成操作”表示信号处理单元106进行静止图像生成操作的期间。
在1/60秒的第一累积期间Tsa_A内，在各行上的各个像素的光电转换单元中累积信号(第一图像信号)A。在第一读出期间Tsr_A内从像素阵列读出信号A，并在从与帧期间同步的定时开始的期间Tmv_A内将信号A作为运动图像数据而输出。
信号(第二图像信号)B是静止/运动图像并行拍摄帧的信号。在小于1/60秒的第二累积期间Tsa_B内，在各行上的各个像素的光电转换单元中累积信号B。信号B的第二累积期间紧接在信号A的第一累积期间结束之后开始。尽管累积期间根据拍摄模式而变化，但将本实施例中的第二累积期间Tsa_B设置为比与高于运动图像的快门速度的快门速度相对应的1/60秒短。紧接在信号B的第二累积期间结束和信号A的第一读出期间结束之后，信号B的第二读出期间开始。由于从像素阵列的全部像素读出信号，因此像素数越多(像素阵列中的行数越多)信号B的第二读出期间Tsr_B越长。在第二读出期间Tsr_B内读出信号B，在从与帧期间同步的定时开始的期间Tmv_B内将信号B作为运动图像数据而输出，并在期间Tst_B内将信号B作为静止图像数据而输出。
与信号A类似，在第一累积期间Tsa_C内，在各行上的各个像素的光电转换单元中累积信号(第一图像信号)C。在第一读出期间Tsr_C内从像素阵列读出信号C，并在从与帧期间同步的定时开始的期间Tmv_C内将信号C作为运动图像数据而输出。
与信号B类似，信号(第二图像信号)D是静止/运动图像并行拍摄帧的信号。在第二累积期间Tsa_D内，在各行上的各个像素的光电转换单元中累积信号D。信号D的第二累积期间紧接在信号C的第一累积期间结束之后开始。在第二读出期间Tsr_D内读出信号D，并在从与帧期间同步的定时开始的期间Tmv_D内将信号D作为运动图像数据而输出。
根据静止图像拍摄条件，信号D的第二累积期间的长度还可不同于信号B的第二累积期间的长度。
信号C的第一读出期间Tsr_C与信号D的第二读出期间Tsr_D的总和以及信号D的第一累积期间Tsa_D与信号D的第二读出期间Tsr_D的总和中的至少一个长于2帧期间。信号D的第二读出期间Tsr_D结束时的定时落入进行了信号(第一图像信号)E的读出操作的帧期间FT106内。由于该原因，信号E的第一读出期间Tsr_E在从帧期间FT106的开始定时而延迟的定时开始。据此，信号E的第一累积期间Tsa_E结束时的定时也从帧期间FT106的开始定时而延迟。
信号(第一图像信号)F的第一读出期间Tsr_F的开始定时再次与帧期间FT107的开始定时同步。如果信号F的第一读出期间的开始定时保持从帧期间的开始定时延迟，则在稍后***静止/运动图像并行拍摄帧的信号时，与信号B和D不同，第二读出期间的开始定时在帧期间的开始定时之前不能偏移。相反，通过紧接在对信号的读出期间的开始定时延迟之后再次使信号F的读出期间的开始定时与帧期间的开始定时同步，即使具有大量像素的静止/运动图像并行拍摄帧的读出期间即刻开始，也可防止掉帧。
信号F的第三累积期间Tsa_F在信号E的第一累积期间Tsa_E结束之后开始，并且在帧期间FT106的结束定时之前结束。因此，信号F的第三累积期间Tsa_F变得短于1/60秒。在这种情况下，由于信号F的累积期间是比第一累积期间短且比1帧期间Tvcyc短的第三累积期间，因此信号处理单元106增加(校正)用于放大信号F的增益。在从与帧期间同步的定时开始的期间Tmv_F内将信号F作为运动图像数据而输出。
在各自包括***了静止/运动图像并行拍摄帧的多个帧期间的预定期间Tcyc_ms1和Tcyc_ms2内，驱动与帧期间不同步。然而，在这些期间结束之后，驱动再次与帧期间同步。
如上所述，根据第一实施例，即使在进行静止图像和运动图像的并行拍摄时，也可以获得高分辨率静止图像，并且可以防止所获得的运动图像出现掉帧。即，当进行静止图像和运动图像的并行拍摄时，可以实现高分辨率的静止图像以及运动图像的帧频保持这两者。
应当注意，***控制单元107还可存储如图3所示的增益校正函数。当第一模式下的累积期间从第一累积期间～第三累积期间变短时，***控制单元107使用如图3所示的增益校正函数，并确定增加在信号处理单元106放大信号F时使用的增益。信号处理单元106还可使用所确定的增益执行增益校正。
根据图3所示的增益校正函数，当信号的累积期间是与帧期间FT1～FT9的长度相等的FT时，用于放大信号的增益值是A_FT。根据图3所示的增益校正函数，与信号E的累积期间Tsa_E相对应的增益值是A_E，并且与信号F的累积期间Tsa_F相对应的增益值是A_F。***控制单元107还可以通过直接参考图3所示的增益校正函数确定增益值，或者可以根据信号E的累积期间Tsa_E和信号F的累积期间Tsa_F之间的差，通过参考图3所示的增益校正函数，确定信号F的增益值A_F。即，设K(负值)为图3所示的校正函数的斜率，则***控制单元107还可以通过如下等式来确定增益值A_F：
A_F＝A_E-K×(Tsa_E-Tsa_F)      ...(1)
信号处理单元106还可以自适应地控制是否通过使用通过增益进行了校正的图像信号来生成运动图像数据。
将参考图4说明根据本发明第二实施例的摄像设备200。图4是示出摄像设备200中的累积操作、读出操作、运动图像生成操作和静止图像生成操作的定时的时序图。将主要说明与第一实施例中的操作不同的操作。
如图4所示，在摄像设备200中，信号F、G和H的第四累积期间Tsa_F、Tsa_G和Tsa_H的结束定时从帧期间的开始定时起延迟了的定时开始逐渐前移。第四累积期间Tsa_F、Tsa_G和Tsa_H短于1/60秒。
据此，信号F和G的第一读出期间Tsr_F和Tsr_G的开始定时也从帧期间的开始定时起延迟了的定时开始逐渐前移。信号H的第一读出期间Tsr_H的开始定时与帧期间的开始定时几乎一致。
如果信号H的第一读出期间的开始定时保持延迟，则在稍后***静止/运动图像并行拍摄帧的信号时，与信号B或D不同，第二读出期间的开始定时在帧期间的开始定时之前不能偏移。对于多个帧F、G和H使延迟的开始定时恢复，以减少帧之间累积期间的差异并避免不自然的图像。
在这种情况下，由于信号F、G和H的累积期间是比第一累积期间短的第四累积期间，因此信号处理单元106增加(校正)用于放大信号F、G和H的增益。在从与帧期间同步的定时开始的期间Tmv_F、Tmv_G和Tmv_H内，将信号F、G和H作为运动图像数据而输出。
在各自包括***了静止/运动图像并行拍摄帧的多个帧期间的预定期间Tcyc_ms1和Tcyc_ms2内，驱动与帧期间不同步。然而，在这些期间结束之后，驱动再次与帧期间同步。
将参考图5说明根据本发明第三实施例的摄像设备300。图5是示出摄像设备300中的累积操作、读出操作、运动图像生成操作和静止图像生成操作的定时的时序图。将主要说明与第一实施例中的操作不同的操作。
在图5中的“累积操作(全部行)”中，与各个行上的像素的垂直位置相对应地表示各个行上的像素的光电转换单元进行累积操作的累积期间。第1行～第N行的累积期间顺序开始并顺序结束。临时并行执行多个行的累积操作。
在图5中，RA、RB、RC、RD、RE、RF、RG、RH和RI表示当各个行上的像素完成复位操作时的定时。YA、YB、YC、YD、YE、YF、YG、YH和YI表示当进行读出操作以从各个行上的像素读出信号时的定时。更具体地，各行上的像素的累积操作在复位操作完成时的定时开始，并且在读出操作开始时的定时结束。
信号C的第三累积期间Tsa_C的开始定时从帧期间的开始定时而延迟。如果信号C的第三累积期间在帧期间的开始定时开始，则在预定的定时，信号C的累积操作开始的行超越进行信号B的读出操作的行。
与信号A类似，信号D的第三累积期间的开始定时再次与帧期间的开始定时同步。这可以防止下次指定静止/运动图像并行拍摄帧时的掉帧。
在这种情况下，由于信号C的累积期间是比第一累积期间短的第三累积期间，因此信号处理单元106增加(校正)用于放大信号C的增益。在从与帧期间同步的定时开始的期间Tmv_C内，将信号C作为运动图像数据而输出。
在包括***了静止/运动图像并行拍摄帧的多个帧期间的预定期间Tcyc_ms1内，驱动与帧期间不同步。然而，在期间结束之后，驱动再次与帧期间同步。
尽管已经参考典型实施例说明了本发明，但是应该理解，本发明不限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释，以包含所有这类修改、等同结构和功能。

Claims (12)

1.一种摄像设备，包括：
像素阵列，在所述像素阵列中，沿行方向和列方向排列各自包括光电转换单元的多个像素；
驱动单元，用于驱动所述像素阵列的各个像素的所述光电转换单元，以在第一模式下在第一累积期间内累积信号，并在第二模式下在比所述第一累积期间短的第二累积期间内累积信号；
读出单元，用于在比预定的1帧期间短的第一读出期间内从所述像素阵列读出第一图像信号，并在比所述1帧期间长的第二读出期间内从所述像素阵列读出第二图像信号；以及
控制单元，用于当将模式从所述第一模式切换至所述第二模式时，控制所述读出单元以在读出所述第一图像信号的帧期间内开始所述第二图像信号的读出操作。
2.根据权利要求1所述的摄像设备，其特征在于，
所述控制单元控制所述驱动单元来驱动所述光电转换单元，以在读出所述第一图像信号的所述帧期间内结束所述第二图像信号的累积。
3.根据权利要求1所述的摄像设备，其特征在于，
所述控制单元在将模式从所述第一模式切换至所述第二模式然后再将模式切换回所述第一模式时，控制所述读出单元以使所述第一读出期间和所述第二读出期间的总和在2帧期间内。
4.根据权利要求2所述的摄像设备，其特征在于，
所述控制单元在将模式从所述第一模式切换至所述第二模式然后再将模式切换回所述第一模式时，控制所述驱动单元和所述读出单元以使所述第二累积期间和所述第二读出期间的总和在2帧期间内。
5.根据权利要求1所述的摄像设备，其特征在于，
所述控制单元在将模式从所述第一模式切换至所述第二模式然后再将模式切换回所述第一模式时，控制所述读出单元以使所述第一读出期间、所述第二读出期间和下一第一读出期间的总和在3帧期间内。
6.根据权利要求2所述的摄像设备，其特征在于，
所述控制单元在将模式从所述第一模式切换至所述第二模式然后再将模式切换回所述第一模式时，控制所述驱动单元和所述读出单元以使所述第二累积期间、所述第二读出期间和下一第一读出期间的总和在3帧期间内。
7.根据权利要求1所述的摄像设备，其特征在于，
所述第一模式是仅进行运动图像拍摄的模式，并且所述第二模式是进行静止图像和运动图像的并行拍摄的模式。
8.一种摄像设备，包括：
像素阵列，在所述像素阵列中，沿行方向和列方向排列各自包括光电转换单元的多个像素；
驱动单元，用于驱动所述像素阵列的各个像素的所述光电转换单元，以在累积期间内累积信号；
读出单元，用于从所述像素阵列读出图像信号；
控制单元，用于当在第一帧期间内开始的图像信号的第一累积期间在紧接所述第一帧期间的第二帧期间中完成时，控制所述驱动单元以使在所述第一累积期间完成之后开始的图像信号的第二累积期间比所述第一帧期间短，从而使得所述第二累积期间在所述第二帧期间内完成；以及
放大单元，用于根据累积期间的长度放大所述图像信号以获得适当曝光的图像。
9.根据权利要求8所述的摄像设备，其特征在于，
所述控制单元存储表示信号的累积期间与所述放大单元对所述信号的放大系数之间的关系的校正函数，并通过参考所述校正函数确定与所述累积期间的长度相对应的所述放大系数。
10.一种摄像设备的控制方法，所述摄像设备具有沿行方向和列方向排列各自包括光电转换单元的多个像素的像素阵列，所述控制方法包括以下步骤：
驱动步骤，用于驱动所述像素阵列的各个像素的所述光电转换单元，以在第一模式下在第一累积期间内累积信号，并在第二模式下在比所述第一累积期间短的第二累积期间内累积信号；
读出步骤，用于在比预定的1帧期间短的第一读出期间内从所述像素阵列读出第一图像信号，并在比所述1帧期间长的第二读出期间内从所述像素阵列读出第二图像信号；以及
控制步骤，用于在将模式从所述第一模式切换至所述第二模式时，控制在所述读出步骤中的操作以在读出所述第一图像信号的帧期间内开始所述第二图像信号的读出操作。
11.根据权利要求10所述的控制方法，其特征在于，
所述第一模式是仅进行运动图像拍摄的模式，并且所述第二模式是进行静止图像和运动图像的并行拍摄的模式。
12.一种摄像设备的控制方法，所述摄像设备包括：像素阵列，在所述像素阵列中，沿行方向和列方向排列各自包括光电转换单元的多个像素；驱动单元，用于驱动所述像素阵列的各个像素的所述光电转换单元以在累积期间内累积信号；以及读出单元，用于从所述像素阵列读出图像信号，所述控制方法包括以下步骤：
控制步骤，用于当在第一帧期间内开始的图像信号的第一累积期间在紧接所述第一帧期间的第二帧期间中完成时，控制所述驱动单元以使在所述第一累积期间完成之后开始的图像信号的第二累积期间比所述第一帧期间短，从而使得所述第二累积期间在所述第二帧期间内完成；以及
放大步骤，用于根据累积期间的长度放大所述图像信号以获得适当曝光的图像。
CN2009101186435A 2008-02-27 2009-02-27 摄像设备和摄像设备控制方法 Expired - Fee Related CN101521750B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2008046897 2008-02-27
JP2008-046897 2008-02-27
JP2008046897A JP4587185B2 (ja) 2008-02-27 2008-02-27 撮像システム及び撮像装置の制御方法

Publications (2)

Publication Number Publication Date
CN101521750A true CN101521750A (zh) 2009-09-02
CN101521750B CN101521750B (zh) 2012-05-09

Family

ID=40637077

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009101186435A Expired - Fee Related CN101521750B (zh) 2008-02-27 2009-02-27 摄像设备和摄像设备控制方法

Country Status (5)

Country Link
US (1) US8525893B2 (zh)
EP (1) EP2096861B1 (zh)
JP (1) JP4587185B2 (zh)
KR (1) KR101045892B1 (zh)
CN (1) CN101521750B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102854615A (zh) * 2012-04-27 2013-01-02 麦克奥迪实业集团有限公司 一种对显微切片的全自动扫描***及方法
CN103852878A (zh) * 2014-01-08 2014-06-11 麦克奥迪实业集团有限公司 一种具有实时聚焦的显微切片快速数字扫描装置及其方法
CN107071289A (zh) * 2015-12-15 2017-08-18 奥林巴斯株式会社 摄像装置、摄像方法

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4961982B2 (ja) 2006-12-07 2012-06-27 ソニー株式会社 固体撮像装置、固体撮像装置の駆動方法および撮像装置
JP5014168B2 (ja) * 2008-01-15 2012-08-29 キヤノン株式会社 撮像システム及び撮像システムの制御方法
US8531537B2 (en) * 2010-09-08 2013-09-10 Olympus Corporation Imaging apparatus for processing still picture signals and live view signals output from an image sensor
KR101921935B1 (ko) * 2012-02-16 2018-11-27 삼성전자 주식회사 카메라의 동영상 촬영장치 및 방법.
JP5968146B2 (ja) * 2012-07-31 2016-08-10 キヤノン株式会社 固体撮像装置およびカメラ
JP6336286B2 (ja) * 2014-01-31 2018-06-06 キヤノン株式会社 撮像装置、撮像システム、撮像装置の制御方法および撮像装置を有する撮影装置
US10283538B2 (en) * 2016-02-17 2019-05-07 Canon Kabshiki Kaisha Imaging device and method of driving imaging device
JP7148265B2 (ja) * 2018-04-26 2022-10-05 キヤノン株式会社 撮像装置及びその制御方法、プログラム、記憶媒体
US11064113B1 (en) 2018-12-27 2021-07-13 Gopro, Inc. Image capture device with an automatic image capture capability

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0923371A (ja) * 1995-07-07 1997-01-21 Canon Inc 撮像装置
US7110025B1 (en) * 1997-05-28 2006-09-19 Eastman Kodak Company Digital camera for capturing a sequence of full and reduced resolution digital images and storing motion and still digital image data
JP2001352483A (ja) 2000-06-07 2001-12-21 Matsushita Electric Ind Co Ltd 動画静止画撮像装置
JP4596201B2 (ja) * 2001-02-01 2010-12-08 ソニー株式会社 画像処理装置および方法、並びに記録媒体
JP2004187087A (ja) * 2002-12-04 2004-07-02 Canon Inc 撮像装置
JP4288992B2 (ja) * 2003-04-04 2009-07-01 ソニー株式会社 撮像装置及び方法
JP2004328378A (ja) * 2003-04-24 2004-11-18 Konica Minolta Opto Inc デジタルカメラ
JP2005210693A (ja) * 2003-12-25 2005-08-04 Toshiba Corp 固体撮像装置、デジタルカメラ、及びデジタルビデオカメラ
JP2005223898A (ja) * 2004-01-09 2005-08-18 Sony Corp 画像処理方法及び撮像装置
US20050168589A1 (en) * 2004-01-30 2005-08-04 D. Amnon Silverstein Method and system for processing an image with an image-capturing device
JP4039386B2 (ja) 2004-04-21 2008-01-30 コニカミノルタオプト株式会社 撮像センサ及び撮像装置
JP4902136B2 (ja) 2005-04-28 2012-03-21 キヤノン株式会社 撮像装置、撮像方法及びプログラム
JP4756960B2 (ja) 2005-09-02 2011-08-24 キヤノン株式会社 撮像装置及びその制御方法、コンピュータプログラム及び記憶媒体
JP2007166486A (ja) * 2005-12-16 2007-06-28 Victor Co Of Japan Ltd 固体撮像装置
JP4736819B2 (ja) * 2006-01-20 2011-07-27 ソニー株式会社 物理情報取得方法および物理情報取得装置ならびに駆動装置
JP4404074B2 (ja) * 2006-06-30 2010-01-27 ソニー株式会社 固体撮像装置及びデータ伝送方法並びに撮像装置
US8031258B2 (en) * 2006-10-04 2011-10-04 Omnivision Technologies, Inc. Providing multiple video signals from single sensor
JP2008263262A (ja) * 2007-04-10 2008-10-30 Olympus Corp 撮像装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102854615A (zh) * 2012-04-27 2013-01-02 麦克奥迪实业集团有限公司 一种对显微切片的全自动扫描***及方法
CN103852878A (zh) * 2014-01-08 2014-06-11 麦克奥迪实业集团有限公司 一种具有实时聚焦的显微切片快速数字扫描装置及其方法
CN107071289A (zh) * 2015-12-15 2017-08-18 奥林巴斯株式会社 摄像装置、摄像方法

Also Published As

Publication number Publication date
EP2096861A3 (en) 2011-05-25
JP2009206826A (ja) 2009-09-10
EP2096861A2 (en) 2009-09-02
JP4587185B2 (ja) 2010-11-24
CN101521750B (zh) 2012-05-09
EP2096861B1 (en) 2016-02-10
KR101045892B1 (ko) 2011-07-01
US8525893B2 (en) 2013-09-03
US20090213237A1 (en) 2009-08-27
KR20090092700A (ko) 2009-09-01

Similar Documents

Publication Publication Date Title
CN101521750B (zh) 摄像设备和摄像设备控制方法
CN101662589B (zh) 摄像设备及其控制方法
JP5342969B2 (ja) 撮像装置及び撮像方法
US8786734B2 (en) Image pickup apparatus
KR101426198B1 (ko) 촬상 장치, 촬상 방법 및 기록 매체
US20080079814A1 (en) Imaging apparatus, control method thereof, and imaging system
CN103139494B (zh) 摄像装置
CN103209293B (zh) 摄像装置
US9282245B2 (en) Image capturing apparatus and method of controlling the same
EP3493529A1 (en) Imaging control device, imaging control method, and imaging element
JP7234015B2 (ja) 撮像装置およびその制御方法
JP5127510B2 (ja) 撮像装置、及び撮像装置の制御方法
JP2008118378A (ja) 撮影装置及びその駆動方法
US10701292B2 (en) Device and method for controlling solid-state electronic imaging device
JP7183009B2 (ja) 撮像素子および撮像装置
JP2009302693A (ja) 撮像装置及び撮像方法
JP2000032353A (ja) 撮像装置
JP2647547B2 (ja) 撮像装置及び固体撮像素子の駆動装置
JP2647549B2 (ja) 撮像装置及び固体撮像素子の駆動装置
JP5975795B2 (ja) 撮像装置及びその駆動方法
JP4730530B2 (ja) 撮影装置
JP2020120219A (ja) 撮像装置、撮像装置の制御方法およびプログラム
JP2020080531A (ja) 撮像装置
JP2012085013A (ja) 固体撮像装置および撮像装置
JP2006050349A (ja) 撮像装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120509

Termination date: 20180227

CF01 Termination of patent right due to non-payment of annual fee