JP4618100B2 - 撮像装置、撮像方法、およびプログラム - Google Patents

撮像装置、撮像方法、およびプログラム Download PDF

Info

Publication number
JP4618100B2
JP4618100B2 JP2005320822A JP2005320822A JP4618100B2 JP 4618100 B2 JP4618100 B2 JP 4618100B2 JP 2005320822 A JP2005320822 A JP 2005320822A JP 2005320822 A JP2005320822 A JP 2005320822A JP 4618100 B2 JP4618100 B2 JP 4618100B2
Authority
JP
Japan
Prior art keywords
time
division
exposure
image data
imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005320822A
Other languages
English (en)
Other versions
JP2007129545A (ja
Inventor
晃久 金子
裕子 園田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2005320822A priority Critical patent/JP4618100B2/ja
Priority to US11/552,183 priority patent/US7852374B2/en
Priority to TW095139412A priority patent/TW200731784A/zh
Priority to EP06022525A priority patent/EP1784008A3/en
Priority to KR1020060104919A priority patent/KR20070048598A/ko
Priority to CNB2006101376991A priority patent/CN100438579C/zh
Publication of JP2007129545A publication Critical patent/JP2007129545A/ja
Application granted granted Critical
Publication of JP4618100B2 publication Critical patent/JP4618100B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6811Motion detection based on the image signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • H04N23/684Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/73Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00Still video cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Exposure Control For Cameras (AREA)
  • Adjustment Of Camera Lenses (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Description

本発明は、撮像装置、撮像方法、およびプログラムに関し、特に、露光時間を分割して複数回露光するようにした撮像装置、撮像方法、およびプログラムに関する。
カメラにより静止画像を撮影する場合、比較的長い露光時間になると撮影者がカメラを動かないように保持したつもりでいても手ブレによって、撮像した画像にブレが生じてしまうことがある。
このような手ブレに起因する画像の劣化(ブレ)を抑止する方法として、被写体の輝度に対応する露光時間を、手ブレの影響を受けない程度の固定幅に分割して複数回撮像を行い、その結果得られた複数の画像データに動きを補正する処理を施してそれらを加算し、最終的な静止画像データを生成する発明が存在する(例えば、特許文献1参照)。
特開2001−86398号公報
特許文献1に記載の発明では、露光時間を固定幅で分割しているので、例えば、被写体の輝度が低く露光時間が長くなった場合、分割数、すなわち、加算する画像データの数が多くなって、画像データの加算によって生じる像ブレが起こる確率が高くなる。
より具体的には、手ブレが生じている状態で撮像した場合、露光時間を分割して得られた複数の画像データに動き補正を施しても、現実的には画像内の全ての像が完全に一致することは稀であり、一般に画像間である程度の像の差異は存在する。したがって、露光時間が長くなり分割数が多くなると、複数の画像データに動き補正を施して加算したとしても像が完全に一致しない部分があり、その部分においてはかえって像ブレが生じることがある。したがって、分割数(加算する画像データの数)は少ない方が望ましい。
また、低照度環境下では1回の固定幅時間における露光によって十分なSN比の画像データを得ることができないので、画像データの動き補正を行おうとしても、ノイズの影響によって画像データ上の動きを正確に検出することができず、動きの誤検出が発生し易くなってしまう。
本発明はこのような状況に鑑みてなされたものであり、静止画像の撮影時において、露出時間が比較的長くても手ぶれの影響を抑止するとともに、複数の画像データを合成することによって生じる画質劣化も抑止できるようにするものである。
本発明の一側面である撮像装置は、被写体の光学像を電気信号に変換する撮像素子を備えた撮像装置において、前記被写体の輝度を検出する検出手段と、検出された前記輝度に基づいて露光時間を決定する第1の決定手段と、前記露光時間を複数の区間に分割するための分割時間を決定する第2の決定手段と、前記露光時間を前記分割時間で除算した除算結果を切り上げて得られる複数の撮像回数で、前記撮像素子を前記分割時間だけ露光させ、複数の時分割画像データを生成させる撮像タイミング制御手段と、生成された前記複数の時分割画像データを合成して静止画像データを生成する合成手段とを含む。
前記合成手段は、前記複数の撮像回数で前記分割時間だけ露光されて得られた第1の露光量が、前記露光時間だけ露光して得られる第2の露光量よりも多い場合、前記第1の露光量が前記第2の露光量に調整された前記静止画像データを生成するようにすることができる。
本発明の一側面である撮像装置は、生成された前記複数の時分割画像データの動き補正を行う動き補正手段をさらに含むことができ、前記合成手段は、動き補正された前記複数の時分割画像データを合成して静止画像データを生成するようにすることができる。
前記第2の決定手段は、検出された前記輝度に基づいて前記分割時間を決定するようにすることができる。
前記第2の決定手段は、前記第1の決定手段により前記輝度に基づいて決定された前記露光時間に基づき、前記分割時間を決定するようにすることができる。
本発明の一側面である撮像装置は、前記露光時間に対応する前記分割時間を示すテーブルを保持する保持手段をさらに含むことができ、前記第2の決定手段は、前記テーブルを参照して前記露光時間に対応する前記分割時間を決定するようにすることができる。
前記保持手段は、露光回数優先モードに対応するテーブル、分割時間優先モードに対応するテーブル、モード遷移モードに対応するテーブル、または曲線モードに対応するテーブルのうち、少なくとも一つの前記テーブルを保持するようにすることができる。
本発明の一側面である撮像方法は、被写体の光学像を電気信号に変換する撮像素子を備えた撮像装置の撮像方法において、前記被写体の輝度を検出し、検出された前記輝度に基づいて露光時間を決定し、前記露光時間を複数の区間に分割するための分割時間を決定し、前記露光時間を前記分割時間で除算した除算結果を切り上げて得られる複数の撮像回数で、前記撮像素子を前記分割時間だけ露光させ、複数の時分割画像データを生成させ、生成された前記複数の時分割画像データを合成して静止画像データを生成するステップを含む。
本発明の一側面であるプログラムは、被写体の光学像を電気信号に変換する撮像素子を備えた撮像装置を制御するためのプログラムであって、前記被写体の輝度を検出させ、検出された前記輝度に基づいて露光時間を決定し、前記露光時間を複数の区間に分割するための分割時間を決定し、前記露光時間を前記分割時間で除算した除算結果を切り上げて得られる複数の撮像回数で、前記撮像素子を前記分割時間だけ露光させ、複数の時分割画像データを生成させ、生成された前記複数の時分割画像データを合成して静止画像データを生成させるステップを含む処理をコンピュータに実行させる。
本発明の一側面においては、前記被写体の輝度が検出され、検出された前記輝度に基づいて露光時間が決定され、前記露光時間を複数の区間に分割するための分割時間が決定される。そして、前記露光時間が前記分割時間で除算された除算結果が切り上げられて得られる複数の撮像回数で、前記撮像素子が前記分割時間だけ露光され、複数の時分割画像データが生成され、生成された前記複数の時分割画像データが合成されて静止画像データが生成される。
本発明の一側面によれば、静止画像の撮影時において、露出時間が比較的長くても手ぶれの影響を抑止することができる。また、本発明の一側面によれば、複数の画像データを合成することによって生じる画質劣化を抑止することができる。
以下に本発明の実施の形態を説明するが、本発明の構成要件と、明細書または図面に記載の実施の形態との対応関係を例示すると、次のようになる。この記載は、本発明をサポートする実施の形態が、明細書または図面に記載されていることを確認するためのものである。従って、明細書または図面中には記載されているが、本発明の構成要件に対応する実施の形態として、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その構成要件に対応するものではないことを意味するものではない。逆に、実施の形態が構成要件に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その構成要件以外の構成要件には対応しないものであることを意味するものでもない。
本発明の一側面である撮像装置(例えば、図1のデジタルスチルカメラ1)は、被写体の光学像を電気信号に変換する撮像素子(例えば、図1の撮像素子12)を備えた撮像装置において、前記被写体の輝度を検出する検出手段(例えば、図1の輝度検出部14)と、検出された前記輝度に基づいて露光時間を決定する第1の決定手段(例えば、図2の露光時間決定部31)と、前記露光時間を複数の区間に分割するための分割時間を決定する第2の決定手段(例えば、図2の分割時間決定部32)と、前記露光時間を前記分割時間で除算した除算結果を切り上げて得られる複数の撮像回数で、前記撮像素子を前記分割時間だけ露光させ、複数の時分割画像データを生成させる撮像タイミング制御手段(例えば、図2の撮像タイミング制御部34)と、生成された前記複数の時分割画像データを合成して静止画像データを生成する合成手段(例えば、図1の加算処理部20)とを含む。
本発明の一側面である撮像装置は、生成された前記複数の時分割画像データの動き補正を行う動き補正手段(例えば、図1の動き補正部19)をさらに含むことができ、前記合成手段は、動き補正された前記複数の時分割画像データを合成して静止画像データを生成するようにすることができる。
本発明の一側面である撮像装置は、前記露光時間に対応する前記分割時間を示すテーブルを保持する保持手段(例えば、図2の露光時間−分割時間テーブルメモリ33)をさらに含むことができ、前記第2の決定手段は、前記テーブルを参照して前記露光時間に対応する前記分割時間を決定するようにすることができる。
本発明の一側面である撮像方法は、被写体の光学像を電気信号に変換する撮像素子を備えた撮像装置の撮像方法において、前記被写体の輝度を検出し(例えば、図7のステップS1)、検出された前記輝度に基づいて露光時間を決定し(例えば、図7のステップS2)、前記露光時間を複数の区間に分割するための分割時間を決定し(例えば、図7のステップS3)、前記露光時間を前記分割時間で除算した除算結果を切り上げて得られる複数の撮像回数で、前記撮像素子を前記分割時間だけ露光させ、複数の時分割画像データを生成させ(例えば、図7のステップS8)、生成された前記複数の時分割画像データを合成して静止画像データを生成する(例えば、図7のステップS11)ステップを含む。
本発明の一側面であるプログラムは、被写体の光学像を電気信号に変換する撮像素子を備えた撮像装置を制御するためのプログラムであって、前記被写体の輝度を検出させ(例えば、図7のステップS1)、検出された前記輝度に基づいて露光時間を決定し(例えば、図7のステップS2)、前記露光時間を複数の区間に分割するための分割時間を決定し(例えば、図7のステップS3)、前記露光時間を前記分割時間で除算した除算結果を切り上げて得られる複数の撮像回数で、前記撮像素子を前記分割時間だけ露光させ、複数の時分割画像データを生成させ(例えば、図7のステップS8)、生成された前記複数の時分割画像データを合成して静止画像データを生成させる(例えば、図7のステップS11)ステップを含む処理をコンピュータに実行させる。
以下、本発明を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。
図1は本発明の一実施の形態であるデジタルスチルカメラ構成例を示している。このデジタルスチルカメラ1は、被写体の静止画像を撮像するに際し、被写体の輝度に基づいて決定される露光時間を複数に分割して複数回撮影し、その結果得られる画像データ(以下、時分割画像データと称する)を加算し、この加算結果を静止画像の画像データとして記録媒体22に記録するものである。
デジタルスチルカメラ1は、被写体の光学像を撮像素子12に集束させるレンズ群11、集束された光学像を電気信号に変換するCCD(Charge Coupled Device)またはCMOS(Complementary Metal-Oxide Semiconductor)などからなる撮像素子12、撮像素子12から入力される電気信号に基づいて時分割画像データを生成する信号処理部13、信号処理部13から入力される時分割画像データに基づいて被写体の輝度を検出する輝度検出部14、および、検出された輝度に基づいて撮像素子12の露光タイミングを制御する露光制御部15から構成される。
さらに、デジタルスチルカメラ1は、信号処理部13から入力される時分割画像データを一時的に保持するとともに複数の時分割画像データの加算結果(以下、加算画像データと称する)も保持するメモリ16、信号処理部13から入力される時分割画像データにおける動きを検出する動き検出部17、検出された時分割画像データにおける動きと露光制御部15から供給される露光条件に基づいて補正量を決定する動き補正制御部18、決定された補正量に従ってメモリ16に保持されている時分割画像データを補正する動き補正部19、メモリ16に保持されている加算画像データに動き補正済みの時分割画像データを加算する加算処理部20、メモリ16に保持されている加算画像データを読み出して記録媒体22に記録する記録部21、半導体メモリなどからなる記録媒体22から構成される。
次に、図2は露光制御部15の詳細な構成例を示している。露光制御部15は、輝度検出部14から入力される被写体の輝度に基づき、既存のAE(自動露光制御)技術に従って露光時間を決定する露光時間決定部31、露光時間−分割時間テーブルメモリ33に保持されている露光時間−分割時間テーブルを参照し、露光時間決定部3によって決定された露光時間に対応する分割時間を決定する分割時間決定部32、マスクROMまたはEEPROMなどからなり図3乃至図6に示す4種類のモードにそれぞれ対応する4種類の露光時間−分割時間テーブルのうちの少なくとも1つが予め保持されている露光時間−分割時間テーブルメモリ33、および、決定された露光時間を分割時間で割って露光回数Nを算出し、撮像素子12を分割時間ずつN回露光させる撮像タイミング制御部34から構成される。
次に、露光時間−分割時間テーブルメモリ33に予め保持されている4種類のモード(露光回数優先モード、分割時間優先モード、モード遷移モード、および曲線モード)にそれぞれ対応する露光時間−分割時間テーブルについて説明する。なお、撮影時にいずれのモードとするかは、ユーザが任意に設定可能である。
図3は、露光回数(加算枚数)優先モードに対応する露光時間−分割時間テーブルの一例を示している。露光時間と分割時間の対応関係は同図に実太線で示す折れ線のとおりである。露光回数優先モードは、加算する時分割画像データの数が増えることによるデメリットを低減させることを目的とし、露光回数(加算枚数)がなるべく少なくなるようにしたモードである。ただし、露光時間が比較的長くなる場合、露光回数(加算枚数)は増加させざるを得ない。
図4は、分割時間優先モードに対応する露光時間−分割時間テーブルの一例を示している。露光時間と分割時間の対応関係は同図に実太線で示す折れ線のとおりである。分割時間優先モードは、加算する時分割画像データそれぞれにおいて動き(ブレ、滲み)が少ない方が望ましいという考えに基づき、1回当たりの露光(分割時間)がなるべく短くなるようにしたモードである。図4の例では、露光回数が4回になるまで最初の分割時間(1/40)が維持されるようになされており、露光回数が5回以上になっても、分割時間がなるべく短くなるように制限されている。
図5は、モード遷移モードに対応する露光時間−分割時間テーブルの一例を示している。露光時間と分割時間の対応関係は同図に実太線で示す折れ線のとおりである。モード遷移モードは、比較的露光時間が短いときには上述した分割時間優先モードと同様、1回当たりの露光(分割時間)がなるべく短くなるようになされており、露光時間が長くなってきたときには露光回数優先モードと同様に露光回数(加算枚数)がなるべく少なくなるようになされているモードである。
図6は、曲線モードに対応する露光時間−分割時間テーブルの一例を示している。露光時間と分割時間の対応関係は同図に実太線で示す曲線のとおりである。曲線モードは、上述した他のモードのように露光時間と分割時間の対応関係が階段状に変化するのではなく、曲線状に変化するようになされている。
なお、上述したいずれのモードに対応する露光時間−分割時間テーブルも実験結果に基づいて作成されるものであり、露光時間の値に拘わらず、分割時間が手ブレの発生を抑える程度に短く、且つ、十分なSN比が得られるようになされている。
次に、デジタルスチルカメラ1による撮像処理について、図7のフローチャートを参照して説明する。この撮像処理は、例えば、デジタルスチルカメラ1のシャッタボタン(不図示)がユーザによって押下されたときに開始される。なお、分割時間決定部32によって参照される露光時間−分割時間テーブルのモードは予め選択されているものとする。また、レンズ群11、撮像素子12および信号処理部13は既に動作を開始しており、輝度検出部14には信号処理部13から所定の周期で画像データ(輝度検出用のもの)が供給されているものとする。
ステップS1において、輝度検出部14は、信号処理部13から供給された画像データに基づいて被写体の輝度を検出して露光制御部15に出力する。ステップS2において、露光制御部15の露光時間決定部31は、輝度検出部14から入力された被写体の輝度に基づいて露光時間Tを決定し、分割時間決定部32および撮像タイミング制御部34に通知する。
ステップS3において、分割時間決定部32は、露光時間−分割時間テーブルメモリ33に保持されている、ユーザによって選択されているモードに対応する露光時間−分割時間テーブルを参照することによって、露光時間決定部31で決定された露光時間Tに対応する分割時間Texを決定して撮像タイミング制御部34に通知する。
ステップS4において、撮像タイミング制御部34は、露光時間Tを分割時間Texで除算し、除算結果を切り上げて撮像回数Nを算出し、ステップS5において、回数パラメータnを0に初期化する。
ステップS6において、撮像タイミング制御部34は、回数パラメータnが撮影回数Nと同値であるか否かを判定し、回数パラメータnが撮影回数Nと同値ではないと判定した場合、処理をステップS7に進める。
ステップS7において、撮像タイミング制御部34は、回数パラメータnを1だけインクリメントする。ステップS8において、撮像タイミング制御部34は、撮像素子12を制御してn回目の時分割画像データPnを撮影するための露光を分割時間Texだけ実行させる。撮像タイミング制御部34からの制御により、撮像素子12は、分割時間Texだけ露光した結果得られる電気信号を信号処理部13に出力し、信号処理部13は、n回目の露光による時分割画像データPnを生成してメモリ16および動き検出部17に出力する。
なお、最終回のN回目の露光も分割時間Texだけ実行させる。これは、最終回のN回目の露光を、露光時間に合わせるために分割時間Tex以下の時間(T−(N−1)・Tex)としてしまうと、SN比の高い時分割画像を得ることができなくなってしまうからである。最終回のN回目が若干露光過多であっても、後段の加算処理部20においてゲインコントロールを行い露光過多の帳尻合わせを行うので問題ない。
ステップS9において、メモリ16は、信号処理部13から入力された時分割画像データPnを保持するとともに、それまで保持していた1枚前の時分割画像データP(n−1)を動き検出部17に出力する。ステップS10において、動き検出部17は、メモリ16から入力された時分割画像データP(n−1)と比較することにより、信号処理部13から入力された時分割画像データPn上における被写体の動きを検出し、検出結果を動き補正制御部18に通知する。動き補正制御部18は、通知された検出結果と露光制御部15から供給される露光条件(露光時間T、分割時間Texなど)に基づき、動き補正量を決定して動き補正部19に通知する。この通知に従い、動き補正部19は、メモリ16から時分割画像データPnを読み出して動き補正を行い、動き補正後の時分割画像データP’nを加算処理部20に出力する。
ステップS11において、加算処理部20は、1枚目の時分割画像データP1から動き補正済みの(n−1)枚目の時分割画像データP’(n−1)までが加算されている加算画像データPS(n−1)をメモリ16から読み出し、動き補正部19から入力された動き補正後の時分割画像データP’nを加算して、その結果得られた加算画像データPSnをメモリ16に保持させる。
なお、信号処理部13から出力された1枚目の時分割画像データP1に対しては、動き補正および1枚前までの加算画像との加算処理は行わない。
この後、処理はステップS6に戻り、それ以降の処理が繰り返される。そしてステップS6において、回数パラメータnが撮影回数Nと同値であると判定された場合、処理はステップS12に進められる。
ステップS12において、記録部21は、メモリ16に保持されている、1枚目の時分割画像データP1から動き補正済みのN枚目の時分割画像データP’Nまでが加算されている加算画像データPSNを、今回の撮影した静止画像の画像データとして記録媒体22に記録する。
以上で撮像処理が終了され、次にシャッタボタンが押下されるまで待機することになる。
なお、ステップS10における時分割画像データの動きを補正する処理は、ユーザの設定により実行しないようにしてもよい。
以上説明したように、本発明を適用したデジタルスチルカメラ1による撮像処理によれば、長時間露光が必要な低照度環境下において、分割時間を最適に決定することによって、時分割画像データを加算することによって生じる像ブレを最小限にし、動き検出においてノイズによる誤検出を防止し、かつ像ブレを最小限に抑制した画像を得ることが可能となる。
また、撮影に必要とされる露光時間を分割時間で分割して露光することによって、露光時間を分割しない場合と比較して1回の露光時間に得られる信号に含まれる像ブレを抑圧することが可能となる。その際に露光時間の短縮に伴うSN比の劣化は、信号を加算することによって補うことが可能である。
さらに、より低照度の環境下においては分割時間が長くなるのでSN比が劣化せず、ノイズによる誤検出を減少させることが可能である。また、低照度の環境下では必要な露光時間が長くなるが、分割時間も長くなるため、時分割画像データの加算枚数は必要な露光時間に比例して増えることはないので、加算による像ブレを防ぐことが可能となる。
ところで上述した一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。
このプログラムは、記録媒体に格納された状態でパーソナルコンピュータに供給され、ユーザからのコマンドに対応するCPUの指令によってRAMにロードされて実行される。
なお、本明細書において、プログラムに基づいて実行されるステップは、記載された順序に従って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
また、プログラムは、1台のコンピュータにより処理されるものであってもよいし、複数のコンピュータによって分散処理されるものであってもよい。さらに、プログラムは、遠方のコンピュータに転送されて実行されるものであってもよい。
なお、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
本発明を適用したデジタルスチルカメラの構成例を示すブロック図である。 露光制御部の構成例を示すブロック図である。 露光回数優先モードに対応する露光時間−分割時間テーブルの一例を示す図である。 分割時間優先モードに対応する露光時間−分割時間テーブルの一例を示す図である。 モード遷移モードに対応する露光時間−分割時間テーブルの一例を示す図である。 曲線モードに対応する露光時間−分割時間テーブルの一例を示す図である。 デジタルスチルカメラ1による撮像処理を説明するフローチャートである。
符号の説明
1 デジタルスチルカメラ, 11 レンズ群, 12 撮像素子, 13 信号処理部, 14 輝度検出部, 15 露光制御部, 16 メモリ, 17 動き検出部, 18 動き補正制御部, 19 動き補正部, 20 加算処理部, 21 記録部, 22 記録媒体, 31 露光時間決定部, 32 分割時間決定部, 33 露光時間−分割時間テーブルメモリ, 34 撮像タイミング制御部

Claims (9)

  1. 被写体の光学像を電気信号に変換する撮像素子を備えた撮像装置において、
    前記被写体の輝度を検出する検出手段と、
    検出された前記輝度に基づいて露光時間を決定する第1の決定手段と、
    前記露光時間を複数の区間に分割するための分割時間を決定する第2の決定手段と、
    前記露光時間を前記分割時間で除算した除算結果を切り上げて得られる複数の撮像回数で、前記撮像素子を前記分割時間だけ露光させ、複数の時分割画像データを生成させる撮像タイミング制御手段と、
    生成された前記複数の時分割画像データを合成して静止画像データを生成する合成手段と
    を含む撮像装置。
  2. 前記合成手段は、前記複数の撮像回数で前記分割時間だけ露光されて得られた第1の露光量が、前記露光時間だけ露光して得られる第2の露光量よりも多い場合、前記第1の露光量が前記第2の露光量に調整された前記静止画像データを生成する
    請求項1に記載の撮像装置。
  3. 生成された前記複数の時分割画像データの動き補正を行う動き補正手段をさらに含み、
    前記合成手段は、動き補正された前記複数の時分割画像データを合成して静止画像データを生成する
    請求項1に記載の撮像装置。
  4. 前記第2の決定手段は、検出された前記輝度に基づいて前記分割時間を決定する
    請求項1に記載の撮像装置。
  5. 前記第2の決定手段は、前記第1の決定手段により前記輝度に基づいて決定された前記露光時間に基づき、前記分割時間を決定する
    請求項に記載の撮像装置。
  6. 前記露光時間に対応する前記分割時間を示すテーブルを保持する保持手段をさらに含み、
    前記第2の決定手段は、前記テーブルを参照して前記露光時間に対応する前記分割時間を決定する
    請求項1に記載の撮像装置。
  7. 前記保持手段は、露光回数優先モードに対応するテーブル、分割時間優先モードに対応するテーブル、モード遷移モードに対応するテーブル、または曲線モードに対応するテーブルのうち、少なくとも一つの前記テーブルを保持する
    請求項に記載の撮像装置。
  8. 被写体の光学像を電気信号に変換する撮像素子を備えた撮像装置の撮像方法において、
    前記被写体の輝度を検出し、
    検出された前記輝度に基づいて露光時間を決定し、
    前記露光時間を複数の区間に分割するための分割時間を決定し、
    前記露光時間を前記分割時間で除算した除算結果を切り上げて得られる複数の撮像回数で、前記撮像素子を前記分割時間だけ露光させ、複数の時分割画像データを生成させ、
    生成された前記複数の時分割画像データを合成して静止画像データを生成する
    ステップを含む撮像方法。
  9. 被写体の光学像を電気信号に変換する撮像素子を備えた撮像装置を制御するためのプログラムであって、
    前記被写体の輝度を検出させ、
    検出された前記輝度に基づいて露光時間を決定し、
    前記露光時間を複数の区間に分割するための分割時間を決定し、
    前記露光時間を前記分割時間で除算した除算結果を切り上げて得られる複数の撮像回数で、前記撮像素子を前記分割時間だけ露光させ、複数の時分割画像データを生成させ、
    生成された前記複数の時分割画像データを合成して静止画像データを生成させる
    ステップを含む処理をコンピュータに実行させるプログラム。
JP2005320822A 2005-11-04 2005-11-04 撮像装置、撮像方法、およびプログラム Expired - Fee Related JP4618100B2 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2005320822A JP4618100B2 (ja) 2005-11-04 2005-11-04 撮像装置、撮像方法、およびプログラム
US11/552,183 US7852374B2 (en) 2005-11-04 2006-10-24 Image-pickup and associated methodology of dividing an exposure-time period into a plurality of exposures
TW095139412A TW200731784A (en) 2005-11-04 2006-10-25 Image pickup device, image pickup method, and program
EP06022525A EP1784008A3 (en) 2005-11-04 2006-10-27 Image-pickup device, image-pickup method, and program
KR1020060104919A KR20070048598A (ko) 2005-11-04 2006-10-27 촬상 장치, 촬상 방법, 및 프로그램
CNB2006101376991A CN100438579C (zh) 2005-11-04 2006-11-03 摄像装置及摄像方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005320822A JP4618100B2 (ja) 2005-11-04 2005-11-04 撮像装置、撮像方法、およびプログラム

Publications (2)

Publication Number Publication Date
JP2007129545A JP2007129545A (ja) 2007-05-24
JP4618100B2 true JP4618100B2 (ja) 2011-01-26

Family

ID=37873184

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005320822A Expired - Fee Related JP4618100B2 (ja) 2005-11-04 2005-11-04 撮像装置、撮像方法、およびプログラム

Country Status (6)

Country Link
US (1) US7852374B2 (ja)
EP (1) EP1784008A3 (ja)
JP (1) JP4618100B2 (ja)
KR (1) KR20070048598A (ja)
CN (1) CN100438579C (ja)
TW (1) TW200731784A (ja)

Families Citing this family (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101371775B1 (ko) 2007-07-09 2014-03-24 삼성전자주식회사 카메라의 손떨림 보정 방법 및 장치
CN100464572C (zh) * 2007-07-25 2009-02-25 北京中星微电子有限公司 一种图像合成方法和装置
CN101394473B (zh) * 2007-09-19 2010-06-23 华硕电脑股份有限公司 网络摄影机中的动态调整画面的方法
JP2009150829A (ja) * 2007-12-21 2009-07-09 Olympus Corp 生体試料の観察方法
US20090244301A1 (en) * 2008-04-01 2009-10-01 Border John N Controlling multiple-image capture
JP2010028596A (ja) * 2008-07-23 2010-02-04 Hitachi Ltd 撮像装置
US8248481B2 (en) * 2009-04-08 2012-08-21 Aptina Imaging Corporation Method and apparatus for motion artifact removal in multiple-exposure high-dynamic range imaging
JP5300590B2 (ja) * 2009-05-21 2013-09-25 キヤノン株式会社 画像処理装置およびその方法
JP5300591B2 (ja) * 2009-05-21 2013-09-25 キヤノン株式会社 画像処理装置およびその方法
JP5397068B2 (ja) * 2009-06-03 2014-01-22 ソニー株式会社 撮像装置、撮像制御方法、露出制御装置および露出制御方法
US20120120282A1 (en) * 2009-08-14 2012-05-17 Goris Andrew C Reducing Temporal Aliasing
JP5424835B2 (ja) * 2009-11-30 2014-02-26 キヤノン株式会社 画像処理装置、画像処理方法
US8558913B2 (en) * 2010-02-08 2013-10-15 Apple Inc. Capture condition selection from brightness and motion
CN103109523B (zh) 2010-09-14 2016-06-15 富士胶片株式会社 成像装置和成像方法
JP5791254B2 (ja) * 2010-09-29 2015-10-07 キヤノン株式会社 撮像装置及びカメラシステム
JP5762115B2 (ja) * 2011-04-28 2015-08-12 キヤノン株式会社 撮像装置及びその制御方法
JP2013005017A (ja) * 2011-06-13 2013-01-07 Sony Corp 撮像装置、および撮像装置制御方法、並びにプログラム
JP5806007B2 (ja) * 2011-06-15 2015-11-10 オリンパス株式会社 撮像装置
US9148582B2 (en) * 2012-06-29 2015-09-29 Intel Corporation Method and system for perfect shot imaging from multiple images
KR101890305B1 (ko) * 2012-08-27 2018-08-21 삼성전자주식회사 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 기록매체
KR101933454B1 (ko) * 2012-09-25 2018-12-31 삼성전자주식회사 촬영 이미지 생성 방법 및 장치와 그 방법에 대한 프로그램 소스를 저장한 기록 매체
US9357130B2 (en) * 2013-03-15 2016-05-31 Apple Inc. Dynamic bracketing operations for image stabilization
JP6196745B2 (ja) * 2014-04-28 2017-09-13 リンクス システム デベロッパーズ, インコーポレイテッド イベントタイミング画像を処理するためのシステムおよび方法
JP6444073B2 (ja) 2014-06-25 2018-12-26 キヤノン株式会社 画像処理装置
JP2016021496A (ja) 2014-07-15 2016-02-04 イビデン株式会社 配線基板及びその製造方法
JP6351452B2 (ja) * 2014-09-08 2018-07-04 オリンパス株式会社 撮像装置、撮像方法およびプログラム
KR102495754B1 (ko) * 2016-10-25 2023-02-02 한화테크윈 주식회사 광역 영상의 동적 범위를 압축하는 영상 처리 장치 및 방법
CN107404618A (zh) * 2017-08-01 2017-11-28 努比亚技术有限公司 一种拍摄方法及终端
CN107463052B (zh) * 2017-08-30 2020-08-11 北京小米移动软件有限公司 拍摄曝光方法及装置
JP2021077935A (ja) * 2019-11-05 2021-05-20 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd 制御装置、撮像装置、制御方法、及びプログラム
CN111263082B (zh) * 2020-03-16 2021-12-14 维沃移动通信(杭州)有限公司 一种曝光数据获取方法及电子设备
CN114302068B (zh) * 2022-01-06 2023-09-26 重庆紫光华山智安科技有限公司 图像拍摄方法及设备
CN115174819B (zh) * 2022-07-08 2023-11-03 重庆紫光华山智安科技有限公司 一种曝光控制方法、装置、设备及介质
CN115150558B (zh) * 2022-09-05 2022-11-18 深圳比特微电子科技有限公司 亮度检测方法、摄像装置的控制方法、装置和介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09261526A (ja) * 1996-03-19 1997-10-03 Olympus Optical Co Ltd 撮像装置
JP2003319252A (ja) * 2002-04-26 2003-11-07 Minolta Co Ltd デジタルカメラ

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6734901B1 (en) * 1997-05-20 2004-05-11 Canon Kabushiki Kaisha Vibration correction apparatus
US6778210B1 (en) * 1999-07-15 2004-08-17 Olympus Optical Co., Ltd. Image pickup apparatus with blur compensation
JP2001086398A (ja) 1999-07-15 2001-03-30 Olympus Optical Co Ltd 撮像装置
JP4596202B2 (ja) * 2001-02-05 2010-12-08 ソニー株式会社 画像処理装置および方法、並びに記録媒体
US7176962B2 (en) * 2001-03-01 2007-02-13 Nikon Corporation Digital camera and digital processing system for correcting motion blur using spatial frequency
JP3468231B2 (ja) * 2001-07-02 2003-11-17 ミノルタ株式会社 画像処理装置、画質制御方法、プログラム及び記録媒体
JP3993043B2 (ja) * 2002-08-05 2007-10-17 富士フイルム株式会社 デジタルスチルカメラ
JP2004357202A (ja) * 2003-05-30 2004-12-16 Canon Inc 撮影装置
US7538794B2 (en) * 2005-01-31 2009-05-26 Hewlett-Packard Development Company, L.P. Method and apparatus for motion estimation in a digital imaging device
US20060182430A1 (en) * 2005-02-15 2006-08-17 Stavely Donald J Camera exposure program coupled to image stabilization capability
US7630000B2 (en) * 2005-07-29 2009-12-08 Olympus Imaging Corp. Electronic blurring correction apparatus
JP4542011B2 (ja) * 2005-09-27 2010-09-08 富士通株式会社 カメラ及び手ぶれ補正方法及び手ぶれ補正プログラム
JP4357471B2 (ja) * 2005-09-30 2009-11-04 三洋電機株式会社 画像取得装置及びプログラム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09261526A (ja) * 1996-03-19 1997-10-03 Olympus Optical Co Ltd 撮像装置
JP2003319252A (ja) * 2002-04-26 2003-11-07 Minolta Co Ltd デジタルカメラ

Also Published As

Publication number Publication date
KR20070048598A (ko) 2007-05-09
CN100438579C (zh) 2008-11-26
US7852374B2 (en) 2010-12-14
JP2007129545A (ja) 2007-05-24
CN1960446A (zh) 2007-05-09
TW200731784A (en) 2007-08-16
EP1784008A3 (en) 2008-02-13
TWI346501B (ja) 2011-08-01
US20070103562A1 (en) 2007-05-10
EP1784008A2 (en) 2007-05-09

Similar Documents

Publication Publication Date Title
JP4618100B2 (ja) 撮像装置、撮像方法、およびプログラム
JP5219778B2 (ja) 撮像装置及びその制御方法
US9210333B2 (en) Image capturing apparatus for generating composite image and control method thereof
US10511792B2 (en) Image pickup apparatus with flash band compensation technique, control method therefor, and storage medium
JP2010074313A (ja) 撮像装置および撮像装置の制御方法
JP2008005081A (ja) 認証装置
US10009547B2 (en) Image pickup apparatus that compensates for flash band, control method therefor, and storage medium
JP2018207413A (ja) 撮像装置
JP4766692B2 (ja) 撮像装置及びその制御方法及びプログラム及び記憶媒体
JP5618765B2 (ja) 撮像装置及びその制御方法
JP5947625B2 (ja) 撮像装置、及びその制御方法
JP2008060796A (ja) デジタルカメラ
JP2006262221A (ja) 撮像装置および画像処理方法
US10735661B2 (en) Image pickup apparatus that compensates for flash band, control method therefor, storage medium, and video processing apparatus
JP2006217249A (ja) 電子カメラ、電子カメラシステムおよびプログラム
JP2012029194A (ja) 電子カメラおよび露出制御プログラム
JP2007028496A (ja) 画像処理装置、画像処理方法、プログラムおよび記憶媒体
US20170272630A1 (en) Flash band determination device for detecting flash band, method of controlling the same, storage medium, and image pickup apparatus
JP7034792B2 (ja) 撮像装置とその制御方法及びプログラム
JP5404217B2 (ja) 撮像装置及びその制御方法
JP2011182304A (ja) 撮像装置及びその制御方法
JP2006217418A (ja) 画像処理装置及び方法
JP2024054604A (ja) 撮像装置及びその制御方法とプログラム
JP2016092708A (ja) 画像撮像装置、インターバル撮影方法及びプログラム
JP2012230260A (ja) 撮像装置及び制御方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080818

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100715

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100908

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100928

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20101011

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131105

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131105

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees