JP2016015590A - 撮像装置およびその制御方法ならびにプログラム - Google Patents
撮像装置およびその制御方法ならびにプログラム Download PDFInfo
- Publication number
- JP2016015590A JP2016015590A JP2014136216A JP2014136216A JP2016015590A JP 2016015590 A JP2016015590 A JP 2016015590A JP 2014136216 A JP2014136216 A JP 2014136216A JP 2014136216 A JP2014136216 A JP 2014136216A JP 2016015590 A JP2016015590 A JP 2016015590A
- Authority
- JP
- Japan
- Prior art keywords
- imaging
- correction
- image
- signal processing
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 138
- 238000000034 method Methods 0.000 title claims abstract description 31
- 238000012545 processing Methods 0.000 claims abstract description 169
- 238000012937 correction Methods 0.000 claims abstract description 106
- 238000001514 detection method Methods 0.000 claims abstract description 56
- 230000008569 process Effects 0.000 claims abstract description 22
- 230000035945 sensitivity Effects 0.000 claims description 14
- 239000000284 extract Substances 0.000 claims description 2
- 238000004891 communication Methods 0.000 description 27
- 230000005540 biological transmission Effects 0.000 description 16
- 230000006870 function Effects 0.000 description 11
- 238000007781 pre-processing Methods 0.000 description 11
- 230000003287 optical effect Effects 0.000 description 6
- 210000001747 pupil Anatomy 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 238000011161 development Methods 0.000 description 4
- 230000015556 catabolic process Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000006731 degradation reaction Methods 0.000 description 2
- 230000006866 deterioration Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000004907 flux Effects 0.000 description 1
- 238000003702 image correction Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/63—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/672—Focus control based on electronic image sensor signals based on the phase difference signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/67—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
- H04N25/671—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/703—SSIS architectures incorporating pixels for producing signals other than image signals
- H04N25/704—Pixels specially adapted for focusing, e.g. phase difference pixel sets
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
Description
以下、本発明の例示的な実施形態について、図面を参照して詳細に説明する。なお、以下では撮像装置の一例としての、位相差AF用の信号を生成可能な撮像素子を備えるデジタルカメラに本発明を適用した例を説明する。しかし、本発明でいう撮像装置は、デジタルカメラに限らず、このような撮像素子を備える任意の電子機器にも適用可能である。これらの電子機器には、例えば携帯電話機、ゲーム機、タブレット端末、パーソナルコンピュータ、時計型や眼鏡型の情報端末などが含まれてよい。
図1は、本実施形態の撮像装置の一例として、デジタルカメラ100の機能構成例を示すブロック図である。なお、図1に示す機能ブロックの1つ以上は、ASICやプログラマブルロジックアレイ(PLA)などのハードウェアによって実現されてもよいし、CPUやMPU等のプログラマブルプロセッサがソフトウェアを実行することによって実現されてもよい。また、ソフトウェアとハードウェアの組み合わせによって実現されてもよい。従って、以下の説明において、異なる機能ブロックが動作主体として記載されている場合であっても、同じハードウェアが主体として実現されうる。
撮像部201の構成を、図2を参照して説明する。
撮像部201において生成された出力信号のフォーマットについて、図3(a)を参照して説明する。出力信号は、同期コード300、フレームヘッダ情報301、ラインヘッダ情報302および画像情報303で構成される。
ここで、本実施形態での撮像部201の出力信号のうちのフレームヘッダ情報について図3(c)を参照して説明する。
信号処理部202は、図6に示すように、前処理部2020、画像処理部2021およびAF信号処理部2022から構成されるDSPである。
前処理部2020は、撮像部201の出力信号を受信するレシーバ回路601、情報取得部602、第一の信号選択部603および第二の信号選択部604から構成される。
次に、図7を参照して画像処理部2021について説明する。画像処理部2021は、画像処理情報取得部701と画像処理DSP702から構成される。
次に、図8を参照してAF信号処理部2022について説明する。AF信号処理部2022は、AF情報取得部801とAF信号処理DSP802から構成される。AF情報取得部801は、入力された信号からAF信号処理情報と画素配置情報を取得して、AF信号処理DSP802に出力する。AF情報取得部801は、AF信号処理情報に格納されたインデックスに基づいて、予め記録されている補正テーブルを参照し、AF信号処理情報に格納されたインデックスに対応する補正パラメータを取得する。
次に、図9を参照して、本実施形態に係るデジタルカメラ100における補正処理を含む一連の動作を説明する。なお、本実施形態における一連の動作は、表示部206においてライブビュー表示がされている状態で、カメラ操作部214のレリーズボタンが押下され、半押しの状態となった時点から開始される。また本処理は、カメラ制御部212がROM210あるいはフラッシュROM211に記憶されたプログラムをRAM209の作業用領域に展開し、実行することにより実現される。
次に、本発明の他の実施形態について説明する。本実施形態では、撮像部201が有する撮像素子が積層型である例を示す。図10に示す様に、本実施形態の撮像素子1101は、イメージセンサ用チップ1300と高速ロジックプロセス用チップ1301がチップレベルで積層されている。図10(a)は斜投影図、図10(b)は各チップの上面図である。イメージセンサ用チップ1300には、多数の画素を有する画素アレイ2010などが含まれる。また、高速ロジックプロセス用チップ1301には、読出回路2012、伝送回路2013、情報付加部2014、撮像記憶部2015、撮像通信部2016などデジタルデータを含む高速処理が可能な部分1302,1303が含まれる。
図11は、本発明のさらに他の実施形態としての携帯電話機2000の構成を示すブロック図である。本実施形態の携帯電話機2000は、音声通話機能の他、電子メール機能や、インターネット接続機能、画像の撮影、再生機能等を有する。
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)がプログラムを読み出して実行する処理である。
Claims (12)
- 撮像装置であって、
撮像用の画素と位相差検出用の画素とを有する撮像素子と、
前記撮像素子から読み出された画像データに対し、補正パラメータと、前記位相差検出用の画素の位置情報とを用いて補正を行う信号処理手段と、
決定された撮影条件に従った撮影を行うために、前記撮像装置の動作を制御する制御手段と、
前記撮像素子から読み出された前記撮影に係る画像データと、該画像データに対する前記信号処理手段による補正を制御する制御情報とを含んだ形態で前記画像データを前記信号処理手段に出力する出力手段と、を有し、
前記制御手段は、撮影時に前記撮影条件を前記出力手段に出力し、
前記出力手段は、前記撮像素子から読み出された前記撮影に係る画像データを、前記撮影条件に基づく前記制御情報とともに前記信号処理手段に出力し、
前記信号処理手段は、前記制御情報によって特定される補正パラメータと、前記位置情報とを用いて前記画像データを補正する、ことを特徴とする撮像装置。 - 前記出力手段は、前記撮影条件から、前記撮影条件に従った撮影に係る画像データの補正に使用すべき補正パラメータの識別情報を生成し、前記識別情報を前記制御情報に含めて出力することを特徴とする請求項1に記載の撮像装置。
- 前記出力手段は、前記撮影条件を前記制御情報に含めて出力し、
前記信号処理手段は、前記制御情報に含まれる前記撮影条件に基づいて前記補正パラメータを特定し、前記補正を行うことを特徴とする請求項1に記載の撮像装置。 - 前記出力手段は、前記撮影条件から、前記撮像素子が有する前記位相差検出用の画素のうち、前記補正に必要な位相差検出用の画素の位置情報を抽出し、前記制御情報に含めて出力し、
前記信号処理手段は、前記制御情報に含まれる位置情報を用いて前記補正を行うことを特徴とする請求項1ないし3のいずれか1項に記載の撮像装置。 - 前記信号処理手段は、
撮像画像を生成するために前記位相差検出用の画素に係る画素データを補正する第1の補正手段と、
位相差検出用の信号を生成するために前記位相差検出用の画素に係る画素データを補正する第2の補正手段と、
を有し、
前記出力手段は、前記第1の補正手段が用いる補正パラメータの識別情報と、前記第2の補正手段が用いる補正パラメータの識別情報とを前記制御情報に含めて出力することを特徴とする請求項1ないし4のいずれか1項に記載の撮像装置。 - 前記第1の補正手段は、前記画像データに含まれる画素データのうち、前記位相差検出用の画素に係る画素データと、前記撮像用の画素に係る画素データとのレベルの差を補正することを特徴とする請求項5記載の撮像装置。
- 前記第1の補正手段は、前記画像データに含まれる画素データのうち、前記位相差検出用の画素のクロストークの影響を補正することを特徴とする請求項5に記載の撮像装置。
- 前記信号処理手段は、
前記制御情報に含まれる、前記第1の補正手段が用いる補正パラメータの識別情報を前記第1の補正手段に、前記第2の補正手段が用いる補正パラメータの識別情報を前記第2の補正手段に、それぞれ分配する分配手段をさらに有することを特徴とする請求項5ないし7のいずれか1項に記載の撮像装置。 - 前記分配手段は、前記制御情報に前記位相差検出用の画素の位置情報が含まれている場合、該位置情報を前記第1の補正手段および前記第2の補正手段の両方に分配することを特徴とする請求項8記載の撮像装置。
- 前記撮影条件は、感度、絞りの大きさ、温度の1つ以上を含むことを特徴とする請求項1ないし9のいずれか1項に記載の撮像装置。
- 撮像用の画素と位相差検出用の画素とを有する撮像素子を有する撮像装置の制御方法であって、
信号処理手段が、前記撮像素子から読み出された画素データに対し、補正パラメータと、前記位相差検出用の画素の位置情報とを用いて補正を行う信号処理工程と、
制御手段が、決定された撮影条件に従った撮影を行うために、前記撮像装置の動作を制御する制御工程と、
出力手段が、前記撮像素子から読み出された前記撮影に係る画像データと、該画像データに対する前記信号処理手段による補正を制御する制御情報とを含んだ形態で前記画像データを前記信号処理手段に出力する出力工程と、を有し、
前記制御工程では、前記撮影時に前記撮影条件を前記出力手段に出力し、
前記出力工程では、前記撮像素子から読み出された前記撮影に係る画像データを、前記撮影条件に基づく前記制御情報とともに前記信号処理手段に出力し、
前記信号処理工程では、前記制御情報によって特定される補正パラメータと、前記位置情報とを用いて前記画像データを補正する、ことを特徴とする撮像装置の制御方法。 - 撮像装置が備えるコンピュータを、請求項1ないし10のいずれか1項に記載の撮像装置の各手段として機能させるためのプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014136216A JP6363889B2 (ja) | 2014-07-01 | 2014-07-01 | 撮像素子、撮像装置およびその制御方法 |
US14/755,797 US9648213B2 (en) | 2014-07-01 | 2015-06-30 | Image sensor, image capturing apparatus, and control method of image capturing apparatus |
CN201510379400.2A CN105245797B (zh) | 2014-07-01 | 2015-07-01 | 图像传感器、摄像设备和摄像设备的控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014136216A JP6363889B2 (ja) | 2014-07-01 | 2014-07-01 | 撮像素子、撮像装置およびその制御方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2016015590A true JP2016015590A (ja) | 2016-01-28 |
JP2016015590A5 JP2016015590A5 (ja) | 2017-08-10 |
JP6363889B2 JP6363889B2 (ja) | 2018-07-25 |
Family
ID=55017907
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014136216A Active JP6363889B2 (ja) | 2014-07-01 | 2014-07-01 | 撮像素子、撮像装置およびその制御方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9648213B2 (ja) |
JP (1) | JP6363889B2 (ja) |
CN (1) | CN105245797B (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017050734A (ja) * | 2015-09-02 | 2017-03-09 | 株式会社リコー | シリアル通信装置、通信システム及び通信方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007143118A (ja) * | 2005-09-12 | 2007-06-07 | Victor Co Of Japan Ltd | 撮像装置 |
JP2008301286A (ja) * | 2007-05-31 | 2008-12-11 | Canon Inc | 撮像装置及びその制御方法 |
JP2009105687A (ja) * | 2007-10-24 | 2009-05-14 | Mitsubishi Electric Corp | 撮像システム |
JP2009124573A (ja) * | 2007-11-16 | 2009-06-04 | Nikon Corp | 撮像装置 |
JP2012120158A (ja) * | 2010-11-12 | 2012-06-21 | Sony Corp | 画像出力装置、画像出力方法、画像処理装置、画像処理方法、プログラム、データ構造、および撮像装置 |
JP2013211770A (ja) * | 2012-03-30 | 2013-10-10 | Canon Inc | 撮像装置および信号処理方法 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3382973B2 (ja) * | 1992-02-07 | 2003-03-04 | オリンパス光学工業株式会社 | 電子内視鏡装置 |
US5896166A (en) * | 1993-06-02 | 1999-04-20 | Envision Medical Corporation | Remote CCD video camera with non-volatile digital memory |
EP0669756B1 (en) * | 1994-02-23 | 2001-10-17 | Smith & Nephew, Inc. | Camera head with memory |
US8089509B2 (en) * | 2001-11-09 | 2012-01-03 | Karl Storz Imaging, Inc. | Programmable camera control unit with updatable program |
US8199188B2 (en) * | 2001-11-09 | 2012-06-12 | Karl Storz Imaging, Inc. | Video imaging system with a camera control unit |
JP2006157599A (ja) * | 2004-11-30 | 2006-06-15 | Olympus Corp | 撮像装置 |
JP5298638B2 (ja) * | 2008-02-14 | 2013-09-25 | 株式会社ニコン | 画像処理装置、撮像装置、補正係数算出方法及び画像処理プログラム |
JP5097914B2 (ja) * | 2008-07-30 | 2012-12-12 | オリンパス株式会社 | 成分抽出補正装置、成分抽出補正方法、成分抽出補正プログラム、又は電子機器 |
JP5543098B2 (ja) * | 2008-11-14 | 2014-07-09 | キヤノン株式会社 | 撮像装置 |
CN102860012B (zh) * | 2010-04-21 | 2015-06-03 | 佳能株式会社 | 图像处理装置及图像处理方法 |
WO2012164934A1 (ja) * | 2011-05-30 | 2012-12-06 | 株式会社ニコン | 画像処理装置、画像処理方法およびプログラム |
KR101836432B1 (ko) * | 2011-12-16 | 2018-03-12 | 삼성전자주식회사 | 촬상장치, 이미지 보정 방법 및 컴퓨터 판독가능 기록매체 |
JP6239820B2 (ja) * | 2011-12-19 | 2017-11-29 | キヤノン株式会社 | 撮像装置及びその制御方法 |
US8981511B2 (en) * | 2012-02-29 | 2015-03-17 | Semiconductor Components Industries, Llc | Multi-chip package for imaging systems |
JP6066593B2 (ja) * | 2012-06-13 | 2017-01-25 | キヤノン株式会社 | 撮像システムおよび撮像システムの駆動方法 |
US10459674B2 (en) * | 2013-12-10 | 2019-10-29 | Apple Inc. | Apparatus and methods for packing and transporting raw data |
JP2015198391A (ja) * | 2014-04-02 | 2015-11-09 | キヤノン株式会社 | 撮像装置、撮像装置の制御方法、およびプログラム |
-
2014
- 2014-07-01 JP JP2014136216A patent/JP6363889B2/ja active Active
-
2015
- 2015-06-30 US US14/755,797 patent/US9648213B2/en active Active
- 2015-07-01 CN CN201510379400.2A patent/CN105245797B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007143118A (ja) * | 2005-09-12 | 2007-06-07 | Victor Co Of Japan Ltd | 撮像装置 |
JP2008301286A (ja) * | 2007-05-31 | 2008-12-11 | Canon Inc | 撮像装置及びその制御方法 |
JP2009105687A (ja) * | 2007-10-24 | 2009-05-14 | Mitsubishi Electric Corp | 撮像システム |
JP2009124573A (ja) * | 2007-11-16 | 2009-06-04 | Nikon Corp | 撮像装置 |
JP2012120158A (ja) * | 2010-11-12 | 2012-06-21 | Sony Corp | 画像出力装置、画像出力方法、画像処理装置、画像処理方法、プログラム、データ構造、および撮像装置 |
JP2013211770A (ja) * | 2012-03-30 | 2013-10-10 | Canon Inc | 撮像装置および信号処理方法 |
Also Published As
Publication number | Publication date |
---|---|
CN105245797A (zh) | 2016-01-13 |
JP6363889B2 (ja) | 2018-07-25 |
CN105245797B (zh) | 2018-10-23 |
US20160006905A1 (en) | 2016-01-07 |
US9648213B2 (en) | 2017-05-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104683668B (zh) | 摄像装置及移动电话 | |
JP4742242B2 (ja) | 撮像装置及びそのプログラム | |
JP5937767B2 (ja) | 撮像装置及び撮像方法 | |
JP6158340B2 (ja) | 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム | |
KR101889932B1 (ko) | 촬영 장치 및 이에 적용되는 촬영 방법 | |
JP5750550B2 (ja) | 撮像装置及び合焦制御方法 | |
JPWO2014155806A1 (ja) | 撮像装置及び合焦制御方法 | |
JPWO2013183406A1 (ja) | 撮像装置及び画像表示方法 | |
JP6678504B2 (ja) | 撮像装置及びその制御方法、プログラム並びに記憶媒体 | |
JP5753323B2 (ja) | 撮像装置及び画像表示方法 | |
JP2012049773A (ja) | 撮像装置および方法、並びにプログラム | |
JP2012222495A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
US20170251154A1 (en) | Image capturing apparatus, control method thereof, and storage medium | |
US10009544B2 (en) | Image capturing apparatus, control method of the same and image sensor | |
JP6558976B2 (ja) | 撮像装置、その制御方法及びプログラム並びに撮像素子 | |
US9906749B2 (en) | Image capturing apparatus capable of generating and adding pixel region information to image data, method of controlling the same, and image sensor | |
JP6363889B2 (ja) | 撮像素子、撮像装置およびその制御方法 | |
JP2010136301A (ja) | 撮像装置及びその固体撮像素子 | |
JP2016029750A (ja) | 撮像装置、信号処理方法、信号処理プログラム | |
JP2017201749A (ja) | 画像処理装置およびその制御方法 | |
JP2016054479A (ja) | 撮像装置およびその制御方法、プログラムならびに撮像素子 | |
JP6703784B2 (ja) | 撮像装置およびその制御方法ならびに撮像素子 | |
JP6458114B2 (ja) | 撮像素子、撮像装置及び携帯電話機 | |
JPWO2017006538A1 (ja) | 撮像装置および静止画像生成方法 | |
JP2022018906A (ja) | 撮像装置およびその制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170628 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170628 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180306 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180309 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180427 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180601 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180629 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6363889 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |