JP2017077005A - 撮像装置およびその制御方法 - Google Patents
撮像装置およびその制御方法 Download PDFInfo
- Publication number
- JP2017077005A JP2017077005A JP2016234449A JP2016234449A JP2017077005A JP 2017077005 A JP2017077005 A JP 2017077005A JP 2016234449 A JP2016234449 A JP 2016234449A JP 2016234449 A JP2016234449 A JP 2016234449A JP 2017077005 A JP2017077005 A JP 2017077005A
- Authority
- JP
- Japan
- Prior art keywords
- image
- image data
- data
- eye
- file
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Stereoscopic And Panoramic Photography (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Studio Devices (AREA)
Abstract
【解決手段】撮像素子505は、マイクロレンズを通して画素ごとに画像信号を出力する複数の光電変換部を備える。撮像信号処理回路506は、撮像素子505の出力する画像信号を左目用画像と右目用画像の各信号に分離する。画像合成回路513は左目用画像と右目用画像のデータを加算平均処理して合成画像データを生成する。記録媒体制御I/F部510は、3D表示に用いる左目用画像および右目用画像、並びに2D表示に用いる合成画像の各データを画像ファイル内の異なる領域にそれぞれ記録する制御を行う。
【選択図】 図4
Description
立体映像をユーザが鑑賞する仕組みとしては、対象物を左目で見た像及び右目で見た像に対応するように、左右方向に視差を持たせた、右目用画像と左目用画像のデータが用意される。各画像をユーザが右目と左目でそれぞれ見ることで立体視可能である。その方法には、視差バリア方式やレンチキュラ方式等のように鑑賞対象の映像を視差分割する方法がある。また左右で特性の異なるフィルタを介して、ユーザの左目と右目に異なる映像を提示する方法等が知られている。
そこで、本発明の目的は、立体視表示に用いる左目用画像および右目用画像のデータと、2次元表示に用いる正しい被写体形状の画像データを同一ファイルに記録することで再生画像の再現性を高めることである。
画素アレイ101は、マイクロレンズ202と、カラーフィルタ403と、PD404および405を有する。PD404、PD405は、図2(A)中のPD203、PD204にそれぞれ相当する。
撮像光学系を構成するレンズ部501は、被写体からの光を撮像素子505に結像する。撮像素子505は、図1に示す撮像素子100に相当し、図2(B)に示す画素構成を有する。レンズ駆動装置502は、ズーム制御、フォーカス制御、絞り制御等を行う。メカニカルシャッタ503は、シャッタ駆動装置504によって制御される。撮像素子505は、レンズ部501により結像した被写体像を画像信号に変換する。撮像信号処理回路506は、撮像素子505の出力する画像信号に対して各種の処理(画素補間処理や色変換処理等)や補正を行う。タイミング発生部507は、撮像素子505や撮像信号処理回路506に必要なタイミング信号を出力する。
撮像信号処理回路506は、撮像素子505が出力する撮像データを左目用画像と右目用画像の各データに振り分けて画像処理を行う。メモリ部508は、撮像信号処理回路506の出力データ、画像合成回路513によって生成された合成画像データ等を記憶する。
撮像装置のメイン電源が投入されると、制御系回路部の電源がオン状態となり、更に撮像信号処理回路506等の撮像処理系回路の電源がオン状態となる。ユーザが図示しないレリーズボタンを操作すると、システム制御部509が撮像素子505からのデータに基づいて、焦点状態検出に係る演算を行い、撮像装置から被写体までの距離を算出する。その後、レンズ駆動装置502がレンズ部501の可動レンズを駆動し、システム制御部509は、合焦状態であるか否かを判定する。
以下、本発明の第1実施形態について説明する。第1実施形態では、左右のPD、つまり全PDのRAW画像データを撮像信号処理回路506に入力した場合に合成画像データ、右目用画像データ、および左目用画像データをそれぞれ出力可能なシステム構成を有する。RAW画像とは、撮像素子505による各画素のデータから得られる画像であって現像処理等の画像加工を行う前の画像を意味する。
画像データファイル600は、DCFヘッダ部610、サムネイル画像部620およびJPEG画像部630の各領域を有する。JPEGは、“Joint Photographic Experts Group”の略号である。
・メタデータA(611):JPEG画像部630に格納される画像データに関連する撮影情報やパラメータ等。
・オフセット値B(612):合成サムネイル画像部621の先頭位置までのオフセットデータ。
・オフセット値C(613):左目用サムネイル画像部622の先頭位置までのオフセットデータ。
・オフセット値D(614):右目用サムネイル画像部623の先頭位置までのオフセットデータ。
・オフセット値E(615):合成JPEG画像部631の先頭位置までのオフセットデータ。
・オフセット値F(616):左目用JPEG画像部632の先頭位置までのオフセットデータ。
・オフセット値G(617):右目用JPEG画像部633の先頭位置までのオフセットデータ。
オフセット値BないしGはDCFヘッダ部610の基準位置から算出される各画像部までの相対位置情報であり、これらの値により、画像ファイル内における各画像データの開始位置が特定される。
合成サムネイル画像部621には、2D表示に使用するサムネイル画像データが記録される。左目用サムネイル画像部622と右目用サムネイル画像部623には、3D表示に使用するサムネイルの左目用画像と右目用画像のデータがそれぞれ記録される。
以上に説明したファイル構造は一例であって、画像編集等の各種用途に応じて各画像部の配置順序を変更したファイル構造にしてもよい。
S700で処理が開始すると、次のS701では撮像素子505から読み出した右側PDと左側PDを併せた全PDのRAWデータがメモリ部508上に展開され、S702へ進む。S702にて、メモリ部508上のRAW画像データに対し、RAW画像用の現像パラメータを用いて撮像信号処理回路506が現像処理を行い、出力された画像データがメモリ部508に配置されて、S703へ進む。RAW画像については、全てのPDから読み出した信号が用いられるため、前述した点光源の光が暈けた状態で撮影される被写体に対しても正しい形状の画像データとして認識できる。ここでは便宜上、右側PDと左側PDを併せた全てのPDを用いて加算合成により生成された画像のことを合成画像と呼ぶことにする。RAW画像に対して合成RAW画像、JPEG画像に対して合成JPEG画像、サムネイル画像に対して合成サムネイル画像という。なお、加算合成には加算平均処理も含むものとする。
次に、本発明の第2実施形態を説明する。第2実施形態では、右側PDと左側PDの各RAWデータをそれぞれ撮像信号処理回路506に入力して、右目用画像データ、左目用画像データを出力する。右目用画像データと左目用画像データは画像合成回路513により合成画像データとして出力される。なお、第2実施形態におけるファイル構造は、第1実施形態の場合と同様である(図5参照)。
S800で処理が開始すると、次のS801では、撮像素子505から読み出した、右側PDと左側PDによるRAWデータがメモリ部508上に展開され、S802へ進む。S802にて、メモリ部508上の右側PDのRAWデータが抽出され、RAW画像用の現像パラメータを用いて撮像信号処理回路506が現像処理を行う。出力された右目用RAW画像データはメモリ部508に配置され、S803へ進む。S803にて、メモリ部508上の左側PDによるRAWデータが抽出され、RAW画像用の現像パラメータを用いて撮像信号処理回路506が現像処理を行う。出力された左目用RAW画像データはメモリ部508に配置され、S804へ進む。
次に、本発明の第3実施形態を説明する。第3実施形態では、合成画像データ並びに右目用画像データおよび左目用画像データとともに、RAW画像データを同一ファイルに内包させる。
図8は、本実施形態における画像データのファイル構造を例示する。画像データファイル900はRAWヘッダ部910、サムネイル画像部920、表示用JPEG画像部930、RAW画像部940の各領域からなる。
・メタデータA(911):RAW画像部940に格納される画像データに関連する撮影情報やパラメータ等。
・オフセット値B(912):合成サムネイル画像部921の先頭位置までのオフセットデータ。
・オフセット値C(913):左目用サムネイル画像部922の先頭位置までのオフセットデータ。
・オフセット値D(914):右目用サムネイル画像部923の先頭位置までのオフセットデータ。
・オフセット値E(915):2D表示用JPEG画像部931の先頭位置までのオフセットデータ。
・オフセット値F(916):左目への表示用JPEG画像部932の先頭位置までのオフセットデータ。
・オフセット値G(917):右目への表示用JPEG画像部933の先頭位置までのオフセットデータ。
・オフセット値H(918):左目用RAW画像部941の先頭位置までのオフセットデータ。
・オフセット値I(919):右目用RAW画像部942の先頭位置までのオフセットデータ。
オフセット値BないしIにより、画像ファイル内における各画像データの開始位置が特定される。
合成サムネイル画像部921には、2D表示に使用するサムネイル画像データが記録される。左目用サムネイル画像部922と右目用サムネイル画像部923には、3D表示に使用するサムネイルの左目用画像と右目用画像の各データがそれぞれ記録される。
RAWファイル生成処理は第1実施形態および第2実施形態で説明したDCFファイル生成と同様に行われる。即ち、図6や図7で説明した処理に従って、各画像部921ないし923、931ないし933、941および942、あるいは940に格納する画像データがそれぞれメモリ部508上に配置される。その後、撮影情報やパラメータ等のメタデータA(911参照)が作成され、各画像部までのオフセット値BないしI(912ないし919参照)が計算されて設定が行われることにより、RAWヘッダ部910が作成される。このRAWヘッダ部910と各画像データに基づき、図8または図9に示すファイル構造の画像ファイルとして1つに結合する処理が実行され、ファイル生成処理が終了する。
以上のように、本実施形態では2D表示用の画像データとして正しい被写体形状となる画像データと、画像加工前のRAW画像データを含むファイルを生成することができる。
505 撮像素子
506 撮像信号処理回路
509 システム制御部
510 記録媒体制御I/F部
511 記録媒体
513 画像合成回路
Claims (1)
- 複数のマイクロレンズを有し、前記複数のマイクロレンズは、各マイクロレンズがそれぞれ複数の光電変換部に対応する撮像素子と、
前記各マイクロレンズに対応する画素を構成する前記複数の光電変換部より出力される複数の画像信号を画素ごとにそれぞれ合成して合成画像データを生成する画像生成手段と、
前記合成画像データと、前記複数の光電変換部のうちのいずれかより出力された画像信号で構成される画像データとを含む画像ファイルを生成する画像ファイル生成手段と、を有することを特徴とする撮像装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016234449A JP6433474B2 (ja) | 2016-12-01 | 2016-12-01 | 撮像装置およびその制御方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016234449A JP6433474B2 (ja) | 2016-12-01 | 2016-12-01 | 撮像装置およびその制御方法 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011264204A Division JP6053276B2 (ja) | 2011-10-04 | 2011-12-02 | 撮像装置およびその制御方法、画像処理装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017077005A true JP2017077005A (ja) | 2017-04-20 |
JP6433474B2 JP6433474B2 (ja) | 2018-12-05 |
Family
ID=58551641
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016234449A Expired - Fee Related JP6433474B2 (ja) | 2016-12-01 | 2016-12-01 | 撮像装置およびその制御方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6433474B2 (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006013759A (ja) * | 2004-06-24 | 2006-01-12 | Matsushita Electric Ind Co Ltd | 立体視用の画像ファイルを生成する電子機器、3次元画像データを生成する電子機器、画像ファイル生成方法、3次元画像データ生成方法および画像ファイルのファイル構造 |
JP2008141516A (ja) * | 2006-12-01 | 2008-06-19 | Fujifilm Corp | 画像ファイル作成装置、撮像装置及びファイル構造 |
JP2008252493A (ja) * | 2007-03-30 | 2008-10-16 | Fujifilm Corp | ファイル生成方法および装置並びに立体画像の表示制御方法および装置 |
WO2011118089A1 (ja) * | 2010-03-24 | 2011-09-29 | 富士フイルム株式会社 | 立体撮像装置 |
JP2013118459A (ja) * | 2011-12-02 | 2013-06-13 | Canon Inc | 撮像装置およびその制御方法 |
-
2016
- 2016-12-01 JP JP2016234449A patent/JP6433474B2/ja not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006013759A (ja) * | 2004-06-24 | 2006-01-12 | Matsushita Electric Ind Co Ltd | 立体視用の画像ファイルを生成する電子機器、3次元画像データを生成する電子機器、画像ファイル生成方法、3次元画像データ生成方法および画像ファイルのファイル構造 |
JP2008141516A (ja) * | 2006-12-01 | 2008-06-19 | Fujifilm Corp | 画像ファイル作成装置、撮像装置及びファイル構造 |
JP2008252493A (ja) * | 2007-03-30 | 2008-10-16 | Fujifilm Corp | ファイル生成方法および装置並びに立体画像の表示制御方法および装置 |
WO2011118089A1 (ja) * | 2010-03-24 | 2011-09-29 | 富士フイルム株式会社 | 立体撮像装置 |
JP2013118459A (ja) * | 2011-12-02 | 2013-06-13 | Canon Inc | 撮像装置およびその制御方法 |
Also Published As
Publication number | Publication date |
---|---|
JP6433474B2 (ja) | 2018-12-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10587860B2 (en) | Imaging apparatus and method for controlling same | |
JP5854984B2 (ja) | 画像処理装置、撮像装置、制御方法、及びプログラム | |
JP4686795B2 (ja) | 画像生成装置及び画像再生装置 | |
JP5096048B2 (ja) | 撮像装置、立体画像再生装置及び立体画像再生プログラム | |
JP2013201752A5 (ja) | ||
RU2567438C1 (ru) | Устройство формирования изображений и способ управления им | |
JP6053276B2 (ja) | 撮像装置およびその制御方法、画像処理装置 | |
JP5864992B2 (ja) | 撮像装置およびその制御方法、並びに画像処理装置およびその制御方法 | |
JP5924943B2 (ja) | 撮像装置および撮像装置の制御方法 | |
JP6433474B2 (ja) | 撮像装置およびその制御方法 | |
JP2014022888A (ja) | 撮像装置および撮像装置の制御方法 | |
JP6626257B2 (ja) | 画像表示装置、撮像装置、画像表示方法、プログラム、記憶媒体 | |
JP5911276B2 (ja) | 撮像装置およびその制御方法、画像処理装置 | |
JP6074201B2 (ja) | 画像処理装置、制御方法、及びプログラム | |
JP6366793B2 (ja) | 画像処理装置およびその制御方法、撮像装置 | |
JP6177305B2 (ja) | 撮像装置およびその制御方法、並びに画像処理装置およびその制御方法 | |
JP6138222B2 (ja) | 画像処理装置、撮像装置、制御方法、及びプログラム | |
JP6161307B2 (ja) | 撮像装置およびその制御方法 | |
JP2016154360A (ja) | 撮像装置およびその制御方法 | |
JP6172949B2 (ja) | 撮像装置、撮像装置の制御方法、画像処理装置および画像処理装置の制御方法 | |
JP2017126916A (ja) | 撮像装置 | |
JP2014090252A (ja) | 画像処理装置およびその制御方法、撮像装置およびその制御方法、並びに画像処理プログラム | |
JP6230266B2 (ja) | 撮像装置、画像処理装置、および制御方法 | |
JP2014204299A (ja) | 撮像装置および撮像装置の制御方法 | |
JP2013157726A (ja) | 撮像装置および撮像装置の制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170807 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170829 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171027 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180327 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180502 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181009 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181106 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6433474 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |