JP2016005027A - 情報処理装置、撮像装置、撮像システム、情報処理方法およびプログラム。 - Google Patents
情報処理装置、撮像装置、撮像システム、情報処理方法およびプログラム。 Download PDFInfo
- Publication number
- JP2016005027A JP2016005027A JP2014122534A JP2014122534A JP2016005027A JP 2016005027 A JP2016005027 A JP 2016005027A JP 2014122534 A JP2014122534 A JP 2014122534A JP 2014122534 A JP2014122534 A JP 2014122534A JP 2016005027 A JP2016005027 A JP 2016005027A
- Authority
- JP
- Japan
- Prior art keywords
- imaging
- imaging units
- subjects
- grouping
- focus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Exposure Control For Cameras (AREA)
- Stereoscopic And Panoramic Photography (AREA)
- Automatic Focus Adjustment (AREA)
- Studio Devices (AREA)
Abstract
【解決手段】 F値が小さい状態で撮影された画像に基づいて導出された、複数の被写体の形状及び位置関係に基づいて、複数の撮像部を組分けし、組分けされた各撮像部が、それぞれ対応する被写体にフォーカスし、前記形状および位置関係の導出に用いられた画像を撮影した時よりも大きなF値で撮像を行うように、複数の撮像部のフォーカスパラメータを決定する。
【選択図】 図4
Description
本実施例では、複数の撮像部を利用して、複数の被写体を含むシーンを異なる方向から撮影する場合に、撮像部を複数の組に分割し、組ごとに異なる被写体にフォーカスを合わせて撮影する例について説明する。これにより、全ての被写体にフォーカスを合わせた状態で撮像を行うことができる。なお、本実施例で用いられる撮像部の数は、撮像対象の被写体の数に比べると十分に多いものとする。
まず、前述のステップS405の組分け処理の詳細について説明する。なお、本処理は、一度に全ての被写体を被写界深度に収めることができない撮像部が存在する場合に実施する。
次に、前述のステップS406の、フォーカスパラメータ決定処理の詳細について説明する。本処理では、各組に対応する被写体にフォーカスが合うように、各組に属する撮像部のフォーカス距離を設定する。
実施例1では、予め決められたパターンを用いて撮像部を各被写体へ割り振ることで組分け処理を行う例を示した。本実施例では、撮像部の組分けの際に、各撮像部から被写体が見えているかどうかを考慮して、各被写体へ割り振る撮像部を決定する。これによって、撮像部から見えていない被写体に対してその撮像部を割り振ってしまい、結果として撮影が無駄になってしまうことを防ぐことができる。
本実施例では、情報処理装置109で決定されたフォーカスパラメータを用いて撮像された画像データに基づいて、被写体の形状情報を精度よく算出する例について説明する。実施例1および2との共通点については説明を省略し、差異点についてのみ述べる。本実施例の情報処理装置109の構成は、図11に示すように、実施例1および2の構成に形状推定部1101を加えたものである。以下、本実施例の情報処理装置109で行われる処理について、図12に示すフローチャートを参照して説明する。
本発明の実施形態は上記に挙げたものに限られずその他の様々な形態をとることができる。例えば、上記の実施例では、組分け部304が、各撮像部がそれぞれ一つの被写体に対応するように撮像部の組分けを行ったが、複数の被写体が被写界深度内に含まれる場合には、各撮像部がそれぞれ複数の被写体に対応するように組分けを行うようにしてもよい。
また、上記の実施例では、比較部303が、F値が各撮像部の開放値である場合に、各被写体の奥行きと各撮像部の被写界深度を比較したが、F値は開放値に限られず、所定の閾値を超えない範囲でF値を変化させながら比較を行うようにしてもよい。被写体の形状に応じて撮像に用いるF値を変更させる場合は、パラメータ決定部305は、F値など、撮像に用いる被写界深度を示す情報をフォーカスパラメータに追加して撮像部101〜108に追加するようにすればよい。
また、上記の実施例では、被写体を囲むように撮像部を配置した撮像システムについて説明したが、撮像部の配置例はこれに限られず、各撮像部がある一つの平面上に並べて配置された多眼カメラなどにも適用することができる。
109 情報処理装置
201 CPU
202 RAM
203 ROM
301 位置取得部
302 形状取得部
303 比較部
304 組分け部
305 パラメータ決定部
Claims (11)
- 複数の被写体が存在するシーンを複数の異なる視点位置から撮像する複数の撮像部の、フォーカス位置を示す情報を含むフォーカスパラメータを決定する情報処理装置であって、
前記フォーカスパラメータを用いた撮像におけるF値よりも大きなF値で前記複数の撮像部により撮像された複数の画像に基づいて導出された、前記複数の被写体の形状と位置とを示す形状情報を取得する取得手段と、
前記取得手段によって取得された前記形状情報に基づいて、前記複数の撮像部を、それぞれが前記複数の被写体のうちの少なくとも1つに対応する複数の組に分ける組分け手段と、
前記取得手段によって取得された前記形状情報と、前記組分け手段による組分けとに基づいて、前記複数の撮像部がそれぞれ対応する被写体にフォーカスするように、前記フォーカスパラメータを決定する決定手段とを有することを特徴とする情報処理装置。 - 前記決定手段により決定された前記フォーカスパラメータに基づいて前記複数の撮像部によって撮像された複数の画像を取得し、該取得した複数の画像に基づいて、前記複数の被写体の形状を推定する推定手段を更に備えることを特徴とする請求項1に記載の情報処理装置。
- 前記組分け手段は、前記形状情報に基づいて、前記複数の撮像部のそれぞれについて各被写体の見え度合いを示すビジビリティを算出し、該算出したビジビリティに基づいて前記組分けを行うことを特徴とする請求項1に記載の情報処理装置。
- 前記形状情報と、前記複数の撮像部の被写界深度を示す情報とに基づいて、前記組分けを行うか否かを判定する判定手段を更に有することを特徴とする請求項1乃至3のいずれか一項に記載の情報処理装置。
- 前記フォーカス位置を示す情報は、前記複数の撮像部のレンズと撮像センサの位置関係を示す情報であることを特徴とする請求項1乃至4のいずれか一項に記載の情報処理装置。
- 前記フォーカスパラメータは、前記複数の撮像部の被写界深度を示す情報を更に含むことを特徴とする請求項5に記載の情報処理装置。
- 前記複数の撮像部の被写界深度を示す情報は、前記複数の撮像部のF値を示す情報であることを特徴とする請求項6に記載の情報処理装置。
- 複数の被写体が存在するシーンを複数の異なる視点位置から撮像する複数の撮像部と、
前記複数の撮像部により撮像された複数の画像に基づいて導出された、前記複数の被写体の形状および前記複数の撮像部との位置関係を示す形状情報を取得する取得手段と、
前記取得手段により取得された前記形状情報に基づいて、前記複数の撮像部を、それぞれが前記複数の被写体のうちの少なくとも1つに対応する複数の組に分ける組分け手段と、
前記取得手段により取得された前記形状情報と、前記組分け手段による組分けとに基づいて、前記複数の撮像部がそれぞれ対応する被写体にフォーカスするように、かつ、前記複数の画像の撮像に用いたF値よりも小さなF値となるように、前記複数の撮像部を制御する制御手段とを有することを特徴とする撮像装置。 - 複数の被写体が存在するシーンを複数の異なる視点位置から撮像する複数の撮像部と、前記複数の撮像部の、フォーカス位置を示す情報を含むフォーカスパラメータを決定する情報処理装置とを含む撮像システムであって、
前記フォーカスパラメータを用いた撮像におけるF値よりも大きなF値で前記複数の撮像部により撮像された複数の画像に基づいて導出された、前記複数の被写体の形状と前記複数の撮像部との位置関係を示す形状情報を取得する取得手段と、
前記取得手段によって取得された前記形状情報に基づいて、前記複数の撮像部を、それぞれが前記複数の被写体のうちの少なくとも1つに対応する複数の組に分ける組分け手段と、
前記取得手段によって取得された前記形状情報と、前記組分け手段による組分けとに基づいて、前記複数の撮像部がそれぞれ対応する被写体にフォーカスするように、前記フォーカスパラメータを決定する決定手段と、
前記決定手段により決定された前記フォーカスパラメータに基づいて、それぞれが対応する被写体にフォーカスするように前記複数の撮像部を制御する制御手段を有することを特徴とする撮像システム。 - 複数の被写体が存在するシーンを複数の異なる視点位置から撮像する複数の撮像部の、フォーカス位置を示す情報を含むフォーカスパラメータを決定する情報処理方法であって、
前記フォーカスパラメータを用いた撮像におけるF値よりも大きなF値で前記複数の撮像部により撮像された複数の画像に基づいて導出された、前記複数の被写体の形状と前記複数の撮像部との位置関係を示す形状情報を取得する取得ステップと、
前記取得ステップで取得された前記形状情報に基づいて、前記複数の撮像部を、それぞれが前記複数の被写体のうちの少なくとも1つに対応する複数の組に分ける組分けステップと、
前記取得ステップで取得された前記形状情報と、前記組分けステップでの組分けとに基づいて、前記複数の撮像部がそれぞれ対応する被写体にフォーカスするように、前記フォーカスパラメータを決定する決定ステップとを含むことを特徴とする情報処理方法。 - コンピュータを請求項1乃至7のいずれか一項に記載の情報処理装置の各手段として機能させるプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014122534A JP6305232B2 (ja) | 2014-06-13 | 2014-06-13 | 情報処理装置、撮像装置、撮像システム、情報処理方法およびプログラム。 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014122534A JP6305232B2 (ja) | 2014-06-13 | 2014-06-13 | 情報処理装置、撮像装置、撮像システム、情報処理方法およびプログラム。 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018041221A Division JP6602412B2 (ja) | 2018-03-07 | 2018-03-07 | 情報処理装置及び方法、情報処理システム、ならびにプログラム。 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016005027A true JP2016005027A (ja) | 2016-01-12 |
JP6305232B2 JP6305232B2 (ja) | 2018-04-04 |
Family
ID=55224052
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014122534A Active JP6305232B2 (ja) | 2014-06-13 | 2014-06-13 | 情報処理装置、撮像装置、撮像システム、情報処理方法およびプログラム。 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6305232B2 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018088037A1 (ja) * | 2016-11-14 | 2018-05-17 | ソニー株式会社 | 可動型撮像装置の制御装置、可動型撮像装置の制御方法及びプログラム |
JPWO2017154606A1 (ja) * | 2016-03-10 | 2019-01-10 | ソニー株式会社 | 情報処理装置および情報処理方法 |
WO2020084894A1 (ja) * | 2018-10-24 | 2020-04-30 | ソニー株式会社 | マルチカメラシステム、制御値算出方法及び制御装置 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006261999A (ja) * | 2005-03-16 | 2006-09-28 | Olympus Corp | カメラ、カメラシステムおよび複数カメラの協調撮影方法 |
JP2012044540A (ja) * | 2010-08-20 | 2012-03-01 | Canon Inc | 撮影システム、撮像装置及び撮影方法 |
JP2013065280A (ja) * | 2011-09-01 | 2013-04-11 | Canon Inc | 画像処理方法、画像処理装置およびプログラム |
-
2014
- 2014-06-13 JP JP2014122534A patent/JP6305232B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006261999A (ja) * | 2005-03-16 | 2006-09-28 | Olympus Corp | カメラ、カメラシステムおよび複数カメラの協調撮影方法 |
JP2012044540A (ja) * | 2010-08-20 | 2012-03-01 | Canon Inc | 撮影システム、撮像装置及び撮影方法 |
JP2013065280A (ja) * | 2011-09-01 | 2013-04-11 | Canon Inc | 画像処理方法、画像処理装置およびプログラム |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2017154606A1 (ja) * | 2016-03-10 | 2019-01-10 | ソニー株式会社 | 情報処理装置および情報処理方法 |
EP3410387A4 (en) * | 2016-03-10 | 2019-01-23 | Sony Corporation | INFORMATION PROCESSOR AND INFORMATION PROCESSING METHOD |
US10694081B2 (en) | 2016-03-10 | 2020-06-23 | Sony Corporation | Information processing apparatus and information processing method |
WO2018088037A1 (ja) * | 2016-11-14 | 2018-05-17 | ソニー株式会社 | 可動型撮像装置の制御装置、可動型撮像装置の制御方法及びプログラム |
JPWO2018088037A1 (ja) * | 2016-11-14 | 2019-09-26 | ソニー株式会社 | 可動型撮像装置の制御装置、可動型撮像装置の制御方法及びプログラム |
US10924691B2 (en) | 2016-11-14 | 2021-02-16 | Sony Corporation | Control device of movable type imaging device and control method of movable type imaging device |
JP7059937B2 (ja) | 2016-11-14 | 2022-04-26 | ソニーグループ株式会社 | 可動型撮像装置の制御装置、可動型撮像装置の制御方法及びプログラム |
WO2020084894A1 (ja) * | 2018-10-24 | 2020-04-30 | ソニー株式会社 | マルチカメラシステム、制御値算出方法及び制御装置 |
US20220224822A1 (en) * | 2018-10-24 | 2022-07-14 | Sony Corporation | Multi-camera system, control value calculation method, and control apparatus |
Also Published As
Publication number | Publication date |
---|---|
JP6305232B2 (ja) | 2018-04-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101803712B1 (ko) | 화상처리장치, 제어 방법, 프로그램 및 기록 매체 | |
WO2019105214A1 (zh) | 图像虚化方法、装置、移动终端和存储介质 | |
JP2015035658A (ja) | 画像処理装置、画像処理方法、および撮像装置 | |
JP2010165248A (ja) | 画像処理装置、画像照合方法、および、プログラム | |
JP6319972B2 (ja) | 画像処理装置、撮像装置、画像処理方法、およびプログラム | |
JP6655379B2 (ja) | 焦点スタックから適応スライス画像を生成する方法および装置 | |
JP6694234B2 (ja) | 距離測定装置 | |
DK3189493T3 (en) | PERSPECTIVE CORRECTION OF DIGITAL PHOTOS USING DEPTH MAP | |
JP6305232B2 (ja) | 情報処理装置、撮像装置、撮像システム、情報処理方法およびプログラム。 | |
JP6602412B2 (ja) | 情報処理装置及び方法、情報処理システム、ならびにプログラム。 | |
JP5968379B2 (ja) | 画像処理装置およびその制御方法 | |
JP6622575B2 (ja) | 制御装置、制御方法、およびプログラム | |
JP6395429B2 (ja) | 画像処理装置、その制御方法及び記憶媒体 | |
JP2013178684A (ja) | 奥行き推定装置、再構成画像生成装置、奥行き推定方法、再構成画像生成方法及びプログラム | |
WO2017187935A1 (en) | Information processing apparatus, information processing method, and program | |
JP5925109B2 (ja) | 画像処理装置、その制御方法、および制御プログラム | |
JP6915016B2 (ja) | 情報処理装置及び方法、情報処理システム、ならびにプログラム | |
JP2020004219A (ja) | 3次元形状データを生成する装置、方法、及びプログラム | |
JP6655869B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP5086120B2 (ja) | 奥行き情報取得方法、奥行き情報取得装置、プログラムおよび記録媒体 | |
JP2014179925A5 (ja) | ||
JP6351364B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
JP6639155B2 (ja) | 画像処理装置及び画像処理方法 | |
JP6344903B2 (ja) | 画像処理装置およびその制御方法、撮像装置、プログラム | |
JP6066765B2 (ja) | 撮像装置、その制御方法、および制御プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170526 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180201 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180206 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180306 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6305232 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |