JP2019110546A - 撮影システム - Google Patents
撮影システム Download PDFInfo
- Publication number
- JP2019110546A JP2019110546A JP2019018348A JP2019018348A JP2019110546A JP 2019110546 A JP2019110546 A JP 2019110546A JP 2019018348 A JP2019018348 A JP 2019018348A JP 2019018348 A JP2019018348 A JP 2019018348A JP 2019110546 A JP2019110546 A JP 2019110546A
- Authority
- JP
- Japan
- Prior art keywords
- angle
- image
- view
- photographing
- imaging device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 claims description 182
- 238000004891 communication Methods 0.000 description 17
- 238000000034 method Methods 0.000 description 16
- 238000001514 detection method Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 7
- 230000015654 memory Effects 0.000 description 7
- ORQBXQOJMQIAOY-UHFFFAOYSA-N nobelium Chemical compound [No] ORQBXQOJMQIAOY-UHFFFAOYSA-N 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 6
- 230000006870 function Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000011514 reflex Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001172 regenerating effect Effects 0.000 description 1
- 230000008929 regeneration Effects 0.000 description 1
- 238000011069 regeneration method Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Images
Landscapes
- Stereoscopic And Panoramic Photography (AREA)
- Television Signal Processing For Recording (AREA)
- Studio Devices (AREA)
Abstract
Description
図1は、本発明の一実施形態に係る撮影システム1の概略構成を示す図である。図1に示されるように、本実施形態に係る撮影システム1は、互いに通信可能な撮影装置10及び撮影装置20を備えている。
本実施形態において、撮影装置10はデジタル一眼レフカメラである。なお、図1では、便宜上、交換レンズを取り外した状態を図示している。なお、撮影装置10はデジタル一眼レフカメラに限らず、例えば、ミラーレス一眼カメラ、コンパクトデジタルカメラ、ビデオカメラ、カムコーダ、タブレット端末、PHS(Personal Handy phone System)、スマートフォン、フィーチャフォン、携帯ゲーム機など、撮影機能を有する別の形態の装置に置き換えてもよい。
撮影装置20は、全天球パノラマ動画像を撮影可能な装置である。全天球パノラマ動画像とは、4πラジアンの立体角内の像を得て、全天球の範囲の撮影によって得られるパノラマ動画像である。
次に、撮影装置10と撮影装置20との協働により実行される動画撮影リンク処理について説明する。図8に、動画撮影リンク処理のフローチャートを示す。図8に示される動画撮影リンク処理は、例えば撮影装置10と撮影装置20の双方で当該処理を実行するモードに設定された時点で実行が開始される。
本処理ステップS11では、撮影装置10及び撮影装置20が互いに通信可能か否かを判定する。通常は、動画撮影リンク処理を実行するモードが双方で設定されると、撮影装置10と撮影装置20との通信が速やかに確立する。本処理ステップS11にて互いに通信可能でないと判定される場合(S11:NO)は、例えば通信関係で何らかのエラーが発生している可能性がある。この場合、動画撮影リンク処理を実行することができない。そのため、撮影装置10及び撮影装置20が通常の撮影モードに戻り、図8に示される動画撮影リンク処理が終了する。
本処理ステップS12は、処理ステップS11(通信状態の判定)にて撮影装置10及び撮影装置20が互いに通信可能であると判定される場合(S11:YES)に実行される。本処理ステップS12では、撮影装置10において、録画ボタンが押されると、動画撮影の開始を通知する通知信号が短距離無線通信等により撮影装置20に送信されると共に、CPU108により検出された撮影装置10の姿勢及びレンズ102aの画角の情報が撮影装置20に送信される。
本処理ステップS13では、撮影装置20において、処理ステップS12(動画撮影開始の通知)にて送信された通知信号が受信されると、全天球パノラマ動画像の撮影が開始される。
図9は、図8に示される動画撮影リンク処理を説明するための図である。図9中、符合O1は、全天球画角20aの中心点(別の観点によれば、撮影装置20に備えられるレンズ202Aaの主点とレンズ202Baの主点とを結ぶ線分の中点)を示し、符合AXは、撮影装置10に備えられるレンズ102aの光軸の延長線(及び光軸)を示す。本実施形態では、説明の便宜上、撮影装置20は、レンズ202Aaの光軸の前方側に延びる延長線が+Y軸と一致する姿勢であり、且つ撮影装置10と撮影装置20は、レンズ102aの光軸の延長線AXと全天球画角20aの中心点O1とが交差すると共に所定距離離れた位置関係にあるものとする。図9中、水平面(XY面)内において+Y軸と延長線AXとがなす角度を水平方向角度(方位角)θと定義し、水平面(XY面)と延長線AXとがなす角度を垂直方向角度(仰角)φと定義する。
本処理ステップS15は、処理ステップS14(姿勢差の検出判定)にて撮影装置10と撮影装置20との姿勢差の検出が成功したと判定された場合(S14:YES)に実行される。本処理ステップS15では、撮影装置20において、処理ステップS14(姿勢差の検出判定)にて検出された姿勢差(θ,φ)に基づいて全天球画角20a内における撮影装置10の現フレームの注視方向が演算される。ここでは、+Y軸を基準として水平方向角度(方位角)がθで且つ垂直方向角度(仰角)がφとなる方向D(図9参照)が撮影装置10の注視方向として演算される。
本処理ステップS16は、処理ステップS15(撮影装置10の注視方向の演算)にて全天球画角20a内における撮影装置10の現フレームの注視方向が演算された後、又は処理ステップS14(姿勢差の検出判定)にて撮影装置10と撮影装置20との現フレームの姿勢差の検出が成功しなかったと判定された場合(S14:NO)に実行される。前者の場合、撮影装置20は、処理ステップS15(撮影装置10の注視方向の演算)にて演算された注視方向の情報、及び撮影装置10より受信したレンズ102aの画角の情報を現フレームのメルカトル画像と関連付けて、外付けのメディア(又は撮影装置20の内蔵メモリ)に記録する。後者の場合、撮影装置20は、予め決められた全天球画角20a内の方向を注視方向として、レンズ102aの画角の情報と共に現フレームのメルカトル画像と関連付けて、外付けのメディア(又は撮影装置20の内蔵メモリ)に記録する。
撮影装置10は、録画ボタンがもう一度押されると、動画撮影の終了を通知する通知信号を撮影装置20に送信する。本処理ステップS17では、撮影装置20において、動画撮影の終了を通知する通知信号を撮影装置10より受信したか否かが判定される。本処理ステップS17にて該通知信号を撮影装置10より受信していないと判定される場合(S17:NO)、図8に示される動画撮影リンク処理は、処理ステップS14(姿勢差の検出判定)に戻り、該通知信号を撮影装置10より受信するまで、各フレームについて処理ステップS14〜S17を実行する。これにより、各フレームのメルカトル画像及びこれに関連付けられた注視方向及びレンズ102aの画角の情報が得られる。
本処理ステップS18は、処理ステップS17(動画撮影終了通知の受信判定)にて動画撮影の終了を通知する通知信号を撮影装置10より受信したと判定される場合(S17:YES)に実行される。本処理ステップS18では、撮影装置20が全天球パノラマ動画像の撮影を終了する。
図1に示されるように、本実施形態に係る撮影システム1は、再生装置30を備えている。再生装置30は、例えば、デスクトップPCやノートPC、タブレットPC、スマートフォン等の情報処理端末であり、図8に示される動画撮影リンク処理にて作成された全天球パノラマ動画像(注視方向及びレンズ102aの画角の情報がフレーム毎に関連付けられたもの)のファイルが有線通信又は無線通信を介して保存されている。
本処理ステップS21では、処理対象フレームについて、全天球パノラマ動画像ファイル内の注視方向の情報に基づき、全天球画角20a内における撮影装置10の注視点が演算される。具体的には、注視方向(方向D)の直線と全天球との交点O2(図9参照)が撮影装置10の注視点として演算される。
本処理ステップS22では、処理対象フレームについて、処理ステップS21(撮影装置10の注視点の演算)にて演算された注視点、及び全天球パノラマ動画像ファイル内のレンズ102aの画角の情報に基づき、全天球画角20a内の注視領域R(図9参照)が演算される。
本処理ステップS23では、処理対象フレームについて、処理ステップS22(全天球画角20a内の注視領域の演算)にて演算された注視領域Rの画像(注視領域画像)がメルカトル画像から切り出される。
処理ステップS21〜S23のループによって所定フレーム数の注視領域画像が得られると、再生装置30は、以降のフレームについても処理ステップS21〜S23のループを実行しつつ、既に得られたフレームの注視領域画像を順次再生する。これにより、注視領域の動画像が再生される。
10 撮影装置
20 撮影装置
30 再生装置
102 撮像ユニット
102a レンズ
102b 撮像素子
104 画像処理ユニット
106 撮像制御ユニット
108 CPU
110 ROM
112 SRAM
114 DRAM
116 操作部
118 ネットワークI/F
120 通信部
122 センサユニット
124 バス
202 撮像ユニット
202Aa、202Ba レンズ
202Ab、202Bb 撮像素子
204 画像処理ユニット
206 撮像制御ユニット
208 CPU
210 ROM
212 SRAM
214 DRAM
216 操作部
216a 録画ボタン
218 ネットワークI/F
220 通信部
222 センサユニット
224 バス
Claims (10)
- 第一の画角で画像を撮影し、第一のセンサを備える第一の撮影装置と、
前記第一の画角よりも広い第二の画角で画像を撮影し、第二のセンサを備える第二の撮影装置と、
前記第一のセンサ及び前記第二のセンサからのセンサ情報に基づいて前記第二の画角内における前記第一の撮影装置の撮影方向を演算する撮影方向演算手段と、
演算された撮影方向を前記第二の画角の画像と関連付けて記録する記録手段と、
を備える、
撮影システム。 - 前記記録手段は、
前記第二の撮影装置のレンズの情報を記録する、
請求項1に記載の撮影システム。 - 前記撮影方向は、
前記第二の画角の画像内における水平方向の角度と垂直方向の角度で示される、
請求項1又は請求項2に記載の撮影システム。 - 前記第一の撮影装置は、
撮影の操作を受け付けると、前記第二の撮影装置で画像の撮影が開始されるタイミングに合わせて前記第一の画角の画像の撮影を開始する、
請求項1から請求項3の何れか一項に記載の撮影システム。 - 前記記録手段により記録された撮影方向に基づいて前記第二の画角内における前記第一の撮影装置の注視点を演算する注視点演算手段と、
演算された注視点及び前記第一の画角に基づいて前記第二の画角内の注視領域を演算する注視領域演算手段と、
を更に備える、
請求項1から請求項4の何れか一項に記載の撮影システム。 - 前記注視領域演算手段により演算された注視領域を前記第二の画角の画像から切り出し、切り出された画像を再生する再生手段
を更に備える、
請求項5に記載の撮影システム。 - 前記第一の撮影装置の注視点が前記第二の画角の画像の死角に入るか否かを判定する死角判定手段
を更に備え、
前記死角判定手段により前記死角に入ると判定される場合、前記注視点演算手段により演算された注視点に対応する撮影方向がそのまま適用され、又はこれに代えて、前記第二の画角内の規定の方向が前記撮影方向として再設定される、
請求項5又は請求項6に記載の撮影システム。 - 前記第一の撮影装置により撮影される第一の画角の画像は、
前記第二の画角内の前記注視領域の画像よりも高画素である、
請求項5から請求項7の何れか一項に記載の撮影システム。 - 前記第二の画角の画像は、
全天球パノラマ画像である、
請求項1から請求項8の何れか一項に記載の撮影システム。 - 所定のネットワークを介して互いに接続された第一の撮影装置及び第二の撮影装置であって、第一の画角で画像を撮影し、第一のセンサを備える第一の撮影装置と、前記第一の画角よりも広い第二の画角で画像を撮影し、第二のセンサを備える第二の撮影装置と、を備える撮影システムにおいて、
前記第一のセンサ及び前記第二のセンサからのセンサ情報に基づいて前記第二の画角内における前記第一の撮影装置の撮影方向を演算する撮影方向演算手段と、
演算された撮影方向を前記第二の画角の画像と関連付けて記録する記録手段と、
を備える、
撮影システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019018348A JP6656605B2 (ja) | 2019-02-05 | 2019-02-05 | 撮影システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019018348A JP6656605B2 (ja) | 2019-02-05 | 2019-02-05 | 撮影システム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015124404A Division JP6474042B2 (ja) | 2015-06-22 | 2015-06-22 | 撮影システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019110546A true JP2019110546A (ja) | 2019-07-04 |
JP6656605B2 JP6656605B2 (ja) | 2020-03-04 |
Family
ID=67180324
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019018348A Active JP6656605B2 (ja) | 2019-02-05 | 2019-02-05 | 撮影システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6656605B2 (ja) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010233185A (ja) * | 2009-03-30 | 2010-10-14 | Saxa Inc | 画像処理装置、画像処理システム及びプログラム |
JP2013030851A (ja) * | 2011-07-26 | 2013-02-07 | Kokusai Kogyo Co Ltd | 光軸方向特定方法、光軸方向特定装置、及び光軸方向特定プログラム |
JP2013247543A (ja) * | 2012-05-28 | 2013-12-09 | Sony Corp | 撮像装置、表示装置、および画像処理方法、並びにプログラム |
JP2014165763A (ja) * | 2013-02-26 | 2014-09-08 | Ricoh Co Ltd | 編集装置、編集方法、及び編集プログラム |
JP2014179870A (ja) * | 2013-03-15 | 2014-09-25 | Canon Inc | 画像再生装置、画像再生方法および撮像装置 |
JP2015014672A (ja) * | 2013-07-04 | 2015-01-22 | 住友電気工業株式会社 | カメラ制御装置、カメラシステム、カメラ制御方法、及びプログラム |
-
2019
- 2019-02-05 JP JP2019018348A patent/JP6656605B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010233185A (ja) * | 2009-03-30 | 2010-10-14 | Saxa Inc | 画像処理装置、画像処理システム及びプログラム |
JP2013030851A (ja) * | 2011-07-26 | 2013-02-07 | Kokusai Kogyo Co Ltd | 光軸方向特定方法、光軸方向特定装置、及び光軸方向特定プログラム |
JP2013247543A (ja) * | 2012-05-28 | 2013-12-09 | Sony Corp | 撮像装置、表示装置、および画像処理方法、並びにプログラム |
JP2014165763A (ja) * | 2013-02-26 | 2014-09-08 | Ricoh Co Ltd | 編集装置、編集方法、及び編集プログラム |
JP2014179870A (ja) * | 2013-03-15 | 2014-09-25 | Canon Inc | 画像再生装置、画像再生方法および撮像装置 |
JP2015014672A (ja) * | 2013-07-04 | 2015-01-22 | 住友電気工業株式会社 | カメラ制御装置、カメラシステム、カメラ制御方法、及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP6656605B2 (ja) | 2020-03-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8937667B2 (en) | Image communication apparatus and imaging apparatus | |
US9374529B1 (en) | Enabling multiple field of view image capture within a surround image mode for multi-LENS mobile devices | |
JP6123274B2 (ja) | 撮像装置 | |
JP5383356B2 (ja) | 撮像装置、情報処理装置、撮像装置の制御方法、情報処理装置の制御方法、及びコンピュータプログラム | |
US10237495B2 (en) | Image processing apparatus, image processing method and storage medium | |
CN102739961B (zh) | 能够生成广角图像的图像处理装置 | |
JP2019012881A (ja) | 撮像制御装置及びその制御方法 | |
JP5988860B2 (ja) | 撮像装置及び撮像装置の制御方法 | |
JP7031280B2 (ja) | 画像処理装置、画像処理システムおよびプログラム | |
JP6474042B2 (ja) | 撮影システム | |
JP2005295418A (ja) | 撮像装置および撮像表示方法 | |
US11102403B2 (en) | Image device, information processing apparatus, information processing method, system, and storage medium | |
JP6656605B2 (ja) | 撮影システム | |
JP2021005831A (ja) | 撮像システム、画像処理装置、撮像装置およびプログラム | |
JP5359797B2 (ja) | 撮像素子一体型交換レンズ式のカメラシステムとその動画生成方法 | |
JP2018067802A (ja) | 撮像制御装置、撮像装置の制御方法及びプログラム | |
JP2007006162A (ja) | 画像処理装置 | |
JP2019168999A (ja) | 撮像装置、撮像方法及びプログラム | |
JP7451888B2 (ja) | 撮像装置、撮像システム、方法およびプログラム | |
JP7379884B2 (ja) | 撮像装置、画像処理システム、方法およびプログラム | |
JP2020078065A (ja) | 撮像装置、情報処理装置、補正量設定方法およびプログラム | |
JP4332291B2 (ja) | 情報処理装置、およびその制御方法 | |
JP2007072210A (ja) | 撮像装置、その制御方法およびプログラム | |
JP6242446B2 (ja) | 撮像装置、撮像装置の制御方法及びプログラム | |
JP2022155851A (ja) | 撮像装置および記憶媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190205 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20191007 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191028 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191217 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7426 Effective date: 20191217 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200106 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200119 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6656605 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |