JP7271296B2

JP7271296B2 - 撮像装置、撮像装置の制御方法およびプログラム

Info

Publication number: JP7271296B2
Application number: JP2019086091A
Authority: JP
Inventors: 康弘桑原
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2018-05-17
Filing date: 2019-04-26
Publication date: 2023-05-11
Anticipated expiration: 2039-04-26
Also published as: JP2019205161A

Description

本発明は、撮像装置、撮像装置の制御方法およびプログラムに関する。

近年、全天球画像（全方位画像）といった、人間の視野角より広い範囲の画像を撮影することが可能な撮像装置が普及している。このような撮像装置は、複数のカメラ部を同時に駆動し被写体画像を撮像している。

特許文献１では、操作指示の有無に応じて、複数のカメラ部のうち一部における駆動パルスの周波数を低下させることにより、全方位３６０度の画像を同時に撮影するという機能を損なうことなく省電力化を図っている。

特許文献２では、撮像装置と撮像装置の操作を行うリモコンとの状態（加速度センサによって取得される動作状態または静止状態）において、所定時間変化がない場合に撮像装置の電源をＯＦＦにすることで省電力化を図っている。

特開２０１０－２３２９０８号公報特開２０１７－１３９８１２号公報

しかしながら、特許文献１では、ライブビュー画像（カメラからほぼリアルタイムで取得した画像）の全天球画像の一部を表示する場合、表示装置に表示される画像を撮影するカメラ部（以下、有効カメラ部と称する。）以外のカメラ部の出力が無駄になってしまう。また、特許文献２では、撮像装置または表示装置を移動している間はカメラ部の出力が維持されるため、上記と同様に有効カメラ部以外のカメラ部の出力が無駄になってしまう。

そこで、本発明では、複数の撮像装置から出力される画像を合成して表示装置に表示する場合に、各撮像装置の電力消費を適切に抑える技術を提供することを目的とする。

本発明の第一の態様は、
それぞれ異なる方向の被写体を撮像することにより得られた画像を出力する複数の撮像処理手段と、
前記複数の撮像処理手段により出力された画像を合成することにより合成画像を生成する生成手段と、
前記合成画像を記録媒体に記録する記録手段と、
前記合成画像のうち画面に表示される表示範囲を示す表示範囲情報を取得する取得手段と、
前記合成画像が前記記録媒体に記録されている間、前記表示範囲情報に関わらず、前記複数の撮像処理手段を前記第１のモードで駆動するように制御し、
前記合成画像が前記記録媒体に記録されていない間、前記表示範囲情報に基づいて、前記合成画像のうち表示される範囲と対応する画像を出力する前記撮像処理手段を第１のモードで駆動し、前記合成画像のうち表示されない範囲と対応する画像を出力する前記撮像
処理手段を前記第１のモードに比べて省電力な第２のモードで駆動するよう制御する制御手段と、
を有することを特徴とする撮像装置である。

本発明の第二の態様は、
それぞれ異なる方向の被写体を撮像することにより得られた画像を出力する複数の撮像処理手段を備える撮像装置の制御方法であって、
前記複数の撮像処理手段により出力された画像を合成することにより合成画像を生成する生成ステップと、
前記合成画像を記録媒体に記録する記録ステップと、
前記合成画像のうち画面に表示される表示範囲を示す表示範囲情報を取得する取得ステップと、
前記合成画像が前記記録媒体に記録されている間、前記表示範囲情報に関わらず、前記複数の撮像処理手段を前記第１のモードで駆動するように制御し、
前記合成画像が前記記録媒体に記録されていない間、前記表示範囲情報に基づいて、前記合成画像のうち表示される範囲と対応する画像を出力する前記撮像処理手段を第１のモードで駆動し、前記合成画像のうち表示されない範囲と対応する画像を出力する前記撮像処理手段を前記第１のモードに比べて省電力な第２のモードで駆動するよう制御する制御ステップと、
を有することを特徴とする撮像装置の制御方法である。

本発明の第三の態様は、上記の制御方法の各ステップをコンピュータに実行させるためのコンピュータプログラムである。

本発明によれば、複数の撮像装置から出力される画像を合成して表示装置に表示する場合に、各撮像装置の電力消費を適切に抑える技術を提供することができる。

実施形態に係る撮像装置の一例を示す正面外観図実施形態に係る撮像装置の一例を示す背面外観図実施形態に係る撮像装置の一例を示す機能ブロック図実施形態に係る表示制御装置の一例を示す外観図実施形態に係る表示制御装置の一例を示す機能ブロック図実施形態に係る合成画像の一例を示す図実施形態に係る合成画像の一部の一例を示す図

実施形態に係る撮像装置の処理の一例を示すフローチャート実施形態に係る撮像装置の命令に応じた処理の一例を示すフローチャート実施形態に係る撮像装置の撮影処理の一例を示すフローチャート実施形態に係る表示制御装置の処理の一例を示すフローチャート実施形態に係る表示制御装置の表示終了処理の一例を示すフローチャート実施形態に係る表示制御装置の撮影処理の一例を示すフローチャート実施形態に係る表示制御装置の表示変更処理の一例を示すフローチャート実施形態に係る表示制御装置の省電力化処理の一例を示すフローチャート実施形態に係る表示制御装置の境界処理の一例を示すフローチャート実施形態に係る表示制御装置の境界処理の一例を示すフローチャート

実施形態に係る起動時間短縮処理の対象範囲の一例を示すフローチャート実施形態に係る起動時間短縮処理の一例を示すフローチャート実施形態に係る無操作時間の設定画面の一例を示す図実施形態に係る無操作時間の設定処理の一例を示すフローチャート

実施形態に係る撮像装置の処理の一例を示すフローチャート実施形態に係る表示制御装置の処理の一例を示すフローチャート実施形態に係る撮像装置の処理の一例を示すフローチャート実施形態に係る表示制御装置の処理の一例を示すフローチャート

（第１の実施形態）
以下、本発明の実施形態について説明する。

＜概要＞
本実施形態では、複数のカメラ部を有する撮像装置を用いて全天球画像を撮像し、表示制御装置を用いて全天球画像の一部を表示する例について説明する。本実施形態における全天球画像とは、撮像装置の複数のカメラ部によって撮像された画像データ（撮像データ）を繋ぎ合せることによって得られる、３６０度の視野分を有する画像である。以下、本実施形態に係る撮像装置１００および表示制御装置２００の構成と処理内容について順に説明する。

＜撮像装置１００の構成＞
図１Ａは、本実施形態に係る撮像装置１００の一例を示す前面外観図（斜視図）である。図１Ｂは、撮像装置１００の背面外観図（斜視図）である。撮像装置１００は、演算装置（プロセッサ）、メモリ、記憶装置、入出力装置等を含む情報処理装置（コンピュータ）である。記憶装置に格納されたプログラムを撮像装置１００が実行することで、撮像装置１００の後述する機能が提供される。それらの機能の一部または全部は、ＡＳＩＣやＦＰＧＡなどの専用の論理回路により実装されてもよい。本実施形態では、２つのカメラ部を有する撮像装置を例に説明するが、カメラ部は３つ以上でもよい。

また、本実施形態に係る撮像装置１００は、２つのカメラ部ａ，ｂを有する全天球カメラ（全方位カメラ）とも捉えられる。カメラ部ａは、撮像装置１００の前側の上下左右１８０度以上の広範囲を撮影範囲とする広角カメラである。カメラ部ｂは、撮像装置１００の後ろ側の上下左右１８０度以上の広範囲を撮影範囲とする広角カメラである。バリア１０２ａ，１０２ｂは、カメラ部ａ，ｂのための撮影レンズ１０３ａ，１０３ｂの保護窓である。なお、バリア１０２ａ，１０２ｂは、撮影レンズ１０３ａ，１０３ｂ自体の外側の面であってもよい。

表示部２８は、各種情報を表示する表示部である。シャッターボタン６１は、撮影指示を行うための操作部である。モード切替スイッチ６０は、各種モードを切り替えるための操作部である。接続Ｉ／Ｆ２５は、スマートフォン、パーソナルコンピュータ、テレビ等の外部機器と接続するための接続ケーブルと撮像装置１００とのコネクタである。操作部７０は、ユーザからの各種操作を受け付ける各種スイッチ、ボタン、ダイヤル、タッチセンサ等の操作部材より成る操作部である。電源スイッチ７２は、電源のＯＮ／ＯＦＦを切り替えるための押しボタンである。

発光部２１は、発光ダイオード（ＬＥＤ）等の発光部材であり、撮像装置１００の各種状態を発光パターンや発光色によってユーザに通知する。固定部４０は、例えば、三脚ネジ穴であり、三脚などの固定器具に固定して設置するための部材である。

図１Ｃは、撮像装置１００の一例を示す機能ブロック図である。

バリア１０２ａ，１０２ｂは、撮像装置１００の撮影レンズ１０３ａ，１０３ｂを含むカメラ部ａ，ｂの撮像系を覆うことにより、撮影レンズ１０３ａ，１０３ｂ、シャッター１０１ａ，１０１ｂ、撮像部２２ａ，２２ｂを含む撮像系の汚れや破損を防止する。撮影レンズ１０３ａ，１０３ｂは、ズームレンズ、フォーカスレンズを含むレンズ群であり、例えば、広角レンズである。シャッター１０１ａ，１０１ｂは、撮像部２２ａ，２２ｂへの被写体光の入射量を調整する絞り機能を備えるシャッターである。撮像部２２ａ，２２ｂは、光学像を電気信号に変換するＣＣＤやＣＭＯＳ素子等で構成される撮像素子である。Ａ／Ｄ変換器２３ａ，２３ｂは、撮像部２２ａ，２２ｂから出力されるアナログ信号をデジタル信号に変換する機能部である。

本実施形態では、撮像部２２ａ，２２ｂにより、ＶＲ（ＶｉｒｔｕａｌＲｅａｌｉｔｙ）画像が撮像される。ＶＲ画像には、全天球カメラ（全方位カメラ）で撮像した全天球画像（全方位画像）や、表示装置に一度に表示できる表示範囲より広い映像範囲（有効映像範囲）を持つパノラマ画像（パノラマ画像データ）などが含まれる。ＶＲ画像には、静止画だけでなく、動画やライブビュー（ＬＶ：ＬｉｖｅＶｉｅｗ）画像（カメラからほぼリアルタイムで取得した画像）も含まれる。

ここで、ＶＲ画像は、最大で上下方向（垂直角度、天頂からの角度、仰角、俯角、高度角）３６０度、左右方向（水平角度、方位角度）３６０度の視野分の映像範囲（有効映像範囲）を持つ。また、ＶＲ画像は、上下３６０度未満、左右３６０度未満であっても、通常のカメラで撮影可能な画角よりも広い広範な画角（視野範囲）、あるいは、表示装置に一度に表示できる表示範囲より広い映像範囲（有効映像範囲）を持つ画像も含む。例えば、左右方向（水平角度、方位角度）３６０度、天頂（ｚｅｎｉｔｈ）を中心とした垂直角度２１０度の視野分（画角分）の被写体を撮影可能な全天球カメラで撮影された画像はＶＲ画像の一種である。

また、例えば、左右方向（水平角度、方位角度）１８０度、水平方向を中心とした垂直角度１８０度の視野分（画角分）の被写体を撮影可能なカメラで撮影された画像はＶＲ画像の一種である。すなわち、上下方向と左右方向にそれぞれ１６０度（±８０度）以上の視野分の映像範囲を有しており、人間が一度に視認可能な範囲よりも広い映像範囲を有している画像はＶＲ画像の一種である。このＶＲ画像を後述するＶＲ表示すると、左右回転方向に表示装置の姿勢を変化させることで、左右方向（水平回転方向）には継ぎ目のない全方位の映像を視聴することが可能である。上下方向（垂直回転方向）には、真上（天頂）から見て±１０５度の範囲では継ぎ目のない全方位の映像を視聴することが可能であるが、真上から１０５度を超える範囲は映像が存在しないブランク領域となる。ＶＲ画像は、「映像範囲が仮想空間（ＶＲ空間）の少なくとも一部である画像」とも言える。

ＶＲ表示とは、ＶＲ画像のうち、表示装置の姿勢に応じた視野範囲の映像を表示する、表示範囲を変更可能な表示方法である。表示装置として、例えば、ヘッドマウントディスプレイ（ＨＭＤ：ＨｅａｄＭｏｕｎｔｅｄＤｉｓｐｌａｙ）を装着して視聴する場合には、ユーザの顔の向きに応じた視野範囲の映像を表示することになる。例えば、ＶＲ画像のうち、ある時点で左右方向に０度（特定の方位、例えば北）、上下方向に９０度（天頂から９０度、すなわち水平）を中心とした視野角（画角）の映像を表示することが可能である。この状態から、表示装置の姿勢を表裏反転（表示面を南向きから北向きに変更等）させると、同じＶＲ画像のうち、左右方向に１８０度（逆の方位、例えば南）、上下方向に９０度（水平）を中心とした視野角の映像に、表示範囲が変更される。

ユーザがＨＭＤを視聴している場合で言えば、ユーザが顔を北から南に向ければ（すなわち後ろを向けば）、ＨＭＤに表示される映像も北の映像から南の映像に変わる。このよ
うなＶＲ表示によって、ユーザに、視覚的にあたかもＶＲ画像内（ＶＲ空間内）のその場にいるような感覚を提供することができる。また、ＶＲゴーグル（ヘッドマウントアダプタ）にスマートフォン等の表示装置を装着することで、上述のＶＲ表示を行ってもよい。この場合、装着されたスマートフォンは、ＨＭＤの一種と言える。なお、ＶＲ画像の表示方法は上記に限るものではなく、例えば、姿勢の変化ではなくタッチパネルや方向ボタンなどに対するユーザ操作に応じて、表示範囲を移動（スクロール）させてもよい。

画像処理部２４は、Ａ／Ｄ変換器２３ａ，２３ｂからのデータ、または、メモリ制御部１５からのデータに対し所定の画素補間、縮小といったリサイズ処理や色変換処理を行う機能部である。また、画像処理部２４は、撮像した画像データを用いて所定の演算処理を行う。画像処理部２４により得られた演算結果に基づいて、システム制御部５０が露光制御、測距制御を行う。これにより、ＴＴＬ（ＴｈｒｏｕｇｈＴｈｅＬｅｎｓ）方式のＡＦ（ＡｕｔｏＦｏｃｕｓ）処理、ＡＥ（ＡｕｔｏＥｘｐｏｓｕｒｅ、自動露出）処理、ＥＦ（ＥｌｅｃｔｒｏｎｉｃＦｌａｓｈ、フラッシュプリ発光）処理が行われる。さらに、画像処理部２４は、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＴＴＬ方式のＡＷＢ（ＡｕｔｏＷｈｉｔｅＢａｌａｎｃｅ）処理を行う。

また、画像処理部２４は、Ａ／Ｄ変換器２３ａ，２３ｂから得られた２つの画像（魚眼画像）に基本の画像処理を施した後、合成（繋ぎ画像処理）して単一のＶＲ画像（合成画像）を生成する。図２Ｃは、カメラ部ａのＡ／Ｄ変換器２３ａから得られた画像２２１（破線の矩形）とカメラ部ｂのＡ／Ｄ変換器２３ｂから得られた画像２２２（破線の矩形）の画像処理結果を合成してＶＲ画像２２３（実線の矩形）を生成する概念図を示す。２つの画像の繋ぎ画像処理では、画像処理部２４は、２つの画像それぞれにおいて、パターンマッチング処理によりエリアごとに基準画像と比較画像のずれ量を算出し、繋ぎ位置を検出する。そして、画像処理部２４は、検出した繋ぎ位置と各光学系レンズ特性を考慮して、２つの画像をそれぞれ幾何学変換により歪み補正処理し、全天球イメージ形式に変換する。画像処理部２４は、この２つの全天球イメージ形式の画像をブレンドすることで、最終的に１つの全天球画像データ（ＶＲ画像）を生成する。生成された全天球画像データは、正距円筒図法を用いた画像となり、各画素の位置が球体の表面の座標と対応付けることが可能となる。

Ａ／Ｄ変換器２３ａ，２３ｂからの出力データは、画像処理部２４およびメモリ制御部１５を介して、あるいは、メモリ制御部１５を介してメモリ３２に書き込まれる。メモリ３２は、撮像部２２によって得られＡ／Ｄ変換器２３によりデジタルデータに変換された画像データや、接続Ｉ／Ｆ２５から外部のディスプレイに出力するための画像を格納する。メモリ３２は、所定枚数の静止画像や所定時間の動画像および音声を格納するのに十分な記憶容量を備えている。

また、メモリ３２は、画像表示用のメモリ（ビデオメモリ）を兼ねている。メモリ３２に格納されている画像表示用のデータは、接続Ｉ／Ｆ２５から外部のディスプレイに出力することが可能である。撮像部２２ａおよび２２ｂのうち少なくとも１つで撮像された画像を用いて、画像処理部２４で生成され、メモリ３２に蓄積されたＶＲ画像は、外部ディスプレイに逐次転送され表示される。これにより、外部ディスプレイは、電子ビューファインダとして機能し、ライブビュー表示（ＬＶ表示）を行うことができる。以下、ライブビュー表示される画像をＬＶ画像と称する。なお、メモリ３２に蓄積されたＶＲ画像は、通信部５４を介して無線接続された外部機器（スマートフォンなど）に転送され、外部機器側で表示されることによりライブビュー表示（リモートＬＶ表示）されてもよい。

不揮発性メモリ５６は、電気的に消去・記録可能な記録媒体としてのメモリであり、例
えばＥＥＰＲＯＭ（ＥｌｅｃｔｒｉｃａｌｌｙＥｒａｓａｂｌｅＰｒｏｇｒａｍｍａｂｌｅＲｅａｄ－ＯｎｌｙＭｅｍｏｒｙ）等が用いられる。不揮発性メモリ５６には、システム制御部５０の動作用の定数、プログラム等が記憶される。ここでいう、プログラムとは、本実施形態にて後述する各種フローチャートを実行するためのコンピュータプログラムのことである。

システム制御部５０は、少なくとも１つのプロセッサまたは回路を有する制御部であり、撮像装置１００全体を制御する機能部である。システム制御部５０は、前述した不揮発性メモリ５６に記録されたプログラムを実行することで、後述する本実施形態の各処理を実現する。システムメモリ５２には、例えばＲＡＭが用いられる。システムメモリ５２には、システム制御部５０の動作用の定数、変数、不揮発性メモリ５６から読み出したプログラム等が展開される。また、システム制御部５０は、メモリ３２、画像処理部２４、メモリ制御部１５を制御することにより表示制御も行う。システムタイマ５３は、各種制御に用いる時間や、内蔵された時計の時間を計測する計時部である。

モード切替スイッチ６０、シャッターボタン６１、操作部７０は、システム制御部５０に各種の動作指示を入力するための操作部である。モード切替スイッチ６０は、システム制御部５０の動作モードを静止画記録モード、動画撮影モード、再生モード、通信接続モード等のいずれかに切り替える。静止画記録モードに含まれるモードとして、オート撮影モード、オートシーン判別モード、マニュアルモード、絞り優先モード（Ａｖモード）、シャッター速度優先モード（Ｔｖモード）、プログラムＡＥモードがある。また、撮影シーン別の撮影設定となる各種シーンモード、カスタムモード等がある。ユーザは、モード切替スイッチ６０を用いて、上記モードのいずれかに直接切り替える。あるいは、ユーザが、モード切替スイッチ６０で撮影モードの一覧画面に一旦切り換えた後に、表示部２８に表示された複数のモードのいずれかを選択し、他の操作部材を用いて切り替えるようにしてもよい。同様に、動画撮影モードにも複数のモードが含まれていてもよい。

電源スイッチ７２は、電源ＯＮ／ＯＦＦを切り替えるための押しボタンである。発光部２１は発光ダイオード（ＬＥＤ）などの発光部材であり、撮像装置１００の各種状態を発光パターンや発光色によってユーザに通知する機能部である。記録媒体１５０は、メモリカードやハードディスク等の記録媒体である。

第１シャッタースイッチ６２は、撮像装置１００に設けられたシャッターボタン６１の操作途中、いわゆる半押し（撮影準備指示）でＯＮとなり第１シャッタースイッチ信号ＳＷ１を発生する。第１シャッタースイッチ信号ＳＷ１により、システム制御部５０は、上述の、ＡＦ処理、ＡＥ処理、ＡＷＢ処理、ＥＦ処理等の撮影準備動作を開始する。

第２シャッタースイッチ６４は、シャッターボタン６１の操作完了、いわゆる全押し（撮影指示）でＯＮとなり、第２シャッタースイッチ信号ＳＷ２を発生する。システム制御部５０は、第２シャッタースイッチ信号ＳＷ２により、撮像部２２からの信号読み出しから記録媒体１５０に画像データを書き込むまでの一連の撮影処理の動作を開始する。

なお、シャッターボタン６１は全押しと半押しの２段階の操作が可能なものに限るものではなく、１段階の押下だけが可能な操作部材であってもよい。その場合、１段階の押下に応じて撮影準備動作と撮影処理が連続して行われる。これは、半押しと全押しが可能なシャッターボタンをいわゆる全押しした場合と同じ動作（ＳＷ１とＳＷ２がほぼ同時に発生した場合の動作）である。

操作部７０の各操作部材は、表示部２８に表示される種々の機能アイコンや選択肢を選択操作することなどにより、場面ごとに適宜機能が割り当てられ、各種機能ボタンとして
作用する。機能ボタンとしては、例えば終了ボタン、戻るボタン、画像送りボタン、ジャンプボタン、絞込みボタン、属性変更ボタン等がある。例えば、メニューボタンが押されると各種の設定可能なメニュー画面が表示部２８に表示される。利用者は、表示部２８に表示されたメニュー画面を見ながら操作部７０を操作することで、直感的に各種設定を行うことができる。

電源制御部８０は、電池検出回路、ＤＣ－ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成され、電池の装着の有無、電池の種類、電池残量の検出を行う。また、電源制御部８０は、その検出結果およびシステム制御部５０の指示に基づいてＤＣ－ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体１５０を含む各部へ供給する。電源部３０は、アルカリ電池やリチウム電池等の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、ＡＣアダプタ等から構成される電源である。

記録媒体Ｉ／Ｆ１８は、メモリーカードやハードディスク等の記録媒体１５０とのインターフェースである。記録媒体１５０は、撮影された画像を記録するためのメモリーカード等の記録媒体であり、半導体メモリや光ディスク、磁気ディスク等から構成される。記録媒体１５０は、撮像装置１００に着脱可能な交換記録媒体でもよいし、内蔵の記録媒体であってもよい。

通信部５４は、無線または有線ケーブルによって接続し、映像信号や音声信号等の送受信を行う。通信部５４は、無線ＬＡＮ（ＬｏｃａｌＡｒｅａＮｅｔｗｏｒｋ）やインターネットとも接続可能である。また、通信部５４は、Ｂｌｕｅｔｏｏｔｈ（登録商標）やＢｌｕｅｔｏｏｔｈＬｏｗＥｎｅｒｇｙ（登録商標）でも外部機器と通信可能である。通信部５４は、撮像部２２ａ，２２ｂで撮像した画像（ＬＶ画像を含む）や、記録媒体１５０に記録された画像を送信可能であり、また、外部機器から画像やその他の各種情報を受信してもよい。

姿勢検知部５５は、重力方向に対する撮像装置１００の姿勢を検知する。姿勢検知部５５で検知された姿勢に基づいて、システム制御部５０は、撮像部２２で撮影された画像が、撮像装置１００を横に構えて撮影された画像であるか、縦に構えて撮影された画像であるかを判別可能である。また、システム制御部５０は、ヨー、ピッチ、ロールの３軸方向にどの程度傾けた姿勢で撮影された画像であるか判別可能である。システム制御部５０は、姿勢検知部５５で検知された姿勢に応じた向き情報を撮像部２２ａ，２２ｂで撮像されたＶＲ画像の画像ファイルに付加したり、画像を回転（傾き補正するように画像の向きを調整）して記録したりすることが可能である。姿勢検知部５５として、加速度センサ、ジャイロセンサ、地磁気センサ、方位（角）センサ、高度センサなどを単独で、または２つ以上組み合わせて用いてもよい。姿勢検知部５５は、上記センサを用いて、撮像装置１００の動き（パン、チルト、持ち上げ、静止しているか否か等）を検知することも可能である。

マイク２０は、ＶＲ画像の動画の音声として記録される撮像装置１００の周囲の音声を集音するマイクロフォンである。接続Ｉ／Ｆ２５は、外部機器と接続して映像の送受信を行うための、ＨＤＭＩ（登録商標）ケーブルやＵＳＢケーブルなどとの接続プラグである。

＜表示制御装置２００の構成＞
図２Ａは、電子機器の一種である表示制御装置２００の一例を示す外観図である。表示制御装置２００は、演算装置（プロセッサ）、メモリ、記憶装置、入出力装置等を含む情報処理装置（コンピュータ）である。記憶装置に格納されたプログラムを表示制御装置２００が実行することで、表示制御装置２００の後述する機能が提供される。これらの機能
の一部または全部は、ＡＳＩＣやＦＰＧＡなどの専用の論理回路により実装されてもよい。

ディスプレイ２０５は、画像や各種情報を表示する表示部である。本実施形態では、ディスプレイ２０５は、後述するようにタッチパネル２０６ａと一体的に構成されており、ディスプレイ２０５の表示面へのタッチ操作を検出する。また、表示制御装置２００は、ＶＲ画像（ＶＲコンテンツ）をディスプレイ２０５にＶＲ表示することが可能である。操作部２０６（操作受付手段）には、タッチパネル２０６ａ、操作部２０６ｂ，２０６ｃ，２０６ｄ，２０６ｅが含まれる。操作部２０６ｂは、表示制御装置２００の電源のＯＮ／ＯＦＦを切り替える操作を受け付ける電源ボタンである。操作部２０６ｃ，２０６ｄは、音声出力部（例えば、後述するスピーカー２１２ｂ）から出力される音声のボリュームを増減するボタンである。操作部２０６ｅは、ディスプレイ２０５にホーム画面を表示させるためのボタンである。音声出力端子２１２ａは、イヤホンジャックであり、イヤホンや外部スピーカーなどに音声を出力する。スピーカー２１２ｂは、音声を発音する本体内蔵スピーカーである。

図２Ｂは、表示制御装置２００の一例を示す機能ブロック図である。表示制御装置２００は、スマートフォンなどの表示装置を用いて構成可能である。

図２Ｂにおいて、内部バス２５０に対してＣＰＵ２０１、メモリ２０２、不揮発性メモリ２０３、画像処理部２０４、ディスプレイ２０５、操作部２０６、記憶媒体Ｉ／Ｆ２０７、外部Ｉ／Ｆ２０９、および通信Ｉ／Ｆ２１０が接続されている。また、内部バス２５０に対して音声出力部２１２、姿勢検出部２１３およびシステムタイマ２１４も接続されている。内部バス２５０に接続される各部は、内部バス２５０を介して互いにデータのやりとりを行う。

ＣＰＵ２０１は、表示制御装置２００の全体を制御する制御部であり、少なくとも１つのプロセッサまたは回路を用いて構成される。メモリ２０２は、例えばＲＡＭ（半導体素子を利用した揮発性のメモリなど）である。ＣＰＵ２０１は、例えば不揮発性メモリ２０３に格納されるプログラムに従い、メモリ２０２をワークメモリとして用いて、表示制御装置２００の各部を制御する。不揮発性メモリ２０３には、画像データや音声データ、その他のデータ、ＣＰＵ２０１が動作するための各種プログラムなどが格納される。不揮発性メモリ２０３は、例えばフラッシュメモリやＲＯＭ等である。

画像処理部２０４は、ＣＰＵ２０１の制御に基づいて、不揮発性メモリ２０３や記憶媒体２０８に格納された画像や、外部Ｉ／Ｆ２０９を介して取得した映像信号、通信Ｉ／Ｆ２１０を介して取得した画像などに対して各種画像処理を施す機能部である。画像は、静止画でも動画でもよい。画像処理部２０４が行う画像処理には、Ａ／Ｄ変換処理、Ｄ／Ａ変換処理、画像データの符号化処理、圧縮処理、デコード処理、拡大処理／縮小処理（リサイズ）、ノイズ低減処理、色変換処理等が含まれる。また、全方位画像または全方位ではない画像について、広範囲のデータを有する広範囲画像であるＶＲ画像のパノラマ展開やマッピング処理、変換などの各種画像処理も行う。画像処理部２０４は、特定の画像処理を施すための専用の回路ブロックで構成されていてもよい。また、画像処理の種別によっては画像処理部２０４を用いずにＣＰＵ２０１がプログラムに従って画像処理を施すことも可能である。

なお、ここでは、撮像装置１００の画像処理部２４が２つの画像（魚眼画像）を合成（繋ぎ画像処理）して単一のＶＲ画像（合成画像）を生成する場合について説明したが、表示制御装置２００が単一のＶＲ画像（合成画像）を生成するようにしてもよい。この場合、撮像装置１００から表示制御装置２００へ２つの画像（魚眼画像）が合成されずに送信
される。そして、表示制御装置２００は、撮像装置１００から受信した２つの画像（魚眼画像）を合成（繋ぎ画像処理）して単一のＶＲ画像（合成画像）を生成する。そして、録画開始指示から録画終了指示までの間、生成されたＶＲ画像が記録媒体２０８に記録される。

ディスプレイ２０５は、ＣＰＵ２０１の制御に基づいて、画像やＧＵＩ（ＧｒａｐｈｉｃａｌＵｓｅｒＩｎｔｅｒｆａｃｅ）を構成するＧＵＩ画面などを表示する。ＣＰＵ２０１は、プログラムに従い表示制御信号を生成し、ディスプレイ２０５に表示するための映像信号を生成してディスプレイ２０５に出力するように表示制御装置２００の各部を制御する。ディスプレイ２０５は、出力された映像信号に基づいて映像を表示する。なお、表示制御装置２００自体が備える構成としてはディスプレイ２０５に表示させるための映像信号を出力するためのインターフェースまでとし、ディスプレイ２０５は外付けのモニタ（テレビなど）でもよい。

操作部２０６（受付部）は、ユーザ操作を受け付けるための入力デバイスである。操作部２０６は、例えば、キーボードなどの文字情報入力デバイスや、マウスやタッチパネルといったポインティングデバイス、ボタン、ダイヤル、ジョイスティック、タッチセンサ、タッチパッド等である。なお、タッチパネルは、ディスプレイ２０５に重ね合わせて平面的に構成され、接触された位置に応じた座標情報が出力されるようにした入力デバイスである。なお、操作部２０６は、入力デバイスではなく、リモートコントローラなどのような外部の入力デバイスからの信号を受信するための受信デバイスであってもよい。

記憶媒体Ｉ／Ｆ２０７は、メモリーカードやＣＤ、ＤＶＤといった記憶媒体２０８が装着可能とされ、ＣＰＵ２０１の制御に基づき、装着された記憶媒体２０８からのデータの読み出しや、当該記憶媒体２０８に対するデータの書き込みを行う。外部Ｉ／Ｆ２０９は、外部機器と有線ケーブルや無線によって接続し、映像信号や音声信号の入出力を行うためのインターフェースである。通信Ｉ／Ｆ２１０は、外部機器やインターネット（ＮＥＴ）２１１などと通信して、ファイルやコマンドなどの各種データの送受信を行うためのインターフェースである。

音声出力部２１２は、動画や音楽データの音声や、操作音、着信音、各種通知音などを出力する機能部である。音声出力部２１２には、イヤホンなどを接続する音声出力端子２１２ａ、スピーカー２１２ｂが含まれるものとするが、無線通信などで音声出力を行ってもよい。

姿勢検出部２１３は、重力方向に対する表示制御装置２００の姿勢や、ヨー、ロール、ピッチの各軸に対する姿勢の傾きを検知する機能部である。姿勢検出部２１３で検知された姿勢に基づいて、表示制御装置２００が横に保持されているか、縦に保持されているか、上に向けられたか、下に向けられたか、斜めの姿勢になったかなどを判別可能である。姿勢検出部２１３としては、加速度センサ、ジャイロセンサ、地磁気センサ、方位センサ、高度センサなどのうち少なくとも１つを用いることができ、複数を組み合わせて用いることも可能である。システムタイマ２１４は、各種制御に用いる時間や、内蔵された時計の時間を計測する計時部である。

本実施形態では、操作部２０６にはタッチパネル２０６ａが含まれる。ＣＰＵ２０１はタッチパネル２０６ａへの以下の操作または状態を検出する。
・タッチパネル２０６ａにタッチしていなかった指やペンが新たにタッチパネル２０６ａにタッチしたこと、すなわち、タッチの開始（以下、タッチダウン（Ｔｏｕｃｈ－Ｄｏｗｎ）と称する。）
・指やペンがタッチパネル２０６ａをタッチしている状態であること（以下、タッチオ
ン（Ｔｏｕｃｈ－Ｏｎ）と称する。）
・指やペンがタッチパネル２０６ａをタッチしたまま移動していること（以下、タッチムーブ（Ｔｏｕｃｈ－Ｍｏｖｅ）と称する。）
・タッチパネル２０６ａへタッチしていた指やペンがタッチパネル２０６ａから離れたこと、すなわち、タッチの終了（以下、タッチアップ（Ｔｏｕｃｈ－Ｕｐ）と称する。）
・タッチパネル２０６ａに何もタッチしていない状態（以下、タッチオフ（Ｔｏｕｃｈ－Ｏｆｆ）と称する。）

タッチダウンが検出されると、同時にタッチオンも検出される。タッチダウンの後、タッチアップが検出されない限りは、通常はタッチオンが検出され続ける。タッチムーブが検出された場合も、同時にタッチオンが検出される。タッチオンが検出されていても、タッチ位置が移動していなければタッチムーブは検出されない。タッチしていたすべての指やペンがタッチアップしたことが検出されると、タッチオフが検出される。

これらの操作・状態や、タッチパネル２０６ａ上に指やペンがタッチしている位置座標は内部バスを通じてＣＰＵ２０１に通知される。そして、ＣＰＵ２０１は、通知された情報に基づいてタッチパネル２０６ａ上にどのような操作（タッチ操作）が行われたかを判断する。タッチムーブについては、タッチパネル２０６ａ上で移動する指やペンの移動方向についても、位置座標の変化に基づいて、タッチパネル２０６ａ上の垂直成分・水平成分ごとに判断される。所定距離以上をタッチムーブしたことが検出された場合、ＣＰＵ２０１は、スライド操作が行われたと判断する。タッチパネル２０６ａ上に指をタッチしたまま、ある程度の距離だけ素早く動かして、そのまま離すといった操作をフリックと呼ぶ。フリックは、言い換えればタッチパネル２０６ａ上を指ではじくように素早くなぞる操作である。所定距離以上を、所定速度以上でタッチムーブしたことが検出され、そのままタッチアップが検出されるとフリックが行われたと判断する（スライド操作に続いてフリックがあったものと判断する）。さらに、複数箇所（例えば２点）を同時にタッチして、互いのタッチ位置を近づけるタッチ操作をピンチイン（Ｐｉｎｃｈ－Ｉｎ）、互いのタッチ位置を遠ざけるタッチ操作をピンチアウト（Ｐｉｎｃｈ－Ｏｕｔ）と称する。ピンチアウトとピンチインを総称してピンチ操作（あるいは単にピンチ）と称する。タッチパネル２０６ａは、抵抗膜方式や静電容量方式、表面弾性波方式、赤外線方式、電磁誘導方式、画像認識方式、光センサ方式等、様々な方式のタッチパネルのうちいずれの方式のものを用いてもよい。タッチパネルに対する接触があったことでタッチがあったと検出する方式や、タッチパネルに対する指やペンの接近があったことでタッチがあったと検出する方式があるが、いずれの方式でもよい。

＜撮像装置１００の処理内容＞
図３Ａ～図３Ｃは、撮像装置１００で行われる各種処理の一例を示すフローチャートである。各種処理には、撮像装置１００自体の操作による撮影処理（撮像処理）や、表示制御装置２００から受け付けた命令による機器制御処理等が含まれる。上記の処理は、不揮発性メモリ５６に記録されたプログラムをシステムメモリ５２に展開してシステム制御部５０が実行することで実現される。また、図３Ａに記載の制御はシステム制御部５０により実行される。撮像装置１００の電源がＯＮされ、通信部５４または接続Ｉ／Ｆ２５が有効になると図３Ａに示す処理が開始される。

まず、システム制御部５０は、カメラ部ａ，ｂにて撮像した画像を画像処理部２４にて処理し、その画像のメモリ３２への出力を開始する（Ｓ３０１）。そして、システム制御部５０は、撮像装置１００が通信部５４を介し表示制御装置２００との通信中の状態か否かの判断を行う（Ｓ３０２）。通信中でない場合（Ｓ３０２－ＮＯ）は、システム制御部５０は、ステップＳ３１２の処理を実行する。

通信中の状態の場合（Ｓ３０２－ＹＥＳ）は、システム制御部５０は、メモリ３２に蓄積されたリアルタイムのＶＲ画像をライブ映像として通信部５４から送信を開始する（Ｓ３０３）。次に、システム制御部５０は、撮像装置ステータス（状態）を表示制御装置２００に送信する（Ｓ３０４）。ここで、撮像装置ステータスには、カメラ部のＯＮ／ＯＦＦ、撮影のＯＮ／ＯＦＦ、録画のＯＮ／ＯＦＦ、表示制御装置２００への画像送信（映像送信）のＯＮ/ＯＦＦ等が含まれる。また、撮像装置ステータスには、撮像部２２への給
電の有無、Ａ／Ｄ変換器２３への給電の有無、画像処理のＯＮ／ＯＦＦ等の情報が含まれる。カメラ部のＯＮとは、少なくとも撮像部２２への給電が有り、かつ撮影がＯＮである状態であり、画像送信はＯＮでもＯＦＦでもよい。カメラ部のＯＦＦとは、少なくとも撮影がＯＦＦ（画像送信もＯＦＦ）の状態であり、撮像部２２への給電は有りでもなしでもよい。次に、システム制御部５０は、表示制御装置２００にライブ映像表示中か否かの判断を行う（Ｓ３０５）。表示中ではない場合（Ｓ３０５－ＮＯ）は、システム制御部５０は、ステップＳ３０８の処理を実行する。なお、システム制御部５０は、表示制御装置２００から無線通信等を用いて情報を取得することで、上記ライブ映像を表示中か否かを判断してもよい。また、システム制御部５０は、表示制御装置２００へライブ映像を送信中か否かに応じて、ステップ３０５における判断を行ってもよい。

ライブ映像を表示中の場合（Ｓ３０５－ＹＥＳ）は、システム制御部５０は、表示制御装置２００から命令を受信しているか否かの判断を行い（Ｓ３０６）、命令を受信していない場合（Ｓ３０６－ＮＯ）は、ステップＳ３０４の処理を実行する。命令を受信している場合（Ｓ３０６－ＹＥＳ）は、システム制御部５０は、表示制御装置２００の命令に応じた処理を実行する（Ｓ３０７）。ステップＳ３０７の処理の詳細は後述する。

次に、ステップＳ３０８では、システム制御部５０は、「ライブ映像を外部に送信中かつ表示制御装置２００と通信中でない」か否かを判断する。「ライブ映像を外部に送信中かつ表示制御装置２００と通信中でない」場合（Ｓ３０８－ＹＥＳ）は、システム制御部５０は、ライブ映像の送信を停止する（Ｓ３０９）。

次に、ステップＳ３１０では、システム制御部５０は、撮像装置１００の操作に基づいて撮影指示がなされたか否かを判断する。撮像装置１００の操作は、例えば、シャッターボタン６１の押下による操作である。撮影指示を受信した場合（Ｓ３１０－ＹＥＳ）は、システム制御部５０は、図３Ｂに示す撮影処理（Ｓ３１１）を実行する。ステップＳ３１１の撮影処理の詳細については後述する。

次に、ステップＳ３１２では、システム制御部５０は、カメラ停止操作が行われたか否かを判断する。停止操作が行われた場合（Ｓ３１２－ＹＥＳ）は、システム制御部５０は、録画中であれば（Ｓ３１３－ＹＥＳ）録画を停止し（Ｓ３１４）、その後、各カメラ部をＯＦＦにする（Ｓ３１５）。

≪命令に応じた処理（Ｓ３０７）≫
図３Ｂは、ステップＳ３０７における処理の詳細を示すフローチャートである。本実施形態では、撮影処理、カメラ部のＯＮ／ＯＦＦの切替処理、表示制御装置２００への画像送信のＯＮ／ＯＦＦの切替処理に関する命令を撮像装置１００が受信する例について説明する。なお、撮像装置１００が受信する命令は上記に限定されず、例えば、カメラ部の向きを変更する命令や上述の撮像装置ステータスの状態を変更する命令であってもよい。

ここで、撮影処理に関する命令は、後述する表示制御装置２００の撮影指示処理（Ｓ４０８）において行われる命令（撮影指示）である。また、カメラ部のＯＮおよび画像送信のＯＮに関する命令は、後述する表示制御装置２００の表示範囲の変更処理（Ｓ４１０）において行われる命令である。さらに、カメラ部のＯＦＦおよび画像送信のＯＦＦに関す
る命令は、後述する表示制御装置２００の省電力化処理（Ｓ４１３）において行われる命令である。

また、表示制御装置２００では、撮像装置１００が録画中か否かに応じて、カメラ部のＯＮ／ＯＦＦまたは画像送信のＯＮ／ＯＦＦを切り替えるよう命令する。これは、カメラ部をＯＮにする場合、録画中であれば撮像装置１００の電源（カメラ部への給電）は既にＯＮであることから、画像送信のみをＯＮにすればよいためである。また、カメラ部をＯＦＦにする場合（省電力化処理）、録画中であれば、録画状態を維持したまま、画像送信のみＯＦＦにすることでカメラ部の省電力化を図るためである。同様に、撮像装置１００の処理においても撮像装置１００が録画中か否かに応じて処理を分けているが、撮像装置１００は、録画中か否かにかかわらず上記の命令に従って処理を行ってもよい。以下、撮像装置１００における上記の命令に応じた処理（Ｓ３０７）について説明する。

システム制御部５０は、受信した命令が撮影指示であるか否かを判断する（Ｓ３０７１）。撮影指示でなければ（Ｓ３０７１－ＮＯ）、システム制御部５０は、録画中か否かに応じて以下の処理を行う。録画中ではない場合（Ｓ３０７２－ＮＯ）は、システム制御部５０は、表示制御装置２００の命令に応じて一部のカメラ部のＯＮ／ＯＦＦの切り替えを行う（Ｓ３０７３）。録画中の場合（Ｓ３０７２－ＹＥＳ）は、システム制御部５０は、表示制御装置２００からの命令に応じて複数のカメラ部のうち一部のカメラ部から出力される画像を合成したＶＲ画像の送信（ライブ映像の送信）のＯＮ／ＯＦＦの切り替えを行う（Ｓ３０７４）。また、受信した命令が撮影指示の場合（Ｓ３０７１－ＹＥＳ）は、システム制御部５０は、表示制御装置２００の命令に応じて撮影処理を実行する（Ｓ３０７５）。ここで、本実施形態における撮影指示には、静止画撮影指示または動画の録画開始指示／録画停止指示が含まれる。なお、ステップＳ３０７５の撮影処理は、ステップＳ３１１の撮影処理と同一であってもよい。ステップＳ３０７３～Ｓ３０７５の処理の後は、システム制御部５０は、図３Ａに示すステップＳ３０４の処理を実行する。

≪撮影処理（Ｓ３１１）≫
図３Ｃは、上述の撮影処理（Ｓ３１１）の一例を示すフローチャートである。本処理では、撮像装置１００自体の操作による静止画撮影指示または動画撮影指示に応じて静止画撮影、動画撮影（録画開始または録画停止）が行われる。静止画撮影指示を受け付ける場合は、システム制御部５０は静止画撮影処理を行う。また、動画撮影指示を受け付ける場合は、システム制御部５０は録画中か否かに応じて録画開始処理／録画停止処理を行う。具体的には、すでに撮像装置１００が録画中であれば録画停止処理を行い、録画中でなければ録画開始処理を行う。なお、撮像装置１００は、録画中に静止画撮影指示を受け付ける場合も、上記と同様に静止画撮影処理を行う。以下、撮影処理（Ｓ３１１）における処理の詳細を説明する。

システム制御部５０は、ＯＦＦのカメラ部があるか否かを判断する（Ｓ３１１１）。そして、システム制御部５０は、ＯＦＦのカメラ部が存在する場合（Ｓ３１１１－ＹＥＳ）は、ＯＦＦのカメラ部をＯＮに切り替える（Ｓ３１１２）。

次に、システム制御部５０は、撮影処理の指示内容が静止画撮影指示か動画撮影指示かを判断する（Ｓ３１１３）。静止画撮影指示の場合は、システム制御部５０は、静止画撮影を実行する（Ｓ３１１５）。動画撮影指示の場合は、システム制御部５０は、録画中であるか否かを判断する（Ｓ３１１４）。録画中ではない場合（Ｓ３１１４－ＮＯ）は、システム制御部５０は、録画を開始する（Ｓ３１１６）。録画中の場合（Ｓ３１１４－ＹＥＳ）は、システム制御部５０は、録画停止を実行する（Ｓ３１１７）。なお、撮影処理により取得されるデータは、メモリ３２に記録される。

＜表示制御装置２００の処理内容＞
図４Ａ～図４Ｇは、表示制御装置２００における表示制御処理の一例を示すフローチャートである。この処理は、不揮発性メモリ２０３に記録されたプログラムをメモリ２０２に展開し、ＣＰＵ２０１が実行することで実現される。表示制御装置２００の電源がＯＮにされ、通信Ｉ／Ｆもしくは外部Ｉ／Ｆが有効になると図４Ａに示す処理が開始される。

まず、ＣＰＵ２０１は、表示制御装置２００が撮像装置１００と通信しているか否かを判断する（Ｓ４０１）。通信Ｉ／Ｆ２１０のデータ受信により通信を検知する場合（Ｓ４０１－ＹＥＳ）は、ＣＰＵ２０１は以下の処理を実行する。まず、ＣＰＵ２０１は、通信Ｉ／Ｆ２１０からＶＲ画像データ（ＶＲ画像）を受信する（Ｓ４０２）。また、ＣＰＵ２０１は、受信したＶＲ画像データを画像処理部２０４にてＶＲ画像（合成画像）の一部の範囲の画像の切り出しを行い、ディスプレイ２０５に切り出した画像を表示する（Ｓ４０３）。次に、ＣＰＵ２０１は、撮像装置１００から送信された上述の撮像装置ステータスを受信（Ｓ４０４）し、メモリ３２に格納する。

次に、ＣＰＵ２０１は、表示制御装置２００の操作指示の有無を検知する。具体的には、ＣＰＵ２０１は、操作部２０６もしくはタッチパネル２０６ａのボタン操作、またはタッチ操作等を操作指示として検知する。以下、ＣＰＵ２０１が、映像表示終了操作指示の有無（Ｓ４０５）、撮影操作指示の有無（Ｓ４０７）および表示範囲の変更指示の有無（Ｓ４０９）を検知する場合について説明する。

まず、映像表示の終了操作指示を検知する場合（Ｓ４０５－ＹＥＳ）は、ＣＰＵ２０１は、表示制御装置２００におけるライブ映像表示の終了処理を行う（Ｓ４０６）。次に、撮影操作指示を検知する場合（Ｓ４０７－ＹＥＳ）は、ＣＰＵ２０１は、操作指示に応じた命令を撮像装置１００へ送信する撮影指示処理を行う（Ｓ４０８）。本実施形態では、ＣＰＵ２０１は、静止画撮影指示、動画撮影開始指示／停止指示のいずれかを含む命令を撮像装置１００へ送信する。さらに、表示制御装置２００において表示範囲の変更指示を検知する場合（Ｓ４０９－ＹＥＳ）は、ＣＰＵ２０１は、操作画像処理部２０４にて切り出し画像の範囲変更処理を行う（Ｓ４１０）。ステップＳ４０６，Ｓ４０８，Ｓ４１０の処理の詳細は後述する。

ステップＳ４１１では、ボタン操作やタッチ操作が行われない場合（無操作の場合）に、ＣＰＵ２０１は、システムタイマ２１４を使用してタイマーのカウントアップを開始する。そして、ＣＰＵ２０１は、無操作の時間が所定の閾値Ｔ以上続いたか否かを判断する（Ｓ４１２）。なお、閾値Ｔは、例えば、１分とすることができるが、特に限定されない。また、後述するように、閾値Ｔを変更可能としてもよい。無操作の時間が閾値Ｔ未満の場合（Ｓ４１２－ＮＯ）は、ＣＰＵ２０１は、再度、ステップＳ４０２の処理を実行する。無操作の時間が閾値Ｔ以上（所定時間以上）の場合（Ｓ４１２－ＹＥＳ）は、ＣＰＵ２０１は、省電力化処理を行う（Ｓ４１３）。本実施形態では、省電力化処理として、ＶＲ画像を構成する複数の画像のうち、表示範囲の画像を撮像するカメラ部以外のカメラ部をＯＦＦの状態に切り替える。あるいは、撮像装置１００が録画中の場合は、複数のカメラ部をＯＮの状態のまま変更せず、表示範囲の画像を撮像するカメラ部以外のカメラ部が出力した画像はライブ映像のＶＲ画像には合成しないことによって、表示範囲外の画像を撮像するカメラ部については、撮像装置１００から表示制御装置２００への画像送信をＯＦＦにする。省電力化処理の詳細は後述する。

≪映像表示の終了処理（Ｓ４０６）≫
図４Ｂは、本実施形態におけるライブ映像表示の終了処理（Ｓ４０６）の一例を示すフローチャートである。具体的には、ＣＰＵ２０１は、メモリ２０２のタイマーカウントをゼロクリア（Ｓ４０６１）し、ディスプレイ２０５への表示停止を行い（Ｓ４０６２）、
映像受信を停止し、撮像装置１００との通信を中止する（Ｓ４０６３）ことで、ライブ映像表示の終了処理を行う。そして、上述の通り、撮像装置１００において、「ライブ映像を外部に送信中かつ表示制御装置２００と通信していない」場合（Ｓ３０８－ＹＥＳ）となるので、システム制御部５０はライブ映像の表示制御装置２００への送信を停止する（Ｓ３０９）。

≪撮影指示処理（Ｓ４０８）≫
図４Ｃは、本実施形態における撮影指示処理（Ｓ４０８）の一例を示すフローチャートである。本実施形態では、表示制御装置２００は、静止画撮影指示または動画撮影指示に応じて、静止画撮影命令または動画撮影開始／停止命令を撮像装置１００へ送信する例について説明する。また、本実施形態では、表示制御装置２００は、動画撮影指示に応じて、撮像装置１００が録画中であれば動画撮影開始、録画中でなければ動画撮影停止を行うように撮像装置１００に命令する。なお、表示制御装置２００は、録画中か否かに関係なく動画撮影開始／停止命令を行ってもよい。以下、本実施形態に係る撮影指示処理の詳細を説明する。

まず、ＣＰＵ２０１は、メモリ２０２のタイマーカウントをゼロクリアする（Ｓ４０８１）。そして、ＣＰＵ２０１は、撮影指示の内容が動画撮影指示か否かを判断する（Ｓ４０８２）。静止画撮影指示である場合は、ＣＰＵ２０１は、静止画撮影命令を撮像装置１００に送信する（Ｓ４０８３）。動画撮影指示である場合は、録画中であるか否かを判断する（Ｓ４０８４）。録画中ではない場合（Ｓ４０８４－ＮＯ）は、ＣＰＵ２０１は、動画撮影開始命令を撮像装置１００に送信する（Ｓ４０８５）。録画中の場合（Ｓ４０８４－ＹＥＳ）は、ＣＰＵ２０１は、動画撮影停止命令を撮像装置１００に送信する（Ｓ４０８６）。ステップＳ４０８３，Ｓ４０８５，Ｓ４０８６の処理後は、再度、図４Ａに示すステップＳ４０２の処理を実行する。

≪表示範囲の変更処理（Ｓ４１０）≫
図４Ｄは、本実施形態に係る表示範囲の変更処理の一例を示すフローチャートである。本処理では、撮像装置１００の送信画像を表示している状態で、表示制御装置２００の操作により表示範囲が変更された場合、表示制御装置２００は、必要に応じて撮像装置１００のカメラ部をＯＮにする命令を送信する。具体的には、変更後の表示範囲に、撮像装置１００のカメラ部のうちＯＦＦのカメラ部における撮像範囲が含まれる場合、表示制御装置２００は、ＯＦＦのカメラ部をＯＮにして画像送信を開始する命令を撮像装置１００へ送信する。さらに、変更後の表示範囲に、撮像装置１００のカメラ部のうちＯＮのカメラ部における撮像範囲が含まれなくなる場合、表示制御装置２００は、ＯＮのカメラ部をＯＦＦに切り替えて画像送信を停止する命令を撮像装置１００へ送信してもよい。ここで、カメラ部が録画中である場合はすべてのカメラ部はＯＮであるため、表示制御装置２００は、変更後の表示範囲に、撮像範囲が含まれるカメラ部から出力された画像を合成したＶＲ画像の送信を開始する命令を撮像装置１００へ送信する。さらに、表示制御装置２００は、変更後の表示範囲に、撮像範囲が含まれないカメラ部から出力された画像をＶＲ画像に合成しないことによって、撮像範囲が含まれないカメラ部から出力された画像の送信を停止する命令を撮像装置１００へ送信してもよい。以下、本実施形態に係る表示範囲の変更処理の詳細を説明する。

まず、ＣＰＵ２０１は、操作画像処理部２０４にて、ステップＳ３０３で撮像装置１００から送信されたＶＲ画像（合成画像）の表示範囲を変更する。そして、ＣＰＵ２０１は、操作に応じた表示範囲と対応する部分をＶＲ画像から切り出してディスプレイ２０５にライブビュー表示（Ｓ４１０１）する。そして、ＣＰＵ２０１は、メモリ２０２のタイマーカウントをゼロクリアする（Ｓ４１０２）。さらに、ＣＰＵ２０１は、録画中か否かを判断する（Ｓ４１０３）。

ステップＳ４１０３において、録画中ではない場合（Ｓ４１０３－ＮＯ）は、ＣＰＵ２０１は、ＯＦＦのカメラ部の有無を判断する（Ｓ４１０４）。ＣＰＵ２０１は、撮像装置１００から受信したＶＲ画像に終端がある場合、ＯＦＦのカメラ部があると判断する。例えば、撮像装置１００においてカメラ部ｂがＯＦＦのとき、撮像装置１００はカメラ部ａから出力された画像２２１のみで生成されたＶＲ画像を表示制御装置２００へ送信する。図２Ｄに示すように、画像２２１のみで生成されたＶＲ画像は、終端２２５や終端２２６が存在するので、ＣＰＵ２０１は、ＯＦＦのカメラ部があると判断する。ＯＦＦのカメラ部がある場合（Ｓ４１０４－ＹＥＳ）は、ＣＰＵ２０１は、表示範囲がＯＦＦのカメラ部の撮像範囲を含むように、移動されたか否かを判断する（Ｓ４１０５）。ＣＰＵ２０１は、図２Ｄに示すように、表示範囲２２４が表示範囲２２７へ移動し、表示範囲２２７が撮像装置１００から受信したＶＲ画像で満たされなくなったとき、表示範囲が、ＯＦＦのカメラ部の撮像範囲に移動したと判断する。表示範囲がＯＦＦのカメラ部の撮像範囲に含まれるように移動された場合（Ｓ４１０５－ＹＥＳ）は、ＣＰＵ２０１は、ＯＦＦのカメラ部をＯＮにする命令を撮像装置１００に送信する（Ｓ４１０６）。なお、本実施形態では、カメラ部ａとカメラ部ｂの２つだけであるので、例えば、カメラ部ａがＯＮで、その出力した画像が表示制御装置２００へ送信されているのであれば、ＯＦＦのカメラ部はカメラ部ｂに一意に決まる。上記の命令は、例えば、外部Ｉ／Ｆ２０９もしくは通信Ｉ／Ｆ２１０を介して行われる。なお、ＣＰＵ２０１は、表示範囲が、ＯＮのカメラ部の撮像範囲に含まれてはいるが、ＯＮのカメラ部の撮像範囲の端の近傍に移動し、このまま移動が継続すると、表示範囲がＯＦＦのカメラ部の撮像範囲に含まれる可能性が高いと予想される場合に、ＯＦＦのカメラ部をＯＮにする命令を撮像装置１００に送信するようにしてもよい。あるいは、例えば、表示範囲の中心位置や全***置などの座標と、ＯＮのカメラ部の画像の終端との距離が所定値以下になった場合に、ＯＦＦのカメラ部をＯＮにする命令を撮像装置１００に送信してもよい。また、Ｓ４１０６では、ＣＰＵ２０１は、表示範囲が移動して、表示範囲を全く含まなくなる撮像範囲を撮影するカメラ部をＯＦＦにする命令を撮像装置１００に送信してもよい。

ステップＳ４１０３において、録画中の場合（Ｓ４１０３－ＹＥＳ）は、ＣＰＵ２０１は、画像送信を停止中のカメラ部の有無を判断する（Ｓ４１０７）。ＣＰＵ２０１は、撮像装置１００から受信したＶＲ画像に終端がある場合、送信停止中のカメラ部があると判断する。例えば、撮像装置１００においてカメラ部ｂが送信停止中のとき、撮像装置１００はカメラ部ａから出力された画像２２１のみで生成されたＶＲ画像をライブ映像として表示制御装置２００へ送信する。図２Ｄに示すように、画像２２１のみで生成されたＶＲ画像は、終端２２５や終端２２６が存在するので、ＣＰＵ２０１は、送信停止中のカメラ部があると判断する。送信停止中のカメラ部がある場合（Ｓ１４０７－ＹＥＳ）は、ＣＰＵ２０１は、表示範囲が画像送信停止中のカメラ部の撮像範囲を含むように、移動されたか否かを判断する（Ｓ４１０８）。ＣＰＵ２０１は、図２Ｄに示すように、表示範囲２２４が表示範囲２２７へ移動し、表示範囲２２７が撮像装置１００から受信したＶＲ画像で満たされなくなったとき、表示範囲が、送信停止中のカメラ部の撮像範囲に移動したと判断する。表示範囲が送信停止中のカメラ部の撮像範囲に含まれるように移動された場合（Ｓ１４０８－ＹＥＳ）は、ＣＰＵ２０１は、送信停止中のカメラ部から出力された画像の送信を開始する命令を撮像装置１００に送信する（Ｓ４１０９）。なお、ＣＰＵ２０１は、表示範囲が、画像送信中のカメラ部の撮像範囲に含まれてはいるが、画像送信中のカメラ部の撮像範囲の端の近傍に移動し、このまま移動が継続すると、表示範囲が画像送信停止中のカメラ部の撮像範囲に含まれる可能性が高いと予想される場合に、画像送信停止中のカメラ部の画像送信を開始する命令を撮像装置１００に送信するようにしてもよい。また、Ｓ４１０９では、ＣＰＵ２０１は、表示範囲が移動して、表示範囲を全く含まなくなる撮像範囲を撮影するカメラ部の画像送信をＯＦＦにする命令を撮像装置１００に送信してもよい。上記の命令は、例えば、外部Ｉ／Ｆ２０９もしくは通信Ｉ／Ｆ２１０を介して
行われる。本処理後は、再度、図４Ａに示すステップＳ４０２の処理を行う。

≪省電力化処理（Ｓ４１３）≫
図４Ｅは、本実施形態に係る省電力化処理（Ｓ４１３）の一例を示すフローチャートである。本処理では、ＣＰＵ２０１は、無操作の時間が閾値Ｔ以上の場合に省電力化処理を行う。具体的には、表示制御装置２００は、ＶＲ画像（合成画像）の一部の範囲がディスプレイ２０５に表示されている際に、ディスプレイ２０５に表示されていない範囲の画像を撮像する撮像装置１００のカメラ部をＯＦＦにする命令を送信する。また、録画中である場合は、表示制御装置２００は、表示範囲を含まない撮像範囲を撮影するカメラ部をＯＦＦにせず、画像送信のみＯＦＦにする命令を送信する。ここで、表示範囲に複数のカメラ部が撮像する画像が含まれる場合は、表示制御装置２００は、表示範囲に応じてＯＦＦにするカメラ部を決定する。以下、本実施形態に係る省電力化処理の詳細を説明する。

まず、ＣＰＵ２０１は、録画中か否かを判断する（Ｓ４１３１）。

ステップＳ４１３１において、録画中ではない場合（Ｓ４１３１－ＮＯ）は、ＣＰＵ２０１は、ディスプレイ２０５に表示中のＶＲ画像の表示範囲に応じて実行する処理を決定する（Ｓ４１３２）。ＣＰＵ２０１は、ＶＲ画像とともに受信した、各カメラ部の撮像範囲を示す座標情報と表示範囲の座標を比較する。そして、ディスプレイ２０５にカメラ部ａが撮像する画像のみが表示されている場合は、ＣＰＵ２０１は、カメラ部ａ以外のカメラ部としてカメラ部ｂをＯＦＦにする命令を撮像装置１００に送信する（Ｓ４１３３）。ディスプレイ２０５にカメラ部ｂが撮像する画像のみが表示されている場合は、ＣＰＵ２０１は、カメラ部ｂ以外のカメラ部としてカメラ部ａをＯＦＦにする命令を撮像装置１００に送信する（Ｓ４１３４）。ディスプレイ２０５に、カメラ部ａ，ｂの両方の映像（境界）が表示されている場合には、ＣＰＵ２０１は境界処理を行う（Ｓ４１３５）。境界処理の詳細は後述する。

ステップＳ４１３１において、録画中の場合（Ｓ４１３１－ＹＥＳ）は、ＣＰＵ２０１は、ディスプレイ２０５に表示中のＶＲ画像の表示範囲に応じて実行する処理を決定する（Ｓ４１３６）。ＣＰＵ２０１は、ＶＲ画像とともに受信した、各カメラ部の撮像範囲を示す座標情報と表示範囲の座標を比較する。そして、ディスプレイ２０５にカメラ部ａが撮像する画像のみが表示されている場合は、ＣＰＵ２０１は、カメラ部ａ以外のカメラ部としてカメラ部ｂから出力される画像を合成したライブ映像の送信を停止する命令を撮像装置１００に送信する（Ｓ４１３７）。ディスプレイ２０５にカメラ部ｂが撮像する画像のみが表示されている場合は、ＣＰＵ２０１は、カメラ部ｂ以外のカメラ部としてカメラ部ａから出力される画像を合成したライブ映像の送信を停止する命令を撮像装置に送信する（Ｓ４１３８）。ディスプレイ２０５に、カメラ部ａ，ｂの両方の映像が含まれる場合には、ＣＰＵ２０１は録画中境界処理を行う（Ｓ４１３９）。録画中境界処理の詳細は、後述する。ステップＳ４１３３～Ｓ４１３５，Ｓ４１３７～Ｓ４１３９の処理後は、再度、ステップＳ４０２を実行する。

≪境界処理（Ｓ４１３５）≫
図４Ｆは、上述の境界処理（Ｓ４１３５）の一例を示すフローチャートである。境界処理が実行されると、ＣＰＵ２０１は、ＶＲ画像の表示範囲のうち、カメラ部ａが撮像する画像の表示サイズがカメラ部ｂが撮像する画像の表示サイズ以上か否かの判断を行う（Ｓ４１３５１）。

表示範囲に占める面積がカメラ部ｂの画像の方がカメラ部ａの画像よりも大きい場合（Ｓ４１３５１－ＮＯ）は、ライブ映像において、カメラ部ｂが撮像する画像のみに含まれるように、ディスプレイ２０５の表示範囲を変更（Ｓ４１３５２）し、カメラ部ａをＯＦ
Ｆにする命令を撮像装置に送信する（Ｓ４１３５３）。また、表示範囲に占める面積がカメラ部ａの画像の方がカメラ部ｂの画像よりも大きい場合（Ｓ４１３５１－ＹＥＳ）は、ライブ映像において、カメラ部ａが撮像する画像のみに含まれるようにディスプレイ２０５の表示範囲を変更（Ｓ４１３５４）し、カメラ部ｂをＯＦＦする命令を撮像装置に送信する（Ｓ４１３５５）。

≪録画中境界処理（Ｓ４１３９）≫
図４Ｇは、上述の録画中境界処理（Ｓ４１３９）の一例を示すフローチャートである。録画中境界処理が実行されると、ＣＰＵ２０１は、ＶＲ画像の表示範囲のうち、カメラ部ａが撮像する画像の表示サイズがカメラ部ｂが撮像する画像の表示サイズ以上か否かの判断を行う（Ｓ４１３９１）。

表示範囲に占める面積がカメラ部ｂの画像の方がカメラ部ａの画像よりも大きい場合（Ｓ４１３９１－ＮＯ）は、ＣＰＵ２０１は、ライブ映像において、カメラ部ｂの撮像する画像のみに含まれるようにディスプレイ２０５の表示範囲を変更（Ｓ４１３９２）する。そして、ＣＰＵ２０１は、カメラ部ａの画像送信を停止する命令を撮像装置１００に送信する（Ｓ４１３９３）。また、表示範囲に占める面積がカメラ部ａの画像の方がカメラ部ｂの画像よりも大きい場合（Ｓ４１３９１－ＹＥＳ）は、ＣＰＵ２０１は、ライブ映像において、カメラ部ａが撮像する画像のみに含まれるようにディスプレイ２０５の表示範囲を変更（Ｓ４１３９４）する。そして、ＣＰＵ２０１は、カメラ部ｂの画像送信を停止する命令を撮像装置１００に送信する（Ｓ４１３９５）。

なお、ステップＳ４１３９３，Ｓ４１３９５の処理後、所定の条件によってカメラ部ａ，ｂの画像送信を再開する命令を撮像装置に送信するようにしてもよい。所定の条件は、例えば、カメラ部ａ，ｂが撮像する画像を表示範囲に入れるようにするユーザ指示入力が所定期間以上継続した場合、または所定期間内に２回以上当該指示入力が繰り返された場合等が挙げられる。

＜起動時間の短縮処理＞
本実施形態では、カメラ部の起動に伴う遅延時間を短縮するために、表示範囲の位置に応じて撮像装置１００の停止対象機能を変更する。具体的には、表示範囲が、ＶＲ画像の何処に位置するかに応じて、撮像装置１００の撮像部２２への給電停止、Ａ／Ｄ変換器２３への給電停止、画像処理および表示制御装置２００への画像送信処理の停止のいずれかが行われる。なお、本実施形態では、上記の所定の範囲として、矩形の範囲を２つ設ける例について説明するが、範囲の数や形状については特に限定されない。なお、領域内か否かの判断は、例えば、切り出し表示範囲の中心位置や表示範囲全***置など切り出し表示範囲の座標により行う。また、起動時間の短縮処理は、表示制御装置２００において行われる例について説明するが、撮像装置１００において本処理が行われてもよい。

図５Ａは、カメラ部ａが撮像する撮影画像５０４とカメラ部ｂが撮像する撮影画像５０５とを結合したＶＲ画像を疑似的に平面に展開した状態を表す。領域５０１は、表示制御装置２００のディスプレイ２０５に表示される切り出し表示範囲を示す。範囲５０２，範囲５０３は、上述した所定の範囲を示す。図５Ａに示す例では、カメラ部ａが撮像する撮影画像５０４を撮像装置１００から表示制御装置２００へ送信し、その一部を表示範囲としてディスプレイ２０５に表示している。以下、所定時間（閾値Ｔ）経過した場合に、カメラ部ｂの状態を表示範囲に応じて変更する例を示す。

図５Ｂは、起動時間短縮処理の一例を示すフローチャートである。範囲５０３の内側に表示範囲すべてが含まれる場合（Ｓ５０１－ＹＥＳ）は、ＣＰＵ２０１は、撮像装置１００のカメラ撮像部２２ｂおよびＡ／Ｄ変換器２３ｂへの給電を停止する（Ｓ５０２）。

範囲５０３より外側の領域が表示範囲に含まれ、かつ範囲５０２の内側に表示範囲すべてが含まれる場合（Ｓ５０１－ＮＯ、かつＳ５０３－ＹＥＳ）は、ＣＰＵ２０１は、撮像装置１００のＡ／Ｄ変換器２３ｂへの給電を停止する（Ｓ５０４）。カメラ撮像部２２ｂへの給電は行う。

範囲５０２より外側の領域が表示範囲に含まれる場合（Ｓ５０１－ＮＯ、かつＳ５０３－ＮＯ）は、ＣＰＵ２０１は、カメラ撮像部２２ｂおよびＡ／Ｄ変換器２３ｂへ給電は行うが、Ａ／Ｄ変換器２３ｂから出力された画像ｂに対する画像処理は実行しない。そして、画像ｂの画像処理結果をＶＲ画像に合成しないことによって、画像送信を停止する（Ｓ５０５）。

＜無操作時間の変更処理＞
本実施形態では、上述した無操作時間の閾値Ｔをユーザが設定操作を行うことで変更する。なお、以下では、表示制御装置２００のディスプレイに表示されるＧＵＩを用いて変更する例を示すが、撮像装置１００を操作することより無操作時間の変更処理が行われてもよい。

図６Ａは、表示制御装置２００のディスプレイ２０５に表示される無操作時間の設定変更の画面の一例を示す。また、図６Ａの「省電状態」には、カメラ部のＯＦＦまたはカメラ部の画像送信の停止を含む。

図６Ｂは、無操作時間変更処理の一例を示すフローチャートである。無操作時間の変更指示が実行されると、ＣＰＵ２０１は、表示制御装置２００の設定メニューを開く（Ｓ６０１）。無操作時間の設定時間変更が行われる場合は、ＣＰＵ２０１は、タイマーカウンタクリアを行い（Ｓ６０３）、選択または入力された時間をメモリ１０２に記録する（Ｓ６０４）。無操作時間設定は固定値の選択もしくは任意の時間の入力のどちらにも対応可能である。また、ＣＰＵ２０１は、設定メニューを閉じる操作指示があると設定メニューを閉じる（Ｓ６０５）。なお、図６Ａの「タイマー切」を選択することで、無操作時間を設定しないようにすることも可能である。

＜本実施形態の有利な効果＞
以上に示す通り、本実施形態に係る表示制御装置は、表示範囲の切り替わりにより撮像装置におけるカメラ部の駆動を適切に制御することで、撮像装置の電力消費を適切に抑えることができる。また、撮像装置が動画録画中の場合には、複数のカメラ部により得られた撮影画像を記録しつつ、ライブビュー表示には不要な撮影画像の送信を停止することで、撮像装置の使用状態に対応した電力消費の抑制を行うことができる。さらに、撮像装置の停止状態を変更することで、電力消費を抑えながら、カメラ起動に要する時間の遅延を抑制することができる。

（変形例）
上述の実施形態では、２つのカメラ部を有する撮像装置を例に説明したが、カメラ部は３つ以上設けられていてもよい。この場合、上述のカメラ部をＯＦＦにする対象は、表示制御装置に表示されている画像を撮像するカメラ部以外としてもよい。また、上述の境界処理では、表示範囲が最も大きい画像を撮像するカメラ以外をＯＦＦにしてもよい。なお、１つ以上のカメラ部を有する複数の撮像装置と表示制御装置とを含む制御システムにおいて、上述の機能を提供してもよい。

上述の実施形態では、表示制御装置に表示している画像については電力消費を抑えるための処理は行っていないが、例えば、画質を低下させる等の省電力化処理を行ってもよい
。

上述の実施形態では、所定の時間以上、操作を受け付けない場合に、省電力化する処理について説明したが、ユーザから所定の操作を受け付けた場合に上記処理が行われてもよい。所定の操作の例として、撮像装置または表示制御装置のボタンやＧＵＩを用いて行われるユーザ操作が挙げられる。また、所定の操作の別の例として、表示制御装置の位置や姿勢を変更する操作が挙げられる。例えば、ユーザが表示制御装置の表示部を下向きに伏せた状態ではカメラ部をＯＦＦにし、それ以外の状態ではカメラ部をＯＮにしてもよい。

上述の実施形態では、表示制御装置の命令に従って撮像装置が（一部の）撮像部における撮像処理の停止または画像の送信処理の停止を行う例について説明したが、表示制御装置の範囲情報に基く撮像装置の判断によって上記の処理を行ってもよい。具体的には、撮像装置は、ＶＲ画像（合成画像）のうち表示制御装置に表示される一部の範囲の範囲情報を表示制御装置から受信する。そして、撮像装置は、範囲情報に基づいてＶＲ画像の一部の範囲が表示制御装置に表示されている際に、表示制御装置に表示されていない範囲の画像を撮像する撮像部における撮像処理の停止または画像の送信処理の停止を行ってもよい。

上述の実施形態では、撮像装置と表示制御装置とが別体の装置とする例について説明したが、１つの装置に上述の複数の撮像装置の機能部と上述の表示制御装置の機能部とが設けられてもよい。

（第２の実施形態）
第２の実施形態における撮像装置１００の動作について図７のフローチャートを参照して説明する。撮像装置１００はあらかじめ、電源が供給され、起動処理を行い、表示制御装置２００との通信を確立し、ライブビュー表示の要求を表示制御装置２００から受信しているものとする。

まず、システム制御部５０はすべてのカメラ部（本実施形態ではカメラ部ａとカメラ部ｂ）を通常モードで駆動するよう制御する（Ｓ７０１）。システム制御部５０はすべてのカメラ部から出力された画像について画像処理を施し、画像処理結果を合成してＶＲ画像を生成する（Ｓ７０２）。システム制御部５０は、ステップＳ７０２で生成されたＶＲ画像をライブ画像として表示制御装置２００へ送信する（Ｓ７０３）。

そして、システム制御部５０は、ステップＳ７０３で送信されたＶＲ画像のうちディスプレイ２０５に表示されている表示範囲を示す座標情報（表示範囲情報）を表示制御装置２００から受信する（Ｓ７０４）。システム制御部５０は、ＶＲ画像を構成する各カメラ部から出力された画像の合成位置を示す座標情報と、表示制御装置２００から受信した表示範囲の座標情報とを比較する（Ｓ７０５）。

比較の結果、システム制御部５０は、表示範囲に含まれない画像を出力するカメラ部があれば（Ｓ７０６でＹｅｓ）、表示範囲に含まれない画像を出力するカメラ部を省電力モードで駆動するよう制御する（Ｓ７０７）。なお、システム制御部５０は、省電力モードでは、カメラ部のすべての機能を停止したり、カメラ部の機能のうち少なくとも一部（例えば、撮像部２２およびＡ／Ｄ変換器２３のうち少なくとも１つ）を停止したり、カメラ部から出力される画像のフレームレートを低くする。つまり、省電力モードでは、カメラ部は、通常モードで動作するときに比べて消費電力が低くなるように制御が行われる。そして、システム制御部５０は、通常モードで駆動しているカメラ部から出力された画像について画像処理を施し、画像処理結果を合成してＶＲ画像を生成する（Ｓ７０８）。システム制御部５０はステップＳ７０８で生成されたＶＲ画像をライブ画像として表示制御装
置２００へ送信する（Ｓ７０９）。

そして、システム制御部はＳ７１０とＳ７１１において、Ｓ７０４とＳ７０５と同様の処理を実行する。システム制御部は表示範囲を示す座標情報に基づき、表示範囲がＶＲ画像の終端の近傍にあるかどうかを判定する（Ｓ７１２）。ＶＲ画像が一部のカメラ部から出力された画像だけで生成されている場合、図２Ｄに示すようにＶＲ画像２２３に終端２２５と終端２２６が存在する。表示範囲２２４の位置がＶＲ画像の終端から所定の距離内にあるとき、システム制御部５０は、表示範囲がＶＲ画像の終端の近傍にあると判定する。そして、システム制御部５０は、表示範囲の近傍にある終端に隣接する撮像範囲の画像を出力するカメラ部を特定し、特定されたカメラ部を通常モードで駆動するよう制御する（Ｓ７１３）。ステップＳ７１３では、システム制御部５０は、特定されたカメラ部を省電力モードから通常モードに切り替えて駆動するように制御する。そして、システム制御部５０は、特定されたカメラ部を含む、通常モードで駆動中のカメラ部から出力された画像について画像処理を施し、画像処理結果を合成してＶＲ画像を生成する（Ｓ７１４）。ステップＳ７１２で生成されたＶＲ画像をライブ画像として表示制御装置２００へ送信する（Ｓ７１５）。

そして、システム制御部５０は、録画開始指示を受け付けたかどうか判定する（Ｓ７１６）。システム制御部５０は、撮像装置１００に設けられた所定の操作部材に対する入力があった場合、あるいは、システム制御部５０は、録画開始指示を表示制御装置２００から受信した場合、録画開始指示を受け付けたと判定する。録画開始指示を受け付けると（Ｓ７１６でＹｅｓ）、システム制御部５０はすべてのカメラ部を通常モードで駆動するように制御し（Ｓ７１７）、すべてのカメラ部から出力された画像について画像処理を施し、画像処理結果を合成して記録用のＶＲ画像を生成し（Ｓ７１８）、ＶＲ画像をライブ画像として表示制御装置２００へ送信するとともに（Ｓ７１９）、ＶＲ画像を記録媒体１２０に記録する（Ｓ７２０）。

そして、システム制御部５０は、録画停止指示を受け付けたかどうか判定する（Ｓ７２１）。システム制御部５０は、撮像装置１００に設けられた所定の操作部材に対する入力があった場合、あるいは、システム制御部５０は、録画停止指示を表示制御装置２００から受信した場合、録画停止指示を受け付けたと判定する。録画停止指示を受け付けると（Ｓ７２１でＹｅｓ）、システム制御部５０は、録画処理を停止し、ライブビュー表示の終了指示を表示制御装置２００から受信したかどうか判定する（Ｓ７２２）。ライブビュー表示の終了指示を受け付けると（Ｓ７２２でＹｅｓ）、本処理を終了する。ライブビュー表示の終了指示を受け付けなければ（Ｓ７２２でＮｏ）、ステップＳ７０４の処理に戻る。また、録画停止指示を受け付けなければ（Ｓ７２１でＮｏ）、ステップＳ７１８に戻り、録画処理を継続する。

第２の実施形態における表示制御装置２００の動作について図８のフローチャートを参照して説明する。表示制御装置２００はあらかじめ、電源が供給され、起動処理を行い、撮像装置１００との通信を確立し、ライブビュー表示の要求を撮像装置１００へ送信しているものとする。

まず、ＣＰＵ２０１は、Ｓ７０３で撮像装置１００から送信されたＶＲ画像を受信し（Ｓ８０１）、ＶＲ画像の一部を表示範囲として、ディスプレイ２０５に表示する（Ｓ８０２）。ステップＳ８０２では初期位置として、例えば、ＶＲ画像の中央を表示範囲として表示する。そして、ＣＰＵ２０１は、ＶＲ画像の表示範囲を変更するための指示を受け付けたかどうかを判定する（Ｓ８０３）。ＣＰＵ２０１は、タッチパネル２０６への操作や表示制御装置２００の姿勢の変化などがあると、表示範囲の変更指示を受け付けたと判定する。ＣＰＵ２０１は、表示範囲の変更指示を受け付けたと判定すると（Ｓ８０３でＹｅ
ｓ）、変更後の表示範囲を示す座標情報を撮像装置１００へ送信する（Ｓ８０４）。ＣＰＵ２０１は、Ｓ７０９またはＳ７１５で撮像装置１００から送信されたＶＲ画像を受信し（Ｓ８０５）、ＶＲ画像のうち、変更後の表示範囲と対応する一部をディスプレイ２０５に表示する（Ｓ８０６）。

そして、ＣＰＵ２０１は、録画開始指示を受け付けると（Ｓ８０７でＹｅｓ）、録画開始指示を撮像装置１００へ送信する（Ｓ８０８）。ＣＰＵ２０１は、Ｓ７１９で撮像装置１００から送信されたＶＲ画像を受信し（Ｓ８０９）、ＶＲ画像のうち選択中の表示範囲と対応する一部をディスプレイ２０５に表示する（Ｓ８１０）。ＣＰＵ２０１は、ＶＲ画像の表示範囲を変更するための指示を受け付ければ（Ｓ８１１でＹｅｓ）、ＶＲ画像のうち変更後の表示範囲と対応する一部をディスプレイ２０５に表示する（Ｓ８１２）。なお、録画中は撮像装置１００は、すべてのカメラ部を通常モードで駆動させるため、カメラ部毎に通常モードと省電力モードを切り替える必要がない。よって、撮像装置１００が録画中のときは、表示制御装置２００はＶＲ画像の表示範囲が変更されても、表示範囲の座標情報を撮像装置１００へは送信しない。

そして、ＣＰＵ２０１は、録画停止指示を受け付けると（Ｓ８１３でＹｅｓ）、録画停止指示を撮像装置１００へ送信する（Ｓ８１４）。ＣＰＵ２０１は、録画停止指示を受け付けなければ（Ｓ８１３でＮｏ）、ステップＳ８０９の処理に戻る。

ＣＰＵ２０１は、ライブビュー表示の終了指示を受け付けると（Ｓ８１５でＹｅｓ）、ライブビュー表示の終了指示を撮像装置１００へ送信する（Ｓ８１６）。ＣＰＵ２０１は、ライブビュー表示の終了指示を受け付けなければ（Ｓ８１５でＮｏ）、ステップＳ８０１の処理に戻る。

本実施形態によれば、表示制御装置２００のディスプレイ２０５に表示されるＶＲ画像の表示範囲の変更に応じて、撮像装置１００の各カメラ部を通常モードまたは省電力モードで駆動するように切り替える。これによって、表示制御装置２００のディスプレイ２０５に表示されていない範囲の画像を撮像するカメラ部を省電力モードで駆動させ、撮像装置１００の電力消費を抑制できる。

（第３の実施形態）
第３の実施形態における撮像装置１００の動作について図９のフローチャートを参照して説明する。撮像装置１００はあらかじめ、電源が供給され、起動処理を行い、表示制御装置２００との通信を確立し、ライブビュー表示の要求を表示制御装置２００から受信しているものとする。

まず、システム制御部５０はすべてのカメラ部（本実施形態ではカメラ部ａとカメラ部ｂ）を通常モードで駆動するよう制御する（Ｓ９０１）。システム制御部５０はすべてのカメラ部から出力された画像を表示制御装置２００へ送信する（Ｓ９０２）。

そして、システム制御部５０は、ステップＳ９０２で送信された画像のうちディスプレイ２０５で表示中の画像または非表示の画像を示す情報を表示制御装置２００から受信する。そして、システム制御部５０は、非表示の画像があると判定すれば（Ｓ９０３でＹｅｓ）、非表示の画像を出力したカメラ部を特定し、省電力モードで駆動するように切り替える（Ｓ９０４）。システム制御部５０は、省電力モードのカメラ部を除き、通常モードで駆動するカメラ部から出力された画像を表示制御装置２００へ送信する（Ｓ９０５）。

また、システム制御部５０は、ディスプレイ２０５に表示されているライブ画像を構成する各画像の位置やライブ画像における表示範囲を示す情報を受信し、表示範囲がライブ
画像の終端の近傍にあるかどうか判定する（Ｓ９０６）。表示範囲がライブ画像の終端の近傍にあれば（Ｓ９０６でＹｅｓ）、終端を含む画像に隣接する画像を出力するカメラ部を特定し、通常モードで駆動するように切り替える（Ｓ９０７）。そして、通常モードで駆動するカメラ部の画像を表示制御装置へ送信する（Ｓ９０８）。

そして、システム制御部５０は、録画開始指示を受け付けたかどうか判定する（Ｓ９０９）。録画開始指示を受け付けると（Ｓ９０９でＹｅｓ）、システム制御部５０はすべてのカメラ部を通常モードで駆動するように制御し（Ｓ９１０）、すべてのカメラ部から出力された画像について画像処理を施し、画像処理結果を合成して記録用のＶＲ画像を生成し（Ｓ９１１）、ＶＲ画像を記録媒体１２０に記録する（Ｓ９１２）。システム制御部５０は、すべてのカメラ部から出力された画像を表示制御装置２００へ送信する（Ｓ９１３）。

そして、システム制御部５０は、ステップＳ９１３で送信された画像のうちディスプレイ２０５で表示中の画像または非表示の画像を示す情報を表示制御装置２００から受信する。そして、システム制御部５０は、非表示の画像があると判定すれば（Ｓ９１４でＹｅｓ）、非表示の画像を出力したカメラ部を特定し、特定されたカメラ部から出力される画像の表示制御装置２００への送信を停止する（Ｓ９１５）。

また、システム制御部５０は、ディスプレイ２０５の表示範囲がライブ画像の終端の近傍にあることを示す情報を表示制御装置２００から受信すれば（Ｓ９１６でＹｅｓ）、終端の近傍に隣接する画像を出力するカメラ部を特定し、特定されたカメラ部から出力される画像の表示制御装置２００への送信を再開する（Ｓ９１７）。

そして、システム制御部５０は、録画停止指示を受け付けると（Ｓ９１８でＹｅｓ）、システム制御部５０は、録画処理を停止し、ライブビュー表示の終了指示を表示制御装置２００から受信したかどうか判定する（Ｓ９１９）。ライブビュー表示の終了指示を受け付けると（Ｓ９１９でＹｅｓ）、本処理を終了する。ライブビュー表示の終了指示を受け付けなければ（Ｓ９１９でＮｏ）、ステップＳ９０３の処理に戻る。また、録画停止指示を受け付けなければ（Ｓ７２１でＮｏ）、ステップＳ９１１に戻り、録画処理を継続する。

第３の実施形態における表示制御装置２００の動作について図１０のフローチャートを参照して説明する。表示制御装置２００はあらかじめ、電源が供給され、起動処理を行い、撮像装置１００との通信を確立し、ライブビュー表示の要求を撮像装置１００へ送信しているものとする。

まず、ＣＰＵ２０１は、Ｓ９０２で撮像装置１００から送信された各カメラ部から出力された画像を受信し（Ｓ１００１）、受信した複数の画像を合成してＶＲ画像を生成する（Ｓ１００２）。ＶＲ画像の一部を表示範囲として、ディスプレイ２０５に表示する（Ｓ１００３）。ステップＳ１００３では初期位置として、例えば、ＶＲ画像の中央を表示範囲として表示する。そして、ＣＰＵ２０１は、ＶＲ画像の表示範囲を変更するための指示を受け付けると（Ｓ１００４でＹｅｓ）、変更後の表示範囲と対応する一部をディスプレイ２０５に表示する（Ｓ１００５）。

そして、ＣＰＵ２０１は、ＶＲ画像を構成する画像ごとに、表示中または非表示を示す情報を生成し、撮像装置１００へ送信する（Ｓ１００６）。これに応じて、撮像装置１００はＳ９０３からＳ９０５の処理を実行する。ＣＰＵ２０１は、Ｓ９０５で撮像装置１００から送信された画像を受信し（Ｓ１００７）、受信された画像を合成してＶＲ画像を生成し、ＶＲ画像のうち、現在の表示範囲と対応する一部をディスプレイ２０５に表示する
（Ｓ１００８）。

また、ＣＰＵ２０１は、ライブ画像として生成されたＶＲ画像における表示範囲やＶＲ画像を構成する画像の位置を示す情報を生成し、撮像装置１００へ送信する（Ｓ１００９）。これに応じて、撮像装置１００はＳ９０６からＳ９０８の処理を実行する。ＣＰＵ２０１は、Ｓ９０８で撮像装置１００から送信された画像を受信し（Ｓ１０１０）、受信された画像を合成してＶＲ画像を生成し、ＶＲ画像のうち、現在の表示範囲と対応する一部をディスプレイ２０５に表示する（Ｓ１０１１）。

そして、ＣＰＵ２０１は、録画開始指示を受け付けると（Ｓ１０１２でＹｅｓ）、録画開始指示を撮像装置１００へ送信する（Ｓ１０１３）。ＣＰＵ２０１は、Ｓ９１３で撮像装置１００から送信された各カメラ部の画像を受信し（Ｓ１０１４）、受信した複数の画像を合成してＶＲ画像を生成する（Ｓ１０１５）。ＶＲ画像の一部を表示範囲として、ディスプレイ２０５に表示する（Ｓ１０１６）。ＣＰＵ２０１は、ＶＲ画像の表示範囲を変更するための指示を受け付ければ（Ｓ１０１７でＹｅｓ）、ＶＲ画像のうち変更後の表示範囲と対応する一部をディスプレイ２０５に表示する（Ｓ１０１８）。

そして、ＣＰＵ２０１は、ＶＲ画像を構成する画像ごとに、表示中または非表示を示す情報を生成し、撮像装置１００へ送信する（Ｓ１０１９）。これに応じて、撮像装置１００はＳ９１４とＳ９１５の処理を実行する。ＣＰＵ２０１は、Ｓ９１５で撮像装置１００から送信された画像を受信し（Ｓ１０２０）、受信された画像を合成してＶＲ画像を生成し、ＶＲ画像のうち、現在の表示範囲と対応する一部をディスプレイ２０５に表示する（Ｓ１０２１）。

また、ＣＰＵ２０１は、ライブ画像として生成されたＶＲ画像における表示範囲やＶＲ画像を構成する画像の位置を示す情報を生成し、撮像装置１００へ送信する（Ｓ１０２２）。これに応じて、撮像装置１００はＳ９１６とＳ９１７の処理を実行する。ＣＰＵ２０１は、Ｓ９１７で撮像装置１００から送信された画像を受信し（Ｓ１０２３）、受信された画像を合成してＶＲ画像を生成し、ＶＲ画像のうち、現在の表示範囲と対応する一部をディスプレイ２０５に表示する（Ｓ１０２４）。

そして、ＣＰＵ２０１は、録画停止指示を受け付けると（Ｓ１０２５でＹｅｓ）、録画停止指示を撮像装置１００へ送信する（Ｓ１０２６）。ＣＰＵ２０１は、録画停止指示を受け付けなければ（Ｓ１０２５でＮｏ）、ステップＳ１０１９の処理に戻る。

ＣＰＵ２０１は、ライブビュー表示の終了指示を受け付けると（Ｓ１０２７でＹｅｓ）、ライブビュー表示の終了指示を撮像装置１００へ送信する（Ｓ１０２８）。ＣＰＵ２０１は、ライブビュー表示の終了指示を受け付けなければ（Ｓ１０２７でＮｏ）、ステップＳ１００６の処理に戻る。

また、本実施形態によれば、撮像装置１００が録画処理中ですべてのカメラ部を通常モードで駆動させる必要がある場合でも、表示制御装置２００のディスプレイ２０５に表示されるＶＲ画像の表示範囲の変更に応じて、撮像装置１００のカメラ部毎に画像を送信するか否かを切り替える。これによって、表示制御装置２００のディスプレイ２０５に表示
されていない範囲の画像を撮像するカメラ部の画像の送信を停止させ、撮像装置１００の電力消費を抑制できる。

（その他）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

１００：撮像装置ａ：カメラ部ｂ：カメラ部
２２ａ，２２ｂ：撮像部２４：画像処理部５０：システム制御部
２００：表示制御装置２０４：画像処理部２０５：ディスプレイ

Claims

それぞれ異なる方向の被写体を撮像することにより得られた画像を出力する複数の撮像処理手段と、
前記複数の撮像処理手段により出力された画像を合成することにより合成画像を生成する生成手段と、
前記合成画像を記録媒体に記録する記録手段と、
前記合成画像のうち画面に表示される表示範囲を示す表示範囲情報を取得する取得手段と、
前記合成画像が前記記録媒体に記録されている間、前記表示範囲情報に関わらず、前記複数の撮像処理手段を第１のモードで駆動するように制御し、
前記合成画像が前記記録媒体に記録されていない間、前記表示範囲情報に基づいて、前記合成画像のうち表示される範囲と対応する画像を出力する前記撮像処理手段を前記第１のモードで駆動し、前記合成画像のうち表示されない範囲と対応する画像を出力する前記撮像処理手段を前記第１のモードに比べて省電力な第２のモードで駆動するよう制御する制御手段と、
を有することを特徴とする撮像装置。
前記合成画像を外部装置へ送信する送信手段をさらに有し、
前記取得手段は、前記外部装置の画面に表示される表示範囲を示す前記表示範囲情報を前記外部装置から取得する、
ことを特徴とする請求項１に記載の撮像装置。
前記複数の撮像処理手段により出力された複数の画像を外部装置へ送信する送信手段をさらに有し、
前記取得手段は、前記外部装置において前記複数の画像を合成することにより生成された合成画像のうち、前記外部装置の画面に表示される表示範囲を示す表示範囲情報を前記外部装置から取得する、
ことを特徴とする請求項１に記載の撮像装置。
前記送信手段は、前記表示範囲情報に基づいて、前記合成画像のうち表示される範囲と対応する前記撮像処理手段により出力される画像を前記外部装置へ送信し、前記合成画像のうち表示されない範囲と対応する前記撮像処理手段により出力される画像を前記外部装置へ送信しない、
ことを特徴とする請求項３に記載の撮像装置。
前記撮像処理手段は、撮像部および前記撮像部から出力されるアナログ信号をデジタル信号に変換するＡ／Ｄ変換器を含み、前記制御手段は、前記撮像部および前記Ａ／Ｄ変換器のうち少なくとも１つを停止することによって、前記撮像処理手段を前記第２のモードで駆動する、
ことを特徴とする請求項１から４のいずれか一項に記載の撮像装置。
それぞれ異なる方向の被写体を撮像することにより得られた画像を出力する複数の撮像処理手段を備える撮像装置の制御方法であって、
前記複数の撮像処理手段により出力された画像を合成することにより合成画像を生成する生成ステップと、
前記合成画像を記録媒体に記録する記録ステップと、
前記合成画像のうち画面に表示される表示範囲を示す表示範囲情報を取得する取得ステップと、
前記合成画像が前記記録媒体に記録されている間、前記表示範囲情報に関わらず、前記
複数の撮像処理手段を第１のモードで駆動するように制御し、
前記合成画像が前記記録媒体に記録されていない間、前記表示範囲情報に基づいて、前記合成画像のうち表示される範囲と対応する画像を出力する前記撮像処理手段を前記第１のモードで駆動し、前記合成画像のうち表示されない範囲と対応する画像を出力する前記撮像処理手段を前記第１のモードに比べて省電力な第２のモードで駆動するよう制御する制御ステップと、
を有することを特徴とする撮像装置の制御方法。
コンピュータを、請求項１から５のいずれか一項に記載された撮像装置の各手段として機能させるためのプログラム。