JP6032987B2 - 画像出力装置および画像出力装置の作動方法 - Google Patents

Description

本発明は、複数の機器による撮影によって最適な画像を得る画像出力装置および画像出力装置の作動方法に関する。

近年、デジタルカメラなどの撮影機能付き携帯機器（撮影機器）は、画像処理を駆使して、様々な撮影機能を備えている。また、撮影機器においては、通信機能を備えたものもあり、撮影して得た画像を他の機器やネットワーク上に伝送することも可能である。

例えば、自分の周りで起こった日常を撮影して得た撮影画像を、インターネット等のネットワーク上にアップロードして、第３者との間で画像を共有して楽しむこともできる。例えば、特許文献１においては、所定地域範囲で発信されたコンテンツのみを検索して、中継配信制御サーバに配信要求を行うようにした中継配信方法が開示されている。

特開２０１２−４６２９号公報

しかしながら、従来のライブ映像等の配信サービスや特許文献１の技術では、視聴者が視聴したい画像を容易に取得することはできないという問題があった。

本発明は、簡単な操作で、視聴者が視聴したい画像を容易に取得することができる画像出力装置および画像出力装置の作動方法を提供することを目的とする。

本発明の一態様に係る画像出力装置は、被写体を撮像して得た撮像画像を出力する撮像部と、撮像を行う１つ以上の他の機器との間において、採点前に共有された連携撮影条件に基づいて、上記撮像画像を採点する採点部と、上記１つ以上の他の機器が撮像した画像についての上記連携撮影条件に基づいて上記１つ以上の他の機器内において採点を行った採点情報を上記１つ以上の他の機器から受信して、受信した１つ以上の採点情報と上記採点部による採点情報とを比較する比較部と、上記比較部の比較結果に基づいて所定の採点情報が得られる画像のみの送信要求を出力して、自機及び上記１つ以上の他の機器からの画像による連携画像の生成を可能にする画像要求部と、を具備する。
本発明の他の態様に係る画像出力装置は、被写体を撮影して得た撮像画像を出力する撮像部と、撮像を行う１つ以上の他の機器との間において、採点前に共有された連携撮影条件に基づいて、上記撮像画像を採点する採点部と、上記採点部の採点結果を採点情報として送信する採点結果送信部と、上記１つ以上の他の機器が撮像した画像についての上記連携撮影条件に基づいて上記１つ以上の他の機器内で採点を行った採点情報と上記採点部による採点情報との比較に基づく画像のみの送信要求に対して、対応する画像を送信する画像送信部と、を具備する。
本発明の一態様に係る画像出力装置の作動方法は、被写体を撮像して得た撮像画像を出力する撮像部を備える画像出力装置の作動方法であって、採点部が、撮像を行う１つ以上の他の機器との間において、採点前に共有された連携撮影条件に基づいて、上記撮像画像を採点する工程と、比較部が、上記１つ以上の他の機器が撮像した画像についての上記連携撮影条件に基づいて上記１つ以上の他の機器内において採点を行った採点情報を上記１つ以上の他の機器から受信して、受信した１つ以上の採点情報と上記採点部による採点情報とを比較する工程と、画像要求部が、上記比較部の比較結果に基づいて所定の採点情報が得られる画像のみの送信要求を出力して、自機及び上記１つ以上の他の機器からの画像による連携画像を生成する工程と、を有する。
本発明の他の態様に係る画像出力装置の作動方法は、被写体を撮影して得た撮像画像を出力する撮像部を備える画像出力装置の作動方法であって、採点部が、撮像を行う１つ以上の他の機器との間において、採点前に共有された連携撮影条件に基づいて、上記撮像画像を採点する工程と、採点結果送信部が、上記採点部の採点結果を採点情報として送信する工程と、画像送信部が、上記１つ以上の他の機器が撮像した画像についての上記連携撮影条件に基づいて上記１つ以上の他の機器内で採点を行った採点情報と上記採点部による採点情報との比較に基づく画像のみの送信要求に対して、対応する画像を送信する工程と、を有する。

本発明によれば、簡単な操作で、視聴者が視聴したい画像を容易に取得することができるという効果を有する。

本発明の第１の実施の形態に係る撮影機器の回路構成を示すブロック図。 カメラ制御を説明するためのフローチャート。 本発明の第２の実施の形態を示すブロック図。 探索指示書に含まれる情報を示す説明図。 親カメラＣＡの動作フローを示すフローチャート。 子カメラの動作フローを示すフローチャート。 表示部２０の表示画面２０ａ上の表示例を示す説明図。 第２の実施の形態の通信を説明するための説明図。 第３の実施の形態を示す説明図。 第３の実施の形態の動作を説明するためのフローチャート。 第３の実施の形態の動作を説明するためのフローチャート。 採点（点数算出）処理を示すフローチャート。 図１２のステップＳ８４の点数Ｋ計算処理の具体的なフローを示すフローチャート。 点数Ｋ計算処理のためのテーブルの一例を示す説明図。 ネゴシエーションを可能にするネゴシエーションモードにおける画面表示の例を示す説明図。 探索指示書受信時の表示例を示す説明図。

以下、図面を参照して本発明の実施の形態について詳細に説明する。

（第１の実施の形態）
図１は本発明の第１の実施の形態に係る画像出力装置を適用した撮影機器の回路構成を示すブロック図である。

撮影機器１は、本体部１０及び本体部１０の前面に設けられた撮影レンズ部３０によって構成される。撮影レンズ部３０には、撮影レンズ３１及び絞り３２が設けられている。撮影レンズ部３０にはドライバ３３及びマイコン３４も設けられており、ドライバ３３は、マイコン３４に制御されて、撮影レンズ３１及び絞り３２を駆動し、フォーカシングや絞り調整等を行うようになっている。

マイコン３４は、インタフェース（Ｉ／Ｆ）２９を介して本体部１０と接続されており、本体部１０の通信部２８を介して後述する制御部１１との間で情報の授受を行うようになっている。これにより、マイコン３４は、本体部１０の制御部１１の指示に従って、撮影レンズ部３０の各部を制御すると共に、撮影レンズ部３０に関する情報を制御部１１に送信することができるようになっている。

本体部１０には、ＣＣＤやＣＭＯＳセンサ等の撮像素子によって構成された撮像部１２が設けられている。撮影機器１の前面に設けた撮影レンズ部３０の撮影レンズ３１を含む光学系からの被写体の光学像は、撮像部１２を構成する撮像素子の撮像面に結像するようになっている。撮像部１２は、制御部１１によって駆動制御されて、撮像した被写体像を光電変換して撮像画像を得る。

制御部１１は、フラッシュメモリ１４に格納されたプログラムに従って動作して、本体部１０の各部を制御する。例えば、制御部１１は、撮像部１２に撮像素子の駆動信号を出力すると共に、撮像素子が光学像を光電変換して得た画像信号をバス１３を介して取り込む。

画像処理部１５は、ＳＤＲＡＭ２３を作業用のメモリとして用いて、撮像部１２の光電変換によって得られた画像信号に対して、所定の信号処理、例えば、色信号生成処理、マトリックス変換処理、その他各種のデジタル処理を行う。画像処理部１５は、撮像画像の記録に際して、符号化処理を施して圧縮した画像情報及び音声情報等を出力することもできるようになっている。

また、撮影機器１には、操作制御部１６及び時計部１８も配設されている。時計部１８は制御部１１が用いる時間情報を発生する。操作制御部１６は、撮影機器１に設けられた図示しないレリーズボタンや撮影モード設定等の各種操作スイッチ等の操作部１７に対するユーザ操作に基づく操作信号を発生して、制御部１１に出力するようになっている。

また、本体部１０には、表示制御部１９及び記録再生制御部２１が設けられている。記録再生制御部２１は、制御部１１からの画像情報及び音声情報を記録媒体２２に与えて記録することができるようになっている。記録再生制御部２１としては、例えばカードインターフェースを採用することができ、記録再生制御部２１はメモリカード等の記録媒体２２に画像情報及び音声情報等を記録可能である。また、記録再生制御部２１は、記録媒体２２に記録された画像情報及び音声情報を読み出して画像処理部１５に供給することができる。画像処理部１５は、記録再生制御部２１によって再生された画像情報及び音声情報を復号化して、画像信号及び音声信号を得ることができるようになっている。また、図示していないが、音声取得部としてマイクが、被写体からの声や音を収音可能に、カメラ前面や上面に設けられている。

表示制御部１９は、撮像部１２からの撮像画像や記録再生制御部２１からの再生画像を表示部２０に与えて、これらの画像を表示させるようになっている。また、表示制御部１９は、撮影機器１の操作を行うためのメニュー表示、アイコン表示等を表示部２０に表示させることもできるようになっている。表示部２０は、本体部１０の例えば背面に設けられており、撮影者は、撮影時に表示部２０の表示画面を視認可能になっている。表示部２０としては、ＬＣＤパネル等を採用可能である。

本実施の形態においては、カメラ間通信部２５及び外部通信部２６が設けられている。カメラ間通信部２５、制御部１１に制御されて、図１の撮影機器１と同一構成の他の撮影機器との間で通信を行って、情報を送受することができるようになっている。また、外部通信部２６は、制御部１１に制御されて、図示しない外部機器との間で通信を行って、情報を送受することができるようになっている。なお、カメラ間通信部２５及び外部通信部２６としては、種々の伝送路を採用することができ、例えば、ＬＡＮ等の有線ケーブルを採用した有線伝送路、無線ＬＡＮ、ブルートゥース（登録商標）、ＷｉＭＡＸや電話回線網等を採用した無線伝送路等を用いることができる。

制御部１１は、通常の撮影モードを指定して、本体部１０の各部を制御すると共に、撮影機器１と同一構成の他の複数の撮影機器との間で連携して撮影を行う連携撮影モードを指定して各部を制御することができるようになっている。制御部１１は、連携撮影モードを実現するための機能部を有している。即ち、制御部１１は、条件決定部１１ａ、画像採点部１１ｂ、採点比較部１１ｃ、画像選択部１１ｄ、画像要求部１１ｅ及び選択画像送信部１１ｆを備える。

条件決定部１１ａは、連携撮影モードにおける連携撮影の条件（以下、連携撮影条件という）を決定する。例えば、条件決定部１１ａは、撮影される人物の笑顔や泣き顔等の特定の表情を連携撮影条件として設定してもよく、撮影される人物が特定の人物であることを連携撮影条件としてもよい。条件決定部１１ａは、決定した連携撮影条件をカメラ間通信部２５を介して他の撮影機器に送信する。例えば、条件決定部１１ａは、特定の人物の顔の特徴量を送信することで、全ての撮影機器において同一の人物が撮影されていることを判定することも可能である。

本実施の形態においては、画像採点部１１ｂは、条件決定部１１ａが決定した連携撮影条件に基づいて、撮像部１２が撮像した撮像画像を採点するようになっている。例えば、連携撮影条件として泣き顔が設定されている場合には、撮像画像中の人物が泣き顔であった場合に、画像採点部１１ｂは点数を高くする。画像採点部１１ｂの採点結果は、採点比較部１１ｃに供給される。本実施の形態においては、画像採点部１１ｂは、カメラ間通信部２５を介して採点結果を送信することができるようになっている。

本実施の形態においては、採点比較部１１ｃには、カメラ間通信部２５を介して、他の撮影機器の採点比較部１１ｃから供給された点数も入力されるようになっている。採点比較部１１ｃは、入力された各点数を比較し、比較結果を画像選択部１１ｄに出力する。例えば、採点比較部１１ｃは、最も高い点数の画像に関する情報を画像選択部１１ｄに出力する。画像選択部１１ｄは、採点の比較結果に基づいて画像を選択し、選択した画像を要求するための情報（以下、画像要求情報という）を画像要求部１１ｅに出力する。例えば、画像選択部１１ｄは、点数が最も高い１つの画像又は点数が所定の値以上の複数の画像に関する情報を画像要求情報として画像要求部１１ｅに出力する。

画像要求部１１ｅは、全ての他の撮影機器又は選択された画像の採点結果を出力した撮影機器に対して、カメラ間通信部２５を介して画像要求情報を送信する。なお、選択される画像として自機で撮影した画像が含まれることもある。この場合には、画像要求部１１ｅは、画像要求情報を選択画像送信部１１ｆに与える。選択画像送信部１１ｆは、自機の画像要求部１１ｅからの画像要求情報に基づいて、選択された画像を画像処理部１５に出力する。また、選択画像送信部１１ｆは、カメラ間通信部２５を介して受信した他機の画像要求部１１ｅからの画像要求情報に基づいて、選択された画像をカメラ間通信部２５を介して送信する。カメラ間通信部２５は、他機から受信した画像を画像処理部１５に出力する。

本実施の形態においては、連携撮影モード時には、画像処理部１５は、自機又は他機によって撮影され選択された画像を画像処理する。こうして、画像処理部１５は、複数の撮影機器によって撮影された画像のうち、条件決定部１１ａの連携撮影条件に基づく採点結果が高い画像が集められて画像（以下、連携画像という）が生成される。この連携画像は、表示制御部１９によって表示部２０の表示画面上に表示される。また、記録再生制御部２１は、連携画像を記録媒体２２に記録する。

更に、外部通信部２６は、連携画像を図示しない外部機器に対して送信することもできるようになっている。

次に、このように構成された実施の形態の動作について図２を参照して説明する。図２はカメラ制御を説明するためのフローチャートである。

撮影機器１の電源が投入されると、制御部１１は、図２のステップＳ１で撮影モードが指示されたか否かを判定する。撮影モードが指示されていない場合には、制御部１１は、ステップＳ２において、再生モードが指示されたか否かを判定する。再生モードが指示されると、制御部１１は、ステップＳ３において選択画像の再生を行う。ユーザが再生画像の変更を指示すると、制御部１１は、ステップＳ４から処理をステップＳ５に移行して画像の変更を行う。なお、制御部１１は、ステップＳ２において再生モードが指定されていない場合には、ステップＳ６において撮影画像を送信する画像通信モードに移行する。

一方、撮影モードが指示されると、制御部１１は、撮影を開始し、スルー画を表示部２０の表示画面上に表示させる（ステップＳ１１）。即ち、制御部１１は、撮像部１２からの撮像画像を取り込んで画像処理部１５に与え、画像処理部１５は撮像画像に対し所定の映像信号処理を施した後、表示制御部１９に与える。表示制御部１９は撮像画像を表示部２０に与えて、表示画面上に撮像画像を表示させる。

次に、制御部１１は、ステップＳ１２において、連携撮影モードが指定されたか否かを判定する。連携撮影モードが指定されていない場合には、制御部１１は、処理をステップＳ１３に移行して撮影操作が行われたか否かを判定する。撮影操作が行われると、ステップＳ１４において撮影が行われる。即ち、制御部１１は、画像処理部１５によって画像処理された画像を圧縮処理した後、記録再生制御部２１に与える。記録再生制御部２１は圧縮画像を記録媒体２２に与えて記録する。制御部１１は、撮影操作が行われない場合には、処理をステップＳ１３からステップＳ１に戻す。

連携撮影モードが指定された場合には、制御部１１は、次のステップＳ２０において親カメラであるか否かを判定する。本実施の形態においては、図１の撮影機器１と同一構成の複数の撮影機器のうち１台を親カメラとし、他を子カメラとして、親カメラが親カメラ及び子カメラの撮像画像を用いて、１つの連携画像を得る。

例えば、ユーザは、操作部１７の操作によって、親カメラの設定を行うようにしてもよい。制御部１１は、ユーザによる親カメラの設定操作が行われると、カメラ間通信部２５を介して親カメラの通知を行う。複数の撮影機器の制御部１１は、カメラ間通信部２５を介して親カメラの情報を受信すると、表示部２０に親カメラの情報を表示する。ユーザがこの表示に対して子カメラの設定を行うと、制御部１１は、カメラ間通信部２５を介して子カメラの設定が行われたことを親カメラに送信する。これにより、複数の撮影機器間で親子関係を構築することができる。なお、親カメラ及び子カメラの設定の方法は、特に限定されるものではなく、種々の方法を採用することができる。例えば、子カメラは、親カメラから連携撮影モードに移行するための信号を受信すると、自動的に連携撮影モードに移行するようにしてもよい。

ユーザが操作部１７によって連携撮影モードにおける連携撮影条件を設定するための操作を行うと、操作制御部１６は、連携撮影条件を設定するための要求信号を発生する。親カメラの条件決定部１１ａは、ステップＳ２１において、要求信号を判定し、ステップＳ２２において連携撮影条件の変更が指示されたか否かを判定する。連携撮影条件が変更されると、条件決定部１１ａは、変更された連携撮影条件を記憶する（ステップＳ２３）。条件決定部１１ａは、決定した連携撮影条件をカメラ間通信部２５を介して各子カメラに送信する（ステップＳ２４）。

一方、子カメラは、ステップＳ３１において、連携撮影条件を受信する。そして、各子カメラの画像採点部１１ｂは、ステップＳ３２において、連携撮影条件に基づいて撮像画像を採点し、採点情報をカメラ間通信部２５を介して親カメラに送信する（ステップＳ３３）。親カメラの採点比較部１１ｃは、カメラ間通信部２５を介して各子カメラからの採点情報を受信する。

親カメラの採点比較部１１ｃは、ステップＳ２５において、自機の画像採点部１１ｂによる採点情報及び各子カメラの画像採点部１１ｂによる採点情報を収集して比較し、比較結果を画像選択部１１ｄに出力する。画像選択部１１ｄは、例えば最も高い点数の画像を選択する。画像要求部１１ｅは、最も高い点数の採点情報を出力した子カメラに対して、カメラ間通信部２５を介して撮像画像の送信を要求する。

子カメラの選択画像送信部１１ｆは、ステップＳ３４において、画像の送信要求が合った場合には、当該最も高い点数の撮像画像を、カメラ間通信部２５を介して親カメラに送信する。こうして、制御部１１は、親カメラ及び複数の子カメラによって撮影された各撮像画像のうち、連携撮影条件に基づいて選択された撮像画像を取得する（ステップＳ２６）。画像処理部１５は取得した撮像画像を画像処理して、表示制御部１９に与える。こうして、表示制御部１９は、連携撮影条件に基づいて選択された撮像画像が連携画像として表示される。なお、親カメラの表示制御部１９は、親カメラによって撮像した画像をメイン画像として表示しながら、子カメラからの撮像画像又は連携画像をサブ画像として表示するようにしてもよい。

また、画像処理部１５は、選択された撮像画像を圧縮して記録再生制御部２１に与える。記録再生制御部２１は、連携撮影条件に基づいて選択された連携画像を記録媒体２２に記録する（ステップＳ２７）。

このように本実施の形態においては、複数の撮影機器において、連携して撮影を行い、最適な撮像画像を得ることができる。この場合において、親機（親カメラ）は、子機（子カメラ）に対して、共通の連携撮影条件を指定し、共通の連携撮影条件に基づいて撮像画像を採点することで、最適な撮像画像を得ており、親機を操作するユーザが所望する画像を得ることができる。また、親機は、各子機から連携撮影条件に基づく採点結果を送信させ、採点結果の比較結果によって選択した撮像画像のみを子機から送信させるようになっており、撮像画像の選択のために子機から親機に撮像画像を送信する必要がないことから、連携撮影における通信量を著しく低減させることが可能である。
また、撮影者は、どのカメラの画像がいちばん良いかなどに悩む必要がなく、撮影に専念することが可能となり、音響効果や構図、露出などを含む撮影画像の画質、音質や品質、ピントやズーム制御の過程の滑らかさなど品位の確保（撮影操作）に専念することが可能となり、結果としてコンテンツの質を上げることが出来る。

なお、上記実施の形態では、親カメラ及び子カメラは、撮影機器１と同一構成であると説明したが、親カメラは、選択画像送信部１１ｆは省略可能であり、子カメラは、条件決定部１１ａ、採点比較部１１ｃ、画像選択部１１ｄ及び画像要求部１１ｅは省略可能である。

（第２の実施の形態）
図３は本発明の第２の実施の形態を示すブロック図である。

第１の実施の形態においては連携撮影条件を親機が指定し、親機が連携撮影条件に基づいて選択した画像を収集する例について説明した。本実施の形態は、他の機器である情報処理装置によって連携撮影条件を指定し、この情報処理装置において連携撮影条件に基づいて選択した画像を収集する例を示している。

図３において、撮影機器ＣＡ，Ｃｂ〜Ｃｄは、図１の撮影機器１と同一構成である。例えば、撮影機器ＣＡは親カメラ（以下、親カメラＣＡともいう）であり、撮影機器Ｃｂ〜Ｃｄは子カメラ（以下、子カメラＣｂ〜Ｃｄともいう）であるものとして説明する。各子カメラＣｂ〜Ｃｄは、親カメラＣＡとの間でカメラ間通信部２５を利用して通信が可能である。なお、図３では３つの子カメラの例を示しているが、子カメラの数は限定されないことは明らかである。

本実施の形態においては、親カメラＣＡは、インターネットや電話回線網等のネットワーク４１に接続可能であり、ネットワーク４１上の情報処理装置４２との間で、外部通信部２６を介して通信可能である。親カメラＣＡは、制御部１１が外部通信部２６を制御することで、連携撮影モードにおいて撮影した撮影画像を、ネットワーク４１上にストリーミング配信することができるようになっている。また、親カメラＣＡは、連携撮影条件をネットワーク４１を介して受信して連結撮影を行い、連携撮影条件の発信元に対し、連携撮影モードにおいて撮影した連携画像をストリーミング送信することができるようになっている。即ち、情報処理装置４２は、連携撮影モードにおいて撮影した連携画像を要求するクライアントとなる。

ユーザ４３は、情報処理装置４２を操作して、連携撮影条件を記述した探索指示書４４を作成し、ネットワーク４１を介して親カメラＣＡに送信させることができる。例えば、情報処理装置４２は、探索指示書として探索すべき画像の情報を用いることができる。即ち、探索指示書によって、撮影機器ＣＡ，Ｃｂ〜Ｃｄにおいて連携撮影して得られた撮像画像に含まれるべき画像を指定することができ、連携撮影モードにおいては探索指示書で指定した画像を含む撮像画像を選択させることが可能である。例えば、撮影機器ＣＡ，Ｃｂ〜Ｃｄを用いて結婚式等のセレモニーを連携撮影する場合において、探索指示書により新郎や新婦の画像を探索対象画像として指定することで、撮影機器ＣＡ，Ｃｂ〜Ｃｄが撮像した画像のうち探索対象画像である新郎や新婦の画像が含まれる画像のみが選択されて、連携撮影による連携画像を得ることができる。

図４は探索指示書に含まれる情報を示す説明図である。図４に示すように、探索指示書には探索対象画像として指定する画像の情報が記述される。なお、指定する画像の情報としては、画像データであってもよく画像の特徴量の情報であってもよい。また、情報処理装置４２は、親カメラＣＡから送信された動画像から得た画像を、探索対象画像として指定することもでき、また、自機内に保持されている画像、記録メディアから読み出した画像を探索対象画像として指定することもできる。

例えば、情報諸装置４２として、携帯電話が用いられた場合には、アドレス帳の情報を探索指示書として用いることができる。

探索指示書にはオプションの情報を付加することができる。オプションの情報としては、新規を指定すると、過去の探索指示書の内容を破棄することを指示することができ、追加を指定すると、過去の探索指示書の内容を破棄しないことを指示することができる。例えば、過去の探索指示書で新婦の画像が探索対象画像として指定されており、新たな探索指示書で新郎の画像を探索対象画像として指定する場合において、新規を選択すると、以後新郎の画像を含む撮像画像のみが探索され、追加を選択すると、以後新郎新婦の画像を含む撮像画像が探索されることになる。

動画配信先としては、情報処理装置４２のアドレス情報が記述される。これにより、親機ＣＡは、連携撮影モードにおける連携画像を、情報処理装置４２に対しストリーミング送信することが可能となる。

次に、このように構成された実施の形態の動作について図５及び図６のフローチャートを参照して説明する。図５は親カメラＣＡの動作フローを示し、図６は子カメラＣｂ〜Ｃｄの動作フローを示している。なお、図５及び図６の各処理は、親カメラＣＡ又は子カメラＣｂ〜Ｃｄの制御部１１によって実施されるものである。また、図７は表示部２０の表示画面２０ａ上の表示例を示す説明図である。

制御部１１は、操作部１７の操作に従って表示制御部１９を制御して、モード決定のためのメニューを表示することができる。図７はメニュー表示の一例を示している。図７（ａ）においては、表示画面２０ａ上に、ストリーミングモードを指定するための表示５３及び通常撮影モードを指定するための表示５４が表示されていることを示している。ユーザが表示５３を指定することでストリーミングモードが指定され、表示５４を指定することで、通常撮影モードが指定される。ストリーミングモードが指定されると、制御部１１は、図７（ｂ）に示すように、表示画面２０ａ上に親カメラＣＡを設定するための表示５５及び子カメラＣｂ〜Ｃｄを設定するための表示５６を表示させる。ユーザが表示５５を指定することで、撮影機器１は親カメラＣＡに設定され、表示５６を指定することで、撮影機器１は子カメラＣｂ〜Ｃｄに設定される。

親カメラＣＡにおいては、制御部１１によってステップＳ４１においてストリーミング中か否かが判定され、ストリーミング中でない場合には、他のモードが実施され（ステップＳ４２）、ストリーミング中の場合には、撮像が行われる（ステップＳ４３）。

親カメラＣＡはステップＳ４４において、探索指示書を受信したか否かを判定する。親カメラＣＡは、探索指示書を受信しない場合には、ステップＳ４６において既に探索指示書の内容が登録済みであるか否かを判定し、登録されていない場合には、ステップＳ４８において、親カメラＣＡの撮像画像を送信画像に設定する。

親カメラＣＡは、探索指示書を受信すると、その指示内容を登録する（ステップＳ４５）。ステップＳ４５において指示内容を登録した場合又は既に指示内容が登録されている場合には、親カメラＣＡは、ステップＳ４７において子カメラＣｂ〜Ｃｄが通信可能であるか否かを判定する。

一方、各子カメラＣｂ〜Ｃｄは、夫々ステップＳ６１において通信要求の有無を判定する。子カメラＣｂ〜Ｃｄは、通信要求がない場合には、ステップＳ６２において他のモードを実施し、通信要求があった場合には、親カメラＣＡに通信可能であることを通知する（ステップＳ６３）。

親カメラはＣＡは、全ての子カメラＣｂ〜Ｃｄが通信可能でない場合には、ステップＳ４８に移行して親カメラＣＡの撮像画像を送信画像に決定し、子カメラＣｂ〜Ｃｄのいずれか１つ以上が通信可能である場合には、ステップＳ５１に移行して、ネットワーク４１を介してストリーミング配信を要求している全クライアントに対する処理が完了したか否かを判定する。ストリーミング処理が終了していない場合には、親カメラＣＡは、ステップＳ５２において、通信可能な子カメラに対して探索指示書を送信する。

通信可能な子カメラＣｂ〜Ｃｄは、探索指示書を保持している場合には、ステップＳ６５において撮像を行い、探索指示書に基づいて撮像画像を採点する（ステップＳ６６）。子カメラＣｂ〜Ｃｄは、採点結果を親カメラＣＡに送信する（ステップＳ６７）。

親カメラＣＡは、ステップＳ５２において、探索指示書に基づいて撮像画像を採点する。親カメラＣＡは、子カメラＣｂ〜Ｃｄからの採点結果を集計する（ステップＳ５３）。親カメラＣＡは、親カメラＣＡ及び子カメラＣｂ〜Ｃｄの採点結果から、親カメラの点数が最大であるか否かを判定する（ステップＳ５４）。親カメラＣＡの点数が最大である場合には、親カメラはＣＡは、親カメラＣＡの撮像画像を送信画像に決定する（ステップＳ４８）。親カメラＣＡの点数が最大でない場合には、親カメラＣＡは、子カメラＣｂ〜Ｃｄのうち、最大の点数を送信した子カメラに対して、点数が最大の画像を要求する（ステップＳ５５）。

子カメラＣｂ〜Ｃｄは、ステップＳ６８において画像要求が発生したか否かを判定し、画像要求が発生した子カメラは、親カメラに点数が最大の画像を送信する（ステップＳ６９）。子カメラＣｂ〜Ｃｄは、ステップＳ７０において処理の終了を判定する。

親カメラＣＡは、画像要求を送信した子カメラＣｂ〜Ｃｄから画像を受信し、その画像を送信画像に設定する（ステップＳ５６）。なお、図７（ｃ）に示すように、例えば、親カメラＣＡの表示画面２０ａ上には、親カメラＣＡによって撮像された画像がメイン画像５２として表示され、子カメラＣｂ〜Ｃｄから受信した画像がサブ画像５１として表示される。親カメラＣＡは、ステップＳ４９において、ステップＳ４８又はＳ５６において設定された送信画像をストリーミング送信する。この送信画像は、情報処理装置４２等の探索指示書を送信した全てのクライアントに送信される。

なお、各クライアント毎に異なる探索指示書が親カメラＣＡに供給されることがある。従って、親カメラＣＡ及び子カメラＣｂ〜Ｃｄは、各探索指示書毎に採点を行い、親カメラＣＡは、各探索指示書毎の採点結果に基づいて各探索指示書毎に画像を選択して連携画像を得、探索指示書を送信した各クライアントに対応する連携画像を出力する。

このように本実施の形態においては、第１の実施の形態と同様の効果が得られると共に、親機は、クライアントによって指示された連携撮影条件に従って得た連携画像をクライアントに対してストリーミング配信することが可能である。

なお、第２の実施の形態においては、クライアントに対する通信は親カメラＣＡのみで行った。図８はこのような第２の実施の形態における通信を説明するための説明図である。

図８に示すように、親カメラＣＡと子カメラＣｂ〜Ｃｄとの間では、通信可能であることを示す通信、探索指示書の通信、採点結果の通信、動画像の配信要求及び動画像の通信を行う。また、親カメラＣＡはネットワーク４１を介してクライアントである情報処理装置４２との間で通信が可能であり、探索指示書の通信及び連携撮影モードによって撮影した動画像のストリーミング通信を行う。従って、子カメラＣｂ〜Ｃｄは、クライアントとの間で通信を行う必要は無く、外部通信部２６を省略可能である。
また、撮影者は、どのカメラの画像がいちばん良いかなどに悩む必要がなく、撮影に専念することが可能となり、音響効果や構図、露出などを含む撮影画像の画質、音質や品質、ピントやズーム制御の過程の滑らかさなど品位の確保（撮影操作）に専念することが可能となり、結果としてコンテンツの質を上げることが出来ることは言うまでもない。

（第３の実施の形態）
図９は本発明の第３の実施の形態を示す説明図である。上記第２の実施の形態はクライアントに対して親カメラのみが通信を行ったが、本実施の形態はクライアントに対して親カメラＣＡだけでなく、子カメラＣｂ〜Ｃｄも通信可能に構成した例を示している。この実施例の場合、親カメラを介さず、ストリーミングを外部に流せるので切換の即時性が最も良好となる。

本実施の形態においては、親カメラＣＡの外部通信部２６だけでなく、子カメラＣｂ等の１つ以上の子カメラの外部通信部２６もクライアントとの間で通信可能である。親カメラＣＡと子カメラＣｂとの間では、通信可能であることを示す通信、探索指示書の通信、採点結果の通信、動画像の配信要求及び動画像の通信を行う。また、親カメラＣＡはネットワーク４１を介してクライアントである情報処理装置４２との間で通信が可能であり、探索指示書の通信及び連携撮影モードによって撮影した動画像のストリーミング通信を行う。同様に、子カメラＣｂはネットワーク４１を介してクライアントである情報処理装置４２との間で通信が可能であり、連携撮影モードによって撮影した動画像のストリーミング通信を行う。

次に、このように構成された実施の形態の動作について図１０及び図１１のフローチャートを参照して説明する。図１０及び図１１において、夫々図５及び図６と同一の手順については同一符号を付して説明を省略する。

図１０のフローは、ステップＳ４８，Ｓ５５の手順を省略すると共に、ステップＳ７１を追加した点が図５のフローと異なる。親カメラＣＡは、ステップＳ４８の処理を省略して、指示内容が登録されていない場合、子カメラとの通信が不能な場合及び親カメラＣＡの点数が最大の場合には、親カメラＣＡが撮像した画像を連携撮影モードにおける画像として、クライアントに送信する（ステップＳ４９）。また、親カメラＣＡは、親カメラＣＡの点数が最大でなかった場合には、ステップＳ７１において、子カメラに点数が最大の画像の送信要求を出力する。

一方、子カメラの動作を示す図１１のフローは、ステップＳ６９に代えてステップＳ７２を採用した点が図６のフローと異なる。ステップＳ７２においては、親カメラＣＡから画像要求が発生すると、要求された撮像画像をクライアントである情報処理装置４２に出力する。

このように、本実施の形態においては、親カメラだけでなく、子カメラにおいても、クライアントに対してストリーミング送信が可能である。

上記各実施の形態においては、連携撮影条件に基づいて撮像画像を採点するようになっている。図１２はこの採点（点数算出）処理を示すフローチャートである。

親カメラＣＡ及び子カメラＣｂ〜Ｃｄの画像採点部１１ｂは、図１２のステップＳ８１において変数Ｋｔｏｔａｌを０に初期化した後、ステップＳ８２において全探索指示書の識別を完了したか否かを判定する。全探索指示書についての採点が終了していない場合には、処理をステップＳ８３に移行して、撮像画像中から探索する人物が存在するか否かを調べる。撮像画像中に探索する人物が存在しない場合には、画像採点部１１ｂは、ステップＳ８５において変数Ｋｔｏｔａｌに０を代入する。

撮像画像中に探索する人物が存在した場合には、画像採点部１１ｂは、ステップＳ８４において変数Ｋｔｏｔａｌを算出する。画像採点部１１ｂは、ステップＳ８６において、合計点数を算出する。例えば、画像採点部１１ｂは、１フレーム毎に、合計点数を算出するようにしてもよい。或いは、画像採点部１１ｂは、数秒、例えば５秒毎に、合計点数を算出するようにしてもよい。

図１３は図１２のステップＳ８４の点数Ｋ計算処理の具体的なフローを示すフローチャートである。また、図１４は点数Ｋ計算処理のためのテーブルの一例を示す説明図である。画像採点部１１ｂは、撮像画像中の探索人物の顔の特徴量の検出結果により、人物の顔の向きを判定し、顔の向きに応じた点数Ｋａを求める（ステップＳ９１）。例えば、探索人物が正面を向いている場合には、点数Ｋａを１．０とし、顔が左右を向いている場合には点数Ｋａを０．８、上下を向いている場合には点数Ｋａを０．５とする。

また、画像採点部１１ｂは、ステップＳ９２において、顔の大きさに応じた点数Ｋｂを求める。例えば、探索人物の顔の大きさが、撮像画像の面積の１９％以下である場合、２０％〜４９％である場合、５０％〜１００％である場合には、夫々点数Ｋｂを０．５、０．８、１．０とする。

また、画像採点部１１ｂは、ステップＳ９３において、顔の表情に応じた点数Ｋｃを求める。例えば、探索人物の顔の表情が、笑い顔の場合、泣き顔の場合、その他の場合には、夫々点数Ｋｃを１．０、０．８、０．５とする。画像採点部１１ｂは、求めた点数Ｋａ，Ｋｂ，Ｋｃを乗算することで、変数Ｋｔｏｔａｌを求める（ステップＳ９４）。

なお、図１２乃至図１４による採点方法は一例であり、他の採点方法を採用してもよい。例えば、単位時間当たりの探索人物が存在する時間が長い場合に点数を高くしてもよい。また、探索指示書によって複数の探索人物が指定されている場合には、同時に多くの探索人物が含まれる場合に点数を高くするようにしてもよい。

また、探索指示書によって人物を指定する例を説明したが、風景を指定してもよく、或いは、特定の人物ではなく、２人が撮像されている場合や、多くの人物が撮像されていることを条件にしてもよく、連携撮影条件は種々設定可能である。或いは、撮像画像のピントが合っているや画像の色等のように撮像画像の画像パラメータを連携撮影条件にしてもよい。

また、画像採点部１１ｂによる採点の仕方をユーザが指定可能に構成してもよい。例えば、図１４の点数をユーザが指定することも可能である。更に、クラウドサービスを利用して、画像採点部１１ｂを図示しないネットワーク上の機器に設けてもよい。

なお、上記図７の説明では、ユーザの設定によって親カメラと子カメラとが決定した。しかし、連携撮影に参加する撮影機器が多い場合等においては、各撮影機器間で通信を行い、各撮影機器の制御部１１間でネゴシエーションを行った結果、親子関係を構築した方がよい。

図１５はこのようなネゴシエーションを可能にするネゴシエーションモードにおける画面表示の例を示す説明図である。

親カメラ及び子カメラの制御部１１は、ストリーミングモードを設定することができ、ストリーミングモード時には、図１５（ａ）に示すメニュー表示を表示部２０の表示画面２０ａ上に表示させることができる。図１５（ａ）では、子カメラを募集するための表示６１及び連携撮影の子カメラとして参加するための表示６２が表示されている。

ユーザが表示６１を選択すると、ユーザが操作したカメラは親カメラとなり、その制御部１１はカメラ間通信部２５を制御して、Ｗｉｆｉやブルートゥース等を介して近隣のカメラと通信を行い、連携撮影の子カメラとして参加するカメラを募集する。親カメラの表示部２０の表示画面２０ａＡには、「募集中」の表示が表示される（図１５（ｂ））。

一方、親カメラの近隣のカメラにおいて、ユーザが参加のための表示６２を選択するものとする。そうすると、ユーザが表示６２を選択したカメラの制御部１１は、図１５（ｄ）に示すように、表示部２０の表示画面２０ａｂ上に「参加中」の表示を表示させると共に、カメラ間通信部２５を介して親カメラとネゴシエーションを行い、親子関係を構築する。そうすると、親カメラの表示画面２０ａＡには、参加した子カメラＡ，Ｂ，…を示す表示が表示され、子カメラの表示画面２０ａｂには、親カメラを発見したことを示す表示が表示される。

なお、子カメラにおいて、親カメラによって子カメラが募集されていることを検出した場合には、参加するか否かを決定するための表示のみを表示させるようにしてもよい。

図１６は探索指示書受信時の表示例を示す説明図である。図１６（ａ）は親カメラ又は子カメラが探索指示書を受信した場合の表示を示している。制御部１１は、外部通信部２６又はカメラ間通信部２５を介して探索指示書を受信すると、表示部２０の表示画面２０ａ上に、探索指示書を受信したことを示すマーク７１を表示させる。
探索指示書を受信すると、制御部１１は探索指示書の内容を表示画面２０ａ上に表示させるようにしてもよい。図１６（ｂ）では、探索されている人物の画像を含む探索指示書の内容７２が表示されていることを示している。また、表示画面２０ａ上には、ＯＫボタン７３及びＮＧボタン７４も表示されており、ユーザがＯＫボタン７３を選択することによって、探索指示書に基づく採点が行われ、ＮＧボタン７４を選択することによって、受信した探索指示書が無視される。
また、特別に表記していないが、ここでの撮影画像には音声も含まれている。画像で探索指示を出している例を列挙したが、音声に関しても応用が可能なことは言うまでもない。さらに、この実施例でも、撮影者は、どのカメラの画像がいちばん良いかなどに悩む必要がなく、撮影に専念することが可能となり、音響効果や構図、露出などを含む撮影画像の画質、音質や品質、ピントやズーム制御の過程の滑らかさなど品位の確保（撮影操作）に専念することが可能となり、結果としてコンテンツの質を上げることが出来る。
以上の実施例はいずれも、鑑賞者にとっても、簡単な操作や設定で、自分のこだわりを反映した品質の良いコンテンツが楽しめるメリットがある。また、撮影者も、自分のこだわりだけを考えて撮影してもよく、簡単かつ気楽な撮影が可能となる。たまたま鑑賞者と撮影者のこだわり条件が一致した画像が優先的にストリーミングされるからである。

本発明は、上記実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。

なお、特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。また、これらの動作フローを構成する各ステップは、発明の本質に影響しない部分については、適宜省略も可能であることは言うまでもない。

１…撮影機器、１０…本体、１１…制御部、１１ａ…条件決定部、１１ｂ…画像採点部、１１ｃ…採点比較部、１１ｄ…画像選択部、１１ｅ…画像要求部、１１ｆ…選択画像送信部、１５…画像処理部、１９…表示制御部、２０…表示部、２５…カメラ間通信部、２６…外部通信部、３０…撮影レンズ部。

Claims (10)

1. 被写体を撮像して得た撮像画像を出力する撮像部と、
   撮像を行う１つ以上の他の機器との間において、採点前に共有された連携撮影条件に基づいて、上記撮像画像を採点する採点部と、
   上記１つ以上の他の機器が撮像した画像についての上記連携撮影条件に基づいて上記１つ以上の他の機器内において採点を行った採点情報を上記１つ以上の他の機器から受信して、受信した１つ以上の採点情報と上記採点部による採点情報とを比較する比較部と、
   上記比較部の比較結果に基づいて所定の採点情報が得られる画像のみの送信要求を出力して、自機及び上記１つ以上の他の機器からの画像による連携画像の生成を可能にする画像要求部と、
   を具備したことを特徴とする画像出力装置。
2. 被写体を撮影して得た撮像画像を出力する撮像部と、
   撮像を行う１つ以上の他の機器との間において、採点前に共有された連携撮影条件に基づいて、上記撮像画像を採点する採点部と、
   上記採点部の採点結果を採点情報として送信する採点結果送信部と、
   上記１つ以上の他の機器が撮像した画像についての上記連携撮影条件に基づいて上記１つ以上の他の機器内で採点を行った採点情報と上記採点部による採点情報との比較に基づく画像のみの送信要求に対して、対応する画像を送信する画像送信部と、
   を具備したことを特徴とする画像出力装置。
3. 自機及び上記１つ以上の他の機器からの画像による上記連携画像の生成を行う画像生成部を具備したことを特徴とする請求項１に記載の画像出力装置。
4. 上記連携画像をクライアントに送信する画像送信部
   を具備したことを特徴とする請求項１又は３に記載の画像出力装置。
5. 上記画像送信部は、上記対応する画像をクライアントに送信する
   ことを特徴とする請求項２に記載の画像出力装置。
6. 上記連携画像を表示する表示部
   を具備したことを特徴とする請求項１又は３に記載の画像出力装置。
7. 上記連携画像を記録する記録部
   を具備したことを特徴とする請求項１又は３に記載の画像出力装置。
8. 上記採点部は、上記撮像画像中の探索を行い、探索する人物が存在した場合に採点を加算する
   ことを特徴とする請求項１又は２に記載の画像出力装置。
9. 被写体を撮像して得た撮像画像を出力する撮像部を備える画像出力装置の作動方法であって、
   採点部が、撮像を行う１つ以上の他の機器との間において、採点前に共有された連携撮影条件に基づいて、上記撮像画像を採点する工程と、
   比較部が、上記１つ以上の他の機器が撮像した画像についての上記連携撮影条件に基づいて上記１つ以上の他の機器内において採点を行った採点情報を上記１つ以上の他の機器から受信して、受信した１つ以上の採点情報と上記採点部による採点情報とを比較する工程と、
   画像要求部が、上記比較部の比較結果に基づいて所定の採点情報が得られる画像のみの送信要求を出力して、自機及び上記１つ以上の他の機器からの画像による連携画像を生成する工程と、
   を有することを特徴とする画像出力装置の作動方法。
10. 被写体を撮影して得た撮像画像を出力する撮像部を備える画像出力装置の作動方法であって、
    採点部が、撮像を行う１つ以上の他の機器との間において、採点前に共有された連携撮影条件に基づいて、上記撮像画像を採点する工程と、
    採点結果送信部が、上記採点部の採点結果を採点情報として送信する工程と、
    画像送信部が、上記１つ以上の他の機器が撮像した画像についての上記連携撮影条件に基づいて上記１つ以上の他の機器内で採点を行った採点情報と上記採点部による採点情報との比較に基づく画像のみの送信要求に対して、対応する画像を送信する工程と、
    を有することを特徴とする画像出力装置の作動方法。

Images