JP6727840B2 - 撮像装置、撮像制御方法及びコンピュータプログラム - Google Patents

Description

本開示は、撮像装置、撮像制御方法及びコンピュータプログラムに関する。

近接センサを用いて画面の周辺に存在するユーザを検出して、ユーザを検出したことに応じて、画面に表示するユーザインタフェースの処理を行なう技術が開示されている（例えば特許文献１参照）。

特開２０１３−１４５４５１号公報

このように物体の検出に応じた処理を、ユーザの首から提げられる等の状態で、自動的に撮像処理を行う撮像装置に適用することで、撮像処理の質を向上させることが可能となる。

そこで、本開示では、物体の検出によって撮像処理の質を向上させることが可能な、新規かつ改良された撮像装置、撮像制御方法及びコンピュータプログラムを提案する。

本開示によれば、第１センシングデータに基づき撮像レンズの前方の物体の有無を判定する判定部と、前記判定部の判定結果に基づき、前記撮像レンズを通じた撮像処理に関する挙動を決定する決定部と、を備える、撮像装置が提供される。

また本開示によれば、第１センシングデータに基づき撮像レンズの前方の物体の有無を判定することと、前記判定の結果に基づき、前記撮像レンズを通じた撮像処理に関する挙動を決定することと、を含む、撮像制御方法が提供される。

また本開示によれば、コンピュータに、第１センシングデータに基づき撮像レンズの前方の物体の有無を判定することと、前記判定の結果に基づき、前記撮像レンズを通じた撮像処理に関する挙動を決定することと、を実行させる、コンピュータプログラムが提供される。

以上説明したように本開示によれば、物体の検出によって撮像処理の質を向上させることが可能な、新規かつ改良された撮像装置、撮像制御方法及びコンピュータプログラムを提供することが出来る。

なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。

本開示の実施の形態に係る撮像システムの構成例を示す説明図である。 本開示の実施の形態に係る撮像装置１００の機能構成例を示す説明図である。 本開示の実施の形態に係る撮像装置１００に含まれる制御部１５０の機能構成例を示す説明図である。 本開示の実施の形態に係る撮像装置１００の動作例を示す流れ図である。 ユーザ１の左腕が撮像装置１００のレンズ１０１の前方に位置している状態を示す説明図である。 撮像装置１００が撮像処理を実行した際に得られる画像を示す説明図である。 撮像装置１００のレンズ１０１の前方の、測距センサが検出できる範囲内に物体が存在していない状態を示す説明図である。 撮像装置１００が撮像処理を実行した際に得られる画像を示す説明図である。 撮像装置１００が手で覆われている様子を示す説明図である 撮像装置１００がテーブルの上に置かれている状態を示す説明図である。 撮像装置１００のレンズの面にレンズカバーが装着されている状態を示す説明図である。 撮像装置１００が手で覆われて、かつ撮像装置１００が手でタップされた様子を示す説明図である。 撮像装置１００がカバンのベルトで覆われている様子を示す説明図である。

以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

なお、説明は以下の順序で行うものとする。
１．本開示の実施の形態
１．１．概要
１．２．システム構成例
１．３．機能構成例
１．４．動作例
１．５．応用例
２．まとめ

＜１．本開示の実施の形態＞
［１．１．概要］
本開示の実施の形態について詳細に説明する前に、まず、本開示の実施の形態の概要について説明する。

腕や頭部など、身体に装着して利用することが想定された、ウェアラブルデバイスとも称される機器の普及が広まりつつある。ウェアラブルデバイスには、様々なセンサやカメラ、表示デバイス等が備えられる。ここでは、カメラを備えたウェアラブルデバイスであるウェアラブルカメラの例を取り上げる。

身体に装着して、ハンズフリーで撮像処理を行うことが出来るウェアラブルカメラに、所定の間隔で自動的に静止画像または動画像の撮像処理を行って静止画像や動画像を撮像する機能を持たせる場合を考える。その機能のことを以下ではインターバル撮像機能とも称する。そのようなインターバル撮像機能を有するウェアラブルカメラの理想的な動作は、ユーザが適切だと思うタイミングで、ユーザが撮像して欲しいと思う静止画像や動画像を定期的に、かつ自動で撮像することである。

しかし、場合によっては、ウェアラブルカメラはユーザが撮像して欲しくない静止画像や動画像を撮像してしまうことがある。例えば、ユーザの腕やカバンのベルトなど、ウェアラブルカメラの前に、撮像時における被写体としては適さない何らかの物体が覆い被さった状態でウェアラブルカメラが撮像処理を実行してしまう場合である。そのような状態で撮像された画像は、ユーザが本来は撮像して欲しくないものであるため、ウェアラブルカメラの撮像後にユーザは不要な画像であると判断する。そのため、ウェアラブルカメラが撮像した画像を後でユーザが見返した時に、ユーザが不要な画像であると判断した画像は削除される可能性が高く、撮像した意味が無くなってしまう。また、ウェアラブルカメラが撮像した画像が数枚程度であれば、ユーザが後で見返した際に手作業で不要な画像を削除することは容易である。しかし、定期的に撮像する自動撮像の場合にはウェアラブルカメラが撮像した画像が大量になり、ユーザは不要な画像を取捨選択するだけでも不快に感じる可能性がある。

そのため、撮像タイミングにおいて撮像処理を行うと、ユーザが不要と感じる画像を撮像してしまうとウェアラブルカメラ自身が予め認識出来れば、ユーザが不要と感じる画像は激減する。ウェアラブルカメラは、ユーザが不要と感じる画像を撮像しないようにすることで、撮像画像全体としての品質を向上させることが可能になる。また、ウェアラブルカメラは、ユーザが不要と感じる画像を撮像しないようにすることで、動作時間の延長効果も期待できる。

そこで本件開示者は、上述した点に鑑み、定期的に撮像処理を実行する撮像装置において、撮像が不要な状況であると撮像装置自身が認識できる技術について、鋭意検討を行った。その結果、本件開示者は、以下で説明するように、センシングデータに基づいて撮像が不要な状況であると撮像装置自身が認識できる技術を考案するに至った。

以上、本開示の実施の形態の概要について説明した。続いて、本開示の実施の形態について詳細に説明する。

［１．２．システム構成例］
まず、本開示の実施の形態に係る撮像システムの構成例を説明する。図１は、本開示の実施の形態に係る撮像システムの構成例を示す説明図である。

図１に示したように、本開示の実施の形態に係る撮像システムは、撮像装置１００と、携帯端末２００と、を含んで構成される。

撮像装置１００は、図１に示したように、ユーザ１の首に提げて使用されることを想定した装置である。もちろん、撮像装置１００は、図１に示したような状態で使用されるだけでなく、ユーザ１が手に持った状態や、テーブルなどの上に置かれた状態で使用されても良い。本実施の形態に係る撮像装置１００は、静止画像や動画像の撮像機能に加えて、所定の間隔で撮像処理を実行して、静止画像または動画像（以下、静止画像または動画像を単に画像と総称することもある）を撮像する機能を有する。

撮像装置１００が撮像した画像は、撮像処理が完了する毎に、または、任意のタイミングで、ユーザ１が所持する携帯端末２００に、または、セルラー通信を介してクラウドサーバに、または、ＷｉＦｉを介してホームネットワークストレージに送信される。また携帯端末２００は、撮像装置１００が撮像した画像を表示する機能に加え、撮像装置１００の様々な設定を変更する機能を有しても良い。携帯端末２００は、図１ではスマートフォンのような高機能携帯電話として図示されているが、係る例に限定されるものでは無い。

本実施の形態に係る撮像装置１００は、上述したように所定の間隔で撮像処理を実行するが、その撮像処理を実行するタイミングにおいて、撮像時における被写体としては適さない何らかの物体の存在の有無を判定する。撮像装置１００は、そのような物体の有無の判定に、センサが出力するセンシングデータを用いる。図１には、撮像装置１００のレンズ１０１が設けられた面と同じ面にセンサ部１２０が設けられている様子が示されている。センサ部１２０を構成するセンサとしては、例えば撮像装置１００のレンズ１０１が設けられた面から物体までの距離を測定する測距センサ、撮像装置１００の周囲の照度を測定する照度センサ、色や赤外線を識別するＲＧＢ−ＩＲセンサ等がある。そして本実施の形態に係る撮像装置１００は、撮像処理を実行するタイミングにおいて、撮像時における被写体としては適さない何らかの物体が存在していることを検出すると、その物体が存在しなくなるまで撮像処理の実行を待機する。

本開示の実施の形態に係る撮像装置１００は、このように、撮像処理を実行するタイミングにおいて、撮像時における被写体としては適さない何らかの物体の存在の有無を判定することで、撮像が不要な状況であると撮像装置１００自身が認識することができる。そして本開示の実施の形態に係る撮像装置１００は、撮像が不要な状況である場合に撮像を一時的に停止することで、ユーザにとって不要と思われる画像を大きく減らすことが可能となる。

以上、本開示の実施の形態に係る撮像システムの構成例について説明した。続いて、本開示の実施の形態に係る撮像装置１００の機能構成例について説明する。

［１．３．機能構成例］
図２は、本開示の実施の形態に係る撮像装置１００の機能構成例を示す説明図である。以下、図２を用いて本開示の実施の形態に係る撮像装置１００の機能構成について説明する。

図２に示したように、本開示の実施の形態に係る撮像装置１００は、撮像部１１０と、センサ部１２０と、シャッタボタン１３０と、電源ボタン１４０と、制御部１５０と、記憶部１６０と、無線通信部１７０と、表示部１８０と、バッテリ１９０と、を含んで構成される。

撮像部１１０は、図１に示したレンズ１０１や、イメージセンサ等を含んで構成され、レンズ１０１を通じてイメージセンサの受光面に結像される像に応じて、所定期間電子を蓄積する。そして撮像部１１０は、その蓄積された電子に応じた信号を制御部１５０に出力する。制御部１５０は、撮像部１１０から出力される信号を用いて撮像処理を実行して、画像を生成する。

本実施の形態に係る撮像装置１００は、上述したように所定の間隔で撮像処理を実行する。所定の間隔で撮像処理を実行する際、撮像処理を実行するタイミングだけ撮像部１１０のイメージセンサを動作させても良い。撮像処理を実行するタイミングだけ撮像部１１０のイメージセンサを動作させることで本実施の形態に係る撮像装置１００は消費電力を低減させることが出来る。なお、撮像装置１００は、撮像処理の間隔に応じて、撮像処理を実行するタイミングだけ撮像部１１０のイメージセンサを動作させるかどうかを決定しても良い。撮像処理の間隔が短い場合にイメージセンサの動作と停止とを繰り返すと、かえって消費電力が増加し、撮像装置１００の動作継続時間を短縮させてしまう恐れがあるからである。

なお本実施の形態に係る撮像装置１００は、所定の間隔で撮像処理を実行する他、ユーザ１のシャッタボタン１３０の押下によっても撮像処理を実行しても良い。

センサ部１２０は、撮像処理を実行するタイミングにおいて、撮像時における被写体としては適さない何らかの物体の存在の有無を判定するためのセンシングデータを出力するセンサである。上述したように、センサ部１２０は、撮像部１１０の撮像方向と同じ方向に向けて設けられる。上述したように、センサ部１２０を構成するセンサとしては、例えば撮像装置１００のレンズ１０１が設けられた面から物体までの距離を測定する測距センサ、撮像装置１００の周囲の照度を測定する照度センサ等がある。

センサ部１２０は、さらに、加速度センサ、ジャイロセンサ、地磁気センサ、温度センサ、気圧センサ、心拍センサなどの様々なセンサの中から少なくともいずれかのセンサを備えていても良い。なお、上述の測位センサとしては、例えば具体的には、ＧＮＳＳ（Ｇｌｏｂａｌ Ｎａｖｉｇａｔｉｏｎ Ｓａｔｅｌｌｉｔｅ Ｓｙｓｔｅｍ）受信機、および／または通信装置などを含みうる。ＧＮＳＳは、例えばＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）、ＧＬＯＮＡＳＳ（Ｇｌｏｂａｌ Ｎａｖｉｇａｔｉｏｎ Ｓａｔｅｌｌｉｔｅ Ｓｙｓｔｅｍ）、ＢＤＳ（ＢｅｉＤｏｕ Ｎａｖｉｇａｔｉｏｎ Ｓａｔｅｌｌｉｔｅ Ｓｙｓｔｅｍ）、ＱＺＳＳ（Ｑｕａｓｉ−Ｚｅｎｉｔｈ Ｓａｔｅｌｌｉｔｅｓ Ｓｙｓｔｅｍ）、またはＧａｌｉｌｅｏなどを含みうる。また位置測位技術としては、例えば、無線ＬＡＮ、ＭＩＭＯ（Ｍｕｌｔｉ−Ｉｎｐｕｔ Ｍｕｌｔｉ−Ｏｕｔｐｕｔ）、セルラー通信（例えば携帯基地局を使った位置検出、フェムトセル）、または近距離無線通信（例えばＢＬＥ（Ｂｌｕｅｔｏｏｔｈ Ｌｏｗ Ｅｎｅｒｇｙ）、Ｂｌｕｅｔｏｏｔｈ（登録商標））などが含まれうる。

シャッタボタン１３０は、ユーザが画像を撮像する際に押下するボタンである。制御部１５０は、シャッタボタン１３０が押下されたことを検出すると、撮像部１１０から出力される信号を用いて撮像処理を実行して、画像を生成する。なお、撮像装置１００がインターバル撮像機能を実行する場合は、ユーザがシャッタボタン１３０を押下しなくとも自動的に撮像処理を実行する。

電源ボタン１４０は、撮像装置１００の電源を入れたり切ったりする際にユーザが操作するボタンである。電源ボタン１４０によって撮像装置１００の電源が入れられると、バッテリ１９０から撮像装置１００の各部に電力が供給され、撮像装置１００の電源が切られると、バッテリ１９０からの撮像装置１００の各部への電力供給が停止する。

制御部１５０は、例えばＣＰＵ（Central Processing Unit）等のプロセッサや、ＲＯＭ、ＲＡＭなどで構成され、撮像装置１００の各部の動作を制御する。本実施形態では、制御部１５０は、撮像処理を実行するタイミングにおいて、センサ部１２０から出力されるセンシングデータを用いて、撮像装置１００のレンズ１０１の面の前方に、撮像時における被写体としては適さない何らかの物体の存在の有無を判定する。そして制御部１５０は、そのような物体の存在の有無の判定結果に応じて撮像処理に関する動作を決定する。すなわち、制御部１５０は、撮像時における被写体としては適さない何らかの物体が存在していないと判定すれば撮像処理を実行することを決定し、存在していると判定すれば物体が存在しなくなるまで撮像処理を中断することを決定する。制御部１５０の詳細な機能構成例については後に詳述する。

記憶部１６０は、例えばフラッシュメモリその他の不揮発性メモリで構成される。記憶部１６０は、制御部１５０が撮像処理を実行して生成した画像を記憶する。記憶部１６０が記憶した画像は、所定のタイミングで、無線通信部１７０を通じて携帯端末２００へ送信される。

無線通信部１７０は、例えばセルラー通信、Ｗｉ−Ｆｉ、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＮＦＣ（Ｎｅａｒ Ｆｉｅｌｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ）等により他の装置、例えば携帯端末２００や、ネットワーク上のクラウドサーバとの間での無線通信を実行する。

表示部１８０は、例えば液晶ディスプレイ、有機ＥＬディスプレイ、ＬＥＤ表示器などで構成される表示デバイスである。表示部１８０は、制御部１５０によって表示内容が制御される。

バッテリ１９０は、充放電可能な二次電池で構成され、撮像装置１００の各部に電力を供給する。

以上、図２を用いて本開示の実施の形態に係る撮像装置１００の機能構成例について説明した。なお、撮像装置１００は、図２に示した構成を全て含んでいる必要は無い。例えば、撮像装置１００は表示部１８０を備えていなくても良い。また、撮像装置１００は、図２に示した構成要素以外のものを含んでいても良い。例えば、撮像装置１００は、動画像の撮像時に音を収録するためのマイクを備えていても良い。

続いて、図２に示した制御部１５０の機能構成例を示す。図３は、本開示の実施の形態に係る撮像装置１００に含まれる制御部１５０の機能構成例を示す説明図である。

図３に示したように、制御部１５０は、判定部１５１と、決定部１５２と、を含んで構成される。

判定部１５１は、センサ部１２０に含まれる測距センサや照度センサ等が出力するセンシングデータに基づき、レンズ１０１の前方の物体、例えば、撮像時における被写体としては適さない何らかの物体の有無を判定する。

例えば、センサ部１２０に含まれる測距センサが、レンズ１０１の面の前方の所定範囲、例えばレンズ１０１の面から３０センチまでの距離で、物体までの距離を検出できるセンサである場合、判定部１５１は、その範囲内に物体が存在しているかどうかを測距センサが出力するセンシングデータで知ることができる。

決定部１５２は、判定部１５１による判定結果に基づき、撮像処理に関する挙動を決定する。例えば、撮像時における被写体としては適さない何らかの物体がレンズ１０１の前方に存在すると判定部１５１が判定している間、決定部１５２は撮像処理を停止することを決定する。そして、上述したような物体がレンズ１０１の前方に存在しなくなったと判定部１５１が判定すると、決定部１５２は撮像処理を再開することを決定する。

また、決定部１５２は、センサ部１２０が出力する、判定部１５１が物体の有無を判定したり、物体までの距離を検出したりするためのセンシングデータとは異なる別のセンシングデータにも基づいて、撮像処理に関する挙動を決定してもよい。例えば決定部１５２は、センサ部１２０に、またはセンサ部１２０と別の部分に含まれるジャイロセンサが出力するセンシングデータも用いて、撮像処理に関する挙動を決定してもよい。決定部１５２の動作例については後に詳述する。

本開示の実施の形態に係る撮像装置１００は、上述した構成を有することで、撮像処理を実行するタイミングにおいて、撮像時における被写体としては適さない何らかの物体の存在の有無を判定したり、物体までの距離を検出したりすることができる。そして本開示の実施の形態に係る撮像装置１００は、撮像時における被写体としては適さない何らかの物体の存在の有無を判定したり、物体までの距離を検出したりすることで、撮像が不要な状況であると撮像装置１００自身が認識することができる。そして本開示の実施の形態に係る撮像装置１００は、撮像が不要な状況である場合に撮像を一時的に停止することで、ユーザにとって不要と思われる画像を大きく減らすことが可能となる。

なお、ユーザによっては、撮像装置１００を用いて近距離の被写体を撮像したいと考える場合もあるかもしれない。そのような場合に、測距センサによって物体までの距離が近いと判定されたために撮像処理が行われないのは都合が悪い。従って、撮像装置１００は、近距離の被写体を撮像する場合のために、測距センサによるセンシングデータに基づく制御を行わない設定を可能にしてもよい。

以上、本開示の実施の形態に係る撮像装置１００に含まれる制御部１５０の機能構成例を説明した。続いて、本開示の実施の形態に係る撮像装置１００の動作例について説明する。

［１．４．動作例］
図４は、本開示の実施の形態に係る撮像装置１００の動作例を示す流れ図である。図４に示したのは、撮像装置１００が所定の間隔で静止画の撮像処理を自動的に実行する場合における、撮像装置１００の動作例である。以下、図４を用いて本開示の実施の形態に係る撮像装置１００の動作例について説明する。

撮像装置１００は、まず所定の撮像期間が満了したかどうかを判断する（ステップＳ１０１）。このステップＳ１０１の判断は、例えば決定部１５２が実行する。

上記ステップＳ１０１の判断の結果、所定の撮像期間が満了していないと判断した場合は（ステップＳ１０１、Ｎｏ）、撮像装置１００は、所定の撮像時期が来るまで待機し（ステップＳ１０２）、続いて、センサ部１２０が出力するセンシングデータの内容から、何らかの物体がレンズ１０１の前方に存在しているかどうかを判断する（ステップＳ１０３）。ステップＳ１０３の判断は、例えば判定部１５１が実行する。

上述したように、センサ部１２０に含まれる測距センサが、レンズ１０１の面の前方の所定範囲、例えばレンズ１０１の面から３０センチまでの距離で、物体までの距離を検出できるセンサである場合、判定部１５１は、その範囲内に物体が存在しているかどうかを測距センサが出力するセンシングデータで知ることができる。

なお測距センサには、ＰｒｏｘｉｍｉｔｙセンサやＴＯＦ（Ｔｉｍｅ ｏｆ Ｆｌｉｇｈｔ）センサなどがあり、物体の検知を得意とする範囲がそれぞれ異なっている。従って、センサ部１２０には複数の種類の測距センサを備えていてもよい。そして判定部１５１は、その複数の種類の測距センサがそれぞれ出力するセンシングデータを用いて、レンズ１０１の面の前方の所定範囲に、撮像が意図されない何らかの物体が存在するかどうかを判断してもよい。

また撮像装置１００は、センサ部１２０に複数の種類の測距センサが備えられている場合に、いずれか一つの測距センサのみを使用するように設定の変更が可能であってもよい。例えば、物体の検知範囲が近距離と遠距離の２種類の測距センサがセンサ部１２０に備えられている場合、撮像装置１００は、どちらか一つの測距センサのみを使用するようにユーザからの設定の変更を受け付けられるようにしてもよい。また例えば、物体の検知範囲が近距離、中距離、遠距離の３種類の測距センサがセンサ部１２０に備えられている場合、撮像装置１００は、いずれか一つの測距センサのみを使用するようにユーザからの設定の変更を受け付けられるようにしてもよい。

上記ステップＳ１０３の判断の結果、何らかの物体がレンズ１０１の前方に存在していると判断した場合は（ステップＳ１０３、Ｙｅｓ）、撮像装置１００は、所定期間、撮像処理を停止することを決定する（ステップＳ１０４）。ステップＳ１０４の処理は、例えば決定部１５２が実行する。そして、その撮像処理を停止する所定期間が経過すると、撮像装置１００は、上記ステップＳ１０３の判断処理に戻る。

一方、上記ステップＳ１０３の判断の結果、何らかの物体がレンズ１０１の前方に存在していないと判断した場合は（ステップＳ１０３、Ｎｏ）、撮像装置１００は、撮像処理を実行することを決定し、撮像処理を実行する（ステップＳ１０５）。撮像処理の実行の決定は、例えば決定部１５２が実行する。撮像処理を実行すると、撮像装置１００は、上記ステップＳ１０１の判断処理に戻る。

撮像装置１００は、上記ステップＳ１０５で撮像処理を実行する際に、撮像処理の実行の直前に撮像部１１０のイメージセンサを動作させて、撮像処理が終了すると、イメージセンサの動作を停止させても良い。撮像処理を実行するタイミングだけ撮像部１１０のイメージセンサを動作させることで、本実施の形態に係る撮像装置１００は消費電力を低減させることが出来る。

なお、上記ステップＳ１０１の判断の結果、所定の撮像期間が満了したと判断した場合は（ステップＳ１０１、Ｙｅｓ）、撮像装置１００は、自動撮像処理を終了する。

本開示の実施の形態に係る撮像装置１００は、上述した一連の動作を実行することで、撮像処理を実行するタイミングにおいて、センシングデータに基づいて、撮像時における被写体としては適さない何らかの物体の存在の有無を判定することができる。そして本開示の実施の形態に係る撮像装置１００は、撮像時における被写体としては適さない何らかの物体の存在の有無を判定することで、撮像が不要な状況である場合に撮像を一時的に停止することができる。そして本開示の実施の形態に係る撮像装置１００は、撮像が不要な状況である場合に撮像を一時的に停止することで、ユーザにとって不要と思われる画像を大きく減らすことが可能となる。

本開示の実施の形態に係る撮像装置１００が、上述したような構成を有すること、及び、上述した一連の動作を実行することによる効果を説明する。

図５Ａは、ユーザ１の左腕が撮像装置１００のレンズ１０１の前方に位置している状態を示す説明図である。また図５Ｂは、図５Ａのようにユーザ１の左腕が撮像装置１００のレンズ１０１の前方に位置している状態で撮像装置１００が撮像処理を実行した際に得られる画像Ｐ１を示す説明図である。

図６Ａは、撮像装置１００のレンズ１０１の前方の、測距センサが検出できる範囲内に物体が存在していない状態を示す説明図である。また図６Ｂは、図６Ａのように撮像装置１００のレンズ１０１の前方の、測距センサが検出できる範囲内に物体が存在していない状態で、撮像装置１００が撮像処理を実行した際に得られる画像Ｐ２を示す説明図である。

図５Ｂに示したような、ユーザ１の左腕が大きく写ってしまっている画像Ｐ１は、ユーザ１にとっては無意味な画像であり、ユーザ１によって削除されてしまう可能性が極めて高いものである。この画像Ｐ１のようなユーザ１にとっては無意味な画像の撮像を防ぐために、撮像装置１００は、撮像処理を実行するタイミングにおいて、センシングデータに基づいて、撮像時における被写体としては適さない何らかの物体の存在の有無を判定する。本開示の実施の形態に係る撮像装置１００は、撮像時における被写体としては適さない何らかの物体の存在の有無を判定することで、図５Ｂに示したような画像Ｐ１の撮像の可能性を大きく低減させて、画像Ｐ２のような、画像として意味のあるものが撮像される割合を大きく増加させることが出来る。

このように、本開示の実施の形態に係る撮像装置１００は、撮像時における被写体としては適さない何らかの物体の存在の有無を判定することで撮像処理を実行するかどうかを決定することが出来る。これにより、例えば以下のような効果も期待できる。

図７は、撮像装置１００が手で覆われている様子を示す説明図である。撮像装置１００は、図７のように手で覆われている状態では物体（手）の存在を検出することになるので、撮像処理は実行しない。すなわち、ユーザはトイレの中などの撮像して欲しくない場面では撮像装置１００を手で覆うだけで撮像装置１００の撮像処理を停止させることが出来る。

図８は、撮像装置１００がテーブルの上に置かれている状態を示す説明図である。撮像装置１００が図８のようにテーブルの上に置かれた状態でもインターバル撮像機能を実行することが出来る。しかし、図８の右側に示すように、何らかの弾みで撮像装置１００が倒れてしまうこともありうる。その状態で撮像装置１００がインターバル撮像機能を継続してしまうと、真っ暗な画像ばかりが撮像されてしまうことになる。つまり、撮像装置１００が倒れてしまうと、無意味な画像が大量に撮像されてしまう。

そこで、撮像装置１００は、上述したように物体の存在を検知することで、テーブルの上で倒れてしまった場合にはインターバル撮像機能を自動的に停止させることが出来る。従って撮像装置１００は、テーブルの上で倒れてしまった場合には、無意味な画像が大量に撮像されてしまうことを防ぐことが出来る。

図９は、撮像装置１００のレンズ１０１の面にレンズカバー１０２が装着されている状態を示す説明図である。このようにレンズ１０１の面にレンズカバー１０２が装着されている状態で撮像装置１００がインターバル撮像機能を継続してしまうと、真っ暗な画像ばかりが撮像されてしまうことになる。つまり、撮像装置１００が倒れてしまうと、無意味な画像が大量に撮像されてしまう。

そこで、撮像装置１００は、上述したように物体の存在を検知することで、レンズ１０１の面にレンズカバー１０２が装着されている状態ではインターバル撮像機能を自動的に停止させることが出来る。従って撮像装置１００は、レンズ１０１の面にレンズカバー１０２が装着されている状態では、無意味な画像が大量に撮像されてしまうことを防ぐことが出来る。

［１．５．応用例］
このように、撮像装置１００は、物体の存在を検出するためのセンサが出力するセンシングデータに基づいて撮像処理に関する動作の内容を決定することが出来る。ここで撮像装置１００は、センサ部１２０に含まれる、物体の存在を検出するためのセンサとは異なるセンサが出力するセンシングデータにも基づいて、撮像処理に関する動作の内容を、インターバル撮像機能の一時停止以外のものに決定することが出来る。

例えば、決定部１５２は、センサ部１２０に、またはセンサ部１２０と別の部分に含まれるジャイロセンサや加速度センサが出力するセンシングデータの内容に応じて、測距センサが物体の存在を検知した場合の動作を決定することができる。

図１０は、撮像装置１００が手で覆われて、かつ撮像装置１００が手でタップされた様子を示す説明図である。このように、撮像装置１００が物で覆われたことを測距センサが検出し、かつ撮像装置１００が手でタップされたことをジャイロセンサや加速度センサが出力するセンシングデータで検知すると、決定部１５２は、撮像装置１００の電源をオフにする。

図１１は、撮像装置１００がカバンのベルトで覆われている様子を示す説明図である。このように、撮像装置１００が物で覆われたことを測距センサが検出したが、撮像装置１００が手でタップされたことをジャイロセンサや加速度センサが出力するセンシングデータでは検知できなかった場合、決定部１５２は、撮像装置１００の電源をオンにしたままで、インターバル撮像機能を一時的に停止する。

このように、撮像装置１００は、センサ部１２０に含まれる、物体の存在を検出するためのセンサとは異なるセンサが出力するセンシングデータにも基づいて、撮像処理に関する動作の内容を、インターバル撮像機能の一時停止以外のものに決定することが出来る。

撮像装置１００は、インターバル撮像機能の一時停止以外の動作として、例えば、静止画撮像と動画撮像の切り替え、記憶部１６０に保存されている画像の転送、動画像の撮像時に動画像の撮像と音声のみの収録の切り替え、等の動作の内容を、物体の存在を検出するためのセンサとは異なるセンサが出力するセンシングデータにも基づいて決定することが出来る。

撮像装置１００は、測距センサに替えて、または測距センサによる検出に加えて、照度センサを用いて撮像装置１００の前の至近距離に物体が存在しているかどうかを検出しても良い。この場合、撮像装置１００の前の至近距離に物体が存在しているために暗くなったのか、または夜に外出しているために暗くなったのかを識別するために、撮像装置１００は、夜間では照度センサによる検出機能を使用しないようにしても良い。

また撮像装置１００は、測距センサに替えて、または測距センサによる検出に加えて、ＲＧＢ−ＩＲセンサを用いて撮像装置１００の前方の状況がどの様な状態かを検出しても良い。

＜２．まとめ＞
以上説明したように本開示の実施の形態によれば、撮像処理を実行するタイミングにおいて、撮像時における被写体としては適さない何らかの物体の存在の有無を判定することができる撮像装置１００が提供される。

本開示の実施の形態に係る撮像装置１００は、撮像時における被写体としては適さない何らかの物体の存在の有無を判定することで、撮像が不要な状況である場合に撮像を一時的に停止することができる。そして本開示の実施の形態に係る撮像装置１００は、撮像が不要な状況である場合に撮像を一時的に停止することで、ユーザにとって不要と思われる画像を大きく減らすことが可能となる。

本明細書の各装置が実行する処理における各ステップは、必ずしもシーケンス図またはフローチャートとして記載された順序に沿って時系列に処理する必要はない。例えば、各装置が実行する処理における各ステップは、フローチャートとして記載した順序と異なる順序で処理されても、並列的に処理されてもよい。

また、各装置に内蔵されるＣＰＵ、ＲＯＭおよびＲＡＭなどのハードウェアを、上述した各装置の構成と同等の機能を発揮させるためのコンピュータプログラムも作成可能である。また、該コンピュータプログラムを記憶させた記憶媒体も提供されることが可能である。また、機能ブロック図で示したそれぞれの機能ブロックをハードウェアまたはハードウェア回路で構成することで、一連の処理をハードウェアまたはハードウェア回路で実現することもできる。

以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。

また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。

なお、以下のような構成も本開示の技術的範囲に属する。
（１）
第１センシングデータに基づき撮像レンズの前方の物体の有無を判定する判定部と、
前記判定部の判定結果に基づき、前記撮像レンズを通じた撮像処理に関する挙動を決定する決定部と、
を備える、撮像装置。
（２）
前記第１センシングデータは、前記撮像レンズの前方の物体までの距離を検出する測距センサから出力されるセンシングデータである、前記（１）に記載の撮像装置。
（３）
検出可能距離が異なる複数の前記測距センサを備える、前記（２）に記載の撮像装置。
（４）
前記決定部は、前記判定部が前記撮像レンズの前方に物体が存在すると判定している間は前記撮像処理を停止する、前記（１）〜（３）のいずれかに記載の撮像装置。
（５）
前記撮像処理は、所定の間隔で静止画像を撮像する処理または所定期間の動画像を撮像する処理である、前記（１）〜（４）のいずれかに記載の撮像装置。
（６）
前記決定部は、前記撮像する処理を実行するタイミングだけイメージセンサを動作させる、前記（５）に記載の撮像装置。
（７）
前記決定部は、前記撮像する処理の間隔に応じて、前記撮像する処理を実行するタイミングだけイメージセンサを動作させるかどうかを決定する、前記（６）に記載の撮像装置。
（８）
前記撮像処理は、動画像の撮像処理である、前記（１）〜（４）のいずれかに記載の撮像装置。
（９）
前記決定部は、さらに、前記撮像装置に与えられた動作をセンシングするセンサから出力される第２センシングデータに基づき前記撮像処理に関する挙動を決定する、前記（１）〜（８）のいずれかに記載の撮像装置。
（１０）
前記決定部は、前記第２センシングデータの内容に基づき静止画像の撮像と動画像の撮像とを切り替える、前記（９）に記載の撮像装置。
（１１）
前記決定部は、前記第２センシングデータの内容に基づき撮像した画像を外部の装置へ送信する、前記（９）に記載の撮像装置。
（１２）
前記決定部は、前記第２センシングデータの内容に基づき電源をオフにする、前記（９）に記載の撮像装置。
（１３）
前記第１センシングデータは、前記撮像レンズの前方の照度を検出する照度センサから出力されるセンシングデータである、前記（１）に記載の撮像装置。
（１４）
前記判定部は、夜間の時間帯においては前記照度センサから出力されるセンシングデータを用いた判定を行わない、前記（１３）に記載の撮像装置。
（１５）
前記第１センシングデータは、前記撮像レンズの前方の色及び赤外光を検出するセンサから出力されるセンシングデータである、前記（１）に記載の撮像装置。
（１６）
前記撮像装置は、身体に装着される撮像装置である、前記（１）〜（１５）のいずれかに記載の撮像装置。
（１７）
第１センシングデータに基づき撮像レンズの前方の物体の有無を判定することと、
前記判定の結果に基づき、前記撮像レンズを通じた撮像処理に関する挙動を決定することと、
を含む、撮像制御方法。
（１８）
コンピュータに、
第１センシングデータに基づき撮像レンズの前方の物体の有無を判定することと、
前記判定の結果に基づき、前記撮像レンズを通じた撮像処理に関する挙動を決定することと、
を実行させる、コンピュータプログラム。

１ ：ユーザ
１００ ：撮像装置
１０１ ：レンズ
１０２ ：レンズカバー
２００ ：携帯端末

Claims (15)

1. 第１センシングデータに基づき撮像レンズの前方の物体の有無を判定する判定部と、
   前記判定部の判定結果と、撮像装置に与えられた動作をセンシングするセンサから出力される第２センシングデータとに基づき、前記撮像レンズを通じた撮像処理に関する挙動を決定する決定部と、
   を備え、
   前記第１センシングデータは、前記撮像レンズの前方の物体までの距離を検出する測距センサから出力されるセンシングデータであり、
   検出可能距離が異なる複数の前記測距センサを備える、撮像装置。
2. 前記決定部は、前記判定部が前記撮像レンズの前方に物体が存在すると判定している間は前記撮像処理を停止する、請求項１に記載の撮像装置。
3. 前記撮像処理は、所定の間隔で静止画像を撮像する処理または所定期間の動画像を撮像する処理である、請求項１に記載の撮像装置。
4. 前記決定部は、前記撮像する処理を実行するタイミングだけイメージセンサを動作させる、請求項３に記載の撮像装置。
5. 前記決定部は、前記撮像する処理の間隔に応じて、前記撮像する処理を実行するタイミングだけイメージセンサを動作させるかどうかを決定する、請求項４に記載の撮像装置。
6. 前記撮像処理は、動画像の撮像処理である、請求項１に記載の撮像装置。
7. 前記決定部は、前記第２センシングデータの内容に基づき静止画像の撮像と動画像の撮像とを切り替える、請求項１に記載の撮像装置。
8. 前記決定部は、前記第２センシングデータの内容に基づき撮像した画像を外部の装置へ送信する、請求項１に記載の撮像装置。
9. 前記決定部は、前記第２センシングデータの内容に基づき電源をオフにする、請求項１に記載の撮像装置。
10. 前記第１センシングデータは、前記撮像レンズの前方の照度を検出する照度センサから出力されるセンシングデータである、請求項１に記載の撮像装置。
11. 前記判定部は、夜間の時間帯においては前記照度センサから出力されるセンシングデータを用いた判定を行わない、請求項１０に記載の撮像装置。
12. 前記第１センシングデータは、前記撮像レンズの前方の色及び赤外光を検出するセンサから出力されるセンシングデータである、請求項１に記載の撮像装置。
13. 前記撮像装置は、身体に装着される撮像装置である、請求項１に記載の撮像装置。
14. 第１センシングデータに基づき撮像レンズの前方の物体の有無を判定することと、
    前記判定の結果と、撮像装置に与えられた動作をセンシングするセンサから出力される第２センシングデータとに基づき、前記撮像レンズを通じた撮像処理に関する挙動を決定することと、
    を含み、
    前記第１センシングデータは、前記撮像レンズの前方の物体までの距離を検出する測距センサであって、検出可能距離が異なる複数の測距センサから出力されるセンシングデータである、撮像制御方法。
15. コンピュータに、
    第１センシングデータに基づき撮像レンズの前方の物体の有無を判定することと、
    前記判定の結果と、撮像装置に与えられた動作をセンシングするセンサから出力される第２センシングデータとに基づき、前記撮像レンズを通じた撮像処理に関する挙動を決定することと、
    を実行させ、
    前記第１センシングデータは、前記撮像レンズの前方の物体までの距離を検出する測距センサであって、検出可能距離が異なる複数の測距センサから出力されるセンシングデータである、コンピュータプログラム。

Images