JP2007208627A - カメラつき携帯端末装置およびその撮影方法 - Google Patents

Abstract

【課題】カメラによる盗撮を抑制すると共に、撮影時の操作性を向上させ、かつ、顔認識手段を簡単な構成とする。
【解決手段】第１の筐体１１ａおよび第２の筐体１１ｂを開状態および閉状態にて使用でき、第１の筐体の外側に第１のカメラ１および内側に第２のカメラ２を備える折り畳み可能なカメラつき携帯端末装置で、第１または第２のカメラ１，２の被写体画像が人物の顔を識別する顔認識手段７と、第１および第２の筐体の開閉状態を検出する開閉状態検出手段６と、開閉状態検出手段６が開状態を検出し、第１のカメラ１で撮影する時、一定時間ごとに第２のカメラ２を起動して第２のカメラ２の被写体を顔認識手段７で識別し、被写体が人物の顔になっていることを識別したときは予め定めた第１のレベルでシャッター音を出力し、被写体が人物の顔でないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力する制御部８を有する．
【選択図】図１

Description

本発明は、カメラつき携帯端末装置およびその撮影方法に関し、特に撮影時における撮影者の不自然な姿勢を識別して、不自然な姿勢で撮影を行っていると認識したときに音声出力とシャッター音の増大を行うことを特徴とするカメラつき携帯端末装置に関する。

近年携帯電話が普及してきており、カメラ機能を搭載している携帯電話も多く発売されるようになってきた。携帯電話は小型・軽量化が進んでおり、カメラ機能を持つものについては気軽に撮影を行えるようになったが、被写体が人物の場合本人の同意なく撮影をする、盗撮に利用する者も現れた。従来技術としてシャッター音により周囲に撮影を知らせるものがあるが、撮影する前段階で盗撮を抑止する技術が求められた。

また、従来技術として防犯上の観点よりシャッター音は音量調節や消音はできないが、体から離した状態での撮影時の場合はシャッター音聞き取りにくい場合があった。よって、撮影時の姿勢によってシャッター音量を上げる技術が求められた。

従来例１のカメラ付き携帯端末として、特許文献１（特願２００４−１６３５６３号）に示されたものがある。この携帯型無線端末において、そのカメラのシャッター音量を作為的に変更出来ないようにすると共に、騒音が大きく、うるさい場所では、大きなシャッター音を出すという構成となっている。この構成により、盗撮が防止できる点が記載されている。撮影時の外部音量を測定し、シャッター音を判別可能な程度に拡大させることで、盗撮防止を図っている。

この携帯型無線端末の動作について、図８のフローチャートにより説明する。まず、ユーザが任意の被写体を撮影するために、カメラのシャッターをオンにすると（ステップＳ１１）、制御部はそのシャッターのオン信号をトリガとしてマイクからの音声信号を入力として取り込み（ステップＳ１２）、その音量を公知の方法により算出する（ステップＳ１３）。ここでマイクからの音声信号は、この携帯型無線端末のシャッターオン時点における周囲の音、すなわち外部音であり、このステップは外部音の音量の測定が行われる。

続いて、制御部はステップＳ１３で測定した外部音の音量よりも大なるシャッター音量を算出し（ステップＳ１４）、そのシャッター音量のシャッター用音声信号をサウンダに供給してシャッター音を鳴動させる（ステップＳ１５）。

この構成により、カメラのシャッター音が、外部の騒音よりも大なる音量で発音される。そのため、イベント会場等の外部音の音量が通常のシャッター音に比較して大きな場所においても、カメラのシャッターが切られたことが、シャッター音により周囲の者に判別され、盗撮等の犯罪を未然に防止することができる。

この従来例１では、シャッター音量は外部音の音量に応じて自動的に決定され、ユーザがシャッター音を最小にするなどの音量調整を自由に設定できないため、大きなシャッター音により、盗撮等の犯罪を防止することができる。

また、従来例２の携帯端末装置として、特許文献２（特願２００４−３６３９０５号）に示されたものがある。この携帯端末装置は、携帯端末による撮影時に、盗撮を防ぎ、かつ盗撮を目的としない場合では撮影範囲を限定されることがないようにしている。

図９（ａ）（ｂ）はこの携帯端末装置の正面および背面の折り畳み開時の斜視図で、図１０はその撮影時のフロー図である。この携帯端末装置は、折りたたみ携帯電話機であり、図９（ａ）（ｂ）のように、上部の筐体１１ｃに対して、下部の筐体１１ｄが、ヒンジ１２ａを介して折りたたみ自在に連結されている。正面および背面に二つの内蔵カメラ１ａ，２ａを有し、これらカメラ１ａ，２ａのいずれかに被写体、撮影者の顔が含まれているときのみ、撮影を実行する。

この携帯電話機は、筐体１１ｄには、折りたたまれた際の内面には、操作キー部３ｂと、送話音声を入力するマイク１４とが設けられ、操作キー部３ｃは数字キーや、撮影ボタンとなるシャッターキー１３を有する。また、筐体１１ｃの内面側には、文字や画像を表示するディスプレイ（表示素子）４ｃと、受話音声を出力するスピーカ５ａと、また、着信や充電状態を報知する発光ダイオード（ＬＥＤ）１５が設けられている。また、外面には、サウンダ１６が設けられている。ここで、サウンダ１６は着信音や警告音を出力する音発生部材（音源）を備えており、報知ユニットとして機能する。また、上端部には、アンテナ１７が設けられている。

また、筐体１１ｃには、被写体の撮影に使用する背面カメラ（撮影ユニット）１ａと顔撮影用の正面カメラ２ａが設けられている。よって、正面カメラ２ａの撮影方向と、背面カメラ１ａの撮影方向（検出方向）は略正反対となる。また、筐体１１ｄの内部には、マイクロコンピュータ、メモリ等を含む処理ユニット１８が設けられている。処理ユニット１８は、被写体または撮影者の顔情報を抽出するが、顔情報を検出しなかったときに、内蔵カメラ１ａを撮影禁止状態にする。

次に、携帯電話機をカメラとして使用する方法について、図１０の撮影の実行及び禁止までの処理の流れを示すフロー図を参照して説明する。まず、携帯電話機の筐体を開いて、適宜キー操作をして電源を投入し、操作キーで所定操作を行うことによって、撮影が可能である撮影モードに設定する（ステップＳ２１）。そして、背面カメラ１ａを被写体に向ける。この状態にすると、自然に正面カメラ２ａが撮影者に正対する。撮影は、シャッターキー１３を押すことによって始まる。

処理ユニット１８は、シャッターキー１３押されたことを検出する（ステップＳ２２）と、正面カメラ２ａで得られた画像データを、第１のメモリに記憶する。同時に、背面のカメラ１ａで得られた画像データを、第２のメモリに記憶する（ステップＳ２３）。続いて、処理ユニット１８は、記憶した画像データを使って、顔情報の抽出処理を行う（ステップＳ２４）。そして、画像処理の結果に基づいて、撮影の実施不実施の判断が行われる（ステップＳ２５）。

ここで、顔情報が抽出された場合、例えば、第２のメモリに記憶されていた画像データは、そのまま保存される。その後、再び撮影が可能な状態に戻るが、操作キー部３ｂで所定操作を行うことによって撮影モードを終了する（ステップＳ２６）。

一方、顔情報が抽出されなかった場合、処理ユニット１８は撮影を実行しない。この場合、例えば、第１と第２のメモリに記憶された画像データは、消去（破棄）され（ステップＳ２７）、撮影が実行されなかったことになる。更に、ここで警告音を発生することもできる。その後、再び撮影が可能な状態に戻るが、操作キー部３ｃで所定操作を行うことによって撮影モードを終了する（ステップＳ２６）。

この構成によれば、背面カメラ１ａと正面カメラ２ａから出力された情報の何れか一方に、顔情報が含まれている時のみ、撮影が実行され、被写体の顔情報が含まれない場合は、撮影が実行されないことになる。

この携帯電話機の構成によれば、被写体の顔情報が含まれない場合は、撮影が実行されないので、盗撮を目的とする撮影を、防止することが可能となる。

特願２００４−１６３５６３号（図１，２） 特開２００４−３６３９０５号（図４，５）

上述した従来例１では、カメラのシャッター音量は外部音の音量に応じて自動的に決定され、ユーザがシャッター音を最小にするなどの音量調整を自由に設定できないため、シャッター音により、盗撮等の犯罪を防止することができる。しかし、カメラのシャッター音を大きくしただけでは、盗撮等を確実に防止することは困難である。

また、従来例２では、内蔵カメラの情報に、被写体若しくは撮影者の顔情報が含まれている時のみ、撮影が実行され、また、内蔵カメラの情報に被写体の顔情報が含まれない場合は、盗撮の可能性があるので、撮影を実行しないように、警報で知らせている。従って、この従来例２では、盗撮を、防止することが可能となる。しかし、この顔情報の検出方法が、２つのカメラの画像出力を処理ユニットによりそれぞれ認識して、いずれかに顔情報が有る場合に撮影を許可している。従って、その認識手段を２系統または２度用いる必要があり、携帯電話機の構成が複雑になるという問題がある。

本発明の主な目的は、盗撮を抑制すると共に、簡単な構成で、撮影時の操作性を向上させたカメラつき携帯端末装置およびその撮影方法を提供することにある。

本発明の構成は、第１の筐体および第２の筐体を開状態および閉状態にて使用でき、前記第１の筐体の外側に第１のカメラおよび内側に第２のカメラを備える折りたたみ可能なカメラつき携帯端末装置において、前記第１のカメラまたは前記第２のカメラの被写体画像を認識して人物の顔が被写体になっているか否かを識別する顔認識手段と、前記第１の筐体および第２の筐体が開状態であるか閉状態であるかを検出する開閉状態検出手段と、 前記開閉状態検出手段が開状態を検出し、前記第１のカメラで撮影する状態のとき、一定時間ごとに前記第２のカメラを起動して前記第２のカメラの被写体を前記顔認識手段で識別し、前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力する制御部とを有することを特徴とする。

本発明において、前記制御部は、前記開閉状態検出手段が閉状態を検出し、前記第１のカメラで撮影する状態のとき、前記第１のカメラの被写体を前記顔認識手段で識別し、前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力することができ、また、前記制御部は、前記開閉状態検出手段が開状態を検出し、前記第２のカメラで撮影する状態のとき、前記第２のカメラの被写体を前記顔認識手段で識別し、前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力することができ、また、前記制御部は、前記顔認識手段で識別した前記被写体が人物の顔になっていないことを識別したときは、撮影中である旨を知らせる音声をさらに出力することができる。

また、本発明の他の構成は、第１の筐体および第２の筐体を開状態および閉状態にて使用でき、前記第１の筐体の外側に第１のカメラおよび内側に第２のカメラを備え、前記第１のカメラまたは前記第２のカメラの被写体画像を認識して人物の顔が被写体になっているか否かを顔認識手段により識別する折りたたみ可能なカメラつき携帯端末装置の撮影方法において、前記第１の筐体および第２の筐体の開状態を検出し、前記第１のカメラで撮影する状態のとき、一定時間ごとに前記第２のカメラを起動して前記第２のカメラの被写体を前記顔認識手段で識別し、前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力することを特徴とする。

本発明において、前記第１の筐体および第２の筐体の開状態を検出し、前記第１のカメラで撮影する状態のとき、前記第１のカメラの被写体を前記顔認識手段で識別し、前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力することができ、また、前記第１の筐体および第２の筐体の開状態を検出し、前記第２のカメラで撮影する状態のとき、前記第２のカメラの被写体を前記顔認識手段で識別し、前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力することができ、また、前記顔認識手段で識別した前記被写体が人物の顔になっていないことを識別したときは、撮影中である旨を知らせる音声をさらに出力することができる。

さらに、本発明のその他の構成は、第１のカメラを筐体の前面に、第２のカメラを筐体の背面にそれぞれ備えたカメラつき携帯端末装置において、前記第１のカメラまたは前記第２のカメラの被写体画像を認識して人物の顔が被写体になっているか否かを識別する顔認識手段と、前記第１のカメラで撮影する状態のとき、一定時間ごとに前記第２のカメラを起動して前記第２のカメラの被写体を前記顔認識手段で識別し、前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力する制御部を有することを特徴とする。

本発明において、前記筐体の背面に、前記第１のカメラまたは前記第２のカメラを用いた撮影時のモニター用のディスプレイをさらに備え、前記制御部は、前記第２のカメラで撮影する状態のとき、前記第２のカメラの被写体を前記顔認識手段で識別し、前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力することもできる。

また、本発明のその他の構成は、第１のカメラを筐体の前面に、第２のカメラを筐体の背面にそれぞれ備え、顔認識手段により前記第１のカメラまたは前記第２のカメラの被写体画像を認識して人物の顔が被写体になっているか否かを識別するカメラつき携帯端末装置の撮影方法において、前記第１のカメラで撮影する状態のとき、一定時間ごとに前記第２のカメラを起動して前記第２のカメラの被写体を前記顔認識手段で識別し、前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力する制御部を有することを特徴とする。

本発明において、前記筐体の背面に、前記第１のカメラまたは前記第２のカメラを用いた撮影時のモニター用のディスプレイをさらに備え、前記制御部は、前記第２のカメラで撮影する状態のとき、前記第２のカメラの被写体を前記顔認識手段で識別し、前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力することもできる。

以上説明したように、本発明の構成によれば、次のような効果がある。まず、撮影における不自然な姿勢を顔認識手段で識別し、本来であれば撮影者が写っているべき姿勢において人の顔が写っていないことを認識すると、不自然な姿勢での撮影であると判断し、撮影前に警報を出したり、シャッター音量を大きくすることが出来る。そのため、盗撮のように不自然な体勢で撮影する場合の警告にすることが出来、盗撮を防止することに効果がある。また、本発明のように、複数のカメラを用いた場合であっても、撮影者の顔だけを特定して１個の顔認識手段で顔認識ができるような構成にしたため、装置構成を簡単化できるという特徴がある。

次に図面により本発明に係るカメラつき携帯端末装置の実施形態として、デジタルカメラつき折り畳み式携帯電話機を参照して説明する。図１は本発明の一実施形態のデジタルカメラつき折り畳み式携帯電話機の動作を説明するフロー図、図２（ａ）（ｂ）は本実施形態のデジタルカメラつき折り畳み式携帯電話機の正面側および裏面側を示す斜視図、図３は図２の機能を説明するブロック図である。

本実施形態の構成は、図２に示すように、上部の筐体１１ａと下部の筐体１１ｂとがヒンジ１２により折り畳み自在に連結された折り畳み式携帯電話機となっている。そして、この携帯電話機の筐体１１ａ外側に設置されたデジタルカメラ（以下背面カメラという）１と、携帯電話機の筐体１１ｂ内側に設置されたデジタルカメラ（以下正面カメラという）２とを備え、それぞれ異なる方向での撮影が可能になるよう構成されている。

本実施形態の折り畳み式携帯電話機は、背面カメラ１又は正面カメラ２で撮影した画像出力に人の顔を撮影しているか否かを識別する顔認識手段（７）と、着信音やシャッター音を出力する音声出力手段（５）とを備え、後述する形態においてこれら背面カメラ１又は正面カメラ２の画像出力のうちのいずれかの画像出力が、前記顔認識手段（７）によって、顔撮影をしていると認識された場合は前記音声出力手段（５）のシャッター音を通常出力とし、前記１個の画像出力が顔撮影をしていないと認識された場合は前記音声出力手段（５）のシャッター音を通常より大きく出力することを特徴とする。

この携帯電話機の内側には、発呼や終話、ダイヤルやカメラのシャッターなどの機能を使用する際キー入力を行う為の操作部３と、電話番号表示やカメラ使用時の画像確認などを行う為の表示部４となる正面ディスプレイ４ａとを備えている。操作部３としては、正面側のキー３ａと、キー３ａのうちからカメラ操作にかかわるキーのみを選択した側面側のサイドキー３ｂを備え、表示部４としては、正面ディスプレイ４ａと、閉状態にて使用可能な表示部となる背面ディスプレイ４ｂとを備えている。また、携帯電話機の外側には、音声処理部より出力された音声を出力する音声出力手段となるスピーカ５を備えている。

また、操作部３のキー３ａ及び表示部４の正面ディスプレイ４ａは、携帯電話機が開いた状態で使用するために内側に配置されており、背面ディスプレイ４ｂとサイドキー３ｂは、折り畳んだ閉状態にて使用可能な表示部と操作部となっている。背面カメラ１、正面カメラ２は、ともに写真撮影を行えるが、背面カメラ１を使用すると、筐体を折り畳んだ状態でも撮影を行うことができる。

本実施形態は、さらに図３に示すように、携帯電話機の開・閉状態を検出する回路（以下開閉状態検出回路という）６と、撮影している画像に人の顔が含まれているかを識別する顔認識機能部（顔認識手段）７と、これら各部の制御を行う制御部８とから構成される。

この顔認識機能部７は、マイクロコンピュータやメモリで構成されるデータ処理部で、背面カメラ１又は正面カメラ２からの画像出力から顔輪郭などの情報を抽出し、この情報が人の顔であるかどうかを判定する機能を有している。この顔認識機能部７は、従来例１、２などに示されている。

図４（ａ）〜（ｃ）は本実施形態による撮影状態を説明する模式図である。これら図を用いて本実施形態の動作について説明をする。

まず、キー３ａによる操作でカメラを起動すると、背面カメラ１が起動し、正面ディスプレイ４ａに撮影する画像がモニターされる。カメラ起動中は、一定時間毎に撮影に支障がない程度のわずかな時間、正面カメラ２に切り替わり、正面カメラ２に写る画像に人の顔が含まれるかを顔認識機能部７が監視する。

顔認識機能部７は、被写体の輪郭、肌の色、目の位置などを画像データから検出し、人の顔であることを判断する。また、通常使用者が端末機を顔の正面の位置で持っている状態のパターンと比較して、不自然な体勢で使用しているかどうかを識別する。

まず、図４（ａ）の様な状態、すなわち、正面ディスプレイ４ａで被写体を確認しながら撮影する場合には、キー３ａによる操作でシャッターが切られるまでそのまま監視を続ける。そしてシャッターを切る際に、スピーカ５より通常の音量でシャッター音を出力する（シャッターの音量を「中」とする）。

しかし、正面カメラ２に人の顔が含まれないことを顔認識機能部７が検出した場合、撮影中であることを知らせる音声（例えば「カメラ撮影中です」など）を周囲の人に聞こえる程度の音量で一定周期毎に繰り返しスピーカ５より出力する。そして、その状態でシャッターを切ると，通常より大きな音量でシャッター音を出力する（シャッター音量・大とする）。シャッター音出力後撮影中であることを知らせる音声は停止する。これは、例えば図４（ｂ）のように、カメラを下側の方に向けたり、図４（ｃ）のように、カメラを上側から向けるような、不自然な体勢や腕を伸ばして携帯電話機を体から離した場合である。また、セルフタイマーを利用し離れた場所に携帯電話機を置いて撮影する場合である。

一度シャッターを押し、引き続き撮影を行う場合は再び顔認識機能部７による画像監視状態に戻る。シャッター音及び撮影中であることを知らせる音声は、防犯の観点より従来技術と同様に音量調節や消音はできないこととする。

次に、携帯電話機の閉状態でサイドキー３ｂによる操作でカメラを起動した場合、開・閉状態検出回路６により状態が検出され、制御部８は撮影画像の表示を背面ディスプレイ４ｂに切り替える。この閉状態でのカメラ撮影は、通常使用者自身を撮影する場合なので背面カメラ１での撮影画像には人の顔が写ることになる。背面カメラ１に写る画像を顔認識機能部７が常に監視し、人の顔が含まれない場合には前述と同様の動作を行う。

次に、携帯電話機の開状態でカメラを起動し、背面カメラ１から正面カメラ２に切り替えた場合、この状態も使用者自身を撮影するのが通常なので、正面カメラ２での撮影画像には人の顔が写ることになる。正面カメラ２に写る画像を顔認識機能部７が常に監視し、人の顔が含まれない場合には前述と同様の動作を行う。また、カメラ起動中に携帯電話機が開閉された場合には、その都度開閉状態検出回路６によって検出され、制御部８がカメラ・表示部・操作部の切替を行う。

本実施形態によれば、次のような効果がある。まず、撮影における不自然な姿勢を顔認識手段で識別し、本来であれば撮影者が写っているべき姿勢において人の顔が写っていないことを認識すると、不自然な姿勢での撮影であると判断し、撮影前に警報を出したり、シャッター音量を大きくすることが出来る。そのため、盗撮のように不自然な体勢で撮影する場合の警告にすることが出来、盗撮を防止することに効果がある。また、本実施形態のように、複数のカメラを用いた場合であっても、撮影者の顔だけを特定して１個の顔認識手段で顔認識ができるような構成にしたため、装置構成を簡単化できるという特徴がある。

また、ディスプレイを直接確認できない体勢や、体から離した状態での撮影時に、撮影時のシャッター音量を大きく出来るので、操作性を向上させることもできる。それは、そういう状態で撮影を行うとシャッター音が通常時より聞き取りづらくなり、ディスプレイも視認できないので確実にシャッターが切られたことを確認できない。そのため、撮影が終わる前に移動機を動かしてしまい撮影に失敗してしまうことがあるが、本実施形態によれば、撮影時のシャッター音量を大きく出来るので、操作性が向上し、撮影に失敗することがなくなる。

次に、本実施形態をフローチャートを用いて説明する。まず、実施例１として携帯電話機が開状態でカメラを起動し、背面カメラ１で撮影を行う場合を図１のフロー図を用いて説明する。

まず、ステップＳ１で、開状態でカメラを起動すると、背面カメラ１が起動し、ステップＳ２で、正面ディスプレイ４ａに撮影画像が表示される。次に、ステップＳ３で、一定時間ごとに正面カメラ２が起動し、ステップＳ４で、正面カメラ２起動時に人の顔が写っているか否かを顔認識機能部７が判断する。顔認識機能部７で顔が写っているならば（ステップＳ４：ｙｅｓ）、そのままシャッターが押されるまで監視を続け、ステップＳ８で、シャッターが押されるかどうか判定する。ステップＳ８のｙｅｓでシャッターが押されると、ステップＳ９で、通常の音量・中でシャッター音を出力し、ステップＳ１０に進む。また、ステップＳ８のｎｏでシャッターが押されないと、ステップＳ４に戻り、再び正面カメラ２での監視を行う。

また、認識機能部７が、ステップＳ４のｎｏで、人の顔が写っていない場合、ステップＳ５で、スピーカ５より撮影中であることを知らせる音声出力を行い、ステップＳ６で、シャッターが切られるまで若しくは次に正面カメラ２に人の顔が写るまで出力を続ける。そしてステップＳ６のｙｅｓで、顔が写っていない状態でシャッターを切ると、ステップＳ７で、大きい音量・大でシャッター音を出力し、その後撮影中であることを知らせる音声を停止する。そして一度撮影を行うと、ステップＳ１０で、引き続き撮影を行うか選択し、ｙｅｓの撮影を行う場合には、ステップＳ４で再び正面カメラ２での監視を行い、ｎｏの撮影を行わない場合には撮影を終了する。

以上説明したように、実施例１は、携帯電話機の筐体を開いた状態において、背面カメラ１で被写体を撮影し、撮影者が正面ディスプレイ４ａでモニターする撮影形態である。この場合、撮影者が自然な姿勢で撮影を行っているか否かについて正面カメラ２を用いて識別する。そのため、本発明においては、開閉状態検出回路６で筐体が開いている状態を識別し、その状態において背面カメラ１を用いた撮影を行う場合には、一定時間ごとに正面カメラ２を起動することにより、正面ディスプレイ４ａでモニターしている撮影者の顔が映っているかどうかを顔認識機能部７で識別する構成をとる。このような構成をとることにより、一定時間ごとに起動する正面カメラ２に撮影者が写っていないような、撮影者の姿勢が不自然である場合には撮影前に警報を出したり、シャッター音量を大きくすることが出来る。

次に、実施例２として、携帯電話機の筐体が閉状態でカメラを起動し、背面カメラ１で撮影を行う場合を図５のフロー図を用いて説明する。

ステップＳ１で、背面カメラ１が起動すると、ステップＳ２ａで、背面ディスプレイ４ｂに撮影画像が表示される。次に、ステップＳ４ａで、背面カメラ１の画像に人の顔が写っているか否かを顔認識機能部７が判断する。ステップＳ４ａのｙｅｓで、顔認識機能部７で顔が写っていると判断するならば、そのままシャッターが押されるまで監視を続け、ステップＳ８で、シャッターが押されるか否かを判定する。ステップＳ８のｙｅｓで、シャッターが押されると、ステップＳ９で、音量・中でシャッター音を出力し、ステップＳ１０に進む。

ステップＳ４ａのｎｏで、顔認識機能部７が人の顔が写っていないと判断するならば、ステップＳ５で、スピーカ５より撮影中であることを知らせる音声出力を行う。そして、シャッターが切られるまで若しくは次に背面カメラ１に人の顔が写るまで出力を続ける（ステップＳ６）。ステップＳ６のｙｅｓで、顔が写っていない状態でシャッターを切ると、ステップＳ７で、音量・大でシャッター音を出力し、その後撮影中であることを知らせる音声を停止する。そして一度撮影を行うと、ステップＳ１０で、引き続き撮影を行うか選択し、ｙｅｓの撮影を行う場合には、ステップＳ４で再び正面カメラ２での監視を行い、ｎｏの撮影を行わない場合には撮影を終了する。

以上説明したように、実施例２は、携帯電話機の筐体を閉じた状態において、背面カメラ１で被写体を撮影し、撮影者が背面ディスプレイ４ｂでモニターする撮影形態である。この撮影形態においては、撮影者自身が被写体となる姿勢なので、撮影者の顔を背面カメラ１で識別することにより撮影における不自然な姿勢を識別する。そのため、本実施例２においては、開閉状態検出回路６で筐体が閉じている状態を識別し、その状態において背面カメラ１を用いた撮影を行う場合には、背面カメラ１に撮影者の顔が映っているかどうかを顔認識機能部７で識別する構成をとる。このような構成をとることにより、背面カメラ１に撮影者が写っていないような、撮影者の姿勢が不自然である場合には撮影前に警報を出したり、シャッター音量を大きくすることが出来る。

次に、実施例３として、携帯電話機の筐体が開状態でカメラを起動し、正面カメラ２に切り替えて撮影を行う場合を図６のフロー図を用いて説明する。

まず、ステップＳ１で、カメラを起動すると、まず背面カメラ１が起動するので、キー操作により正面カメラ２への切り替えを行う（ステップＳ１ａ）。開状態でカメラが起動すると、正面ディスプレイ４ａに撮影画像が表示される（ステップＳ２ｂ）。次に、ステップＳ４で、正面カメラ２の画像に人の顔が写っているか否かを顔認識機能部７で判断する。顔認識機能部７で顔が写っていると判断するとならば（ステップＳ４ａ：ｙｅｓ）、そのままシャッターが押されるまで監視を続け、ステップＳ８で、シャッターが押されると（ステップＳ８：ｙｅｓ）、通常の音量・中でシャッター音を出力する（ステップＳ９）。

また、顔認識機能部７で人の顔が写っていないと判断する場合（ステップＳ４ａ：ｎｏ）、ステップＳ５で、スピーカ５より撮影中であることを知らせる音声出力を行い、ステップＳ６で、シャッターが切られるまで（ｙｅｓ），若しくは次に正面カメラ２に人の顔が写るまで、出力を続ける。そして、その顔が写っていない状態でシャッターを切ると（Ｓ６のｙｅｓ）、ステップＳ７で、大きな音量・大でシャッター音を出力し、その後撮影中であることを知らせる音声を停止する。一度撮影を行うと、ステップＳ１０で、引き続き撮影を行うか否かを選択し、撮影を行う場合には（ｙｅｓ）再び背面カメラ１での監視を行い、撮影を行わない場合には（ｎｏ）終了とする。

以上説明したように、実施例３は、携帯電話機の筐体を開いた状態において、正面カメラ２で被写体を撮影し、撮影者が正面ディスプレイ４ａでモニターする撮影形態である。この撮影形態においては、撮影者自身が被写体となる姿勢なので、撮影者の顔を正面カメラ２で識別することにより撮影における不自然な姿勢を識別する。そのため、本実施例３においては、開閉状態検出回路６で筐体が開いている状態を識別し、その状態において正面カメラ２を用いた撮影を行う場合には、正面カメラ２に撮影者の顔が映っているかどうかを顔認識機能部７で識別する構成をとる。このような構成をとることにより、正面カメラ２に撮影者が写っていないような、撮影者の姿勢が不自然である場合には撮影前に警報を出したり、シャッター音量を大きくすることが出来る。

以上の説明のように、これら実施例１〜３は、正面カメラ２および背面カメラ１を用いて、各画像の一出力のみを用いて顔認識が行われているので、一個の顔認識手段で済ませることができる。従って、従来例２のように、複数の画像出力を複数の顔認識手段で認識している構成と比較すると、これら実施例では、その構成が簡単化され、従って信頼性も向上させることができる。
［発明のその他の実施形態］

以上、発明を実施するための最良の形態としてデジタルカメラつき折り畳み式携帯電話機を参照して説明したが、本発明に係るカメラつき携帯端末装置およびその撮影方法は、折り畳み式携帯電話機に限ることなく、ＰＤＡ（Personal Digital Assistance）や折りたたみ式でない携帯電話機のような携帯端末装置においても適用できることは明らかである。このような携帯端末装置に本発明を適用する例を応用例として説明する。

筐体の前面および背面にそれぞれカメラを備えたＰＤＡの背面図および正面図を図７に示す。図７（ａ）に示すように筐体６０の背面部には背面カメラ２１を、図７（ｂ）に示すように筐体６０の正面部には正面カメラ２２、操作キー部３０、ディスプレイ４０およびスピーカ５０を備えている。スピーカ５０はさらに背面部にも設けてよい。

このように構成されたＰＤＡの背面カメラ２１を用いた撮影は、被写体をディスプレイ４０で確認しながら操作キー部３０でシャッター操作することにより、スピーカ５０からシャッター音を出力して被写体画像を取り込む。同様に、正面カメラ２２を用いた撮影も、被写体をディスプレイ４０で確認しながら操作キー部３０でシャッター操作することにより、スピーカ５０からシャッター音を出力して被写体画像を取り込む。

したがって、この実施形態での撮影状況は、デジタルカメラつき折り畳み式携帯電話機を参照して説明した実施例１および実施例３の場合と同じである。また、装置のブロック構成も図３と同様であり、図３に示す開閉状態検出回路６を有しないことのみが異なるに過ぎない。

そのため、この実施形態では、背面カメラ２１で被写体を撮影し、撮影者がディスプレイ４０でモニターする撮影形態の場合、撮影者が自然な姿勢で撮影を行っているか否かについて正面カメラ２２を用いて識別する。そのため、本発明においては、背面カメラ２１を用いた撮影を行う場合には、一定時間ごとに正面カメラ２２を起動することにより、正面ディスプレイ４０でモニターしている撮影者の顔が映っているかどうかを顔認識機能部で識別する構成をとる。このような構成をとることにより、一定時間ごとに起動する正面カメラ２２に撮影者が写っていないような、撮影者の姿勢が不自然である場合には撮影前に警報を出したり、シャッター音量を大きくすることが出来る。

同様に、正面カメラ２２で被写体を撮影し、撮影者が正面ディスプレイ４０でモニターする撮影形態においては、撮影者自身が被写体となる姿勢なので、撮影者の顔を正面カメラ２２で識別することにより撮影における不自然な姿勢を識別する。そのため、正面カメラ２２を用いた撮影を行う場合には、正面カメラ２２に撮影者の顔が映っているかどうかを顔認識機能部で識別する構成をとる。このような構成をとることにより、正面カメラ２２に撮影者が写っていないような、撮影者の姿勢が不自然である場合には撮影前に警報を出したり、シャッター音量を大きくすることが出来る。

以上に説明したように、本発明に係るカメラつき携帯端末装置およびその撮影方法は、折り畳み式携帯電話機に限ることなく、ＰＤＡや折りたたみ式でない携帯電話機のような携帯端末装置においても適用でき、同等の効果が得られる。

本発明は、一般にデジタルカメラつき携帯端末装置に用いられ、携帯端末として、 携帯電話機や携帯用移動通信機器にも適用できる。

本発明の第１の実施例のカメラつき折り畳み式携帯電話機筐体の開状態で背面カメラを使用する時のフロー図である。 （ａ）（ｂ）は図１の開状態にした携帯電話機の背面側および正面側を示す斜視図である。 図１の携帯電話機を説明するブロック図である。 （ａ）〜（ｃ）は図１の携帯電話機の使用状態を説明する模式図である。 本発明の第２の実施例の携帯電話機筐体の閉状態で背面カメラを使用する時のフロー図である。 本発明の第３の実施例の携帯電話機筐体の開状態で正面カメラを使用する時のフロー図である。 （ａ）（ｂ）は本発明のその他の実施形態のＰＤＡの背面側および正面側を示す斜視図である。 従来例１のカメラ付き移動通信機器を使用する時のフロー図である。 従来例２のカメラ付き移動通信機器のカメラ図である。 図９の移動通信機器のカメラを使用する時のフロー図である。

符号の説明

１，１ａ，２１ 背面カメラ
２，２ａ，２２ 正面カメラ
３ 操作部
３ａ キー
３ｂ サイドキー
３ｃ，３０ 操作キー部
４ 表示部
４ａ 正面ディスプレイ
４ｂ 背面ディスプレイ
４ｃ，４０ ディスプレイ
５，５ａ，５０ スピーカ
６ 開・閉状態検出回路
７ 顔認識機能部
８ 制御部
１１ａ〜１１ｄ，６０ 筐体
１２，１２ａ ヒンジ
１３ シャッターキー
１４ マイク
１５ ＬＥＤ
１６ サウンダ
１７ アンテナ
１８ 処理ユニット
Ｓ１〜１０，Ｓ１１〜１５，Ｓ２１〜２６ 処理ステップ

Claims (12)

1. 第１の筐体および第２の筐体を開状態および閉状態にて使用でき、前記第１の筐体の外側に第１のカメラおよび内側に第２のカメラを備える折りたたみ可能なカメラつき携帯端末装置において、
   前記第１のカメラまたは前記第２のカメラの被写体画像を認識して人物の顔が被写体になっているか否かを識別する顔認識手段と、
   前記第１の筐体および第２の筐体が開状態であるか閉状態であるかを検出する開閉状態検出手段と、
   前記開閉状態検出手段が開状態を検出し、前記第１のカメラで撮影する状態のとき、一定時間ごとに前記第２のカメラを起動して前記第２のカメラの被写体を前記顔認識手段で識別し、前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力する制御部
   を有することを特徴とするカメラつき携帯端末装置。
2. 前記制御部は、前記開閉状態検出手段が閉状態を検出し、前記第１のカメラで撮影する状態のとき、前記第１のカメラの被写体を前記顔認識手段で識別し、前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力することを特徴とする請求項１に記載のカメラつき携帯端末装置。
3. 前記制御部は、前記開閉状態検出手段が開状態を検出し、前記第２のカメラで撮影する状態のとき、前記第２のカメラの被写体を前記顔認識手段で識別し、前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力することを特徴とする請求項１に記載のカメラつき携帯端末装置。
4. 前記制御部は、前記顔認識手段で識別した前記被写体が人物の顔になっていないことを識別したときは、撮影中である旨を知らせる音声をさらに出力することを特徴とする請求項１ないし３のいずれかに記載のカメラつき携帯端末装置。
5. 第１の筐体および第２の筐体を開状態および閉状態にて使用でき、前記第１の筐体の外側に第１のカメラおよび内側に第２のカメラを備え、前記第１のカメラまたは前記第２のカメラの被写体画像を認識して人物の顔が被写体になっているか否かを顔認識手段により識別する折りたたみ可能なカメラつき携帯端末装置の撮影方法において、
   前記第１の筐体および第２の筐体の開状態を検出し、前記第１のカメラで撮影する状態のとき、一定時間ごとに前記第２のカメラを起動して前記第２のカメラの被写体を前記顔認識手段で識別し、
   前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力することを特徴とするカメラつき携帯端末装置の撮影方法。
6. 前記第１の筐体および第２の筐体の開状態を検出し、前記第１のカメラで撮影する状態のとき、前記第１のカメラの被写体を前記顔認識手段で識別し、
   前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力することを特徴とする請求項５に記載のカメラつき携帯端末装置の撮影方法。
7. 前記第１の筐体および第２の筐体の開状態を検出し、前記第２のカメラで撮影する状態のとき、前記第２のカメラの被写体を前記顔認識手段で識別し、
   前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力することを特徴とする請求項５に記載のカメラつき携帯端末装置の撮影方法。
8. 前記顔認識手段で識別した前記被写体が人物の顔になっていないことを識別したときは、撮影中である旨を知らせる音声をさらに出力することを特徴とする請求項５ないし７のいずれかに記載のカメラつき携帯端末装置の撮影方法。
9. 第１のカメラを筐体の前面に、第２のカメラを筐体の背面にそれぞれ備えたカメラつき携帯端末装置において、
   前記第１のカメラまたは前記第２のカメラの被写体画像を認識して人物の顔が被写体になっているか否かを識別する顔認識手段と、
   前記第１のカメラで撮影する状態のとき、一定時間ごとに前記第２のカメラを起動して前記第２のカメラの被写体を前記顔認識手段で識別し、前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力する制御部
   を有することを特徴とするカメラつき携帯端末装置。
10. 前記筐体の背面に、前記第１のカメラまたは前記第２のカメラを用いた撮影時のモニター用のディスプレイをさらに備え、前記制御部は、前記第２のカメラで撮影する状態のとき、前記第２のカメラの被写体を前記顔認識手段で識別し、前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力することを特徴とする請求項９に記載のカメラつき携帯端末装置。
11. 第１のカメラを筐体の前面に、第２のカメラを筐体の背面にそれぞれ備え、顔認識手段により前記第１のカメラまたは前記第２のカメラの被写体画像を認識して人物の顔が被写体になっているか否かを識別するカメラつき携帯端末装置の撮影方法において、
    前記第１のカメラで撮影する状態のとき、一定時間ごとに前記第２のカメラを起動して前記第２のカメラの被写体を前記顔認識手段で識別し、前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力する制御部を有することを特徴とするカメラつき携帯端末装置の撮影方法。
12. 前記筐体の背面に、前記第１のカメラまたは前記第２のカメラを用いた撮影時のモニター用のディスプレイをさらに備え、前記制御部は、前記第２のカメラで撮影する状態のとき、前記第２のカメラの被写体を前記顔認識手段で識別し、前記被写体が人物の顔になっていることを識別したときはあらかじめ定めた第１のレベルでシャッター音を出力し、前記被写体が人物の顔になっていないことを識別したときは前記第１のレベルよりも大きなレベルでシャッター音を出力することを特徴とする請求項１１に記載のカメラつき携帯端末装置の撮影方法。
    

Images