JP4901258B2 - カメラ及びデータ表示方法 - Google Patents

Description

本発明は、数多く撮り込んだカメラの撮影画像の中から、所望の画像を検索するためのカメラに関するものである。

近年、小型のデジタルカメラの普及やカメラが携帯電話器や携帯音楽プレーヤに搭載されるようになっている。そして、１人の人が日常撮影する画像の数が多くなっており、カメラの取込んだ画像を、後で鑑賞しようとしても、見つけるのに時間がかかってしまい、あきらめてしまうことも多かった。また、インターネットのサイト運営の会社等も、近年、画像や音楽を検索する技術を重視している。

そして、従来から、画像に感性的なキーワードをつける技術（例えば、下記特許文献１参照）や、意味情報をつける技術（例えば、下記特許文献２参照）や、文章によって検索するような技術（例えば、下記特許文献３参照）等が知られていた。また、撮影地点を画像と関連付ける技術も提案されている（例えば、下記特許文献４参照）。

一方、下記特許文献５のように、過去の画像を小さく表示するような技術も知られている。
特開２００４−５３３４号公報 特開２００４−１０２７９２号公報 特開平８−８３２８７号公報 特開２００５−３９７０２号公報 特開２００３−１３４４７０号公報

しかしながら、上述した特許文献１乃至４の先行技術は、画像に様々なテキスト情報が関連付けられ、辞書情報のように、膨大なデータベースを必要とした上、文章を入力する等、入力時にユーザに多くの負荷がかかったりした。そのため、ユーザに負荷がかからない簡単な操作によって効率的な画像検索を行うことのできるカメラが望まれていた。

また、上記特許文献５は、過去の画像を小さく表示するような技術が記載されているが、これらは２次元方向に意味を持たせておらず、従来のカレンダー式のものと差異がないものであった。

したがって本発明は上記課題に鑑みてなされたものであり、その目的は、撮影時に付加する簡単な情報から簡単な操作によって、効率的な画像検索を行うように画像を分類し、表示することのできるカメラを提供することである。

本発明の第１の態様によるカメラは、撮影により画像データを得る撮影手段と、撮影時の緯度及び経度を表す撮影位置情報を検出する位置検出手段と、撮影時の日時を含む時刻情報を検出する時刻検出手段と、上記撮影位置情報、上記時刻情報、及び上記撮影手段による撮影で取得した画像データ数に基づいて、上記画像データをフォルダに分類する分類手段と、上記フォルダまたは上記フォルダの分類内容を表すアイコン、及び上記画像データを表示する為の表示部と、上記フォルダを所定の態様で、または上記フォルダをその分類内容を表すアイコンで上記表示部に表示させ、該表示においては、上記フォルダに分類された画像データに対応する上記時刻情報が時系列的に古い日時を示す時刻情報である程、遠近法で視点から遠い位置に相当するように上記表示部の中央部近傍に相対的に小さく上記表示を行い、且つ、上記時刻情報が時系列的に新しい日時を示す時刻情報に近い程、遠近法で視点から近い位置に相当するように上記表示部の周辺部近傍に相対的に大きく上記表示を行う表示制御部と、を有することを特徴とする。

本発明の第２の態様によるデータ表示方法は、撮影により画像データを取得し、撮影時の緯度及び経度を表す撮影位置情報を検出し、撮影時の日時を含む時刻情報を検出し、、上記撮影位置情報、上記時刻情報、及び上記撮影で取得した画像データ数に基づいて、上記画像データをフォルダに分類し、上記フォルダを所定の態様で、または上記フォルダをその分類内容を表すアイコンで表示部に表示させ、該表示においては、上記フォルダに分類された画像データに対応する上記時刻情報が時系列的に古い日時を示す時刻情報である程、遠近法で視点から遠い位置に相当するように上記表示部の中央部近傍に相対的に小さく上記表示を行い、且つ、上記時刻情報が時系列的に新しい日時を示す時刻情報に近い程、遠近法で視点から近い位置に相当するように上記表示部の周辺部近傍に相対的に大きく上記表示を行うことを特徴とする。

本発明によれば、ユーザにわかりやすい表示と簡単な操作によって画像検索を行うことができるように、撮影時の情報を駆使して撮影された画像データを分類し、ビジュアルに表した画面から感覚的に適切な画像を選択することができる。

以下、図面を参照して本発明の実施形態を説明する。

図１は、本発明の一実施形態に係るカメラの基本構成を示すブロック図である。このカメラは、メインＣＰＵ（以下、ＭＰＵと記す）１１と、複数のスイッチ１１ａ、１１ｂ、１１ｃと、信号処理部１２と、撮影位置検出部１３と、時計部１４と、フラッシュＲＯＭ１５と、アナログフロントエンド部（ＡＦＥ）１８と、ＲＡＭ１９と、メモリ２０と、表示部２１と、マイクロホン２２と、スピーカ２３と、プリント信号出力部２５と、無線通信部２６と、撮像素子２８及び撮影レンズ２９とを有して構成される。

図１に於いて、制御手段と分類手段の機能を有するＭＰＵ１１はマイクロコントローラ等から構成されるもので、ユーザによる各種の操作をスイッチ１１ａ、１１ｂ、１１ｃの状態によって検出する。更に、ＭＰＵ１１は、上記スイッチ１１ａ、１１ｂ、１１ｃの検出結果とフラッシュＲＯＭ１５内に記憶されているプログラムに従って、後述する各ブロックをシーケンシャルに制御して、撮影や再生のシーケンスを実行する。尚、スイッチ１１ａ〜１１ｃは、電源のオン、オフを行う電源スイッチ（１１ａ）や、レリーズスイッチ（１１ｂ）、後述する撮影と再生やその他のスイッチ（１１ｃ）として選択手段としての機能を有しており、ユーザの操作を入力するものである。

上記ＭＰＵ１１には、圧縮手段である信号処理部１２と、撮影位置検出部１３と、時計部１４と、フラッシュＲＯＭ１５とが接続されている。上記信号処理部１２では、色補正や信号圧縮等の処理が行われる。また、信号処理部１２の内部には、画像処理時の補正のかけ方を変更したり、特定の信号を付加するための補助ブロック１２ａを有している。

上記撮影位置検出部１３は、図示されない衛星を用いたグローバルポジショニングシステム（ＧＰＳ）等により、撮影位置を検出して記録可能とした位置検出手段である。また、時刻検出手段である時計部１４は、撮影の日時を記録できるようにする他、露出の時間を計時したり、所定のタイミングの間隔を測定したりする時に利用されるものである。更に、フラッシュＲＯＭ１５は、本カメラのＭＰＵ１１が実行する種々のプログラムや、本カメラに関する各種調整値が記憶されている。

上記信号処理部１２には、また、アナログフロントエンド部１８と、ＲＡＭ１９と、メモリ２０と、表示部２１と、音声入力手段であるマイクロホン２２と、スピーカ２３と、プリント信号出力部２５と、無線通信部２６とが接続されている。また、アナログフロントエンド部１８には、撮影時に、撮影レンズ２９から入射された被写体３０の像を結像する撮影手段である撮像素子２８が接続されている。この撮像素子２８は、ＣＣＤやＣＭＯＳセンサ等により構成されるもので、上記被写体の像を光電変換して画像信号にするものである。

上記アナログフロントエンド部１８では、変換された画像信号の読み出しやＡ／Ｄ変換が行われる。そして、このアナログフロントエンド部１８で変換されたデジタル画像信号は、信号処理部１２に入力される。そして、信号処理部１２にて種々の画像処理が施され画像データを生成する。そして、この画像データは、記録手段である着脱自在のメモリ２０に記録される。ここで、メモリ２０に記録される画像データは、カメラの設定に応じて適当なデータ量に圧縮されて記録される。この時、種々の演算を行うために、ＲＡＭ１９に適宜データが格納される。本発明では、動画も、先ずここに格納される。

ＭＰＵと共に分類表示手段を構成する表示部（表示手段）２１は、ＬＣＤ等から構成される。そして、構図決定は、この表示部２１によって撮像素子２８からの信号を逐次再生して表示することによって、被写体３０の状態を確認して行われる。再生表示は、ユーザのスイッチ１１ｃの操作に従って、メモリ２０内の圧縮された画像データが信号処理部１２に読み出されて表示データに変換され、表示部２１に表示されることによって行われる。同様に、音声の再生は、上記スイッチ１１ｃの操作に従って、メモリ２０内の圧縮された音声データが信号処理部１２に読み出されて音声データに変換され、スピーカ２３より出力される。

撮影された画像等は、プリント信号出力部２５や無線通信部２６を介して、図示されない外部機器に送信が可能である。

このような構成に於いて、ユーザがスイッチ１１ａ〜１１ｃを操作すると、その状態がＭＰＵ１１によって検出され、フラッシュＲＯＭ１５に記憶されているプログラムに従って、各ブロックがシーケンシャルに制御されて、撮影や再生のシーケンスが実行される。

撮影時には、撮影レンズ２３から入射した被写体２５の像が、撮像素子２２によって取り込まれて電気信号に変換され、アナログフロントエンド部１８を介してデジタル画像信号が信号処理部１２に入力される。そして、この信号処理部１２にて色補正や画像圧縮等の処理が行われ、その結果として圧縮画像データ、日時データ、位置データがメモリ２０に記録されて撮影が終了する。

このような構成のカメラを使用して、写真撮影した結果について、横軸に日時、縦軸に撮影した位置をとってグラフ化すると、図２に示されるようになる。この例では、休日の自宅付近で子供や身近なものを撮影した例や、会社で撮影した例や、旅行や日帰り旅行に行った時の写真が分類されて表示されている。尚、図２に於いて、撮影枚数は白丸の大きさで表示している。

これらの図２に示されたグラフを単純な日付け管理にして表すと、図３に示されるようになる。この図３のカレンダー表示でも、撮影枚数を白丸の大きさで表している。

しかしながら、図３の例では、どれが旅行に行った時の写真かわからない、という問題が生じるおそれがある。また、日曜日に学校の行事やパーティ等のイベントがあると、例えば、撮影日よりも後になって旅行に行った時の写真を見たくなった時等に、写真を多く撮った日が旅行日であると思っていても実際には違うことがある。

このように、時間だけで写真を管理するには無理がある。一方、図２のグラフのように位置の情報を加味すると、図３のグラフと比べて、白丸の数が増えていることがわかり、分類が細かすぎるという問題を生じることがわかる。つまり、これら図２、図３に示されるような形式では、もう少し大まかな分類にしないと検索が大変になるということがわかる。

更には、フォルダ内に複数の画像が含まれているようにして表示すると、図２のグラフは図４のように表される。この場合、フォルダ内には複数の画像が含まれていることが好ましいが、フォルダ内の画像数が多すぎても好ましくない。それは、フォルダを検索することができても、その後の画像検索が困難となってしまうからである。

したがって、本発明では適当な数の画像を含むフォルダを、先ずユーザにて目視可能として検索を容易にし、その後にユーザの操作により当該フォルダ内の画像を検索するようにしている。

すなわち、初めは、図５（ａ）に示されるように、例えばユーザがカメラ３５の背面に設けられた表示部２１としての液晶ディスプレイ３１上に表示された、図４のようなグラフを目視している。次に、この状態で、ユーザの指３６によって、表示部２１を構成するタッチセンサ３２を操作するか、図５（ｂ）に示されるように、カメラ３５の背面部に設けられた十字キースイッチ３３を操作して、希望するフォルダを選択する。この場合、斜線で示されるフォルダが選択されたものとする。そして、図５（ｃ）に示されるように、液晶ディスプレイ３１に表示された当該フォルダ内の画像を検索するようにする。

カメラ背面に表示可能なスペースから考えても、図２のグラフのような細かい表示よりも、図４のグラフのような大まかな表示にした方がユーザの直感に近く、使いやすい表示にすることができる。更に、図６に示されるように、画面に奥行きを感じさせるようにして、過去の記憶は奥にあるような表示にして、遠い所に行った時の画像は上の方にあるような表示にすると、更にグラフ等を見慣れないユーザにも理解しやすい表示となる。

次に、図７及び図８のフローチャートを参照して、このような分類表示が可能なカメラの動作について説明する。尚、このカメラの動作は、主にカメラ内のＭＰＵ１１の制御によって行われる。

本ルーチンが開始されると、先ず、ステップＳ１に於いて、撮影モードか再生モードかが判定される。このモード選択は、ユーザの操作により行われる。ここで、再生モードが選択された場合は、後述するステップＳ２８へ移行する。一方、再生モード以外が選択された場合は、撮影が開始されるように、ステップＳ２に於いてレリーズスイッチ１１ａの状態が判定される。ここで、撮影が開始されない場合は上記ステップＳ１に移行し、撮影が開始される場合は、ステップＳ３以降の撮影シーケンスが実行される。

すなわち、ステップＳ３及びＳ４にて、ピント合わせ及び露出制御が、被写体３０の条件に合わせて行われる。次いで、ステップＳ５にて、画像信号が撮像素子２８から信号処理部１２に取込まれる。そして、ステップＳ６にて、その画像の特徴（色や明るさ、被写体形状や距離等）を簡単に分類できるような特徴が抽出される。この特徴抽出には、例えば、近年発展している人物検知を利用してもよい。

次に、ステップＳ７では画像が圧縮され、更にステップＳ８及びＳ９にて、撮影の位置や日時、時刻が検出される。ステップＳ１０では、これら検出された位置や時刻等がメモリ２０に記録される。

ステップＳ１１以降は、このような１回の撮影毎の画像ファイルを幾つか集めて画像フォルダにまとめるためのフローチャートである。

つまり、ステップＳ１１では、今回撮影された撮影画像と前回撮影された撮影画像の位置情報や日時情報が比較される。次いで、ステップＳ１２では、自宅画像と今撮影された画像との位置差が検出される。

ところで、本実施形態のカメラには、自宅での撮影は、カメラ購入後に行うように促す機能があり、その時のＧＰＳ情報や日時情報がメモリ２０内に記録されている。そして、ステップＳ１３以降の処理では、前回の撮影や自宅での撮影の結果を利用して、上記ステップＳ１１及びＳ１２のＧＰＳ（位置）情報や日時時刻情報の差より、撮影画像が既に存在するフォルダに入れるか、新しいフォルダに入れるかが決定される。

すなわち、ステップＳ１３に於いて、撮影された日が前の撮影と同じ日であるか否かが判定される。その結果、同じ日であれば後述するステップＳ２３に移行し、別の日であればステップＳ１４へ移行する。

上記ステップＳ１３にて別の日であると判定された場合は、次にステップＳ１４に於いて前回の撮影と今回の撮影の地点が２０ｋｍ以上離れているか否かが判定される。ここで、２０ｋｍ離れていない場合は、ステップＳ２１に移行して、フォルダ内の画像数が多いか否かが判定される。これは、同じフォルダで管理したいが、上述したように、同一のフォルダ内にあまりにも多くの画像が入ると検索が大変になってしまうので、ステップＳ２１にて、画像が多すぎるようであれば後述するステップＳ１５に移行し、そうでない場合はステップＳ２２に移行して、前の撮影画像が分類されたのと同じフォルダ（旧フォルダ）に記録された後、ステップＳ２０へ移行する。

一方、上記ステップＳ１４にて、２０ｋｍ以上離れていると判定された場合には、ステップＳ１５及びＳ１６に移行して、新しいフォルダが作成されて、そこに今回撮影された画像が記録されるようにしている。これによって旧フォルダは、それ以上の画像を含まず、これからの画像は新しいフォルダに記録されることとなる。

但し、ステップＳ１７に於いて、もう画像が含まれないようにした旧フォルダがたった１枚の画像しか含まないと判定された場合には、ステップＳ１８に移行して、旧フォルダ内の画像が、更に前のフォルダ（旧々フォルダ）に含まれるように記録される。これはフォルダと称しながら、１枚しか画像を含んでいない場合には、検索時に手間がかかるのを防止するためである。したがって、フォルダ数をなるべく減らすために、続くステップＳ１９にて、画像が存在しなくなったフォルダは削除されるようにしている。尚、上記ステップＳ１７にて旧フォルダの画像が１枚でない場合は、ステップＳ１８及びＳ１９はスキップされる。

一方、上記ステップＳ２１にて、旧フォルダが１枚の画像だけではない場合は、ステップＳ２２に移行して、そのまま旧フォルダに画像が記録される。

尚、ここでは、旧フォルダより前に作られた旧々フォルダに画像を入れるようにしたが勿論、新フォルダの中に旧フォルダの内容を入れてフォルダ数を減少させるようにしてもよい。

こうして、もう新たに画像を含まなくなったフォルダは、ステップＳ２０にて、中に含まれる各画像の日時や、ＧＰＳ情報による経度や緯度の中心値や、上記ステップＳ６で得られた画像の特徴によって分類可能となるような信号が付加される。これを利用して、再生モードで検索する場合には、液晶ディスプレイ３１の画面上での図示を容易にできるようにする。

上記ステップＳ１３にて同じ日の画像であると判定された場合は、次にステップＳ２３に於いて、フォルダ内の画像数が多いか否かが判定される。これは、同じ日に撮影された画像は、極力同じフォルダで管理したいが、上述したように、同一のフォルダ内にあまりにも多くの画像が入ると検索が大変になってしまうので、ステップＳ２３にて、画像が多すぎるようであれば、後述するステップＳ２４〜Ｓ２７にて別フォルダに記録することができるようにしている。

すなわち、上記ステップＳ２３にて画像数が多くないと判定された場合は、上記ステップＳ２２へ移行して、旧フォルダに記録される。また、上記ステップＳ２３にて、旧フォルダの画像数が多いと判定された場合は、続くステップＳ２４に於いて、今回の撮影位置が離れているか、例えばこの場合は自宅から２０ｋｍ以上離れているか否かが判定される。その結果、２０ｋｍ以上離れている場合はステップＳ２５に移行し、そうでない場合はステップＳ２６へ移行する。

ステップＳ２５では、今回の撮影位置が前回の撮影位置と１０ｋｍ以上離れているか否かが判定される。ここで、１０ｋｍ以上離れている場合はステップＳ２７へ移行するが、そうでない場合は上記ステップＳ２２へ移行して旧フォルダに画像が記録される。

ステップＳ２６では、今回の撮影位置が前回の撮影位置とが５００ｍ以内であるか否かが判定される。ここで、５００ｍ以内である場合はステップＳ２７へ移行し、そうでない場合は上記ステップＳ１５へ移行する。ステップＳ２７では、前回の撮影から２時間が経過したか否かが判定される。ここで、２時間が経過したならば上記ステップＳ１５へ、経過していない場合は上記ステップＳ２２へ、それぞれ移行する。

上述したように、ステップＳ２４〜Ｓ２７に於いて、撮影位置が離れておらず時間も経過していない場合は、ステップＳ２２にて前回の撮影画像が分類されたのと同じフォルダに記録される。しかし、その条件を満たしていないと、フォルダ内の画像数が多すぎて検索できない（例えば、図５（ｃ）の表示部３１の画面に表示しきれない）ので、ステップＳ２２に移行して、新フォルダを作成し、そこに分類記録する。

上記ステップＳ２４〜Ｓ２７の処理で特徴的なのは、自宅から２０ｋｍ以下でそれほど離れていない場合には、前回の撮影との位置の比較を５００ｍで行い（ステップＳ２６）、自宅から２０ｋｍ以上離れている場合には、１０ｋｍ以内の差ではほぼ同じ位置と判定する（ステップＳ２５）点である。これは、自宅付近であれば、あまり離れていない場所でも別の場所と認識しやすいことに対応し、一方、自宅から２０ｋｍ以上離れている場合には、例えば旅先で激しく動き回っていたりするので、１０ｋｍ以内の差ではほぼ同じ位置と判定するようにしているからである。

上記ステップＳ１に於いて再生モードであると判定された場合は、ステップＳ２８移行の再生モードに入る。これにより、カメラ３５の背面に設けられた液晶ディスプレイ３１で撮影画像を観賞することができるようになる。そして、先ずステップＳ２８に於いて、ユーザの自宅付近のＧＰＳ情報の有無が判定される。ここで、ユーザの自宅付近のＧＰＳ情報がメモリ２０に記録されている場合はステップＳ３２に移行するが、記録されていない場合は、ステップＳ２９に移行する。

ステップＳ２９では、図９（ａ）に示されるような警告表示が行われる。次いで、ステップＳ３０に於いて、レリーズ操作の有無が判定される。つまり、上記ステップＳ２９で表示された警告表示を自宅で見たユーザにより、レリーズ動作が行われれば、ステップＳ３１に移行して、その時の日時とＧＰＳ情報がカメラのメモリ２０に記録される。これにより、上記ステップＳ１１及びＳ１２の比較時のデータとして利用できるようになる。

また、ＧＰＳ情報は必ずしも撮影時に正しく入力されないこともあるので、ステップＳ３２及びＳ３３にて、所定時間おきに位置検出される。これにより、撮影時にＧＰＳ情報が得られなかった場合に、この値を代用したりして問題を回避することができる。

ステップＳ３４では、検索モードであるか否かが判定される。ここで、ユーザが検索モードに設定していなければステップＳ３５に移行し、設定していれば後述するステップＳ４２へ移行する。

ステップＳ３５では、画像が１枚ずつ鑑賞できるように液晶ディスプレイ３１に表示される。つまり、ここでは最新の撮影結果が表示される。そして、ステップＳ３６に於いて、ユーザにより画像切り替えが行われたか否かが判定される。ここで、画像切り替え操作が行われると、ステップＳ３７に移行して別の画像が再生表示される。一方、画像切り替え操作が行われない場合は、ステップＳ３８へ移行する。

次に、ステップＳ３８では、自宅付近のＧＰＳ情報の有無が判定される。ここで、上記ＧＰＳ情報が有る場合はステップＳ４１へ移行し、無い場合はステップＳ３９に移行する。ステップＳ３９では、その再生画像が自宅付近のものであるか否かが判定される。例えば、図９（ｂ）に示されるように、再生画像３１₁ が自宅付近のものであるか否かを問い掛ける表示が、液晶ディスプレイ３１になされる。この時、自宅付近の画像が表示されていれば、ユーザは画面上の“Ｙｅｓ”と表示された操作釦３１ａによる入力操作を行う。この場合はステップＳ４０に移行して、その画像の有するＧＰＳ情報（位置情報）が自宅付近の情報としてメモリ２０に記録される。一方、上記ステップＳ３９にて、表示された再生画像が自宅付近のものでない場合は、画面上の“Ｎｏ”と表示された操作釦３１ｂによる入力操作が行われて、ステップＳ４１へ移行する。

ステップＳ４１では、画像の再生が終了したか否かが判定される。ここで、まだ終了でない場合は上記ステップＳ３６へ移行し、終了であれば本シーケンスが終了する。

上記ステップＳ３４に於いて検索モードに設定されていると判定された場合は、ステップＳ４２に於いて、グラフ表示が求められているか否かが判定される。

ここで、グラフ表示が求められている場合は、ステップＳ４３に移行して、上記ステップＳ２０で作成されたフォルダが液晶ディスプレイ３１上に表示される。このグラフは、例えば、上述した図４や図５（ａ）、（ｂ）で示されるような、横軸を時間、縦軸を自宅からの距離とした表示となる。この時、撮影画像数が多いフォルダは大きく、数が少ないフォルダは小さく表示すると、更に検索がし易くなる。

また、内蔵する画像の特徴によって、色を変えたり形を変えたりすれば、ユーザは更に画像の検索がし易くなる。

例えば、結婚式のように人物の画像が多いものは人の形状にしたり、旅行のように風景が多いものは青色にしたりすればよい。

上記ステップＳ４２に於いて、ユーザによりグラフ表示以外が選択された場合には、ステップＳ４４に移行して、例えば図６に示されるような表示が行われる。これは、過去の記憶は遡っていくようなビジュアル表示である。

すなわち、ステップＳ４４にて、過去のフォルダのうち旅行中の画像のフォルダ４１、４２、４３は小さく画面の上の方に表示され、続くステップＳ４５にて、過去のフォルダのうち自宅付近の画像のフォルダは小さく画面の下の方に表示される。更に、ステップＳ４６にて、最近のフォルダのうち旅行中の画像のフォルダ４４は大きく画面の上の方に表示され、続くステップＳ４７にて、最近のフォルダのうち自宅付近の画像のフォルダ４５は大きく画面の下の方に表示される。そして、ステップＳ４８にて、上記ステップＳ４４〜Ｓ４７に該当しないフォルダは、これらの中間に表示される。

これらをまとめると、過去のフォルダは小さく表示し、それが自宅より距離が近いものなら下に、遠いものは上に表示する。また、最近の撮影画像は、大きく表示し、近所で撮影したものは下の方に、遠い所で撮影したものは、上の方に表示する。更に、その他のフォルダはその中間に表示する。このようにすれば、図６に示されるような表示となり、遠近法のような効果で、過去のフォルダ（４１〜４３）は遠くにあるように見え、最近のフォルダ（４４、４５）は近くにあるように見える。

その後、ステップＳ４９にて、各フォルダが内容に合わせて特徴を持たせるように設定される。

これによって、ユーザは過去に対して記憶を遡られるような形で画像を検索することができる。

尚、図６に示されるフォルダ検索画面は、「過去」、「現在」の文字表示がされているが、この表記は無くともよい。

また、十字キー等の操作によってユーザが過去の画像を探す場合等には、どんどん過去のフォルダが手前に来るように表示するようにしてもよい。

以下、フォルダ検索のための別の表示例（変形例）について説明する。

（第１の変形例）
図１０は、第１の変形例による撮影画像の検索時の表示例を示したものである。

この第１の変形例では、過去のフォルダはやはり遠近法で遠くに見えるように小さく中心付近に表示し、新しいフォルダほど手前の方に見えるようにして、上述した図６と同じような表示及び検索の効果を持たせるようにしている。この第１の変形例では、自宅の位置は必要とせず、全フォルダの有する座標（ＧＰＳ情報から得られた経度と緯度）に従って各フォルダの位置関係を求め、その中心を原点とする。つまり、全ての画像のＧＰＳ情報の中心を原点とするので、自宅等の原点位置を必要とせず、地図情報等も必要とせず、図１０に示されるように、東西南北に合わせて上下左右の方向を決定し、中心（原点）に対して、どの方向にあるかによって表示するようにしている。例えば、旅行先が東北地方であるとか関西方面であるとかを液晶ディスプレイ上に表示することができる。

但し、国外の場合は東西の関係が判断不能になるので、その場合は、その国を中心とした世界地図表記に合わせればよい。

尚、図１０の表記「東」、「西」、「南」、「北」は、必ずしも表示されなくともよいものである。

図１１は、図１０に示されるような表示にする場合の、カメラのＭＰＵ１１による制御動作を説明するためのフローチャートである。

本ルーチンが開始されると、先ずステップＳ５１に於いて、上述したように、全フォルダの位置の中心が原点とされる。次いで、ステップＳ５２では、各フォルダを配置する座標が、緯度と経度に合わせて決定される。更に、ステップＳ５３では、撮影の日時情報が加味され、古いフォルダほど遠近法で遠く見えるように小さく中心に向うように補正が行われて配置されるようにする。

ここで、ステップＳ５４に於いて、図１０に示される画面を見ながら、ユーザがフォルダ４１〜４５から何れかを選択する。このフォルダ選択は、タッチパネル式でも、十字キー式、或いはその他のスイッチ等による選択であってもよい。

ステップＳ５４にてフォルダが選択されると、続くステップＳ５５にて選択されたフォルダが一番手前に表示されるようにし、それより新しいフォルダは表示しないように候補画像から外される。こうして、上記ステップＳ５１に移行すると、次々と過去に遡れるような表示が可能となる。

上記ステップＳ５４にてフォルダ選択が行われない場合は、ステップＳ５６に移行してフォルダ選択を終了するか否かが判定される。ここで、まだ選択が続けられる場合は上記ステップＳ５４に移行し、終了する場合はステップＳ５７へ移行する。そして、ステップＳ５７では、図５（ｃ）に示されるような画像表示に切り替えられる。

このように、大まかに時間や空間を表す画面上に配置されたフォルダを選択して、個々の画像にアクセスするようにしたので、ユーザは記憶を辿るように、過去の思い出を回想しながら画像を迅速に検索することができる。また、背景画面も静止画である必要はなく、時間の流れを表すように、手前側に流れるような動画表示としてもよい。

（第２の変形例）
図１２は、第２の変形例として、フォルダ内の画像の特徴によって、人物と旅行を表すフォルダを配置表示した例を示した図である。

図１２（ａ）は、画面中央部に大きな人物のフォルダ５１が存在する例を示した図である。これ以前のデータを選択したい場合は、例えば右上の旅行写真を示すフォルダ５２を選択すると、図１２（ｂ）に示されるように、中央の人物フォルダ５１は消え、それ以前の画像が見えるようになり、奥行き方向に過去のフォルダが見えてくる。また、フォルダ５２に相当する旅行写真を示すフォルダ５２ａが反転表示される。

尚、図１２（ａ）、（ｂ）に於いて、フォルダ内に示される数字は、この場合撮影日時を表している。

また、カメラに時間を遡るスイッチを設けておき、これによって奥にあるものを見えるようにしてもよい。

このように、各フォルダを時間軸と空間軸で分類して表示することによって、ユーザは記憶を辿る形で過去の画像を検索することができ、しかも相対的にどの位置で撮影したかも画面内の上下左右の配置の具合から判断することができる。

尚、図１２（ｂ）に矢印Ａで示されるように、動画表示をして時間の流れを示してもよい。また、画面上のアイコンのデザインによって中味も知ることができる。その際、フォルダの日付けも併記してもよい。

更に、遠近法を有効利用するために、フォルダを表す円の大きさは、遠近を表すために利用されているので、この表示形態はどのフォルダにもほぼ同じ数の画像が入っていることを想定している。しかしながら、図１３（ａ）に示されるように、中の画像の数に従ってフォルダを表す円内のアイコン６１〜６４の大きさを変えるようにしてもよい。

また、図１３（ｂ）に示されるように、円内を着色表示し、画像の少ないフォルダはその色の部分を小さくして表示するようにしてもよい。例えば、フォルダ６７は略一杯に画像が入っており、フォルダ６８、６９はフォルダに余裕があることを表している。

更に、この第２の変形例では、遠近法をアイコンの大小関係で表現したが、近年開発された３Ｄディスプレイの技術で実際に奥行き方向を表すようにし、その中にアイコンを表示するようにしてもよい。

（第３の変形例）
また、本発明の時間による遠近法を応用した表示技術を利用すると、２次元方向（紙面に対して垂直方向）に季節を表す領域を設けて、図１４に示されるように、それぞれの季節（地域（ＧＰＳ情報）と時刻情報から割り出す）毎に画像を分類し、過去の写真と最近の写真を分類表示して検索しやすくすることが可能である。

（第４の変形例）
更に、図１５に示されるように、２次元方向に写真の分類を示す領域を設け、それぞれの行事毎に時間分類した表示を行うこともできる。この例は、ＧＰＳ情報は用いられず、ユーザにより分類された分類情報に基いて行われる。

（第５の変形例）
また、図１６に示されるように、撮影された人物毎の分類を２次元方向に分類し、遠近法のように、画像の重なりや中央に行くほど小さい表示にするような手法にて、写真の前後関係を表し、検索を容易にするようにしてもよい。これは、人の顔検知による個人特定の技術を流用してもよい。

（第６の変形例）
更に、図１７に示されるように、被写体の距離や被写体の明るさや像信号によって画像を分類し、その奥行き方向に撮影時刻の前後関係を示すようにしてもよいのは勿論である。

このように、本発明によれば、ユーザは、好きな時に手軽に、古い写真の中から自分の見たいものを探して写真鑑賞を楽しむことができる。したがって、撮影画像を検索するのに、わかりやすく分類可能で表示可能なカメラを提供することができる。

また、本発明は、カメラ内で全てを完結させるべき技術ではなく、分類表示は、例えばパーソナルコンピュータにて行ってもよい。この際、カメラからは、日時や位置が添付された画像ファイルが送られるようにする。

更に、本発明はカメラに限られることなく、単に表示装置や表示方法としても適用可能である。この場合、画像は、例えばカメラから送られるようにする。

例えば、画像フォルダを図形で表示する表示装置であって、画面の奥行き方向に撮影時の時刻を表し、該奥行き方向以外の方向に時間以外の少なくとも撮影位置等を表し、上記奥行き方向に分布する図形の大きさに従って、上記撮影時に撮影された画像の数を表示するようにしてもよい。

或いは、画像の奥行き方向に撮影時の日時を表し、該奥行き方向と直交する方向に撮影地点を表し、上記画像フォルダ内の画像の数を、該フォルダを示す図形内に表示するようにしてもよい。

また、保存手段に予め撮影された画像を、例えばフォルダ毎に保存するようにし、この保存手段で保存された画像について上述した表示を行うようにしてもよい。

このような構成の表示装置によれば、ユーザは、撮影された画像または保存された画像について、過去に対して記憶を遡られるような形で、場所や画像の数を検索することができる。

更には、撮影画像の分類方法として、前回の撮影と時間、距離が離れていない場合には同一のフォルダに分類し、上記時間、距離が離れていても単独の画像は同じく同一のフォルダに分類するようにしてもよい。

このように分類を行うようにすれば、フォルダ毎の検索も容易になる。

以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲で種々の変形実施が可能であるのは勿論である。

更に、上述した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件の適当な組合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件から幾つかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除された構成も発明として抽出され得る。

本発明の一実施形態に係るカメラの基本構成を示すブロック図である。 図１の構成のカメラを使用して写真撮影した結果を表したグラフである。 図２の撮影結果のグラフをカレンダー表示に適用した例を示した図である。 図２のグラフに於ける写真撮影の結果を検索するためにフォルダ毎に表したグラフである。 本発明の一実施形態に係るカメラを使用して撮影した画像を検索する例を説明する図である。 本実施形態によるカメラで撮影された写真撮影の結果を表した表示画面の例を示した図である。 本発明の一実施形態に於けるカメラの動作を説明するためのフローチャートである。 本発明の一実施形態に於けるカメラの動作を説明するためのフローチャートである。 （ａ）は図７及び図８のフローチャートのステップＳ２９に於ける警告表示の画面の例を示した図、（ｂ）は図７及び図８のフローチャートのステップＳ３９に於ける画像判定時の画面の例を示した図である。 本発明の第１の変形例による撮影画像の検索時の表示例を示した図である。 図１０に示される撮影画像の検索時のグラフを表示にする動作を説明するためのフローチャートである。 本発明の第２の変形例による撮影画像の検索時の表示例を示した図である。 本発明の第２の変形例による撮影画像の検索時の他の表示例を示した図である。 本発明の第３の変形例による撮影画像の検索時の表示例を示した図である。 本発明の第４の変形例による撮影画像の検索時の表示例を示した図である。 本発明の第５の変形例による撮影画像の検索時の表示例を示した図である。 本発明の第６の変形例による撮影画像の検索時の表示例を示した図である。

符号の説明

１１…メインＣＰＵ（ＭＰＵ）、１１ａ、１１ｂ、１１ｃ…スイッチ、１２…信号処理部、１３…撮影位置検出部、１４…時計部、１５…フラッシュＲＯＭ、１８…アナログフロントエンド部（ＡＦＥ）、１９…ＲＡＭ、２０…メモリ、２１…表示部、２２…マイクロホン、２３…スピーカ、２５…プリント信号出力部、２６…無線通信部、２８…撮像素子、２９…撮影レンズ、３０…被写体、３１…液晶ディスプレイ、３５…カメラ。

Claims (7)

1. 撮影により画像データを得る撮影手段と、
   撮影時の緯度及び経度を表す撮影位置情報を検出する位置検出手段と、
   撮影時の日時を示す時刻情報を検出する時刻検出手段と、
   上記撮影位置情報、上記時刻情報、及び上記撮影手段による撮影で取得した画像データ数に基づいて、上記画像データをフォルダに分類する分類手段と、
   上記フォルダまたは上記フォルダの分類内容を表すアイコン、及び上記画像データを表示する為の表示部と、
   上記フォルダを所定の態様で、または上記フォルダをその分類内容を表すアイコンで上記表示部に表示させ、該表示においては、上記フォルダに分類された画像データに対応する上記時刻情報が時系列的に古い日時を示す時刻情報である程、遠近法で視点から遠い位置に相当するように上記表示部の中央部近傍に相対的に小さく上記表示を行い、且つ、上記時刻情報が時系列的に新しい日時を示す時刻情報に近い程、遠近法で視点から近い位置に相当するように上記表示部の周辺部近傍に相対的に大きく上記表示を行う表示制御部と、
   を有することを特徴とするカメラ。
2. 上記表示制御部は、上記表示部に上記画像データを表示させる際には、特定の位置を基準位置として、上記画像データに対応する時刻情報及び撮影位置情報に基づいて、その表示サイズ及び表示位置を変えて上記画像データを上記表示に表示させる
   ことを特徴とする請求項１に記載のカメラ。
3. 上記分類手段は、上記撮影手段による撮影で取得された画像データの撮影位置情報及び時刻情報と、前回の撮影で取得された画像データのそれらとの差を検出し、該差が所定以下である場合、及び、上記差が所定より大きい場合であって且つ前回の撮影で取得された画像データが分類されたフォルダには一つの画像データしか存在していない場合には、前回の撮影で取得された画像データが分類されたフォルダと同一のフォルダに当該画像データを分類することを特徴とする請求項１に記載のカメラ。
4. 上記表示制御部は、上記分類された各々の画像データに対応する撮影位置情報からそれらの中心位置を検出し、該中心位置を基準位置として表示することを特徴とする請求項１に記載のカメラ。
5. 上記表示制御部は、上記基準位置に対する上記フォルダの表示位置を、上記表示部における上下左右を東西南北に対応させて緯度及び経度に基づいて決定し、上記フォルダを所定の態様で或いは上記アイコンで上記表示部に表示させることを特徴とする請求項４に記載のカメラ。
6. 上記表示部は３Ｄディスプレイであり、
   上記表示制御部は、上記表示部における遠近法表示を、上記３Ｄディスプレイの立体表示における奥行き方向の表示を利用して行うことを特徴とする請求項１に記載のカメラ。
7. 撮影により画像データを取得し、
   撮影時の緯度及び経度を表す撮影位置情報を検出し、
   撮影時の日時を含む時刻情報を検出し、
   上記撮影位置情報、上記時刻情報、及び上記撮影で取得した画像データ数に基づいて、上記画像データをフォルダに分類し、
   上記フォルダを所定の態様で、または上記フォルダをその分類内容を表すアイコンで表示部に表示させ、該表示においては、上記フォルダに分類された画像データに対応する上記時刻情報が時系列的に古い日時を示す時刻情報である程、遠近法で視点から遠い位置に相当するように上記表示部の中央部近傍に相対的に小さく上記表示を行い、且つ、上記時刻情報が時系列的に新しい日時を示す時刻情報に近い程、遠近法で視点から近い位置に相当するように上記表示部の周辺部近傍に相対的に大きく上記表示を行うことを特徴とするデータ表示方法。

Images