JP4769624B2

JP4769624B2 - 画像再生装置ならびにその制御方法およびその制御プログラム

Info

Publication number: JP4769624B2
Application number: JP2006119993A
Authority: JP
Inventors: 敏多原; 典子片山
Original assignee: Fujifilm Corp
Current assignee: Fujifilm Corp
Priority date: 2006-04-25
Filing date: 2006-04-25
Publication date: 2011-09-07
Anticipated expiration: 2026-04-25
Also published as: JP2007295212A; US7672977B2; US20070257993A1

Description

この発明は，画像再生装置ならびにその制御方法およびその制御プログラムに関する。

ディジタル・スチル・カメラが手軽になってきたことからユーザは，気軽に写真を撮ることができるようになってきた。このために，極めて多数駒の画像が保存されていることとなり，閲覧されないような画像も多数あることがある。このために，画像の閲覧に様々な工夫がなされている。たとえば，画像の属性に応じてレイアウトするもの（特許文献１），検索条件を指定させ，指定された検索条件と異なるような条件をもつ画像を検索するものがある（特許文献２）。
特開平８−329135号公報特開平11−224262号公報

また，画像データを検索する際の確実性と偶発性とを両立させた画像検索システムなどもある（特許文献３）。
特開2005−275738号公報

しかしながら，所望の画像と関連する画像を見つけ出して表示するには不十分なことがある。

この発明は，所望の画像と関連する画像を見つけ出し表示することを目的とする。

この発明による画像再生装置は，撮影によって得られた画像を表す画像データと上記画像のキーワードを表すキーワード・データとが互いに関連づけられている画像データとキーワード・データとの多数の組がグループ分けされて記録されている記録媒体から所望の主画像を表す画像データとキーワード・データとを読み取る第１の読み取り手段，上記第１の読み取り手段によって読み取られた画像データによって表される主画像を表示画面に表示するように表示装置を制御する第１の表示制御手段，関連画像表示指令入力手段，上記関連画像表示指令入力手段から関連画像表示指令が入力したことに応答して，上記第１の表示制御手段の制御のもとに表示されている主画像のキーワードと同じキーワードを示すキーワード・データと関連付けられており，かつ上記主画像が属するグループと異なるグループに含まれている画像データを上記記録媒体から読み取る第２の読み取り手段，上記第２の読み取り手段によって読み取られた画像データによって表される画像を上記主画像よりも縮小する第１の縮小手段，および上記第１の縮小手段によって縮小された画像を関連画像として，上記主画像が表示されている表示画面に表示するように表示装置を制御する第２の表示制御手段を備えていることを特徴とする。

この発明は，上記画像再生装置に適した制御方法も提供している。すなわち，この方法は，第１の読み取り手段が，撮影によって得られた画像を表す画像データと上記画像のキーワードを表すキーワード・データとが互いに関連づけられている画像データとキーワード・データとの多数の組がグループ分けされて記録されている記録媒体から所望の主画像を表す画像データとキーワード・データとを読み取り，第１の表示制御手段が，上記第１の読み取り手段によって読み取られた画像データによって表される主画像を表示画面に表示するように表示装置を制御し，第２の読み取り手段が，関連画像表示指令が入力したことに応答して，上記第１の表示制御手段の制御のもとに表示されている主画像のキーワードと同じキーワードを示すキーワード・データと関連付けられており，かつ上記主画像が属するグループと異なるグループに含まれている画像データを上記記録媒体から読み取り，縮小手段が，上記第２の読み取り手段によって読み取られた画像データによって表される画像を上記主画像よりも縮小し，第２の表示制御手段が，上記第１の縮小手段によって縮小された画像を関連画像として，上記主画像が表示されている表示画面に表示するように表示装置を制御するものである。

この発明は，上記画像再生装置の制御方法を実現するためのプログラムも提供している。

この発明によると，画像データとキーワード・データとの組がグループ分けされて記録媒体に記録されている。所望の画像データが記録媒体から読み取られ，その読み取られた画像データによって表される画像が主画像として表示画面に表示される。関連画像の表示指令が入力すると，主画像が属するグループと異なるグループに属する画像であって，主画像のキーワードと同じキーワードをもつ画像（主画像のキーワードが複数ある場合には，それらの複数のキーワードがすべて一致するものでもよいし，少なくとも一つのキーワードが一致するものでもよい。）を表す画像データが記録媒体から読み取られる。読み取られた画像データによって表される画像が主画像よりも小さくなるように縮小されて，主画像が表示されている表示画面に表示される。主画像に関連した画像を見つけ出して表示することができる。

上記関連画像を選択する選択手段，上記選択手段によって選択された関連画像を表す画像データが属するグループに含まれる画像データによって表される画像を上記主画像よりも縮小する第２の縮小手段，および上記第２の縮小手段によって縮小された画像を，上記主画像が表示されている表示画面に表示するように上記表示装置を制御する第３の表示制御手段をさらに備えてもよい。

図１は，この発明の実施例を示すもので，ディジタル・スチル・カメラの電気的構成を示すブロック図である。

ディジタル・スチル・カメラの全体の動作は，制御回路10によって統括される。

ディジタル・スチル・カメラには，電源ボタン，シャッタ・レリーズ・ボタン，モード・スイッチ，メニュー・ボタンなどのボタン類２が設けられている。このボタン類２からの出力信号は，制御回路10に入力する。モード・スイッチにより撮影モード，再生モードなどが設定される。

制御回路10には，撮影日時を計測するための時計11，動作プログラムその他のデータを記憶するメモリ12も接続されている。

この実施例によるディジタル・スチル・カメラは，他の装置と通信することができる。このために，ディジタル・スチル・カメラには，通信制御回路３および通信回路４が設けられている。後述する動作を制御する動作プログラムを通信回路４によって受信することもできる。通信回路４によって受信された動作プログラムは通信制御回路３および制御回路10を介してメモリ12に与えられ，記憶される。動作プログラムがメモリ・カードに格納されている場合には，そのメモリ・カードから動作プログラムを読み取り，ディジタル・スチル・カメラにインストールすることもできる。

撮影モードが設定されると，撮像回路１によって被写体が撮影される。被写体像を表す画像データが制御回路10に入力する。制御回路10において，ガンマ補正，色バランス調整などの所定の信号処理が行われて表示制御回路５に入力する。表示制御回路５によって表示装置６が制御されることにより，被写体像が表示装置６の表示画面上に表示される。

シャッタ・レリーズ・ボタンが押されると，上述のように被写体像を表す画像データが制御回路10に入力する。制御回路10には，時計11により計測された撮影日時を表すデータも入力する。制御回路10において，画像ファイルが生成され，生成された画像ファイルに画像データ，撮影日時データ等が格納される。また，この実施例においては，撮影日時にもとづいて画像がグループ化される。画像データによって表される画像グループを示すデータも画像ファイルに格納される。さらに，この実施例においては，撮影しようとしている画像がどのようなシーンを表しているものかを示す撮影シーン（キーワード）をユーザが付与することができる。この撮影シーンを示すデータも画像ファイルに格納される。生成された画像ファイルはメモリ・カード・インターフェイス７を介してメモリ・カード８に与えられ，記録される。

再生モードが設定されると，メモリ・カード８に記録されている多数の画像ファイルのうち，所望の画像を表す画像ファイルが読み取られる。読み取られた画像ファイルがメモリ・カード・インターフェイス７および制御回路10を介して表示制御回路５に与えられる。表示制御回路５により表示装置６が制御されることにより，表示装置６の表示画面にメモリ・カード８から読み取られた画像ファイルによって表される画像が表示される。

図２は，画像ファイルのファイル構造（データ構造）の一例である。

画像ファイルには，ヘッダ記録領域と画像データ記録領域とが含まれている。

画像データ記録領域には，上述したように撮影により得られた画像データが記録される。

ヘッダ記録領域には，画像ファイルの管理データ等のヘッダ情報が記録される。とくに，この実施例においては上述したように，撮影日時を表すデータ，グループを示すデータおよび撮影シーンならびにその撮影シーンの関連度を示すデータもヘッダ記録領域に記録される。これらの撮影日時データ，グループ・データ，撮影シーン・データ，関連度データを用いて，特定の画像（主画像）に関連した画像を表示させることができるようになる。

図３は，撮影シーン候補の一例である。

撮影シーン候補は，ユーザが選択可能なシーンを表すものである。撮影シーン候補には，人物，花，緑，空，紅葉，風景，ビーチ，スノー，夕日，夜景，花火，パーティ，ペット，料理，建物，乗物および文字がある。これらの撮影シーン候補以外の撮影シーンを，ユーザが選択可能であってもよいのはいうまでもない。

図４は，表示装置６の表示画面の一例である。

撮影時において，ボタン類２に含まれているメニュー・ボタンが押されると，表示画面20には撮影シーン設定メニューが現れる。現れた撮影シーン設定メニューが選択されると，撮影されている画像21の撮影シーンを選択するための撮影シーン選択メニュー22が表示画面21の右隅に表示される。この撮影シーン選択メニュー22には，撮影シーン候補の中から，撮影された画像21に適したシーンが選択されて表示されている。画像21は，海で子供が泳いでいるものであり，人物シーンを表す「人物」の文字23，ビーチ・シーンを表す「ビーチ」の文字24および風景シーンを表す「風景」の文字25が撮影シーン選択メニュー22に表示されている。

これらの撮影シーンは，撮影によって得られた画像にもとづいてディジタル・スチル・カメラにおいて決定される。たとえば，顔検出処理により画像の中から顔の画像が検出されると，撮影シーンとして「人物」と決定される。その他のシーンについても色の割合などにより撮影シーンが決定される。

ユーザは，これらのシーンと表示されている画像21との関連度を入力することができる。撮影シーン設定メニュー22に表示されている文字のうち，文字の色が白黒反転させられている（この例では，ハッチング26で示される）文字が選択されている文字（撮影シーン）となる。ボタン類２に含まれている上下左右ボタンの上または下のボタンの押下に応じて，選択されている撮影シーンが，現在選択されている撮影シーンから上または下の撮影シーンに変わる。上下左右ボタンのうち，右ボタンが押されることにより，関連度が高くなり，左ボタンが押されると，関連度が低くなる。右ボタンまたは左ボタンが押されることにより，選択されている撮影シーンの関連度が入力される。この実施例では，三段階の関連度を設定することができ，関連度が０であれば，その撮影シーンを示すデータは画像ファイルには格納されない。決定ボタンが押されることにより，設定された関連度を表すデータおよび撮影シーンを表すデータが画像ファイルに格納される。

図５から図８は，撮影された画像を示すもので，撮影シーン等も表示されている。

図５は，ソフトクリームをもった女性の画像31である。このような画像31の撮影シーンとして「人物」が関連度３，「料理」が関連度１として設定されている（関連度は星印によって表されている）。また，撮影年月日および撮影時刻も設定されている。さらに，撮影年月日および撮影時刻から，画像31のグループが，「2005年８月10日昼」と設定されている。

図６は，川の風景の画像32である。このような画像32の撮影シーンとして「風景」が関連度３，「空」が関連度１として設定されている。また，撮影年月日および撮影時刻から画像32のグループが「2005年９月20日夕」と設定されている。

図７は，自動車と犬の画像33である。このような画像33の撮影シーンとして「乗物」が関連度３，「ペット」が関連度３として設定されている。撮影年月日および撮影時刻から画像33のグループが「2005年10月10日朝」と設定されている。

図８は，温泉に人が入っている画像34である。このような画像34の撮影シーンとして「風景」が関連度２，「人物」が関連度３として設定されている。撮影年月日および撮影時刻から画像34のグループが「2005年11月３日夜」と設定されている。

このように，画像には撮影シーンおよび関連度ならびにグループが関連づけられている。具体的には，上述したように，その画像を表す画像データが画像データ記録領域に記録されている画像ファイルのヘッダ領域に，それらの撮影シーン等を表すデータが格納されている。

図９は，画像再生装置の電気的構成を示すブロック図である。

画像再生装置の全体の動作は，制御回路40によって統括される。制御回路40には，フォト・サーフィン・キー，決定ボタンなどを含む操作器47からの出力信号が与えられる。また，制御回路40には，画像データベース（ハードディスク・ドライブおよびハードディスク）46が接続されている。この画像データベース46には，上述したように，撮影シーン等を表すデータが格納されている画像ファイルが多数記録されている。さらに，制御回路40には，画像データベース46に記録されている画像ファイルによって表される画像を表示するための表示装置45も接続されている。さらに制御回路40には，メモリ48も接続されている。

画像再生装置には，メモリ・カード・インターフェイス42およびCD-ROM（コンパクト・ディスク−リード・オンリ・メモリ）ドライブ44が含まれている。メモリ・カード・インターフェイス42およびCD-ROMドライブ44によって，メモリ・カード41およびCD-ROM43に記録されている画像ファイルが読み取られ，画像データベース46に与えられ，記録される。

また，後述する動作を行なわせる動作プログラムが記録されているCD-ROMが画像再生装置に装填されその動作プログラムが読み取られることにより，動作プログラムが画像再生装置にインストールされる。

図10は，画像データベース46において，多数の画像ファイルが分類されている様子を示している。

上述したように，撮影によって得られた画像は撮影日時にもとづいてグループ化されている。一日のうち，８時から11時までが朝，11時から15時までが昼，15時から17時までが夕，17時から21時までが夜と規定されている。もちろん，その他の時間が深夜，早朝等に規定されているのはいうまでもない。撮影時刻によって決定される朝，昼，夕，夜等と撮影年月日との組み合わせによって一義的なグループが決定される。たとえば，2005年８月21に撮影された画像であれば，その撮影時刻に応じて，「2005年８月21朝」のグループ51，「2005年８月21昼」のグループ52，「2005年８月21夕」のグループ53，「2005年８月21夜」のグループ54と分けられる。これらの各グループ51，52，53，54によって分類される画像ｉ51，ｉ52，ｉ53，ｉ54が，それぞれのグループに属するものとされている。

この実施例においては，撮影日時にもとづいてグループ化されているが，単にグループ化されていればよく，必ずしも撮影日時にもとづいてグループ化されていなくともよいのはいうまでもない。

図11は，「2005年８月21日昼」のグループを示している。

このグループ52に属する画像として画像61〜73（図10における画像ｉ52に対応する）が図示されている。また，これらの画像61〜73の撮影シーンも関連度を示す星印とともに図示されている。

図12および図13は，画像再生装置の処理手順を示すフローチャートである。図14から図17は，画像再生装置に含まれている表示装置45の表示画面を示している。

この実施例においては，ユーザが閲覧したい所望の画像（主画像）とその主画像と関係した画像（グループ画像，関連画像）とが表示される。

図14を参照して，表示装置45の表示画面100には，ほぼ中心部の比較的大きな領域が主画像を表示する主表示領域111として規定されている。この主表示領域111の回りには副表示領域112が規定されている。この副表示領域112に，後述するように主画像に関係したグループ画像，関連画像等が表示される。

図12を参照して，ユーザによって操作器47が操作され，主画像が選択される（ステップ81）。選択された主画像が表示画面100の主表示領域111に表示される（ステップ82）。

すると，選択された主画像が属するグループが検出される（ステップ83）。検出されたグループに属する画像（グループ内画像）を表す画像ファイル（画像データ）が画像データベース46から読み取られる（ステップ84）。読み取られた画像ファイルによって表されるグループ内画像が主表示領域111に表示されている主画像の大きさよりも小さい大きさとなるように縮小処理が行われる。縮小されたグループ内画像が表示画面100の副表示領域112に表示される（ステップ85）。

図15を参照して，主表示領域111には，ユーザによって選択された主画像113が表示されている。副表示領域112には，主画像113が属するグループ内の縮小グループ内画像114が表示されている。縮小グループ内画像114を見ることにより主画像が属するグループ内にどのような画像が含まれているか，すなわち，主画像が撮影された日にちと同じ日にちであって，ほぼ同じ時間帯にどのような画像が撮影されたかを確認できる。

図12にもどって，主表示領域111に主画像が表示され，副表示領域112に縮小グループ内画像114が表示されているときにフォト・サーフィン・キーが押されると（ステップ86でＹＥＳ）（関連画像表示指令の入力），主表示領域111に表示されている主画像に付与されている撮影シーンと同じ撮影シーンをもつ画像（主画像に付与されている撮影シーンが複数あれば，それらの複数の撮影シーンがすべて同じ画像でもよいし，少なくとも一つの撮影シーンが共通の画像でもよい）が，主画像が属するグループと異なるグループから検出される（図13ステップ87）。多数の画像が検出された場合には，各グループごとに代表的な画像が見つけられる。

検出された他のグループに属する画像の縮小処理が行われ，縮小された画像が関連画像として副表示領域112に表示される（ステップ88）。

図16を参照して，主表示領域111に主画像113が表示されている。主画像113は，「人物」の撮影シーンと「ビーチ」の撮影シーンとが付与されているものとする。副表示領域112には，主画像113に付与されている「人物」の撮影シーンと「ビーチ」の撮影シーンとの両方の撮影シーンが付与されており，かつ主画像113が属するグループと異なるグループに属する画像120〜126が関連画像として表示されている。関連画像120〜126の大きさは，主画像113の大きさよりも小さい。これらの関連画像121〜126のうちの一つの関連画像121の回りにカーソル120が表示されている。このカーソル120は，操作器47に含まれる矢印ボタンの押下に応じて隣の関連画像を囲むように移動する。主画像との関連性が比較的高い関連画像121〜126が表示されるようになる。

図13にもどって，操作器47に含まれる決定ボタンが押されると（ステップ89でＹＥＳ），カーソルによって囲まれていた関連画像が新たな主画像とされて主表示領域に表示される（ステップ90）。他のモードに移行しなければ（ステップ91でＮＯ），その新たな主画像が属するグループが検出され（ステップ83），その新たな主画像が属するグループの画像データが読み取られ（ステップ84），グループ内画像が副表示領域に表示されることとなる（ステップ85）。

再び，図16を参照して，関連画像121がカーソル120によって囲まれている場合に決定ボタンが押されたものとする。すると，図17に示すように，関連画像121が新たな主画像とされ，主表示領域111に表示される。副表示領域112には，新たな主画像が属するグループに含まれる画像127が表示されることとなる。

ディジタル・スチル・カメラの電気的構成を示すブロック図である。画像ファイルのファイル構造の一例である。撮影シーン候補の一例である。表示画面に表示されている画像の一例である。撮影によって得られた画像の一例である。撮影によって得られた画像の一例である。撮影によって得られた画像の一例である。撮影によって得られた画像の一例である。画像再生装置の電気的構成を示すブロック図である。撮影された画像がグループ化されている様子を示している。グループ化された画像の一例である。再生処理手順の一部を示すフローチャートである。主表示領域と副表示領域とを示している。表示画面に表示されている画像の一例である。表示画面に表示されている画像の一例である。表示画面に表示されている画像の一例である。表示画面に表示されている画像の一例である。

符号の説明

６，45 表示装置
10，40 制御回路
46 画像データベース
47 操作器

Claims

画像を表示する表示装置，
撮影によって得られた画像を表す画像データと上記画像のキーワードを表すキーワード・データとが互いに関連づけられている画像データとキーワード・データとの多数の組がグループ分けされて記録されている記録媒体から所望の主画像を表す画像データとキーワード・データとを読み取る第１の読み取り手段，
上記第１の読み取り手段によって読み取られた画像データによって表される主画像を表示画面に表示するように上記表示装置を制御する第１の表示制御手段，
関連画像表示指令入力手段，
上記関連画像表示指令入力手段から関連画像表示指令が入力したことに応答して，上記第１の表示制御手段の制御のもとに表示されている主画像のキーワードと同じキーワードを示すキーワード・データと関連付けられており，かつ上記主画像が属するグループと異なるグループに含まれている画像データを上記記録媒体から読み取る第２の読み取り手段，
上記第２の読み取り手段によって読み取られた画像データによって表される画像を上記主画像よりも縮小する第１の縮小手段，
上記第１の縮小手段によって縮小された画像を関連画像として，上記主画像が表示されている表示画面に表示するように上記表示装置を制御する第２の表示制御手段，
上記関連画像を選択する選択手段，
上記選択手段によって選択された関連画像が新たな主画像とされて表示画面に表示され，かつ上記選択手段によって選択された関連画像を表す画像データが属するグループに含まれる画像データによって表される画像を，上記第１の縮小手段によって縮小された画像に代えて，上記主画像が表示されている表示画面に表示するように上記表示装置を制御する第３の表示制御手段，
を備えた画像再生装置。
上記第１の表示制御手段の制御のもとに表示されている主画像のキーワードが複数であり，
上記第２の読み取り手段は，
上記主画像の複数のキーワードのうち，少なくとも一つのキーワードと同じキーワードを示すキーワード・データと関連付けられており，かつ上記主画像が属するグループと異なるグループに含まれている画像データを上記記録媒体から読み取るものである，
請求項１に記載の画像再生装置。
画像を表示する表示装置を備えた画像再生装置の制御方法において，
第１の読み取り手段が，撮影によって得られた画像を表す画像データと上記画像のキーワードを表すキーワード・データとが互いに関連づけられている画像データとキーワード・データとの多数の組がグループ分けされて記録されている記録媒体から所望の主画像を表す画像データとキーワード・データとを読み取り，
第１の表示制御手段が，上記第１の読み取り手段によって読み取られた画像データによって表される主画像を表示画面に表示するように上記表示装置を制御し，
第２の読み取り手段が，関連画像表示指令が入力したことに応答して，上記第１の表示制御手段の制御のもとに表示されている主画像のキーワードと同じキーワードを示すキーワード・データと関連付けられており，かつ上記主画像が属するグループと異なるグループに含まれている画像データを上記記録媒体から読み取り，
縮小手段が，上記第２の読み取り手段によって読み取られた画像データによって表される画像を上記主画像よりも縮小し，
第２の表示制御手段が，上記第１の縮小手段によって縮小された画像を関連画像として，上記主画像が表示されている表示画面に表示するように上記表示装置を制御し，
選択手段が，上記関連画像を選択し，
第３の表示制御手段が，上記選択手段によって選択された関連画像が新たな主画像とされて表示画面に表示され，かつ上記選択手段によって選択された関連画像を表す画像データが属するグループに含まれる画像データによって表される画像を，上記第１の縮小手段によって縮小された画像に代えて，上記主画像が表示されている表示画面に表示するように上記表示装置を制御する，
画像再生装置の制御方法。
画像を表示する表示装置を備えた画像再生装置のコンピュータに実行させるためのプログラムであって，
撮影によって得られた画像を表す画像データと上記画像のキーワードを表すキーワード・データとが互いに関連づけられている画像データとキーワード・データとの多数の組がグループ分けされて記録されている記録媒体から所望の主画像を表す画像データとキーワード・データとを読み取る手順，
読み取られた画像データによって表される主画像を表示画面に表示するように上記表示装置を制御する手順，
関連画像表示指令が入力したことに応答して，表示されている主画像のキーワードと同じキーワードを示すキーワード・データと関連付けられており，かつ上記主画像が属するグループと異なるグループに含まれている画像データを上記記録媒体から読み取る手順，
読み取られた画像データによって表される画像を上記主画像よりも縮小する第１の縮小手順，
縮小された画像を関連画像として，上記主画像が表示されている表示画面に表示するように上記表示装置を制御する手順，
上記関連画像の選択に応じて，選択された関連画像が新たな主画像とされて表示画面に表示され，かつ選択された関連画像を表す画像データが属するグループに含まれる画像データによって表される画像を，上記第１の縮小手順によって縮小された画像に代えて，上記主画像が表示されている表示画面に表示するように上記表示装置を制御する手順を画像再生装置のコンピュータに実行させるためのプログラム。