JP5223034B2 - 情報提供装置、情報提供方法、情報提供処理プログラム、及び情報提供処理プログラムを記録した記録媒体 - Google Patents

Description

本発明は、ネットワークを介してユーザの嗜好に合った撮影スポットに関する有用な情報をユーザに推奨することが可能な情報提供装置等の技術分野に関する。

従来より、撮影対象に関する情報（例えば、日の出、高原植物、紅葉など）をキーとして関連する情報を検索する検索サービスが知られている。このような検索サービスでは、インターネットを介して接続してきたユーザ端末に対して、該検索キーワードに該当する情報を提供するものであり、撮影スポットを検索したい場合には撮影された画像に対してコメント等で関連情報が付加された情報を検索することができる。特許文献１には、Ｅｘｉｆ形式の拡張タグ部分に経度緯度情報を設定して位置情報付オリジナル画像を生成し、該生成した画像をＷｅｂページ上で公開し、ユーザの現在位置など任意の地点情報をキーとした情報検索に対して該任意の地点に近い場所の撮影スポットに関する情報を提供する技術が開示されている。

特開２００２−３７３１６８号公報

しかしながら、上述したような従来技術では、撮影スポットを検索するユーザが該撮影スポットに適した検索キーワードを設定する必要があり、該キーワードの設定はユーザにとって煩雑であった。また、特許文献１は画像情報に含まれる経度緯度情報に基づいてユーザが設定した任意の地点に近い撮影スポットに関する情報を提供するもので、撮影画像に含まれるオブジェクト情報（例えば、山や海等の風景や家族や子供等の人物等）によってユーザの嗜好に合った撮影スポットに関する情報を効率よく推奨することは困難であった。また、例えば、ユーザが撮影スポットに行かずに所望の画像を得たいような場合など、従来技術では、ユーザがイメージしているオブジェクト情報（ユーザの嗜好に合ったオブジェクト情報）が含まれる画像を効率よく検索して推奨することは困難であった。

本発明は以上の点に鑑みてなされたものであり、ユーザの嗜好に合ったオブジェクト情報が含まれる画像データを効率良く検索すること、またはユーザの嗜好に合った撮影スポットに関する情報を効率良く推奨することが可能な情報提供装置、情報提供方法、情報提供処理プログラム、及び情報提供処理プログラムを記録した記録媒体を提供することを目的とする。

上記課題を解決するために、請求項１に記載の発明は、端末装置がネットワークを介してアクセス可能な情報提供装置において、フレーム内における被写体の種別および当該被写体の配置を示す配置情報を前記端末装置からネットワークを介して受信する受信手段と、画像データ及び当該画像データに含まれる被写体の種別および当該被写体の配置を示す配置情報を記憶する画像データ記憶手段に記憶された当該配置情報と、前記受信手段により受信された配置情報とを比較し、当該比較の結果に基づいて、画像データを検索する検索手段と、を備えることを特徴とする。

この発明によれば、ユーザに自身の嗜好に合わせてオブジェクト情報及びその配置を指定してもらうことで、ユーザの嗜好に合ったオブジェクト情報が含まれる画像データを効率良く検索することができる。また、ユーザに対して、当該オブジェクト情報をその配置にて撮影可能な撮影スポットに関する情報を効率良く推奨することができる。

請求項２に記載の発明は、請求項１に記載の情報提供装置において、前記フレーム内に配置される前記被写体を表す候補を前記端末装置の表示画面上に前記ユーザにより選択可能に表示させる表示制御手段を更に備え、前記受信手段は、前記ユーザに選択された前記候補であって、前記フレーム内に割付られた当該候補の種別および当該候補の配置を示す配置情報を、前記フレーム内における被写体の種別および当該被写体の配置を示す配置情報として受信することを特徴とする。

この発明によれば、ユーザが自身の嗜好に合わせてオブジェクト情報及びその配置を容易に指定することができる。

請求項３に記載の発明は、請求項１又は２に記載の情報提供装置において、前記受信手段は、前記フレーム内の特定領域を示す特定領域情報を更に受信し、前記検索手段は、前記受信された特定領域情報に示される前記特定領域における前記被写体の種別および当該被写体の配置と、前記画像データにおいて前記特定領域に対応する領域に含まれる被写体の種別および当該被写体の配置とを比較することを特徴とする。

この発明によれば、フレーム内の特定領域においてオブジェクト情報の配置位置が一致する画像データに対応する位置情報を提供することができる。

請求項４に記載の発明は、請求項１乃至３の何れか一項に記載の情報提供装置において、前記受信手段は、前記フレーム内における被写体の色を示す色情報を更に受信し、前記検索手段は、前記受信された色情報に示される前記被写体の色と、前記画像データに含まれる被写体の色とを更に比較することを特徴とする。

この発明によれば、ユーザにオブジェクト情報の色を更に指定してもらうことで、当該オブジェクト情報をその配置、その色にて、ユーザの嗜好に合ったオブジェクト情報が含まれる画像データを効率良く検索することができる。また、ユーザに対して、当該オブジェクト情報をその配置、その色にて撮影可能な撮影スポットに関する情報を効率良く推奨することができる。

請求項５に記載の発明は、請求項１乃至４の何れか一項に記載の情報提供装置において、前記画像データ記憶手段には、前記画像データの位置情報が記憶されており、前記受信手段は、前記位置情報に関する条件を示す条件情報を更に受信し、前記検索手段は、前記受信された条件情報に示される前記条件を充足する位置情報に対応する前記画像データについて前記比較を行うことを特徴とする。

この発明によれば、ユーザに位置情報に関する条件を更に指定してもらうことで、画像データをユーザの指定した条件に合致するものに絞り込んで検索することができる。また、上記オブジェクト情報をその配置にて撮影可能な撮影スポットに関する情報を、ユーザの指定した条件に合致するものに絞り込んで推奨することができる。

請求項６に記載の発明は、請求項１乃至５の何れか一項に記載の情報提供装置において、前記検索手段により検索された前記画像データを、前記端末装置に送信する送信手段を更に備えることを特徴とする。この発明によれば、ユーザの嗜好に合ったオブジェクト情報が含まれる画像データを効率良くユーザに提供することができる。

請求項７に記載の発明は、請求項１乃至４の何れか一項に記載の情報提供装置において、前記画像データ記憶手段には、前記画像データの位置情報が記憶されており、前記検索手段により検索された前記画像データの位置情報を、前記端末装置に送信する送信手段を更に備えることを特徴とする。この発明によれば、ユーザの嗜好に合ったオブジェクト情報が含まれる画像データの位置情報を効率良くユーザに提供することができる。

請求項８に記載の発明は、請求項５に記載の情報提供装置において、前記検索手段により検索された前記画像データの位置情報を、前記端末装置に送信する送信手段を更に備えることを特徴とする。

請求項９に記載の発明は、コンピュータにより実行される情報提供方法であって、フレーム内における被写体の種別および当該被写体の配置を示す配置情報を、端末装置からネットワークを介して受信するステップと、画像データ及び当該画像データに含まれる被写体の種別および当該被写体の配置を示す配置情報を記憶する画像データ記憶手段に記憶された前記画像データに含まれる当該配置情報と、前記受信された配置情報とを比較し、当該比較の結果に基づいて、画像データを検索するステップと、を含むことを特徴とする。

請求項１０に記載の発明は、コンピュータを、フレーム内における被写体の種別および当該被写体の配置を示す配置情報を、端末装置からネットワークを介して受信する受信手段、画像データ及び当該画像データに含まれる被写体の種別および当該被写体の配置を示す配置情報を記憶する画像データ記憶手段に記憶された前記画像データに含まれる当該配置情報と、前記受信された配置情報とを比較し、当該比較の判定結果に基づいて、を検索する検索手段、として機能させることを特徴とする情報提供処理プログラム（コンピュータ読み取り可能なプログラム）である。

請求項１１に記載の発明は、コンピュータを、フレーム内における被写体の種別および当該被写体の配置を示す配置情報を、端末装置からネットワークを介して受信する受信手段、画像データ及び当該画像データに含まれる被写体の種別および当該被写体の配置を示す配置情報を記憶する画像データ記憶手段に記憶された前記画像データに含まれる当該配置情報と、前記受信された配置情報とを比較し、当該比較の判定結果に基づいて、画像データを検索する検索手段として機能させる情報提供処理プログラムを記録した記録媒体である。

請求項１２に記載の発明は、コンピュータに、ユーザによる操作に応じて、フレーム内における被写体の種別および当該被写体の配置を示す配置情報を取得するステップと、画像データ及び当該画像データに含まれる被写体の種別および当該被写体の配置を示す配置情報を記憶する画像データ記憶手段に記憶された前記画像データに含まれる当該配置情報と、前記取得された配置情報とを比較し、当該比較の判定結果に基づいて、画像データを検索するステップと、を実行させることを特徴とする。

請求項１３に記載の発明は、コンピュータに、ユーザによる操作に応じて、フレーム内における被写体の種別および当該被写体の配置を示す配置情報を取得するステップと、画像データ及び当該画像データに含まれる被写体の種別および当該被写体の配置を示す配置情報を記憶する画像データ記憶手段に記憶された前記画像データに含まれる当該配置情報と、前記取得された配置情報とを比較し、当該比較の判定結果に基づいて、画像データを検索するステップと、を実行させることを特徴とする情報提供処理プログラムを記録した記録媒体記録した記録媒体である。

本発明によれば、ユーザに自身の嗜好に合わせてオブジェクト情報及びその配置を指定してもらうことで、当該オブジェクト情報をその配置にて撮影可能な撮影スポットに関する情報を効率良く推奨することができる。

本実施形態に係る情報提供システムＳの概要構成の一例を示す図である。 情報提供サーバ２の概要構成例を示すブロック図である。 各データベースに登録される情報の構成例を示す図である。 画像データに含まれるオブジェクト情報の位置情報を説明するための図である。 オブジェクト情報配置画面の一例を示す図である。 情報提供サーバ２のシステム制御部２３による地点情報の推奨処理を示すフローチャートである。

以下、図面を参照して本発明の実施形態について詳細に説明する。なお、以下に説明する実施の形態は、情報提供システムに対して本発明を適用した場合の実施形態である。

［１．情報提供システムの構成及び機能概要］
先ず、本実施形態に係る情報提供システムＳの構成及び機能概要について、図１を用いて説明する。図１は、本実施形態に係る情報提供システムＳの概要構成の一例を示す図である。

図１に示すように、情報提供システムＳは、複数の端末装置１−ｋ（ｋ＝１，２，３・・・ｎ）（端末装置の一例）と、情報提供サーバ２（情報提供装置の一例）と、を含んで構成されている。端末装置１−ｋと、情報提供サーバ２とは、ネットワークＮＷを介して、例えば、通信プロトコルにＴＣＰ／ＩＰ等を用いて相互にデータの送受信が可能になっている。なお、ネットワークＮＷは、例えば、インターネット、専用通信回線（例えば、ＣＡＴＶ（Community Antenna Television）回線）、移動体通信網（基地局等を含む）、及びゲートウェイ等により構築されている。

次に、情報提供サーバ２は、例えば、Ｗｅｂサーバ、アプリサーバ、及びデータベースサーバ等の機能を有する１又は複数のサーバコンピュータからなる。情報提供サーバ２は、撮影スポット提供サイトを提供する。撮影スポット提供サイトとは、会員からのリクエストに応じて、会員が撮影したい風景等を撮影可能なスポットに関する情報（撮影地点情報）を提供するサイトである。

図２は、情報提供サーバ２の概要構成例を示すブロック図である。図２に示すように、情報提供サーバ２は、大別して、通信部２１、記憶部２２、及びシステム制御部２３から構成されている。通信部２１は、ネットワークＮＷに接続して、端末装置１−ｋ等との通信状態を制御する。記憶部２２は、例えばハードディスクドライブ等により構成されており、ＯＳ（Operating System）及びのサーバプログラム（本発明の情報提供処理プログラム等）及び各種データを記憶する。なお、本発明の情報提供処理プログラムは、例えば、所定のサーバ等からネットワークＮＷを介して取得（ダウンロード）されるようにしても良いし、ＣＤ（Compact Disc）、ＤＶＤ（Digital Versatile Disc）等の記録媒体に記録されて読み込まれるようにしても良い。また、記憶部２２には、ユーザ情報データベース（ＤＢ（database））２２１及び画像情報データベース（ＤＢ）２２２等が構築されている。記憶部２２の画像情報ＤＢ２２２は、本発明における画像データ記憶手段の一例である。

図３は、各データベースに登録される情報の構成例を示す図である。図３（Ａ）に示すユーザ情報ＤＢ２２１には、撮影スポット提供サイトに会員登録されたユーザのユーザＩＤ、パスワード、ニックネーム、氏名、性別、住所、電話番号、及びメールアドレス等のユーザ情報がユーザ毎に対応付けられて登録（記憶）されている。なお、会員登録は、例えば、端末装置１−ｋから撮影スポット提供サイトにアクセスすることにより提供された会員登録手続画面を通じて行われ、そのときユーザＩＤが発行される。

図３（Ｂ）に示す画像情報ＤＢ２２２には、画像データ（ファイル名を含む）、当該画像データの撮影日時、当該画像データの撮影地点情報（当該画像データの撮影スポットを示す撮影地点情報。本発明の「位置情報」の一例）、当該画像データに含まれるオブジェクト情報、当該画像データにおける当該各オブジェクト情報の配置位置情報、及び当該画像データを識別するための画像ＩＤ等が対応付けられて登録されている。なお、画像データに複数のオブジェクト情報が含まれる場合には、それぞれについてオブジェクト情報及びその配置位置情報が登録される。図３（Ｂ）は、写真に一つのオブジェクト情報のみが含まれる場合の例を示しているが、複数のオブジェクト情報が含まれる場合には、「オブジェクト情報」及び「オブジェクト情報の配置位置情報」がオブジェクト情報の数だけ登録されることとなる。

画像情報ＤＢ２２２に登録する画像データは、少なくとも撮影地点情報を特定できる画像データであればよい。例えば、（i）情報提供サーバ２で別途運営される画像投稿サイトへ投稿された画像データを登録する場合には、投稿者に画像データとともに撮影地点情報を送信してもらって登録することとする。また、（ii）いわゆるクローラ（Crawler）により取得されたＷｅｂページ上の画像データを登録する場合には、撮影地点情報をＷｅｂページから特定可能な画像データのみを登録することとする。ここで、撮影地点情報とは、例えば、緯度経度情報や住所情報である。なお、（i）の場合、ＧＰＳ機能を備えたカメラで撮影された画像データであれば撮影地点情報が併せて記録されるので、これを送信してもらうこととする。また、ＧＰＳ機能を備えていないカメラで撮影された画像データである場合には、撮影地点情報を投稿者により指定してもらうこととする。例えば、画像データ投稿用の画面に表示された地図上で指定してもらうこととしても良いし、階層的に表示される住所一覧から段階的に選択してもらうこととしても良い。また、画像データを登録する際、撮影地点情報の他に、撮影日時を取得できる画像データに関しては画像情報ＤＢ２２２に登録しておくことが好ましい。

画像情報ＤＢ２２２に登録されるオブジェクト情報とは、例えば当該画像データに係る写真における被写体を示す情報である。オブジェクト情報の例としては、例えば、人物、動物（鹿、猿、熊、鳥等）、植物（花、高原植物等）、風景（建物、橋、山、湖、川、海、温泉、大木、森、滝、紅葉、朝日、夕日等）、虫等が挙げられる。このようなオブジェクト情報は、画像情報ＤＢ２２２に登録された画像データに係る写真に表されている。例えば、システム制御部２３は、画像データから勾配情報やエッジ情報等の特徴量を抽出し、予め用意された複数の正解データ（基準となるオブジェクト情報の特徴量）と比較することでオブジェクト情報を認識することができる。このようなオブジェクト認識アルゴリズムでは、画像データに係る写真に表されたオブジェクト情報の種別、位置、数、大きさ、色等を識別することができる。これにより、例えば、「複数の人物」、「２つの山」、「湖」、「夕日と高原植物」、「鹿と森」といったオブジェクト情報を画像データから取得することができる。なお、予め用意された何れの正解データ（既知データ）と比較しても特定できない未知のオブジェクト情報が抽出された場合、この新たなオブジェクト情報を正解データとして登録するように構成してもよい。この場合、正解データとして新たに登録されるオブジェクト情報は、管理者側により任意に設定されるか、或いは、未知のオブジェクト情報に対応するテキスト情報（例えば、画像に付与されたタイトルやタグ）などから特徴語が抽出されることで設定される。また、予め用意された何れの正解データと比較してもオブジェクト情報が特定できないなどの場合には、画像データを投稿するユーザが任意にオブジェクト情報を当該画像データに付与するように構成してもよい。この場合、例えば、ユーザの端末装置１−ｋから、画像データとともに、当該画像データに付与されるオブジェクト情報が情報提供サーバ２へ送信され、画像情報ＤＢ２２２に登録される。また、例えば、情報提供サーバ２からユーザの端末装置１−ｋへ、オブジェクト情報を入力又は選択するためのオブジェクト情報指定画面のデータが送信されるように構成してもよい。この場合、端末装置１−ｋの表示部に表示されたユーザオブジェクト情報指定画面上で、操作部を介して、ユーザにより入力、又はユーザオブジェクト情報候補一覧からユーザにより選択されたオブジェクト情報が、情報提供サーバ２に送信され、該画像データに対応付けられて画像情報ＤＢ２２２に登録される。

画像情報ＤＢ２２２に登録されるオブジェクト情報の配置位置情報としては、例えば、図４（Ａ）に示すように画像Ｐを分割して得られる各領域に割り振られた領域番号Ｎが登録される。例えば、図４（Ｂ）に示すように、ビルディング（以下、「ビル」と表記する。）Ｂが領域番号「１２」、「１３」、「２２」、「２３」、「３２」、「３３」の領域に表されている場合には、これらの領域番号がオブジェクト情報「ビル」の配置位置情報として登録される。なお、登録される領域番号は、所定割合（例えば、６０％）以上をオブジェクト情報により占められている領域に対応する領域番号とする。また、図４の例では画像Ｐを８０の領域に分割しているが、更に細かく分割することによって、オブジェクト情報の大きさや形をより詳細に特定できるようにしてもよい。

なお、上記オブジェクト認識アルゴリズムとしては、公知のＳＩＦＴ(Scale Invariant Feature Transform)等の技術を用いることができるので、これ以上の詳しい説明は省略する。また、画像データによっては、オブジェクト情報を認識できない場合もある（対応する正解データがない、画像が複雑など）が、投稿者から投稿された画像データを登録する場合などであれば、投稿者に画像データに含まれるオブジェクト情報及びその配置位置情報を入力させ、登録するように構成しても良い。

システム制御部２３は、ＣＰＵ（Central Processing Unit）２３ａ、ＲＯＭ（Read Only Memory）２３ｂ、ＲＡＭ（Random Access Memory）２３ｃ等により構成されている。そして、システム制御部２３は、ＣＰＵ２３ａが、ＲＯＭ２３ｂや記憶部２２に記憶されたサーバプログラムを読み出し実行することにより、本発明の受信手段、検索手段、送信手段及び表示制御手段等として機能し、後述する処理を行う。

一方、端末装置１−ｋは、図示しないが、例えば、コンピュータとしてのＣＰＵ、ＲＡＭ、ＲＯＭ等を有する制御部と、フラッシュメモリ等を有する記憶部と、情報提供サーバ２等との間で通信を行うための通信部と、ユーザにより操作される操作部と、情報提供サーバ２から提供された各種画面（例えば、Ｗｅｂページ）を表示する表示部と、を備えている。なお、端末装置１−ｋには、例えば、ＰＣ（Personal Computer）、携帯電話機、ＰＤＡ、携帯ゲーム機等が適用できる。

端末装置１−ｋの制御部は、撮影スポット提供サイトにアクセスし、ログイン処理を制御する。そして、ログイン処理によりユーザ認証がなされた場合には、情報提供サーバ２からオブジェクト情報配置画面を表示するための表示データを受信し、表示部にオブジェクト情報配置画面を表示させる。

図５は、オブジェクト情報配置画面の一例を示す図である。オブジェクト情報配置画面３００には、オブジェクト情報の一覧を表示するオブジェクト候補表示部３１０と、疑似フレーム３２０（本発明の「フレーム」の一例）と、送信ボタン３３０とが表示される。オブジェクト候補表示部３１０には、オブジェクト情報のジャンル毎に設けられたタブ３１１（３１１ａ〜３１１ｅ）のうち、ユーザにより選択されたタブ３１１に対応するオブジェクト候補３１２（３１２ａ〜３１２ｈ）が表示される。オブジェクト候補３１２は、ユーザによる所定の配置操作（例えば、ドラッグアンドドロップ等）によって疑似フレーム３２０内に移動、配置することができるようになっている。また、疑似フレーム３２０内に配置されたオブジェクト情報３２１（３２１ａ〜３２１ｄ）は、ユーザによる所定の操作によって、その大きさや形を変えることができるようになっている。ユーザは、所定の配置操作を繰り返すことによって複数のオブジェクト候補３１２を疑似フレーム３２０内に配置することができる。

端末装置１−ｋの制御部は、疑似フレーム３２０内にオブジェクト情報３２１が配置された状態で、送信ボタン３３０がユーザにより押下されると、ユーザ配置情報（本発明の「フレーム内におけるオブジェクト情報の配置を示す配置情報」の一例である）を含むリクエストメッセージ（情報取得要求）を情報提供サーバ２に送信する。ユーザ配置情報は、疑似フレーム３２０内におけるオブジェクト情報３２１の配置位置を情報提供サーバ２側で特定するための情報である。本実施形態においては、ユーザにより配置されたオブジェクト情報３２１毎に、オブジェクト情報３２１と、疑似フレーム３２０を分割して得られる各領域に割り振られた領域番号とを対応付ける情報が、ユーザ配置情報として送信される。なお、疑似フレーム３２０を分割して得られる各領域に割り振られる領域番号については、図４を用いて説明した画像Ｐを分割して得られる各領域に割り振られる領域番号Ｎと同様なので、ここでの説明は省略する。

なお、図５において、オブジェクト候補３１２（オブジェクト情報３２１）の種別の違いを文字（「家」や「ビル」など）で表したが、絵（例えば、山や滝を表す絵など）画像或いは文字及び絵画像の組合せで表すこととしてもよい。

［２．情報提供システムにおける撮影地点情報の推奨処理］
次に、情報提供サーバ２における撮影地点情報の推奨処理について、図６を用いて説明する。

図６は、情報提供サーバ２のシステム制御部２３における撮影地点情報の推奨処理を示すフローチャートである。なお、図６に示す処理は、端末装置１−ｋから例えば撮影スポット提供サイトにアクセスがなされ、ログイン処理によりユーザ認証がなされた場合に開始される。

図６において、情報提供サーバ２のシステム制御部２３は、オブジェクト情報配置画面３００を表示させるための表示データを端末装置１−ｋに送信する（ステップＳ２１）。この表示データを受信した端末装置１−ｋは、自らの表示部にオブジェクト情報配置画面３００を表示させる。そして、端末装置１−ｋは、上述したように、疑似フレーム３２０内にオブジェクト情報３２１が配置された状態で、送信ボタン３３０がユーザにより押下されると、ユーザ配置情報を含むリクエストメッセージを情報提供サーバ２に送信する。

情報提供サーバ２のシステム制御部２３は、端末装置１−ｋからリクエストメッセージを受信すると（ステップＳ２２）、一致度判定処理を行う（ステップＳ２３）。具体的には、システム制御部２３は、上記受信されたリクエストメッセージに含まれるユーザ配置情報と、画像情報ＤＢ２２２に登録されているオブジェクト情報及びオブジェクト情報の配置位置情報とを比較することによって一致度を判定し、一致度の判定結果に基づいて画像データを検索（つまり、上記比較の結果に基づいて画像データを検索）する。例えば、ユーザが疑似フレーム３２０内に配置した全てのオブジェクト情報３２１について、オブジェクト情報が一致し、且つ、その領域番号が全て一致した場合、一致度が有と判定される。なお、ユーザが疑似フレーム３２０内に配置した少なくとも一部のオブジェクト情報３２１について、オブジェクト情報が一致し、且つ、その領域番号が全て一致した場合、一致度が有ると判定することとしてもよい。或いは、ユーザが疑似フレーム３２０内に配置した全て又は少なくとも一部のオブジェクト情報３２１について、オブジェクト情報が一致し、且つ、その領域番号が所定割合（例えば、７０％）以上一致した場合、一致度が有ると判定することとしてもよい。これにより、ユーザの嗜好に合ったオブジェクト情報が含まれる画像データを効率良く検索することができる。

システム制御部２３は、上記検索により一致度が有る画像データを特定できない場合には（ステップＳ２４：ＮＯ）、図６に示す処理を終了する。一方、システム制御部２３は、上記検索により一致度が有る画像データを特定できた場合には（ステップＳ２４：ＹＥＳ）、ステップＳ２５に進む。

ステップＳ２５では、システム制御部２３は、一致度の判定結果に基づいて特定した画像データと当該画像データに対応付けられて登録されている撮影地点情報（該画像データの撮影スポットを示す撮影地点情報）の少なくとも何れか一方を、画像情報ＤＢ２２２から取得する。

そして、システム制御部２３は、当該取得した画像データと撮影地点情報の少なくとも何れか一方を端末装置１−ｋに送信する推奨処理を実行する（ステップＳ２６）。こうして送信された画像データと撮影地点情報の少なくとも何れか一方は、端末装置１−ｋの表示部の画面上に表示されることによりユーザに通知される。こうして、ユーザに対して撮影スポットに関する情報（画像データと該画像データの撮影スポットを示す撮影地点情報）が推奨される。

なお、当該推奨処理において、この画像データと撮影地点情報の少なくとも何れか一方は電子メールに記述され、当該電子メールが当該ユーザのメールアドレス宛に送信されるように構成しても良い。

以上説明したように、上記実施形態によれば、情報提供サーバ２は、画像情報ＤＢ２２２に登録された画像データに含まれるオブジェクト情報及びその配置位置と、端末装置１−ｋのユーザにより疑似フレーム３２０に対して指定されたオブジェクト情報及びその配置位置とを比較し、その比較の結果に基づいて画像データを検索するので、ユーザの嗜好に合ったオブジェクト情報が含まれる画像データを効率良く検索することができる。そして、情報提供サーバ２は、検索された画像データと当該画像データの撮影地点情報の少なくとも何れか一方を、端末装置１−ｋのユーザに通知する。これにより、端末装置１−ｋのユーザに自身の嗜好に合わせてオブジェクト情報及びその配置位置を指定してもらうことで、当該オブジェクト情報をその配置位置で撮影可能な撮影スポットに関する情報を効率良く推奨することができる。

また、情報提供サーバ２は、システム制御部２３が、疑似フレーム３２０内に配置されるオブジェクト候補３１２を端末装置１−ｋの表示画面上にユーザにより選択可能に表示させるオブジェクト情報配置画面３００用の表示データを送信し、また、ユーザに選択されたオブジェクト候補３１２と、表示画面上の疑似フレーム３２０内に割付られた当該オブジェクト３１２の配置位置とを示すユーザ配置情報を受信する。これにより、ユーザは自身の嗜好に合わせてオブジェクト情報及びその配置位置を容易に指定することができる。

なお、上記ステップＳ２３における一致度の判定に当たって、ユーザ認証がなされたユーザの現在位置を示す位置情報（例えば、端末装置１−ｋのＧＰＳ受信機により検出された位置情報）、又は、ユーザが指定した位置を示す位置情報を端末装置１−ｋから取得するように構成しても良い。この場合、システム制御部２３は、画像情報ＤＢ２２２に登録されている各画像データのうち端末装置１−ｋから取得された位置情報に示される位置（例えば、ユーザの現在位置、又はユーザの指定した位置）から所定範囲（例えば、ユーザの現在位置又はユーザの指定した位置を中心とする半径所定距離内の範囲）内で撮影された画像データを検索することとする。これにより、ユーザの現在いる場所（例えば旅行先）、又はユーザの指定した場所の近くで、ユーザの嗜好に合ったオブジェクト情報が含まれる画像データを効率良く検索することができ、ユーザの嗜好に合ったオブジェクト情報をユーザの嗜好に合った配置位置で撮影可能な撮影スポットに関する情報を効率良く推奨することができる。

また、上記ステップＳ２４の処理において、一致度の判定結果（つまり、比較の結果）に基づいて特定された画像データが複数ある場合、上記ステップＳ２６の推奨処理において、各画像データに対応付けられて登録されている撮影地点情報の一覧が端末装置１−ｋに送信され表示されるように構成しても良い。この構成によれば、ユーザは、推奨対象となる地点が多数ある場合にもそれらの地点の近隣にある撮影スポットを容易に把握することができる。

更に、上記ステップＳ２４の処理において、一致度の判定結果に基づいて特定された画像データが複数ある場合、上記ステップＳ２６の推奨処理において、各画像データに対応付けられて登録されている各撮影地点の位置が示された地図情報が端末装置１−ｋに送信され表示されるように構成しても良い。この構成によれば、ユーザは、推奨対象となる地点が多数ある場合にもそれらの地点の近隣にある撮影スポットの位置を地図上で容易に把握することができる。

更にまた、上記ステップＳ２４の処理において、一致度の判定結果に基づいて画像データを特定できない場合、一致度の判定結果に基づいて画像データを少なくとも一つ特定できるまで、判定する条件を徐々に緩和していくこととしてもよい。具体的には、比較するオブジェクト情報の数を徐々に減らすこととしてもよい。また、ユーザがオブジェクト情報を配置した位置と、画像データにおいて該当するオブジェクト情報が表されている配置位置を比較する際、一致度を判定する範囲を徐々に広げていくこととしてもよい。例えば、ユーザがオブジェクト情報を配置した位置が領域番号「１２」、「１３」、「２２」、「２３」で示されている場合に、該当するオブジェクト情報が領域番号「１」〜「５」、「１１」〜「１５」、「２１」〜「２５」、「３１」〜「３５」で示される何れかの領域に表されている画像データを一致度有りと判定するように、比較する領域を拡大していくこととしてもよい。このようにすることにより、ユーザのリクエストに対して回答できないという事態が起こる可能性を低減できる。

更にまた、上記ステップＳ２３の処理（一致度判定処理）では、疑似フレーム３２０内の全領域と画像データの全領域とを比較しているが、例えば、ユーザがオブジェクト情報配置画面３００にて疑似フレーム３２０内の一部の領域を特定領域として指定できるようにして、疑似フレーム３２０内の特定領域（例えば、左半分の領域）と、画像データにおける特定領域（例えば、左半分の領域）とを比較することとしてもよい。具体的には、システム制御部２３が、端末装置１−ｋから疑似フレーム３２０内の特定領域を示す特定領域情報を更に受信し、受信した特定領域情報に示される特定領域におけるオブジェクト情報の配置位置と、登録されている画像データにおいて当該特定領域に対応する領域に含まれるオブジェクト情報の配置位置との一致度を判定することとする。このようにすることにより、少なくとも特定領域においてユーザの嗜好にあうオブジェクト情報が含まれる画像データ効率良く検索することができ、少なくとも特定領域においてユーザの嗜好にあうオブジェクト情報をユーザの嗜好にあう配置位置で撮影可能な撮影スポットに関する情報を推奨することができる。つまり、例えば、自分が特定領域として指定していない右半分の領域には何れのオブジェクト情報が何れの配置位置にあろうと構わないが、少なくとも自分が特定領域として指定した左半分の領域には好みのオブジェクト情報が好みの位置に配置された画像を撮影したいと考えるユーザにとって好適である。なお、特定領域は、ユーザが任意にその場所、大きさ、形状、数を指定できることが好ましい。

更にまた、上記ステップＳ２３の処理（一致度判定処理）では、オブジェクト情報の配置位置のみを比較しているが、例えば、ユーザがオブジェクト情報配置画面３００にて疑似フレーム３２０内に配置したオブジェクト情報の色を指定できるようにして、オブジェクト情報の配置位置及び色を比較することとしてもよい。具体的には、システム制御部２３が、疑似フレーム３２０内におけるオブジェクト情報の色を示す色情報を更に受信し、受信した色情報に示されるオブジェクトの色と、登録されている画像データに含まれるオブジェクト情報の色との一致度を更に判定することとする。このようにすることにより、ユーザは、例えば、オブジェクト情報として「山」を指定するとともに、その色として「赤」や「黄」を指定することにより、木々が紅葉する山が含まれる画像データを効率良く検索することができ、木々が紅葉する山を撮影可能な撮影スポットに関する情報を取得することができる。なお、撮影地点情報とともに、撮影日時を併せて送信することにより、撮影に適した時期をユーザに提示することができる。

更にまた、上記ステップＳ２３の処理（一致度判定処理）では、画像情報ＤＢ２２２に登録されている全画像データを比較対象としているが、ユーザに撮影地点情報に関する条件を指定してもらい、当該条件を充足する撮影地点情報に対応する画像データのみを比較対象とすることとしてもよい。具体的には、システム制御部２３が、撮影地点情報に関する条件を示す条件情報を更に受信し、受信した条件情報に示される条件を充足する撮影地点情報に対応する画像データについてステップＳ２３の処理（一致度判定処理）を行うこととする。このようにすることにより、ユーザは、例えば、撮影地点情報に関する条件として「撮影地点が関東地方であること」を指定することにより、関東地方で撮影可能な画像データを効率良く検索し、関東地方のスポットに関する情報を取得することができる。また、韓国に旅行する予定がある場合などには、撮影地点情報に関する条件として「撮影地点が韓国国内であること」と指定することにより、韓国国内で撮影可能な画像データを効率良く検索し、韓国国内のスポットに関する情報を取得することができる。更に、撮影地点情報に関する条件として「撮影地点が宿泊施設の部屋であること」を指定するとともに、部屋から見たい景色に応じてオブジェクト情報配置画面３００にてオブジェクト情報を配置することにより、好みの景色が含まれる画像データを効率良く検索し、好みの景色が見える宿泊施設の部屋に関するスポットに関する情報を取得することができる。なお、宿泊施設案内システムを別途構築し、スポットに関する情報と併せて、該当する宿泊施設の案内情報を提供することとしてもよい。更に、宿泊施設の予約サービスを提供するようにしてもよい。

更にまた、上記ステップＳ２３の処理（一致度判定処理）では、ユーザによる特定の撮影対象のオブジェクト情報の指定に基づいて、画像データの抽出対象範囲を決定するように構成してもよい。例えば、ユーザがオブジェクト情報として「山」を指定するとともに、当該山を特定（位置情報から特定）するために「富士山」を指定した場合、上記ステップＳ２３の処理（一致度判定処理）では、当該指定された富士山の位置情報（例えば経度及び緯度）を基準とする所定範囲が画像データの抽出対象範囲として決定され、当該範囲内で撮影された画像データの検索が行われる。これにより、ユーザが指定した特定の撮影対象のオブジェクト情報（例えば、富士山）の周辺で、ユーザの嗜好に合ったオブジェクト情報（例えば、富士山）が含まれる画像データを検索することができ、ユーザの嗜好に合ったオブジェクト情報（例えば、富士山）をユーザの嗜好に合った配置位置で撮影可能な撮影スポットに関する情報を効率良く推奨することができる。なお、富士山の位置情報を基準とする所定範囲としては、例えば、富士山の経度及び緯度を中心とする半径所定距離（例えば、１０ｋｍ）内の範囲が該当する。また、この抽出対象範囲は、例えば、富士山の位置情報を基準とするドーナツ型の同心円（つまり、当該位置情報を中心とする円の外側のドーナツ領域）としてもよい。また、この半径所定距離は、例えば、富士山の位置情報を基準として段階的に大きくすることで、抽出対象範囲を段階的に拡大するように構成してもよい。この場合も、例えば、富士山の位置情報を基準とするドーナツ型の同心円を段階的に拡大させてもよく、この拡大に連動して、当該位置情報を中心とする円（つまり、ドーナツ領域の内側の円）も段階的に拡大させてもよい。或いは、当該所定範囲は、例えば、図５に示す疑似フレーム３２０内に配置されたオブジェクト情報３２１（山）の疑似フレーム３２０に対する大きさの割合（例えば、面積の比率）に基づいて決定されるように構成してもよい。例えば、オブジェクト情報３２１（山）の疑似フレーム３２０に対する大きさの割合が９０％であるときは、当該山の経度及び緯度を中心とする半径５ｋｍ内の範囲が抽出対象範囲として決定される。そして、当該割合が８０％から０％に近づくほど（言い換えれば、オブジェクト情報３２１の大きさが小さくなるほど）、当該半径が次第に大きくなり、その結果、抽出対象範囲が次第に広がるように決定される。このような構成によれば、ユーザはオブジェクト情報３２１の大きさを決めるだけで、画像データの抽出対象範囲を簡単に決定させることができる。なお、上記山を特定するための「富士山」の指定は、撮影地点情報に関する条件として指定することが一例として挙げられる。この場合、システム制御部２３は、指定された「富士山」を条件として含む条件情報をユーザ配置情報とともに端末装置１−ｋから受信することになる。

本実施形態において、（i）画像投稿サイトへ投稿された画像データを画像情報ＤＢ２２２に登録する場合には、情報提供サーバ２のシステム制御部２３が、オブジェクト認識アルゴリズムを用いて、受信した画像データに含まれるオブジェクト情報及びその配置位置情報を特定する構成としている。これに代えて、投稿者の端末装置にオブジェクト認識アルゴリズムを含むプログラムをインストールし、画像データに含まれるオブジェクト情報及びその配置位置情報を当該端末装置に特定させ、これを情報提供サーバ２が受信する構成としてもよい。また、オブジェクト認識アルゴリズムを含む情報提供処理プログラムを端末装置にインストールし、なおかつ、画像データ及び当該画像データに含まれるオブジェクト情報、及び当該画像データにおける当該各オブジェクト情報の配置位置情報を例えば端末装置内に搭載される内部記憶部又は端末装置に接続される外部記憶部に記憶しておく。そして、端末装置が、ユーザによる操作に応じて、図５を用いて説明したように、フレーム内におけるオブジェクト情報の配置を示すユーザ配置情報を取得し、上記記憶部に記憶された画像データに含まれるオブジェクト情報の配置位置情報と、取得されたユーザ配置情報とを比較し、当該比較の判定結果に基づいて、画像データを検索して表示するように構成してもよい。これにより、例えばユーザが収集した多くの画像データから、当該ユーザの嗜好に合ったオブジェクト情報が含まれる画像データを効率良く検索し、当該ユーザに提示することができる。なお、端末装置にインストールされる情報提供処理プログラムは、例えば、所定のサーバ等からネットワークＮＷを介して取得（ダウンロード）されるようにしても良いし、ＣＤ（Compact Disc）、ＤＶＤ（Digital Versatile Disc）等の記録媒体に記録されて読み込まれるようにしても良い。

また、本実施形態では、画像Ｐ或いは疑似フレーム３２０におけるオブジェクト情報の配置位置や大きさなどを領域番号で管理することとしているが、画像Ｐ或いは疑似フレーム３２０におけるオブジェクト情報の輪郭座標により管理することとしてもよい。この場合、オブジェクト情報の輪郭座標同士を比較することにより一致度を判定する。例えば、写真Ｐと疑似フレーム３２０とを重ね合わせたときに、オブジェクト情報の重複する部分が所定の割合以上ある場合に一致度有りと判定する。この他にもオブジェクト情報の配置位置や大きさを管理する方法として任意の方法を用いることができる。

また、上記実施形態において、検索対象となる画像データは、撮影スポットにおいて撮影対象となるものであったが、撮影スポットとは無関係の画像データであってもよい。

１−ｋ 端末装置
２ 情報提供サーバ
２１ 通信部
２２ 記憶部
２３ システム制御部
ＮＷ ネットワーク
Ｓ 情報提供システム

Claims (13)

1. 端末装置がネットワークを介してアクセス可能な情報提供装置において、
   フレーム内における被写体の種別および当該被写体の配置を示す配置情報を前記端末装置からネットワークを介して受信する受信手段と、
   画像データ及び当該画像データに含まれる被写体の種別および当該被写体の配置を示す配置情報を記憶する画像データ記憶手段に記憶された当該配置情報と、前記受信手段により受信された配置情報とを比較し、当該比較の結果に基づいて、画像データを検索する検索手段と、
   を備えることを特徴とする情報提供装置。
2. 請求項１に記載の情報提供装置において、
   前記フレーム内に配置される前記被写体を表す候補を前記端末装置の表示画面上に前記ユーザにより選択可能に表示させる表示制御手段を更に備え、
   前記受信手段は、前記ユーザに選択された前記候補であって、前記フレーム内に割付られた当該候補の種別および当該候補の配置を示す配置情報を、前記フレーム内における被写体の種別および当該被写体の配置を示す配置情報として受信することを特徴とする情報提供装置。
3. 請求項１又は２に記載の情報提供装置において、
   前記受信手段は、前記フレーム内の特定領域を示す特定領域情報を更に受信し、
   前記検索手段は、前記受信された特定領域情報に示される前記特定領域における前記被写体の種別および当該被写体の配置と、前記画像データにおいて前記特定領域に対応する領域に含まれる被写体の種別および当該被写体の配置とを比較することを特徴とする情報提供装置。
4. 請求項１乃至３の何れか一項に記載の情報提供装置において、
   前記受信手段は、前記フレーム内における被写体の色を示す色情報を更に受信し、
   前記検索手段は、前記受信された色情報に示される前記被写体の色と、前記画像データに含まれる被写体の色とを更に比較することを特徴とする情報提供装置。
5. 請求項１乃至４の何れか一項に記載の情報提供装置において、
   前記画像データ記憶手段には、前記画像データの位置情報が記憶されており、
   前記受信手段は、前記位置情報に関する条件を示す条件情報を更に受信し、
   前記検索手段は、前記受信された条件情報に示される前記条件を充足する位置情報に対応する前記画像データについて前記比較を行うことを特徴とする情報提供装置。
6. 請求項１乃至５の何れか一項に記載の情報提供装置において、
   前記検索手段により検索された前記画像データを、前記端末装置に送信する送信手段を更に備えることを特徴とする情報提供装置。
7. 請求項１乃至４の何れか一項に記載の情報提供装置において、
   前記画像データ記憶手段には、前記画像データの位置情報が記憶されており、
   前記検索手段により検索された前記画像データの位置情報を、前記端末装置に送信する送信手段を更に備えることを特徴とする情報提供装置。
8. 請求項５に記載の情報提供装置において、
   前記検索手段により検索された前記画像データの位置情報を、前記端末装置に送信する送信手段を更に備えることを特徴とする情報提供装置。
9. コンピュータにより実行される情報提供方法であって、
   フレーム内における被写体の種別および当該被写体の配置を示す配置情報を、端末装置からネットワークを介して受信するステップと、
   画像データ及び当該画像データに含まれる被写体の種別および当該被写体の配置を示す配置情報を記憶する画像データ記憶手段に記憶された前記画像データに含まれる当該配置情報と、前記受信された配置情報とを比較し、当該比較の結果に基づいて、画像データを検索するステップと、
   を含むことを特徴とする情報提供方法。
10. コンピュータを、
    フレーム内における被写体の種別および当該被写体の配置を示す配置情報を、端末装置からネットワークを介して受信する受信手段、
    画像データ及び当該画像データに含まれる被写体の種別および当該被写体の配置を示す配置情報を記憶する画像データ記憶手段に記憶された前記画像データに含まれる当該配置情報と、前記受信された配置情報とを比較し、当該比較の判定結果に基づいて、を検索する検索手段、
    として機能させることを特徴とする情報提供処理プログラム。
11. コンピュータを、
    フレーム内における被写体の種別および当該被写体の配置を示す配置情報を、端末装置からネットワークを介して受信する受信手段、
    画像データ及び当該画像データに含まれる被写体の種別および当該被写体の配置を示す配置情報を記憶する画像データ記憶手段に記憶された前記画像データに含まれる当該配置情報と、前記受信された配置情報とを比較し、当該比較の判定結果に基づいて、画像データを検索する検索手段、
    として機能させる情報提供処理プログラムを記録した記録媒体。
12. コンピュータに、
    ユーザによる操作に応じて、フレーム内における被写体の種別および当該被写体の配置を示す配置情報を取得するステップと、
    画像データ及び当該画像データに含まれる被写体の種別および当該被写体の配置を示す配置情報を記憶する画像データ記憶手段に記憶された前記画像データに含まれる当該配置情報と、前記取得された配置情報とを比較し、当該比較の判定結果に基づいて、画像データを検索するステップと、
    を実行させることを特徴とする情報提供処理プログラム。
13. コンピュータに、
    ユーザによる操作に応じて、フレーム内における被写体の種別および当該被写体の配置を示す配置情報を取得するステップと、
    画像データ及び当該画像データに含まれる被写体の種別および当該被写体の配置を示す配置情報を記憶する画像データ記憶手段に記憶された前記画像データに含まれる当該配置情報と、前記取得された配置情報とを比較し、当該比較の判定結果に基づいて、画像データを検索するステップと、
    を実行させることを特徴とする情報提供処理プログラムを記録した記録媒体。

Images