JPWO2017026154A1 - 情報処理装置、情報処理方法及びプログラム - Google Patents

Abstract

【課題】撮像画像中に一度写り込んでいる被撮像体が再度写り込んでいる撮像画像を、複数の撮像画像の中から簡便に検索すること。【解決手段】本開示に係る情報処理装置は、電波に関する電波情報と、撮像画像と、前記撮像画像が撮像された時間と、をそれぞれ関連付けて記録する記録部から、前記電波情報を読み出す読み出し部と、読み出した前記電波情報に含まれる電波の個数、又は、電波の強度の少なくとも何れかに基づいて、前記記録部に記録された複数の前記撮像画像から検索条件を満たす撮像画像を検索する検索部と、を備える。【選択図】図３

Description

本開示は、情報処理装置、情報処理方法及びプログラムに関する。

例えば娯楽施設における記念写真の撮影サービス等のように、施設の入場者が写っている記念写真を撮影して、入場者に提供するサービスがある。このようなサービスにおいて、多数の入場者と撮像された多数の記念写真との対応付けを容易なものとするために、入場者に予め電子タグを発行しておき、電子タグを利用して生成される写真との対応付けを行う技術が提案されている（例えば、以下の特許文献１を参照。）。

特開２００２−４１７０３号公報

しかしながら、上記特許文献１に開示されている技術は、写真に写る可能性のある人物（すなわち、入場者）に対して予め電子タグを発行しているからこそ有効な技術である。例えば、監視カメラ等の撮像装置によって撮像された膨大な撮像画像の記録の中から、任意の人物（例えば、不審者など）が写っている画像を探し出すような状況では、上記特許文献１に開示されているような技術を用いることはできない。

そのため、監視カメラ等の撮像装置によって生成された膨大な撮像画像の記録のうち、ある撮像画像中に一度写りこんでいる１又は複数の人物を検索ターゲットとし、再度同じ人物が写っている撮像画像を探し出すためには、膨大な労力が必要となる。

上記のような撮像画像の検索を実施する際に、検索ターゲットとなる人物の画像を利用して、画像解析処理により、求める撮像画像を検索することが考えられる。しかしながら、画像解析処理を用いた場合であっても、利用する画像によっては解析率が低下してしまい、求める画像を的確に抽出することができないことがある。

そのため、撮像画像中に一度写り込んでいる人物が再度写り込んでいる撮像画像を、複数の撮像画像の中から簡便に検索することが可能な技術が希求されている。

そこで、本開示では、撮像画像中に一度写り込んでいる被撮像体が再度写り込んでいる撮像画像を、複数の撮像画像の中から簡便に検索することが可能な、情報処理装置、情報処理方法及びプログラムを提案する。

本開示によれば、所定箇所に設置された撮像装置により生成された撮像画像、及び、前記撮像装置と予め対応付けられた通信機器から発信された、当該通信機器が検出した電波に関する電波情報、のそれぞれが、タイムスタンプと関連付けられて記録される記憶部と、検出された前記電波の強度及び個数の少なくとも何れかを検索条件とし、前記記憶部に記録されている複数の前記撮像画像の中から前記検索条件に応じて前記撮像画像を検索する検索部と、検索部により検索された前記撮像画像を表示画面に表示させるための表示制御を行う表示制御部と、を備え、前記電波は、前記撮像装置の視野内に位置した被撮像体が所持又は内蔵している電子機器もしくは通信機器から発信される電波を含む情報処理装置が提供される。

また、本開示によれば、所定箇所に設置された撮像装置により生成された撮像画像、及び、前記撮像装置と予め対応付けられた通信機器から発信された、当該通信機器が検出した電波に関する電波情報、のそれぞれを、タイムスタンプと関連付けて記録することと、検出された前記電波の強度及び個数の少なくとも何れかを検索条件とし、記録されている複数の前記撮像画像の中から前記検索条件に応じて前記撮像画像を検索することと、検索された前記撮像画像を表示画面に表示させるための表示制御を行うことと、を含み、前記電波は、前記撮像装置の視野内に位置した被撮像体が所持又は内蔵している電子機器もしくは通信機器から発信される電波を含む情報処理方法が提供される。

また、本開示によれば、コンピュータに、所定箇所に設置された撮像装置により生成された撮像画像、及び、前記撮像装置と予め対応付けられた通信機器から発信された、当該通信機器が検出した電波に関する電波情報、のそれぞれを、タイムスタンプと関連付けて記録する記憶機能と、検出された前記電波の強度及び個数の少なくとも何れかを検索条件とし、記録されている複数の前記撮像画像の中から前記検索条件に応じて前記撮像画像を検索する検索機能と、検索機能により検索された前記撮像画像を表示画面に表示させるための表示制御を行う表示制御機能と、を実現させ、前記電波は、前記撮像装置の視野内に位置した被撮像体が所持又は内蔵している電子機器もしくは通信機器から発信される電波を含むプログラムが提供される。

本開示によれば、撮像装置の視野内に位置した被撮像体が所持又は内蔵している電子機器もしくは通信機器から発信される電波に着目し、所定箇所に設置された撮像装置により生成された撮像画像、及び、撮像装置と予め対応付けられた通信機器から発信された、当該通信機器が検出した電波に関する電波情報、のそれぞれが、タイムスタンプと関連付けられて記録され、検出された電波の強度及び個数の少なくとも何れかが検索条件とされて、記録されている複数の撮像画像の中から検索条件に応じて撮像画像が検索され、検索された撮像画像を表示画面に表示させるための表示制御が行われる。

以上説明したように本開示によれば、撮像画像中に一度写り込んでいる被撮像体が再度写り込んでいる撮像画像を、複数の撮像画像の中から簡便に検索することが可能となる。

なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、又は、上記の効果に代えて、本明細書に示されたいずれかの効果、又は、本明細書から把握され得る他の効果が奏されてもよい。

本開示の第１の実施形態に係る情報処理装置を説明するための説明図である。 同実施形態に係る情報処理装置を説明するための説明図である。 同実施形態に係る情報処理装置の構成の一例を示したブロック図である。 同実施形態に係る情報処理装置の記憶部に格納されるデータのデータ構成の一例を示した説明図である。 同実施形態に係る情報処理装置の記憶部に格納されるデータのデータ構成の一例を示した説明図である。 同実施形態に係る情報処理装置の記憶部に格納されるデータのデータ構成の一例を示した説明図である。 同実施形態に係る情報処理装置の記憶部に格納されるデータのデータ構成の一例を示した説明図である。 同実施形態に係る情報処理装置で実施される画像検索処理を説明するための説明図である。 同実施形態に係る情報処理装置の表示画面の一例を模式的に示した説明図である。 同実施形態に係る情報処理装置の表示画面の一例を模式的に示した説明図である。 同実施形態に係る情報処理装置の表示画面の一例を模式的に示した説明図である。 同実施形態に係る情報処理装置の表示画面の一例を模式的に示した説明図である。 同実施形態に係る情報処理装置の表示画面の一例を模式的に示した説明図である。 同実施形態に係る情報処理装置の表示画面の一例を模式的に示した説明図である。 同実施形態に係る情報処理装置の表示画面の一例を模式的に示した説明図である。 同実施形態に係る情報処理方法の流れの一例を示した流れ図である。 本開示の実施形態に係る情報処理装置のハードウェア構成の一例を示したブロック図である。

以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

なお、説明は以下の順序で行うものとする。
１．第１の実施形態
１．１．情報処理装置について
１．１．１．情報処理装置と他の機器との関係について
１．１．２．情報処理装置の構成について
１．１．３．撮像画像の検索処理の詳細と表示画面の例について
１．２．情報処理方法について
２．ハードウェア構成について

（第１の実施形態）
＜情報処理装置について＞
[情報処理装置の他の機器との関係について]
まず、図１及び図２を参照しながら、本開示の第１の実施形態に係る情報処理装置について、他の機器との関係を中心に詳細に説明する。図１及び図２は、本実施形態に係る情報処理装置を説明するための説明図である。

本実施形態に係る情報処理装置１０は、以下で詳述するように、任意の地点に設けられた監視カメラ１により撮像された撮像画像を格納するとともに、かかる監視カメラに対応付けられた電波モニタノード３から送信された電波情報を格納する装置である。ここで、電波モニタノード３から送信される電波情報は、電波モニタノード３が観測した、様々な電波（例えば、Ｗｉ−ＦｉやＢｌｕｅｔｏｏｔｈ（登録商標）等といった無線ＬＡＮ通信などの、各種の無線通信に用いられる電波）に関する各種の情報を含む。また、本実施形態に係る情報処理装置１０は、格納されている任意の撮像画像をユーザ操作に応じて再生するとともに、格納されている複数の撮像画像の中から、検索条件に合致する撮像画像を検索する機能を有している。

以上のような機能を有する情報処理装置１０は、図１に模式的に示したように、任意の地点（例えば図１では、地点Ａ、地点Ｂ及び地点Ｃ）に設置された監視カメラ１Ａ，１Ｂ，１Ｃによって生成されたそれぞれの撮像画像に関する画像データを取得して、取得した画像データを、情報処理装置１０内、又は、情報処理装置１０の外部に設けられた各種の記憶装置に格納する。また、情報処理装置１０は、地点Ａ、地点Ｂ、地点Ｃに設置された電波モニタノード３Ａ，３Ｂ，３Ｃで観測された電波に関する電波情報を取得して、取得した電波情報を、情報処理装置１０内、又は、情報処理装置１０の外部に設けられた各種の記憶装置に格納する。

なお、図１では、情報処理装置１０と相互に通信可能な監視カメラ１及び電波モニタノード３の個数が各３台である場合を図示しているが、情報処理装置１０と相互に通信可能な監視カメラ１及び電波モニタノード３の台数は、各１台又は各２台であってもよいし、各４台以上であってもよいことは言うまでもない。

ここで、図２に模式的に示したように、任意の地点に設けられる監視カメラ１は、撮像視野内に位置している様々な被撮像体を撮像する撮像装置の一例であり、被撮像体に関する静止画像や動画像を生成することができる機器である。かかる監視カメラ１については、特に限定されるものではなく、各種の撮像装置を適宜利用することが可能である。また、任意の地点に設けられる電波モニタノード３は、電波モニタノード３の周囲に存在している各種の電波を観測して、観測した電波に関する電波情報を生成する装置である。この電波モニタノード３についても、特に限定されるものではなく、無線ＬＡＮモニタノードなどの固有な識別情報を取得できる各種の電波観測装置を適宜利用することが可能である。

ここで、ある地点に設けられている監視カメラ１と電波モニタノード３とは、予め互いに対応付けられており、どの地点に存在している監視カメラ１がどの電波モニタノード３と対応しているかという情報は、情報処理装置１０に予め格納されているものとする。また、ある地点に設けられている監視カメラ１及び電波モニタノード３は、予め時間が互いに同期するように設定されているものとする。

監視カメラ１は、撮像視野内に位置する被撮像体を撮像して、静止画又は動画からなる撮像画像を生成すると、かかる撮像画像の画像データ（撮像画像データ）と、撮像画像データの生成時間を表わすタイムスタンプと、を、情報処理装置１０へと随時出力する。また、電波モニタノード３は、電波モニタノード３の周囲に存在する電波を検出すると、かかる電波を特徴づける各種の特徴量（例えば、電波に固有な識別情報や、電界強度等）を観測して電波情報とし、かかる電波情報のデータ（電波情報データ）と、電波情報の生成時間を表わすタイムスタンプと、を、情報処理装置１０へと随時出力する。

なお、監視カメラ１により生成される撮像画像データには、撮像画像データを生成した監視カメラ１に固有の識別情報（ＩＤ情報）が関連付けられていることが好ましく、電波モニタノード３により生成される電波情報データには、電波情報データを生成した電波モニタノード３に固有の識別情報（ＩＤ情報）が関連付けられていることが好ましい。これにより、これらのデータを取得した情報処理装置１０は、取得したデータが、どの地点に設けられた監視カメラ１や電波モニタノード３から送信されたものであるのかを、容易に把握することが可能となる。

近年の情報通信技術の発達に伴い、人は、携帯電話、スマートフォン、携帯用ゲーム機、タブレット端末、ウェアラブル端末等といった、無線通信機能を有する電子機器や通信機器を所持していることが多い。また、携帯電話、スマートフォン、携帯用ゲーム機、タブレット端末、ウェアラブル端末、カーナビゲーションシステム等といった機器を内蔵／内包している物体（例えば、上記のような機器を所持している人が乗っている、又は、上記のような機器が搭載されている、車などの各種移動手段）も多く存在する。そのため、電波モニタノード３によって観測される電波の中には、上記のような無線通信機能を有する電子機器や通信機器を所持又は内蔵しており、監視カメラ１によって撮像された被撮像体からの電波も含まれている可能性が極めて高いと言える。

本実施形態に係る情報処理装置１０は、各地の監視カメラ１から送信された撮像画像データを、あわせて送信されたタイムスタンプと関連付けて記録するとともに、各地の電波モニタノード３から送信された電波情報データを、あわせて送信されたタイムスタンプと関連付けて記録する。ここで、先述のように、監視カメラ１と電波モニタノード３とは、予め互いに対応付けられており、かつ、時間が同期するように設定されているため、情報処理装置１０は、タイムスタンプを仲介として、監視カメラ１により撮像された撮像画像データと、電波モニタノード３により生成された電波情報と、を互いに対応付けることが可能となる。

以上、図１及び図２を参照しながら、本実施形態に係る情報処理装置１０と他の機器との関係について、詳細に説明した。

［情報処理装置の構成について］
次に、図３〜図７を参照しながら、上記のような機能を有する情報処理装置１０の構成の一例について、詳細に説明する。図３は、本実施形態に係る情報処理装置の構成の一例を示したブロック図である。図４〜図７は、本実施形態に係る情報処理装置の記憶部に格納されるデータのデータ構成の一例を示した説明図である。

本実施形態に係る情報処理装置１０は、図３に示したように、データ取得部１０１と、データ記録部１０３と、記憶部１０５と、撮像画像再生部１０７と、画像検索部１０９と、表示制御部１１１と、を主に備える。

なお、以下では、本実施形態に係る情報処理装置１０が、撮像画像データや電波情報データを格納する記憶装置を内部に有している場合を例に挙げて説明を行うが、撮像画像データや電波情報データを格納する記憶装置が情報処理装置１０の外部に設けられていてもよいことは言うまでもない。また、以下で詳細に説明するデータ取得部１０１と、データ記録部１０３と、記憶部１０５と、撮像画像再生部１０７と、画像検索部１０９と、表示制御部１１１と、は、インターネット等の各種ネットワーク上に存在している複数の情報処理装置に分散して設けられており、複数の情報処理装置が互いに連携することで、本実施形態に係る情報処理装置１０の機能を実現してもよい。

データ取得部１０１は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、通信装置等により実現される。データ取得部１０１は、それぞれの監視カメラ１から送信された撮像画像データ及びタイムスタンプを取得するとともに、それぞれの電波モニタノード３から送信された電波情報データ及びタイムスタンプを取得する。すなわち、データ取得部１０１は、監視カメラ１と情報処理装置１０との間の通信、及び、電波モニタノード３と情報処理装置１０との間の通信をそれぞれ実現する通信部として機能する。取得した撮像画像データ及びタイムスタンプ、並びに、電波情報データ及びタイムスタンプは、後述するデータ記録部１０３に伝送される。

データ記録部１０３は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ等により実現される。データ記録部１０３は、データ取得部１０１から伝送された撮像画像データ及びタイムスタンプを互いに関連付けた上で、後述する記憶部１０５の所定の場所に格納する。また、データ記録部１０３は、データ取得部１０１から伝送された電波情報データ及びタイムスタンプを互いに関連付けた上で、後述する記憶部１０５の所定の場所に格納する。これにより、後述する記憶部１０５には、それぞれの監視カメラ１から随時出力された撮像画像データと、それぞれの電波モニタノード３から随時出力された電波情報データと、が、蓄積されていく。ここで、情報処理装置１０に対して複数の監視カメラ１及び電波モニタノード３から各種データが送信される場合には、どのデータがどの地点に設けられた機器から送信されたものかを容易に判別可能とするために、データ記録部１０３は、上記データに対して、監視カメラ１や電波モニタノード３に固有のＩＤ情報を更に関連付けることが好ましい。

記憶部１０５は、例えば本実施形態に係る情報処理装置１０が備えるＲＡＭやストレージ装置等により実現される。記憶部１０５には、本実施形態に係る情報処理装置１０が、何らかの処理を行う際に保存する必要が生じた様々なパラメータや処理の途中経過等、又は、各種のデータベースやプログラム等が、適宜記録される。

例えば、この記憶部１０５には、情報処理装置１０が撮像画像データを取得する１又は複数の監視カメラ１と、かかる監視カメラ１に対応付けられた電波モニタノード３と、の対応関係を示すデータベースが記録されている。かかる対応関係を示すデータベース（以下、単に「対応付けデータベース（ＤＢ）」ともいう。）のデータ構成の一例を、図４に模式的に示した。図４に模式的に示したように、対応付けＤＢには、監視カメラ１に固有のＩＤ情報と、この監視カメラ１に対応付けられている電波モニタノード３に固有のＩＤ情報と、が関係づけられて記録されている。情報処理装置１０の各処理部（特に、後述する画像検索部１０９）は、この対応付けＤＢを参照することで、どの監視カメラ１とどの電波モニタノード３とが対応付けられているのかを、容易に把握することができる。

なお、上記のような対応付けＤＢに記録されるＩＤ情報の種類や、ＩＤ情報の記載方法については、特に限定されるものではなく、公知の任意のものを適宜利用することが可能である。

また、かかる記憶部１０５には、データ記録部１０３によって、各監視カメラ１により生成された撮像画像データと、各電波モニタノード３により生成された電波情報データと、が、それぞれタイムスタンプと関連付けられて記録されている。撮像画像データに関するデータベース（以下、単に、「撮像画像データベース（ＤＢ）」ともいう。）のデータ構成の一例を図５に模式的に示し、電波情報データに関するデータベース（以下、単に、「電波情報データベース（ＤＢ）」ともいう。）のデータ構成の一例を図６に示した。

図５に模式的に示したように、撮像画像ＤＢには、ある監視カメラ１により撮像された撮像画像データ（又は、かかる撮像画像データの保存場所を示す情報）が、かかる撮像画像データの生成された日時を示すタイムスタンプと互いに関連付けられて、記録されている。また、かかる撮像画像ＤＢには、撮像画像データを生成した監視カメラのＩＤ情報が更に関連付けられていることが好ましい。また、図６に模式的に示したように、電波情報ＤＢには、ある電波モニタノード３により生成された電波情報データ（又は、かかる電波情報データの保存場所を示す情報）が、かかる電波情報データの生成された日時を示すタイムスタンプと互いに関連付けられて、記録されている。また、かかる電波情報ＤＢには、電波情報データを生成した電波モニタノードのＩＤ情報が更に関連付けられていることが好ましい。

なお、図５に示した撮像画像ＤＢや図６に示した電波情報ＤＢに記録される情報は、図５や図６に示したものに限定されるものではなく、撮像画像データや電波情報データに関する任意の情報を、これらのＤＢに追記することが可能である。また、図５や図６に示したタイムスタンプの記載方法についても特に限定されるものではなく、任意の記載方法を適宜利用してタイムスタンプを表記すればよい。

なお、記憶部１０５に格納される電波情報データは、観測された電波に固有のＩＤ情報や電界強度等といった、観測された電波を特徴づける特徴量が記載されていれば、任意のデータ構成を有していてもよい。かかる電波情報データのデータ構成の一例を、図７に模式的に示した。電波モニタノード３によって生成され、記憶部１０５に格納される電波情報には、図７に模式的に示したように、観測される個々の電波に固有の情報であるＭＡＣアドレスのような識別情報や、電波の電界強度等が記載されている。また、これらの特徴量以外にも、観測された電波を特徴づける任意の特徴量が記載されていてもよい。また、ある電波モニタノード３において、一度に複数の電波が観測された場合には、電波情報には、観測されたそれぞれの電波について上記のような情報が記録されている。

このような各種の情報が格納されている記憶部１０５は、データ取得部１０１、データ記録部１０３、撮像画像再生部１０７、画像検索部１０９、表示制御部１１１等が、データのリード／ライト処理を自由に行うことが可能である。

撮像画像再生部１０７は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ等により実現される。撮像画像再生部１０７は、情報処理装置１０に対して実施されたユーザ操作に応じて、記憶部１０５に記録されている複数の撮像画像の中から、ユーザによって指定された撮像画像を再生する処理を実施する。再生する撮像画像のユーザによる選択は、撮像画像再生部１０７が後述する表示制御部１１１と互いに連携して、情報処理装置１０の表示画面に適切な表示を行うことで実施される。また、撮像画像再生部１０７によって再生される撮像画像は、後述する表示制御部１１１による制御のもとで、表示画面における適切な領域に随時表示される。これにより、ユーザは、所望の撮像画像を情報処理装置１０の表示画面で閲覧することが可能となる。

画像検索部１０９は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ等により実現される。画像検索部１０９は、記憶部１０５に記録されている電波情報等の各種データを読み出すとともに、ユーザ操作により指定された撮像画像を検索元の撮像画像とし、指定された検索元の撮像画像中に写り込んでいる被撮像体について、かかる被撮像体が写り込んでいるその他の撮像画像を、記憶部１０５に記録されている複数の撮像画像の中から検索する。この際に、画像検索部１０９は、検索元の撮像画像に写り込んでいる被撮像体を、いわゆる画像解析処理により検索するのではなく、検索元の撮像画像とあわせて生成された電波情報を利用して、求める撮像画像を検索する。

すなわち、先だって図２を参照しながら説明したように、昨今では、着目している被撮像体は、例えば無線通信に用いられる電波等といった各種の電波を発信している電子機器や通信機器を、所持又は内蔵している可能性が高い。そこで、本実施形態に係る画像検索部１０９は、検索元の撮像画像とあわせて生成された電波情報に着目し、かかる電波情報に含まれる情報を利用して検索条件を生成する。その上で、本実施形態に係る画像検索部１０９は、電波に関する検索条件に合致する電波情報を抽出して、抽出した電波情報に対応する撮像画像を特定する。

以上のような画像検索処理が実施されることで、本実施形態に係る情報処理装置１０では、撮像画像中に一度写り込んでいる被撮像体が再度写り込んでいる撮像画像を、複数の撮像画像の中から簡便に検索することが可能となる。

なお、画像検索部１０９で実施される画像検索処理については、以下で改めて詳細に説明する。

表示制御部１１１は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ、出力装置、通信装置等により実現される。表示制御部１１１は、撮像画像再生部１０７によって再生されている撮像画像や、画像検索部１０９によって検索された撮像画像を、情報処理装置１０が備えるディスプレイ等の出力装置や情報処理装置１０の外部に設けられた出力装置等に表示する際の表示制御を行う。また、表示制御部１１１は、ユーザが閲覧する撮像画像を指定する際に用いられる表示画面や、撮像画像を検索する際に用いられる表示画面を、所定の出力装置等に表示する際の表示制御についても実施する。これにより、情報処理装置１０のユーザは、所望の撮像画像をその場で閲覧することが可能となる。

なお、表示制御部１１１により実施される表示画面の表示制御処理についても、以下で具体例を挙げながら詳細に説明する。

以上、本実施形態に係る情報処理装置１０の機能の一例を示した。上記の各構成要素は、汎用的な部材や回路を用いて構成されていてもよいし、各構成要素の機能に特化したハードウェアにより構成されていてもよい。また、各構成要素の機能を、ＣＰＵ等が全て行ってもよい。従って、本実施形態を実施する時々の技術レベルに応じて、適宜、利用する構成を変更することが可能である。

なお、上述のような本実施形態に係る情報処理装置の各機能を実現するためのコンピュータプログラムを作製し、パーソナルコンピュータ等に実装することが可能である。また、このようなコンピュータプログラムが格納された、コンピュータで読み取り可能な記録媒体も提供することができる。記録媒体は、例えば、磁気ディスク、光ディスク、光磁気ディスク、フラッシュメモリなどである。また、上記のコンピュータプログラムは、記録媒体を用いずに、例えばネットワークを介して配信してもよい。

［撮像画像の検索処理の詳細と表示画面の例について］
次に、図８〜図１５を参照しながら、本実施形態に係る情報処理装置１０で実施される撮像画像の検索処理及び表示画面の表示制御処理について、具体的に説明する。図８は、本実施形態に係る情報処理装置で実施される画像検索処理を説明するための説明図である。図９〜図１５は、本実施形態に係る情報処理装置の表示画面の一例を模式的に示した説明図である。

○撮像画像検索処理の大まかな流れ
まず、図８を参照しながら、本実施形態に係る情報処理装置１０の画像検索部１０９で実施される撮像画像検索処理の大まかな流れを説明する。
本実施形態に係る画像検索部１０９は、ユーザ操作によって、ある撮像画像が検索対象画像として指定された場合、いわゆる画像解析処理ではなく、電波情報を利用して所望の撮像画像を検索する。

より詳細には、画像検索部１０９は、ユーザ操作によって検索対象画像となった撮像画像について、記憶部１０５等に記録されている撮像画像ＤＢを参照して、対応付けられているタイムスタンプを特定する。先だって説明したように、撮像画像が生成される監視カメラ１と、電波情報が生成される電波モニタノード３とは、時刻が互いに同期するように設定されている。そのため、画像検索部１０９は、図８上段に示したように、特定した撮像画像のタイムスタンプを利用して、記憶部１０５等に記録されている電波情報ＤＢを検索し、同じ時刻のタイムスタンプを有する電波情報を特定することができる。

その後、画像検索部１０９は、特定した電波情報が示す電波パターン（電波情報に含まれる各電波の電界強度の大きさを模式的に示したもの）を利用して、検索対象画像に対応する電波パターンと類似する挙動を示す電波パターンを検索する。かかる電波パターンの検索は、記憶部１０５等に記録されている電波情報ＤＢを参照して、記録されている電波情報が示す電波パターンと、検索対象画像に対応する電波パターンとのパターンマッチングを行うことで、実施することができる。ここで、パターンマッチングに利用される類似度合いについては、特に限定されるものではなく、例えば相互相関係数などのような公知の類似度合いを利用することが可能である。

検索対象画像に対応する電波パターンと、所定の閾値以上の類似度合いで類似する電波パターンが検出された場合、画像検索部１０９は、検索された電波パターンを含む電波情報を利用して、対応する監視カメラ１のＩＤと、タイムスタンプとを特定する。すなわち、画像検索部１０９は、記憶部１０５等に記録されている電波情報ＤＢを参照して、着目している電波情報を生成した電波モニタノード３のＩＤと、タイムスタンプと、を特定する。その後、画像検索部１０９は、記憶部１０５等に記録されている対応付けＤＢを参照して、特定した電波モニタノード３に対応付けられている監視カメラ１のＩＤを特定する。

続いて、画像検索部１０９は、得られた監視カメラ１のＩＤとタイムスタンプとに基づき、記憶部１０５等に記録されている撮像画像ＤＢを検索することで、検索した電波情報に対応する撮像画像を抽出することができる。

ここで、被撮像体が所持又は内蔵している電子機器もしくは通信機器は、必ずしも一定間隔で電波信号を発信しているわけではないため、生成される電波情報と撮像画像との間で、時間差が生じることも考えうる。そのため、画像検索部１０９は、特定したタイムスタンプに対応する撮像画像に加えて、この特定した撮像画像の前後の所定期間（例えば、前後数秒〜数十秒程度）に撮像された撮像画像を選択することが好ましい。これにより、生成される電波情報と撮像画像との間に、一定間隔で電波信号が発信されないことに起因する時間差が生じている場合であっても、所望の被撮像体が写り込んでいる他の撮像画像を抽出することが可能となる。

また、所望の被撮像体が写り込んでいる他の撮像画像を検索した結果、複数の撮像画像が検出される場合も考えうる。この際、画像検索部１０９は、撮像画像に対応付けられているタイムスタンプ順に、検索結果の撮像画像をユーザに提示してもよいし、検索に利用した電波パターンとの類似度合いに応じて、検索結果の表示順序を制御してもよい。類似度合いに応じて検索結果の表示順序を制御する場合には、例えば、類似度合いの高いものから順に、検索結果を表示することが好ましい。これにより、ユーザの利便性を更に向上させることが可能となる。

また、画像検索部１０９は、例えば静止画解析処理や動画解析処理等のような公知の画像解析処理を、上記のような電波情報に基づく検索結果に対して適用してもよい。この際に、画像検索部１０９は、検索結果の撮像画像に被撮像体の動きが含まれない場合や、被撮像体として人物が写り込んでいない場合などに、該当する撮像画像をハイライト表示したり、表示順序の優先度を下げたりするなど、ユーザに注意を喚起したり、より優先すべき検索結果を優先的に表示したりするような検索結果の提示処理を行っても良い。

画像検索部１０９は、以上のようにして特定した撮像画像を、表示制御部１１１と互いに連携しながら情報処理装置１０の表示画面に表示させる。これにより、情報処理装置１０のユーザは、得られた検索結果に対応する撮像画像を表示画面に表示されたユーザインタフェースを介して選択し、内容を確認することが可能となる。

○ユーザインタフェースの具体例
次に、図９〜図１５を参照しながら、本実施形態に係る情報処理装置１０において実施される撮像画像検索処理のユーザインタフェースを具体的に説明する。
本実施形態に係る情報処理装置１０において、撮像画像再生部１０７及び表示制御部１１１が互いに連携して、撮像画像の再生処理が実施されている際には、図９に模式的に示したような表示画面５００が、ディスプレイ等の出力装置に表示される。

この表示画面５００には、表示制御部１１１によって、図９に模式的に示したように、ユーザ操作によって指定された撮像画像が表示される撮像画像表示領域５０１と、ユーザ操作によって指定された撮像画像の再生状態を指定する再生状態指定オブジェクト５０３と、が設けられる。ユーザは、未図示のポインティングオブジェクトを操作して、再生状態指定オブジェクト５０３を操作することで、撮像画像表示領域５０１で所望の撮像画像を再生させることができる。

また、表示画面５００には、表示制御部１１１によって、撮像画像の検索モードを機能させるための検索処理開始オブジェクト５０５と、検索条件設定領域５０７と、が設けられている。ユーザ操作によって検索処理開始オブジェクト５０５が操作されると、検索条件設定領域５０７には、検索処理開始オブジェクト５０５操作時に撮像画像表示領域５０１に表示されている撮像画像に対応する電波情報が、検索条件設定領域５０７に表示される。また、この検索条件設定領域５０７には、撮像画像表示領域５０１に表示されている撮像画像に対応する電波情報に加えて、電波の強度及び個数の少なくとも何れかを指定するためのオブジェクトが表示される。この検索条件設定領域５０７に対するユーザ操作に応じて、撮像画像の検索処理のための検索条件が設定される。

検索条件設定領域５０７に対するユーザ操作によって検索条件が設定され、画像検索部１０９によって上記のような検索処理が実施されると、画像検索部１０９から検索結果に関する情報が表示制御部１１１へと出力される。表示制御部１１１は、取得した検索結果に関する情報に基づいて、図１０に示したような表示画面５００を表示させる。

この場合、表示画面５００には、検索結果表示領域５０９が設けられ、この検索結果表示領域５０９に、検索された１又は複数の撮像画像に関する情報（例えば、検索された撮像画像のサムネイル画像など）が表示される。検索結果表示領域５０９に表示されている検索結果の１つがユーザ操作によって選択されると、表示画面５００に設けられた検索結果詳細表示領域５１１に、ポインティングオブジェクト５１３によって選択された撮像画像が表示される。この際、先だって言及したように、検索に利用した電波パターンとの類似度合いに応じて、類似度合いの高いものから順に検索結果を表示することが好ましい。

なお、図１０では、画像検索部１０９による検索結果が、サムネイル画像を利用した一覧表示により表示される場合を図示しているが、検索結果の表示方法は、図１０に示した例に限定されるものではない。例えば、図１１に模式的に示したように、検索結果の撮像画像に対応付けられているタイムスタンプを利用して、検索結果の撮像画像をタイムライン表示してもよい。

この際に、表示制御部１１１は、検索結果として表示されるサムネイル画像に対して、電波の検出された時間的な位置を表わす電波検出ポイント指示オブジェクト５１５をあわせて表示させてもよい。この電波検出ポイント指示オブジェクト５１５を表示させることで、ユーザは、検索結果の撮像画像に対応する電波情報が時間軸上のどのタイミングで観測されたのかを、容易に把握することが可能となる。

また、図１１に示したようなタイムライン表示において、表示制御部１１１は、ユーザ操作により選択され、検索結果詳細表示領域５１１にて再生されている撮像画像について、再生位置を表わす再生位置指示オブジェクト５１７をあわせて表示させてもよい。これにより、ユーザは、現在閲覧している撮像画像が時間軸上のどの位置に対応しているのかを、容易に把握することが可能となる。

次に、図１２〜図１５を参照しながら、検索条件設定領域５０７に表示される内容について、具体的に説明する。

図１２に模式的に示したように、例えば複数の人物が写り込んでいる撮像画像が検索対象画像として指定された場合などには、それぞれの人物から個別の電波が発信されている可能性が高い。そのため、検索対象画像に対応する電波情報には、複数の強い電波が観測されている可能性がある。そこで、画像検索部１０９は、表示制御部１１１と互いに連携しながら、図１２に示したように、検索条件設定領域５０７に、電波の強度パターン（電界強度パターン）を示したオブジェクトである電波パターン表示オブジェクト５１９を表示させる。図１２に示した例では、検索対象画像に対応する電波情報には、電波Ａ〜電波Ｇの７つの電波に関する情報が含まれており、電波Ｂ、電波Ｄ、電波Ｆが相対的に強い電界強度を有している場合が示されている。

このように、電波情報に複数の強い電波に関する情報が含まれている場合には、画像検索部１０９は、例えば、検索に利用する前記電波の個数を指定する個数指定オブジェクト５２１を検索条件設定領域５０７に表示させてもよい。ユーザ操作によって個数指定オブジェクト５２１に検索に利用する電波の個数が入力されると、画像検索部１０９は、検索対象画像に対応する電波パターンのうち、指定された数以上の電波パターンがマッチングするかを検索条件として、複数の電波情報の中から該当する電波情報を検索していく。また、画像検索部１０９は、ユーザ操作によって個数指定オブジェクト５２１に個数の入力が行われなかった場合、所定の閾値以上の電界強度が観測された電波パターンに基づいて、複数の電波情報の中から該当する電波情報を検索する。

なお、検索結果として抽出される電波情報の中には、電波パターンの形状（図１２の場合、７つの電波の電界強度を示すバーにより形作られる形状）は類似していても、電界強度が相対的に小さいものも含まれうる。そこで、画像検索部１０９は、電波パターンの形状が類似しており、かつ、各々の電波の電界強度が所定の閾値以上であるものを、検索結果として抽出することが好ましい。

画像検索部１０９は、得られた検索結果を、図１１に示したようなタイムライン表示により表示させてもよいし、図１０に示したような一覧表示により表示させてもよい。一覧表示により検索結果を表示させる場合、画像検索部１０９は、例えば合致した電波パターンの個数が多いものから順に、検索結果に対応するサムネイル画像を表示させることが好ましい。

近年、一人の人物が、無線通信機能を有する複数の電子機器又は通信機器を所有している場合も多い。このような人物が写り込んだ撮像画像が検索対象画像として指定された場合、図１３に模式的に示したように、一人の人物が写り込んでいる場合であっても、強い電界強度を有する複数の電波が観測されることも考えうる。この際に、画像検索部１０９は、検索条件設定領域５０７に、図１２に示したような電波パターン表示オブジェクト５１９及び個数指定オブジェクト５２１を表示させてもよいが、以下で説明するようなオブジェクトを表示させてもよい。

すなわち、図１３に示したように、画像検索部１０９は、表示制御部１１１と連携しながら、電波パターン表示オブジェクト５１９とあわせて、組み合わせ指定オブジェクト５２３を表示させて、検索に利用する電波の組み合わせ条件を指定させてもよい。図１３では、組み合わせ指定オブジェクト５２３として、ａｎｄ／ｏｒを指定するボタン状のオブジェクトが示されているが、組み合わせ指定オブジェクト５２３は図１３に示したものに限定されるものではなく、同様の効果を奏する他のオブジェクトを利用可能であることは言うまでもない。ここで、画像検索部１０９及び表示制御部１１１は、デフォルトの表示形式として、最も電界強度の強い電波の組み合わせを表示させるようにしてもよい。

画像検索部１０９は、図１２に示した場合と同様に、組み合わせを指定された電波の電波パターンに基づき、複数の電波情報の中から、所定の閾値以上の類似度合いで合致する電波情報を検索する。この際、画像検索部１０９は、組み合わせの電波パターンの形状が類似しており、かつ、各々の電波の電界強度が所定の閾値以上であるものを、検索結果として抽出することが好ましい。

図１３に示した場合でも同様に、画像検索部１０９は、得られた検索結果を、図１１に示したようなタイムライン表示により表示させてもよいし、図１０に示したような一覧表示により表示させてもよい。

また、例えば図１４に示したように、複数の人物が写り込んでいるなどして、複数の電波が観測された場合に、電波の相対的な強度を検索条件とすることも可能である。すなわち、電波モニタノード３と、人物が所持している電子機器又は通信機器と、の間の離隔距離が小さいほど、電波モニタノード３が検出する電界強度は強くなり、離隔距離が大きいほど、電波モニタノード３が検出する電界強度は弱くなる。この場合に、離隔距離が小さいほど撮像画像における被撮像体の表示サイズは大きくなり、離隔距離が大きいほど撮像画像における被撮像体の表示サイズは小さくなると考えられる。そのため、電界強度に関する相対的な閾値（換言すれば、電波モニタノード３との相対的な離隔距離の閾値でもあり、撮像画像における被撮像体の相対的な表示サイズの閾値でもある。）を指定することで、複数観測された電波の中から所望の電波を選択することが可能となる。

そこで、画像検索部１０９は、表示制御部１１１と互いに連携しながら、検索条件設定領域５０７に、上記のような相対的な閾値を指定するための閾値指定オブジェクト５２５を表示させてもよい。閾値指定オブジェクト５２５の具体例については、特に限定されるものではなく、図１４に示したようなスライダー状のオブジェクトであってもよいし、同様の効果を奏する他のオブジェクトであってもよい。

画像検索部１０９は、閾値指定オブジェクト５２５が、この閾値指定オブジェクト５２５の選択可能な範囲のうち中央に位置している場合には、検索対象画像に対応する電波パターンと同程度の電界強度を有するものを検索していくようにすればよい。また、閾値指定オブジェクト５２５が、選択可能な範囲の中央よりも左側（すなわち、「近く」側の部分）に位置している場合には、画像検索部１０９は、検索対象画像に対応する電波パターンより強い電界強度に絞って、電波情報の検索を行えばよい。同様に、閾値指定オブジェクト５２５が、選択可能な範囲の中央よりも右側（すなわち、「遠く」側の部分）に位置している場合には、画像検索部１０９は、検索対象画像に対応する電波パターンより弱い電界強度にも着目して、電波情報の検索を行えばよい。

このような閾値指定オブジェクト５２５を利用することで、例えば、検索対象画像に写り込んだ検索対象物が、電波モニタノード３や監視カメラ１の近くに存在した場合のみの撮像画像を、複数の撮像画像の中から容易に抽出することが可能となる。

図１４に示した場合でも同様に、画像検索部１０９は、得られた検索結果を、図１１に示したようなタイムライン表示により表示させてもよいし、図１０に示したような一覧表示により表示させてもよい。

また、画像検索部１０９は、表示制御部１１１と互いに連携しながら、例えば図１５に示したように、検索条件設定領域５０７に対して、電波パターン表示オブジェクト５１９と、組み合わせ・閾値指定オブジェクト５２７と、を表示させてもよい。組み合わせ・閾値指定オブジェクト５２７は、図１３に示した組み合わせ指定オブジェクト５２３の機能と、図１４に示した閾値指定オブジェクト５２５の機能と、を兼ね備えたオブジェクトである。例えば、組み合わせ・閾値指定オブジェクト５２７において、最高強度（図１５において「０」に対応する位置）が選択された場合には、画像検索部１０９は、指定された電波の強度とは関係なく、対応する電波の有無により検索を実施すればよい。また、組み合わせ・閾値指定オブジェクト５２７において、最低強度（図１５において「−１００」に対応する位置）が選択された場合には、画像検索部１０９は、指定された電波を検索には利用せずに、検索を実施すればよい。また、組み合わせ・閾値指定オブジェクト５２７において、最高強度と最低強度との間の位置が選択された場合には、閾値指定オブジェクト５２５と同様にして、各電波の強度閾値を考慮すればよい。

このような組み合わせ・閾値指定オブジェクト５２７を利用することで、例えば、検索対象画像に写り込んだ検索対象物が、電波モニタノード３や監視カメラ１の近くに存在した場合のみの撮像画像を、複数の撮像画像の中から容易に抽出することが可能となる。

図１５に示した場合でも同様に、画像検索部１０９は、得られた検索結果を、図１１に示したようなタイムライン表示により表示させてもよいし、図１０に示したような一覧表示により表示させてもよい。

以上、図９〜図１５を参照しながら、本実施形態に係る情報処理装置１０において実施される撮像画像検索処理のユーザインタフェースを具体的に説明した。

＜情報処理方法について＞
次に、図１６を参照しながら、本実施形態に係る情報処理装置１０で実施される情報処理方法の流れの一例について、簡単に説明する。図１６は、本実施形態に係る情報処理方法の流れの一例を示した流れ図である。

本実施形態に係る情報処理装置１０には、互いに対応付けられている監視カメラ１及び電波モニタノード３から、それぞれ撮像画像及び電波情報が随時送信されている。情報処理装置１０のデータ取得部１０１は、送信された撮像画像及び電波情報を取得すると、取得したこれらのデータをデータ記録部１０３へと出力する。データ記録部１０３は、取得した撮像画像のデータを、タイムスタンプと対応付けて記憶部１０５に格納するとともに、取得した電波情報のデータを、タイムスタンプと対応付けて記憶部１０５に格納する（ステップＳ１０１）。

その後、情報処理装置１０は、ユーザにより画像検索操作がなされたか否かを判断する（ステップＳ１０３）。画像検索操作が行われていない場合には、情報処理装置１０は、ステップＳ１０３に戻って、画像検索操作を待ち受ける。

一方、ユーザによる画像検索操作が行われた場合には、情報処理装置１０の画像検索部１０９は、指定された撮像画像に対応する電波情報を、タイムスタンプを利用して特定し（ステップＳ１０５）、特定した電波情報とユーザ操作とに基づき、検索条件を設定する（ステップＳ１０７）。その後、画像検索部１０９は、設定した検索条件に合致する電波情報を、格納されている複数の電波情報の中から抽出する（ステップＳ１０９）。検索条件に合致する電波情報が抽出されると、画像検索部１０９は、タイムスタンプを利用して、抽出された電波情報に対応する撮像画像を特定する（ステップＳ１１１）。

その後、情報処理装置１０の表示制御部１１１は、特定された撮像画像を表示画面に表示させる（ステップＳ１１３）。

これにより、ユーザは、指定した撮像画像に基づき設定された検索条件に合致する撮像画像を、複数の撮像画像の中から容易に抽出することが可能となる。

以上、図１６を参照しながら、本実施形態に係る情報処理装置１０で実施される情報処理方法の流れの一例について、簡単に説明した。

（ハードウェア構成について）
次に、図１７を参照しながら、本開示の実施形態に係る情報処理装置１０のハードウェア構成について、詳細に説明する。図１７は、本開示の実施形態に係る情報処理装置１０のハードウェア構成を説明するためのブロック図である。

情報処理装置１０は、主に、ＣＰＵ９０１と、ＲＯＭ９０３と、ＲＡＭ９０５と、を備える。また、情報処理装置１０は、更に、ホストバス９０７と、ブリッジ９０９と、外部バス９１１と、インターフェース９１３と、入力装置９１５と、出力装置９１７と、ストレージ装置９１９と、ドライブ９２１と、接続ポート９２３と、通信装置９２５とを備える。

ＣＰＵ９０１は、演算処理装置及び制御装置として機能し、ＲＯＭ９０３、ＲＡＭ９０５、ストレージ装置９１９、又はリムーバブル記録媒体９２７に記録された各種プログラムに従って、情報処理装置１０内の動作全般又はその一部を制御する。ＲＯＭ９０３は、ＣＰＵ９０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ９０５は、ＣＰＵ９０１が使用するプログラムや、プログラムの実行において適宜変化するパラメータ等を一次記憶する。これらはＣＰＵバス等の内部バスにより構成されるホストバス９０７により相互に接続されている。

ホストバス９０７は、ブリッジ９０９を介して、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ／Ｉｎｔｅｒｆａｃｅ）バスなどの外部バス９１１に接続されている。

入力装置９１５は、例えば、マウス、キーボード、タッチパネル、ボタン、スイッチ及びレバーなどユーザが操作する操作手段である。また、入力装置９１５は、例えば、赤外線やその他の電波を利用したリモートコントロール手段（いわゆる、リモコン）であってもよいし、情報処理装置１０の操作に対応した携帯電話やＰＤＡ等の外部接続機器９２９であってもよい。さらに、入力装置９１５は、例えば、上記の操作手段を用いてユーザにより入力された情報に基づいて入力信号を生成し、ＣＰＵ９０１に出力する入力制御回路などから構成されている。情報処理装置１０のユーザは、この入力装置９１５を操作することにより、情報処理装置１０に対して各種のデータを入力したり処理動作を指示したりすることができる。

出力装置９１７は、取得した情報をユーザに対して視覚的又は聴覚的に通知することが可能な装置で構成される。このような装置として、ＣＲＴディスプレイ装置、液晶ディスプレイ装置、プラズマディスプレイ装置、ＥＬディスプレイ装置及びランプなどの表示装置や、スピーカ及びヘッドホンなどの音声出力装置や、プリンタ装置、携帯電話、ファクシミリなどがある。出力装置９１７は、例えば、情報処理装置１０が行った各種処理により得られた結果を出力する。具体的には、表示装置は、情報処理装置１０が行った各種処理により得られた結果を、テキスト又はイメージで表示する。他方、音声出力装置は、再生された音声データや音響データ等からなるオーディオ信号をアナログ信号に変換して出力する。

ストレージ装置９１９は、情報処理装置１０の記憶部の一例として構成されたデータ格納用の装置である。ストレージ装置９１９は、例えば、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）等の磁気記憶部デバイス、半導体記憶デバイス、光記憶デバイス、又は光磁気記憶デバイス等により構成される。このストレージ装置９１９は、ＣＰＵ９０１が実行するプログラムや各種データ、及び外部から取得した各種データなどを格納する。

ドライブ９２１は、記録媒体用リーダライタであり、情報処理装置１０に内蔵、あるいは外付けされる。ドライブ９２１は、装着されている磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリ等のリムーバブル記録媒体９２７に記録されている情報を読み出して、ＲＡＭ９０５に出力する。また、ドライブ９２１は、装着されている磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリ等のリムーバブル記録媒体９２７に記録を書き込むことも可能である。リムーバブル記録媒体９２７は、例えば、ＤＶＤメディア、ＨＤ−ＤＶＤメディア、Ｂｌｕ−ｒａｙ（登録商標）メディア等である。また、リムーバブル記録媒体９２７は、コンパクトフラッシュ（登録商標）（ＣｏｍｐａｃｔＦｌａｓｈ：ＣＦ）、フラッシュメモリ、又は、ＳＤメモリカード（Ｓｅｃｕｒｅ Ｄｉｇｉｔａｌ ｍｅｍｏｒｙ ｃａｒｄ）等であってもよい。また、リムーバブル記録媒体９２７は、例えば、非接触型ＩＣチップを搭載したＩＣカード（Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ ｃａｒｄ）又は電子機器等であってもよい。

接続ポート９２３は、機器を情報処理装置１０に直接接続するためのポートである。接続ポート９２３の一例として、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）ポート、ＩＥＥＥ１３９４ポート、ＳＣＳＩ（Ｓｍａｌｌ Ｃｏｍｐｕｔｅｒ Ｓｙｓｔｅｍ Ｉｎｔｅｒｆａｃｅ）ポート等がある。接続ポート９２３の別の例として、ＲＳ−２３２Ｃポート、光オーディオ端子、ＨＤＭＩ（登録商標）（Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）ポート等がある。この接続ポート９２３に外部接続機器９２９を接続することで、情報処理装置１０は、外部接続機器９２９から直接各種データを取得したり、外部接続機器９２９に各種データを提供したりする。

通信装置９２５は、例えば、通信網９３１に接続するための通信デバイス等で構成された通信インターフェースである。通信装置９２５は、例えば、有線又は無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、又はＷＵＳＢ（Ｗｉｒｅｌｅｓｓ ＵＳＢ）用の通信カード等である。また、通信装置９２５は、光通信用のルータ、ＡＤＳＬ（Ａｓｙｍｍｅｔｒｉｃ Ｄｉｇｉｔａｌ Ｓｕｂｓｃｒｉｂｅｒ Ｌｉｎｅ）用のルータ、又は、各種通信用のモデム等であってもよい。この通信装置９２５は、例えば、インターネットや他の通信機器との間で、例えばＴＣＰ／ＩＰ等の所定のプロトコルに則して信号等を送受信することができる。また、通信装置９２５に接続される通信網９３１は、有線又は無線によって接続されたネットワーク等により構成され、例えば、インターネット、家庭内ＬＡＮ、赤外線通信、ラジオ波通信又は衛星通信等であってもよい。

以上、本開示の実施形態に係る情報処理装置１０の機能を実現可能なハードウェア構成の一例を示した。上記の各構成要素は、汎用的な部材を用いて構成されていてもよいし、各構成要素の機能に特化したハードウェアにより構成されていてもよい。従って、本実施形態を実施する時々の技術レベルに応じて、適宜、利用するハードウェア構成を変更することが可能である。

以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。

また、本明細書に記載された効果は、あくまで説明的又は例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、又は、上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。

なお、以下のような構成も本開示の技術的範囲に属する。ここで、先だって説明した画像検索部が、以下の記載における読み出し部及び検索部に対応している。
（１）
電波に関する電波情報と、撮像画像と、前記撮像画像が撮像された時間と、をそれぞれ関連付けて記録する記録部から、前記電波情報を読み出す読み出し部と、
読み出した前記電波情報に含まれる電波の個数、又は、電波の強度の少なくとも何れかに基づいて、前記記録部に記録された複数の前記撮像画像から検索条件を満たす撮像画像を検索する検索部と、
を備える、情報処理装置。
（２）
前記検索部は、
任意の検索元となる前記撮像画像について、検索元の撮像画像が生成された際に検出された前記電波情報を、前記撮像画像及び前記電波情報に関連付けられているタイムスタンプに基づいて特定し、
特定した前記電波情報に含まれる前記電波の強度及び個数の組み合わせから前記検索条件を設定して、当該検索条件に適合する前記電波情報を特定し、
特定した前記電波情報に関連付けられたタイムスタンプを利用して、該当するタイムスタンプに対応する前記撮像画像を特定する、（１）に記載の情報処理装置。
（３）
前記検索部は、前記検索条件に基づき特定された前記撮像画像に加えて、前記複数の撮像画像の中から、前記特定された撮像画像の前後の所定期間に撮像された前記撮像画像を選択する、（２）に記載の情報処理装置。
（４）
前記検索部は、前記検索条件に適合する前記撮像画像が複数存在する場合、前記電波の類似度合いに応じて、検索結果の表示順序を変更する、（１）〜（３）の何れか１つに記載の情報処理装置。
（５）
前記検索部により検索された前記撮像画像を表示画面に表示させるための表示制御を行う表示制御部を更に備え、
前記表示制御部は、前記表示画面に、前記撮像画像を表示させる撮像画像表示領域と、前記検索条件を指定するための検索条件設定領域と、を少なくとも設け、前記撮像画像表示領域に表示された任意の前記撮像画像のうち、ユーザに指定された前記撮像画像について、当該ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度及び個数を表わす表示オブジェクトを、前記検索条件設定領域に表示させ、
前記検索部は、前記検索条件設定領域に対してユーザが実施したユーザ操作に応じて、前記検索条件を設定する、（１）〜（４）の何れか１つに記載の情報処理装置。
（６）
前記表示制御部は、
前記表示画面に、前記検索条件に適合する前記撮像画像を検索結果として表示させる検索結果表示領域と、前記検索条件に適合する撮像画像のうち、ユーザに指定された前記撮像画像を詳細表示させる検索結果詳細表示領域と、を設け、
前記検索結果表示領域に対し、前記検索条件に適合する撮像画像を、一覧表示又はタイムライン表示させる、（５）に記載の情報処理装置。
（７）
前記表示制御部は、前記検索結果表示領域に対して、前記検索条件に適合する撮像画像のサムネイル画像を少なくとも配置する、（６）に記載の情報処理装置。
（８）
前記表示制御部は、前記表示オブジェクトとして、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度パターンを示したオブジェクトと、検索に利用する前記電波の個数を指定する個数指定オブジェクトと、を表示させ、
前記検索部は、前記個数指定オブジェクトで指定された個数を前記検索条件として、当該個数以上の前記電波情報が適合する前記撮像画像を検索する、（６）又は（７）に記載の情報処理装置。
（９）
前記表示制御部は、前記表示オブジェクトとして、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度パターンを示したオブジェクトと、当該電波の組み合わせを指定する組み合わせ指定オブジェクトと、を表示させ、
前記検索部は、前記組み合わせ指定オブジェクトで指定された前記電波の組み合わせを前記検索条件として、指定された組み合わせの電波が検出された前記電波情報に対応する前記撮像画像を検索する、（６）又は（７）に記載の情報処理装置。
（１０）
前記表示制御部は、前記表示オブジェクトとして、電波の相対的な強度を指定する強度指定オブジェクト、又は、撮像画像における被撮像体との相対的な離隔距離を指定する離隔距離指定オブジェクトを表示させ、
前記検索部は、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度を前記強度指定オブジェクト又は前記離隔距離指定オブジェクトに対応する重み付け係数により重み付けしたものを前記検索条件として、重み付け後の強度以上又は重み付け後の強度以下の強度を有している前記電波情報に対応する前記撮像画像を検索する、（６）又は（７）に記載の情報処理装置。
（１１）
前記表示制御部は、前記表示オブジェクトとして、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度パターンを示したオブジェクトと、当該電波の組み合わせを指定する組み合わせ指定オブジェクトと、電波の相対的な強度を指定する強度指定オブジェクトと、を表示させ、
前記検索部は、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度を前記強度指定オブジェクトに対応する重み付け係数により重み付けした値と、前記組み合わせ指定オブジェクトで指定された前記電波の組み合わせと、を前記検索条件として、重み付け後の強度以上又は重み付け後の強度以下の強度を有し、かつ、指定された組み合わせの電波が検出された前記電波情報に対応する前記撮像画像を検索する、（６）又は（７）に記載の情報処理装置。
（１２）
前記電波は、無線通信に利用される電波である、（１）〜（１１）の何れか１つに記載の情報処理装置。
（１３）
電波に関する電波情報と、撮像画像と、前記撮像画像が撮像された時間と、をそれぞれ関連付けて記録する記録部から、前記電波情報を読み出すことと、
読み出した前記電波情報に含まれる電波の個数、又は、電波の強度の少なくとも何れかに基づいて、前記記録部に記録された複数の前記撮像画像から検索条件を満たす撮像画像を検索することと、
を含む、情報処理方法。
（１４）
コンピュータに、
電波に関する電波情報と、撮像画像と、前記撮像画像が撮像された時間と、をそれぞれ関連付けて記録する記録部から、前記電波情報を読み出す読み出し機能と、
読み出した前記電波情報に含まれる電波の個数、又は、電波の強度の少なくとも何れかに基づいて、前記記録部に記録された複数の前記撮像画像から検索条件を満たす撮像画像を検索する検索機能と、
を実現させるためのプログラム。

１ 監視カメラ（撮像装置）
３ 電波モニタノード
１０ 情報処理装置
１０１ データ取得部
１０３ データ記録部
１０５ 記憶部
１０７ 撮像画像再生部
１０９ 画像検索部
１１１ 表示制御部
５００ 表示画面
５０１ 撮像画像表示領域
５０３ 再生状態指定オブジェクト
５０５ 検索処理開始オブジェクト
５０７ 検索条件設定領域
５０９ 検索結果表示領域
５１１ 検索結果詳細表示領域
５１３ ポインティングオブジェクト
５１５ 電波検出ポイント指示オブジェクト
５１７ 再生位置指示オブジェクト
５１９ 電波パターン表示オブジェクト
５２１ 個数指定オブジェクト
５２３ 組み合わせ指定オブジェクト
５２５ 閾値指定オブジェクト
５２７ 組み合わせ・閾値指定オブジェクト

Claims (14)

1. 電波に関する電波情報と、撮像画像と、前記撮像画像が撮像された時間と、をそれぞれ関連付けて記録する記録部から、前記電波情報を読み出す読み出し部と、
   読み出した前記電波情報に含まれる電波の個数、又は、電波の強度の少なくとも何れかに基づいて、前記記録部に記録された複数の前記撮像画像から検索条件を満たす撮像画像を検索する検索部と、
   を備える、情報処理装置。
2. 前記検索部は、
   任意の検索元となる前記撮像画像について、検索元の撮像画像が生成された際に検出された前記電波情報を、前記撮像画像及び前記電波情報に関連付けられているタイムスタンプに基づいて特定し、
   特定した前記電波情報に含まれる前記電波の強度及び個数の組み合わせから前記検索条件を設定して、当該検索条件に適合する前記電波情報を特定し、
   特定した前記電波情報に関連付けられたタイムスタンプを利用して、該当するタイムスタンプに対応する前記撮像画像を特定する、請求項１に記載の情報処理装置。
3. 前記検索部は、前記検索条件に基づき特定された前記撮像画像に加えて、前記複数の撮像画像の中から、前記特定された撮像画像の前後の所定期間に撮像された前記撮像画像を選択する、請求項２に記載の情報処理装置。
4. 前記検索部は、前記検索条件に適合する前記撮像画像が複数存在する場合、前記電波の類似度合いに応じて、検索結果の表示順序を変更する、請求項１に記載の情報処理装置。
5. 前記検索部により検索された前記撮像画像を表示画面に表示させるための表示制御を行う表示制御部を更に備え、
   前記表示制御部は、前記表示画面に、前記撮像画像を表示させる撮像画像表示領域と、前記検索条件を指定するための検索条件設定領域と、を少なくとも設け、前記撮像画像表示領域に表示された任意の前記撮像画像のうち、ユーザに指定された前記撮像画像について、当該ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度及び個数を表わす表示オブジェクトを、前記検索条件設定領域に表示させ、
   前記検索部は、前記検索条件設定領域に対してユーザが実施したユーザ操作に応じて、前記検索条件を設定する、請求項１に記載の情報処理装置。
6. 前記表示制御部は、
   前記表示画面に、前記検索条件に適合する前記撮像画像を検索結果として表示させる検索結果表示領域と、前記検索条件に適合する撮像画像のうち、ユーザに指定された前記撮像画像を詳細表示させる検索結果詳細表示領域と、を設け、
   前記検索結果表示領域に対し、前記検索条件に適合する撮像画像を、一覧表示又はタイムライン表示させる、請求項５に記載の情報処理装置。
7. 前記表示制御部は、前記検索結果表示領域に対して、前記検索条件に適合する撮像画像のサムネイル画像を少なくとも配置する、請求項６に記載の情報処理装置。
8. 前記表示制御部は、前記表示オブジェクトとして、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度パターンを示したオブジェクトと、検索に利用する前記電波の個数を指定する個数指定オブジェクトと、を表示させ、
   前記検索部は、前記個数指定オブジェクトで指定された個数を前記検索条件として、当該個数以上の前記電波情報が適合する前記撮像画像を検索する、請求項６に記載の情報処理装置。
9. 前記表示制御部は、前記表示オブジェクトとして、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度パターンを示したオブジェクトと、当該電波の組み合わせを指定する組み合わせ指定オブジェクトと、を表示させ、
   前記検索部は、前記組み合わせ指定オブジェクトで指定された前記電波の組み合わせを前記検索条件として、指定された組み合わせの電波が検出された前記電波情報に対応する前記撮像画像を検索する、請求項６に記載の情報処理装置。
10. 前記表示制御部は、前記表示オブジェクトとして、電波の相対的な強度を指定する強度指定オブジェクト、又は、撮像画像における被撮像体との相対的な離隔距離を指定する離隔距離指定オブジェクトを表示させ、
    前記検索部は、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度を前記強度指定オブジェクト又は前記離隔距離指定オブジェクトに対応する重み付け係数により重み付けしたものを前記検索条件として、重み付け後の強度以上又は重み付け後の強度以下の強度を有している前記電波情報に対応する前記撮像画像を検索する、請求項６に記載の情報処理装置。
11. 前記表示制御部は、前記表示オブジェクトとして、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度パターンを示したオブジェクトと、当該電波の組み合わせを指定する組み合わせ指定オブジェクトと、電波の相対的な強度を指定する強度指定オブジェクトと、を表示させ、
    前記検索部は、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度を前記強度指定オブジェクトに対応する重み付け係数により重み付けした値と、前記組み合わせ指定オブジェクトで指定された前記電波の組み合わせと、を前記検索条件として、重み付け後の強度以上又は重み付け後の強度以下の強度を有し、かつ、指定された組み合わせの電波が検出された前記電波情報に対応する前記撮像画像を検索する、請求項６に記載の情報処理装置。
12. 前記電波は、無線通信に利用される電波である、請求項１に記載の情報処理装置。
13. 電波に関する電波情報と、撮像画像と、前記撮像画像が撮像された時間と、をそれぞれ関連付けて記録する記録部から、前記電波情報を読み出すことと、
    読み出した前記電波情報に含まれる電波の個数、又は、電波の強度の少なくとも何れかに基づいて、前記記録部に記録された複数の前記撮像画像から検索条件を満たす撮像画像を検索することと、
    を含む、情報処理方法。
14. コンピュータに、
    電波に関する電波情報と、撮像画像と、前記撮像画像が撮像された時間と、をそれぞれ関連付けて記録する記録部から、前記電波情報を読み出す読み出し機能と、
    読み出した前記電波情報に含まれる電波の個数、又は、電波の強度の少なくとも何れかに基づいて、前記記録部に記録された複数の前記撮像画像から検索条件を満たす撮像画像を検索する検索機能と、
    を実現させるためのプログラム。

Images