JP7388097B2 - 情報処理装置、情報処理システム、情報処理方法、及びプログラム - Google Patents

Description

本開示は、情報を通知する技術に関する。

様々な場所において、法規及びマナーを含む規則が定められている。そのような規則を順守させるための技術が存在する。

特許文献１では、禁煙エリアで喫煙しているマナー違反者を、煙を検知するセンサやカメラを用いて特定し、管理者に通知、または、マナー違反者に注意を促す技術が開示されている。

特開２００７－２７４１５６号公報

規則は、様々な国または都市等の地域ごとに定められている。さらに、様々な状況に応じて、多種多用な規則が存在する。そのため、例えば、他所からの滞在者が、そのような規則をすべて認知することは困難である。このような場合、他所からの滞在者が、意図せず、規則に違反する行動をとる虞がある。

特許文献１では、煙を検知するセンサ等を用いて喫煙に関するマナー違反を注意喚起することは記載されているものの、状況に応じて、多様な法規及びマナー等の違反に関して注意喚起することは記載されていない。

本開示は、上記課題を鑑みてなされたものであり、対象の人物に、場所に応じた法規やマナーに関する情報の通知を行うことが可能な情報処理装置等を提供することを主要な目的とする。

本開示の一態様にかかる情報処理装置は、場所に応じて定められた規則に関する情報と、前記場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと、前記情報端末の位置情報とに基づいて特定された場所の情報を利用して、前記規則に関する情報を検出する規則情報検出手段と、検出された前記規則に関する情報を、前記対象者に向けて通知する通知手段と、を備える。

本発明の一態様にかかる情報処理システムは、上記の情報処理装置と、情報端末とを備え、前記情報端末は、前記撮影データを生成する撮影手段と、前記位置情報を取得する位置情報取得手段と、前記規則に関する情報を提示する提示手段と、を有する。

本開示の一態様にかかる情報処理方法は、場所に応じて定められた規則に関する情報と、前記場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと、前記情報端末の位置情報とに基づいて特定された場所の情報を利用して、前記規則に関する情報を検出し、検出した前記規則に関する情報を、前記対象者に向けて通知する。

本開示の一態様にかかるプログラムは、場所に応じて定められた規則に関する情報と、前記場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと、前記情報端末の位置情報とに基づいて特定された場所の情報を利用して、前記規則に関する情報を検出する処理と、検出した前記規則に関する情報を、前記対象者に向けて通知する処理と、をコンピュータに実行させる。

本開示によれば、対象の人物に、場所に応じた法規やマナーに関する情報の通知を行うことが可能になるという効果が得られる。

第１の実施形態にかかる情報処理システムの構成の一例を示すブロック図である。 第１の実施形態にかかる情報処理装置の機能構成の一例を示すブロック図である。 第１の実施形態にかかる情報処理装置の動作を説明するフローチャートである。 第２の実施形態にかかる情報処理システムの構成の一例を模式的に示す図である。 第２の実施形態にかかる情報処理システムの機能構成の一例を示すブロック図である。 第２の実施形態にかかる情報処理装置の機能構成の一例を示すブロック図である。 第２の実施形態にかかる規則情報データベースの一例を示す図である。 第２の実施形態にかかる情報処理システムの動作を説明する図である。 第２の実施形態にかかる情報処理装置の動作を説明するフローチャートである。 第２の実施形態にかかる情報端末の提示部が注意喚起情報を提示する一例を示す図である。 第３の実施形態にかかる情報処理システムの機能構成の一例を示すブロック図である。 第３の実施形態にかかる情報処理装置の機能構成の一例を示すブロック図である。 第３の実施形態にかかる規則情報データベースの一例を示す図である。 第３の実施形態にかかる情報処理装置の動作を説明するフローチャートである。 第３の実施形態にかかる情報端末の提示部が注意喚起情報を提示する一例を示す図である。 変形例１にかかる情報処理システムの機能構成の一例を示す図である。 第１、第２及び第３の実施形態における情報処理装置を実現するコンピュータ装置のハードウェア構成の一例を示すブロック図である。

＜第１の実施形態＞
次に、第１の実施形態にかかる情報処理装置を含む情報処理システムの概要について説明する。

図１は、情報処理システム１０００の構成の一例を示すブロック図である。図１に示すように、情報処理システム１０００は、情報処理装置１００と、データベースサーバ２００と、情報端末３００とを備える。情報処理システム１０００は、情報処理装置１００が検出した情報を、人物に通知するシステムである。

情報端末３００は、人物によって所持されている。情報端末３００を所持している人物は、情報処理装置１００により検出された情報が通知される対象者である。以降、情報端末３００を所持している人物を対象者とも称する。

情報端末３００は、カメラを備え、当該カメラにより対象者の周囲を撮影し、撮影データを生成する。また、情報端末３００は、情報端末３００の位置情報を取得する。さらに、情報端末３００は、情報処理装置１００から受け取った情報を対象者に提示する。情報を提示する方法としては、情報端末３００が、情報端末３００が有するディスプレイに受け取った情報を表示してもよいが、この例に限らない。例えば、情報端末３００は、スピーカ、光源装置、またはバイブレータを備え、受け取った情報を音、光または振動に変換し、情報端末３００から発信するよう制御してもよい。また、情報処理装置１００と通信可能な装置であって、情報端末３００とは異なる装置が、対象者に情報を提示するようにしてもよい。

データベースサーバ２００は、場所に応じて定められた規則に関する情報と場所の情報とを関連付けて記憶する規則情報データベースを格納している（以降、データベースをＤＢとも称し、データベースサーバをＤＢサーバとも称する）。場所の情報には、例えば、国及び都市等の地域が示されてもよいし、レストラン、図書館及び百貨店等の施設が示されてもよいし、森林、海及び路上等の風景が示されてもよい。規則は、例えば、マナーであってもよいし、憲法、法律及び条例等を含む法規であってもよい。規則に関する情報には、例えば、規則そのままの情報が示されていてもよいし、規則に関係する注意喚起の文章の情報が示されていてもよい。規則に関係する注意喚起の文章の情報は、例えば、対象者に規則を遵守させるように注意喚起する情報である。

情報処理装置１００は、情報端末３００から、撮影データと位置情報とを取得すると、取得した撮影データと位置情報とに基づいて、ＤＢサーバ２００から規則に関する情報を検出する。また、情報処理装置１００は、ＤＢサーバ２００から検出した規則に関する情報を、対象者に向けて通知する。

［情報処理装置１００の詳細］
図２は、情報処理装置１００の機能構成の一例を示すブロック図である。図２に示すように、情報処理装置１００は、規則情報検出部１１０と、通知部１２０とを備える。情報処理装置１００は、情報端末３００と、ＤＢサーバ２００と通信可能に接続されている。

規則情報検出部１１０は、情報端末３００から取得した情報に基づいて、ＤＢサーバ２００から規則に関する情報を検出する。具体的には、情報処理装置１００が、情報端末３００から、撮影データと位置情報とを取得する。ここで、取得した位置情報と撮影データとに基づいて情報端末３００が存在する場所が特定される。規則情報検出部１１０は、特定された場所の情報に関連付けられた規則に関する情報を、ＤＢサーバ２００から検出する。

通知部１２０は、検出された規則に関する情報を、対象者に向けて通知する。例えば、通知部１２０は、情報端末３００に規則に関する情報を送り、情報端末３００を介して、規則に関する情報を対象者に通知する。また、通知部１２０は、対象者に情報を提示する機能を有する図示しない装置に、規則に関する情報を通知し、当該装置を介して、規則に関する情報を対象者に通知してもよい。

このように、規則情報検出部１１０は、場所に応じて定められた規則に関する情報と場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと情報端末の位置情報とに基づいて特定された場所の情報を利用して、規則に関する情報を検出する。規則情報検出部１１０は、規則情報検出手段の一例である。また、通知部１２０は、検出された規則に関する情報を、対象者に向けて通知する。通知部１２０は、通知手段の一例である。

［情報処理装置１００の動作］
次に、情報処理装置１００の動作を説明する。以下に、情報処理装置１００の動作を、図３のフローチャートを用いて説明する。なお、本明細書において、フローチャートの各ステップを「Ｓ１０１」のように、それぞれのステップに付した番号を用いて表現する。

規則情報検出部１１０は、情報端末３００が生成した撮影データと情報端末３００の位置情報とに基づいて特定された場所の情報を利用して、ＤＢサーバ２００から規則に関する情報を検出する（Ｓ１０１）。

通知部１２０は、規則情報検出部１１０が検出した規則に関する情報を、対象者に向けて通知する（Ｓ１０２）。

以上のように、第１の実施形態にかかる情報処理装置１００は、場所に応じて定められた規則に関する情報と場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと情報端末の位置情報とに基づいて特定された場所の情報を利用して、規則に関する情報を検出する。そして、情報処理装置１００は、検出された規則に関する情報を、対象者に向けて通知する。この構成により、情報処理装置１００は、情報端末３００を所持する人物、すなわち対象者に、対象者が存在する場所で定められた規則に関する情報を知らせることができる。したがって、第１の実施形態にかかる情報処理装置１００は、対象の人物に、場所に応じた法規やマナーに関する情報の通知を行うことが可能になるという効果が得られる。

＜第２の実施形態＞
次に、第２の実施形態にかかる情報処理装置を含む情報処理システムについて説明する。

図４は、第２の実施形態にかかる情報処理システム１００１の構成の一例を模式的に示す図である。図５は、情報処理システム１００１の機能構成の一例を示すブロック図である。図４及び図５に示す情報処理システム１００１は、第１の実施形態における情報処理装置１００に代わり、情報処理装置１０１を備え、それ以外については、第１の実施形態で説明した情報処理システム１０００と同様である。つまり、情報処理システム１００１は、情報処理装置１０１と、ＤＢサーバ２００と、情報端末３００とを備える。

また、図４の例では、以下のような状況において設置された情報処理システム１００１を示している。人物（すなわち対象者）は、眼鏡型の情報端末３００を装着している。情報端末３００は、情報端末３００が有するカメラを用いて対象者の周囲を撮影し、撮影データを生成する。また、情報端末３００は、対象者の位置情報を取得する。情報処理装置１０１は、情報端末３００から受け取った撮影データと位置情報とに基づいて、ＤＢサーバ２００から規則に関する情報を検出する。そして、情報処理装置１０１は、検出した規則に関する情報を、情報端末３００を介して人物に通知する。このとき、情報端末３００は、眼鏡のレンズ部分が透過型のディスプレイ（すなわち、対象者がディスプレイ越しに周囲を視認可能なディスプレイ）であり、そのディスプレイに規則に関する情報を表示する。

［情報端末３００の詳細］
図５に示すように、情報端末３００は、撮影部３１０と、位置情報取得部３２０と、提示部３３０とを備える。

撮影部３１０は、対象者の周囲を撮影し、撮影データを生成する。撮影データは、動画像を構成する複数のフレームのそれぞれであってもよいし、静止画像であってもよい。撮影部３１０は、図４の例におけるカメラに相当する。撮影部３１０は、例えば、対象者の視線方向の一定範囲を撮影してもよいし、対象者の視界を超える範囲を撮影してもよい。また、図４の例では、情報端末３００は、一つのカメラを備えているが、カメラは複数備えられていてもよい。すなわち撮影部３１０は、複数の方向を撮影してもよい。なお、撮影部３１０は、マイクを含み、音を録音してもよい。このとき撮影データには、映像とともに音が含まれる。また、撮影部３１０は、撮影データに、撮影した時刻の情報を付加してもよい。撮影部３１０は、撮影手段の一例である。

位置情報取得部３２０は、情報端末３００の位置情報を取得する。第２の実施形態において、位置情報は、情報端末３００が存在する座標を示す情報である。位置情報取得部３２０は、例えば、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）を用いて位置情報を取得するが、これに限らない。位置情報取得部３２０は、他のＧＮＳＳ（Ｇｌｏｂａｌ Ｎａｖｉｇａｔｉｏｎ Ｓａｔｅｌｌｉｔｅ Ｓｙｓｔｅｍ）を用いて位置情報を取得してもよい。位置情報取得部３２０は、位置情報取得手段の一例である。

提示部３３０は、情報処理装置１０１から受け取った情報を人物に提示する。提示部３３０は、図４の例におけるディスプレイに相当する。この場合、提示部３３０は、情報処理装置１０１から受け取った情報をディスプレイに表示する。なお、図４の例において、情報端末３００は、眼鏡型またはゴーグル型の端末を示している。これに代えて、情報端末３００は、例えばヘッドマウントディスプレイであってもよい。提示部３３０は、提示手段の一例である。

［情報処理装置１０１の詳細］
図６は、情報処理装置１０１の機能構成の一例を示すブロック図である。情報処理装置１０１は、規則情報検出部１１０と、通知部１２０と、抽出部１３０と、場所特定部１４０とを備える。

抽出部１３０は、情報端末３００の撮影部３１０によって生成された撮影データを受信し、当該撮影データに含まれる抽出対象を抽出する。抽出対象は予め定められており、物体及び風景を含む。抽出部１３０は、例えば、撮影データに含まれる人物、建物、家具、食器及び乗り物等の個々の物体を抽出対象として抽出してもよいし、海、山及び森等の自然の風景、または市街地等の街の風景を抽出対象として抽出してもよい。

抽出部１３０は、例えば、撮影データから特徴量を取得し、取得した特徴量と抽出対象ＤＢの抽出対象データとを利用して、抽出対象を抽出する。ここで、抽出対象データは、抽出対象を識別する情報と、抽出対象の特徴量とを関連付けたデータである。抽出対象データを格納する抽出対象ＤＢは、ＤＢサーバ２００に格納されてもよいし、情報処理装置１０１が備える、図示しない記憶装置に格納されてもよい。また、この抽出対象の検出手法の例に限らず、抽出部１３０が、予め抽出対象の画像データを保持しておき、画像データを用いたテンプレートマッチングによって、撮影データに含まれる抽出対象を検出してもよい。抽出部１３０は、抽出手段の一例である。

場所特定部１４０は、対象者が所持する情報端末３００が存在する場所を特定することによって、対象者が存在する場所を特定する。具体的には、場所特定部１４０は、情報端末３００から位置情報を取得する。また、場所特定部１４０は、抽出部１３０によって抽出された抽出対象の情報を取得する。そして、場所特定部１４０は、取得した位置情報及び抽出対象の情報を用いて、情報端末３００が存在する場所を特定する。例えば、場所特定部１４０は、位置情報に示される座標に基づいて、情報端末３００が存在する国または都市を含む地域を特定する。さらに、場所特定部１４０は、抽出対象の情報に基づいて、情報端末３００が存在する施設、または情報端末が存在する場所の風景を含む環境を特定する。例えば、場所特定部１４０は、抽出対象の情報として、車及び信号機が検出されていた場合に、情報端末３００が路上に存在する、と特定してもよい。

規則情報検出部１１０は、情報端末３００から受信した撮影データに含まれる抽出対象の情報と、情報端末３００の位置情報とに基づいて、ＤＢサーバ２００から規則に関する情報を検出する。具体的には、撮影データと位置情報とに基づいて場所特定部１４０が特定した、対象者が存在する場所の情報を、規則情報検出部１１０が取得する。規則情報検出部１１０は、ＤＢサーバ２００にアクセスし、取得した場所の情報を含む規則情報を、ＤＢサーバ２００に格納される規則情報ＤＢから特定し、規則に関する情報を検出する。

図７は、規則情報ＤＢの一例を示す図である。規則情報ＤＢには、「場所」と、「規則」と、「注意喚起情報」との情報が関連付けられている規則情報が格納されている。ここで、注意喚起情報は、情報処理装置１０１が、情報端末３００を介して対象者に通知する、規則に関する情報である。また、図７に示すレコードの各行は、規則情報を示す。例えば、一行目のレコードの規則情報は、「Ａ国」の「路上」には、「喫煙をしてはいけない」という規則が定められており、注意喚起情報として「禁煙指示」を表す情報が関連付けられていることが示されている。

規則情報検出部１１０は、場所特定部１４０が特定した場所の情報を含む規則情報が規則情報ＤＢに格納されている場合、その規則情報に含まれる規則に関する情報を検出する。例えば、場所特定部１４０が特定した場所の情報に、「Ｂ国」及び「レストラン」を示す情報が含まれていた場合、規則情報検出部１１０は、図７に示す規則情報ＤＢの四行目の規則に関する情報を検出する。

通知部１２０は、規則情報検出部１１０が検出した規則情報に含まれる規則に関する情報を、情報端末３００に通知する。

［情報処理システム１００１の動作］
次に、第２の実施形態における情報処理システム１００１の動作を、図８及び図９を用いて説明する。なお、以下に説明する動作において、情報処理システム１００１は、図４に示す状況において設置されているとする。すなわち、対象者となる人物が、眼鏡型の情報端末３００を装着しているとする。また、ＤＢサーバ２００には、抽出対象を識別する情報と抽出対象の特徴量とを関連付けた抽出対象ＤＢと、図７に示す規則情報ＤＢとが格納されているとする。

図８は、情報処理システム１００１の対象者への情報の通知に係る動作を説明する図である。まず、情報端末３００の撮影部３１０は、対象者の視線方向の一定の範囲を撮影し、撮影データを生成する（Ｓ２０１）。位置情報取得部３２０は、情報端末３００に備えられるＧＰＳを用いて、情報端末３００の位置情報、すなわち対象者の位置情報を取得する（Ｓ２０２）。情報端末３００は、生成した撮影データと、取得した位置情報とを、情報処理装置１０１に送信する（Ｓ２０３）。

情報処理装置１０１は、情報端末３００から撮影データと、位置情報とを受信する（Ｓ２０４）。そして、情報処理装置１０１は、規則情報取得処理を開始する（Ｓ２０５）。図９は、Ｓ２０５の処理における、情報処理装置１０１の動作を説明するフローチャートである。抽出部１３０は、ＤＢサーバ２００に格納された抽出対象ＤＢを用いて、撮影データに含まれる抽出対象を抽出する（Ｓ３０１）。例えば、抽出部１３０は、抽出対象の情報として、料理、食器及びテーブルを検出したとする。抽出部１３０は、場所特定部１４０に、抽出した抽出対象の情報を送る。

場所特定部１４０は、情報端末３００から取得した位置情報と、抽出部１３０から取得した抽出対象の情報とを用いて場所を特定する（Ｓ３０２）。ここでは、場所特定部１４０は、位置情報と、料理、食器及びテーブルを含む抽出対象の情報とに基づいて、情報端末３００が「Ａ国」の「レストラン」に存在すると特定したとする。場所特定部１４０は、特定した場所の情報を規則情報検出部１１０に送る。

規則情報検出部１１０は、場所特定部１４０が特定した場所の情報が、ＤＢサーバ２００に格納された規則情報ＤＢに存在するか否かを判定する（Ｓ３０３）。規則情報ＤＢに、特定した場所の情報が存在する場合（Ｓ３０３の「Ｙｅｓ」）、規則情報検出部１１０は、その場所の情報を有する規則情報に含まれる規則に関する情報を検出する（Ｓ３０４）。例えば、情報端末３００の存在する場所が「Ａ国」及び「レストラン」と特定されていた場合、特定された場所の情報は、図７に示す規則情報ＤＢにおいて二行目のレコードに示される規則情報の場所の情報と合致する。この場合、規則情報検出部１１０は、二行目の規則に関する情報を検出する。規則情報検出部１１０は、検出した規則に関する情報を通知部１２０に送る。

通知部１２０は、規則情報検出部１１０が検出した規則に関する情報を、情報端末３００に通知する（Ｓ３０５）。例えば、図７の規則情報ＤＢにおける二行目の規則に関する情報が検出された場合、通知部１２０は、「音をたてないようにする指示」の情報を情報端末３００に通知する。

Ｓ３０３の処理において、場所特定部１４０が特定した場所の情報が、規則情報ＤＢに存在しない場合、規則情報検出部１１０は、規則情報が検出されなかったことを示す情報を通知部１２０に送る。通知部１２０は、規則情報が検出されなかったことを示す情報を情報端末３００に通知する（Ｓ３０６）。

図８に戻り、情報端末３００の提示部３３０は、情報処理装置１０１が規則に関する情報を検出したか否かを判定する（Ｓ２０６）。情報処理装置１０１が規則に関する情報を検出した場合、すなわち、提示部３３０が情報処理装置１０１から注意喚起情報（規則に関する情報）を受信した場合（Ｓ２０６の「Ｙｅｓ」）、注意喚起情報を提示する。例えば、提示部３３０が「音をたてないようにする指示」の情報を受け取った場合、情報端末３００のディスプレイに「音をたてないようにする指示」の情報を表示する。

図１０は、提示部３３０が注意喚起情報を提示する一例を示す図である。図１０には、テーブルの上に置かれた料理と食器とが示されている。提示部３３０は、例えば図１０に示すように、ディスプレイに「食事中に音をたててはいけません！」と文字を表示する。

Ｓ２０６の処理において、提示部３３０は、規則情報が検出されなかったことを示す情報を情報処理装置１０１から受信した場合（Ｓ２０６の「Ｎｏ」）、Ｓ２０７の処理は行えないので、フローを終了する。

なお、規則情報が検出されなかった場合、提示部３３０は、提示する注意喚起情報がないことを示す情報を提示してもよい。

また、図８に示す動作において、撮影データを生成する処理（Ｓ２０１）と、位置情報を取得する処理（Ｓ２０２）とは、行われる順番が入れ替えられてもよいし、同時に行われてもよい。

以上のように、第２の実施形態にかかる情報処理装置１０１は、規則情報ＤＢから、対象者が所持する情報端末３００により生成された撮影データと情報端末３００の位置情報とに基づいて特定された場所の情報を利用して規則に関する情報を検出する。そして、情報処理装置１０１は、検出された規則に関する情報を、対象者に向けて通知する。この構成により、情報処理装置１０１は、情報端末３００を所持する対象者が存在する場所を特定し、特定された場所に応じた規則に関する情報を、例えば、情報端末３００を介して対象者に通知することができる。すなわち、第２の実施形態にかかる情報処理装置１０１は、対象の人物に、場所に応じた法規やマナーに関する情報の通知を行うことが可能になるという効果が得られる。

また、第２の実施形態にかかる情報処理装置１０１は、上述した構成により、対象者が規則に違反する行動をとらないように、対象者に注意喚起を行うことができる。

＜第３の実施形態＞
次に、第３の実施形態にかかる情報処理装置を含む情報処理システムについて説明する。

図１１は、第３の実施形態にかかる情報処理システム１００２の機能構成の一例を示すブロック図である。図１１に示すように、情報処理システム１００２は、第２の実施形態における情報処理装置１０１に代わり、情報処理装置１０２を備え、それ以外については、第２の実施形態で説明した情報処理システム１００１と同様である。つまり、情報処理システム１００２は、情報処理装置１０２と、ＤＢサーバ２００と、情報端末３００とを備える。第３の実施形態の説明では、図１１に示す情報処理システム１００２の構成及び動作が、第２の実施形態の説明と重複する内容については説明を省略する。

図１２は、情報処理装置１０２の機能構成の一例を示すブロック図である。情報処理装置１０２は、規則情報検出部１１１と、通知部１２０と、抽出部１３０と、場所特定部１４０と、行動検出部１５０とを備える。

行動検出部１５０は、撮影データに基づいて対象者の行動を検出する。具体的には、行動検出部１５０は、撮影データに含まれる対象者（すなわち、撮影データに映る対象者）の情報、または撮影データに含まれる音の情報に基づいて、対象者の行動を検出する。例えば、行動検出部１５０は、学習により得られた人物の行動パターンの情報を利用して、撮影データに含まれる対象者の動作に当てはまる行動パターンを検出することによって、対象者の行動を検出してもよい。また、行動検出部１５０は、音の特徴量と人物の行動とを関連付けたＤＢに基づいて、撮影データに含まれる音から抽出される特徴量を用いて、対象者が歌っていること、及び対象者が食事をしていること等の行動を検出してもよい。行動検出の手法は、撮影データから対象者の行動を検出できれば、いずれの手法を採用してもよく、上述した手法に限定されない。行動検出部１５０は、行動検出手段の一例である。

規則情報検出部１１１は、場所特定部１４０が特定した場所の情報と、行動検出部１５０が検出した行動の情報とを含む規則情報を、規則情報ＤＢから検出する。

図１３は、第３の実施形態にかかる規則情報ＤＢの一例を示す図である。図１３に示す規則情報ＤＢにおける規則情報は、「場所」と、「行動」と、「規則」と、「注意喚起情報」との情報が関連付けられている情報である。ここで、「行動」は、人物の行動の情報を示す。

規則情報検出部１１１は、場所特定部１４０が特定した場所の情報と、行動検出部１５０が検出した行動の情報とを含む規則情報が、規則情報ＤＢに存在する場合、その規則情報に含まれる規則に関する情報を検出する。例えば、場所特定部１４０が特定した場所の情報に「Ａ国」及び「路上」を示す情報が含まれ、行動検出部１５０が検出した行動の情報に「たばこの所持」が含まれていた場合、規則情報検出部１１０は、図１３に示す規則情報ＤＢの一行目の規則に関する情報を検出する。

次に、第３の実施形態における情報処理システム１００２の動作を説明する。情報処理システム１００２は、規則情報取得処理（図８に示すＳ２０５の処理）として、情報処理装置１０２が図１４のフローチャートに示す処理を行い、それ以外の動作は第２の実施形態における情報処理システム１００１の動作と同様の動作を行う。なお、以下に説明する動作において、情報処理システム１００２は、図４に示す状況において設置されているとする。すなわち、対象者となる人物が、眼鏡型の情報端末３００を装着しているとする。また、ＤＢサーバ２００には、図１３に示す規則情報ＤＢが格納されているとする。

図１４は、第３の実施形態にかかる規則情報取得処理における情報処理装置１０２の動作を説明するフローチャートである。抽出部１３０は、ＤＢサーバ２００に格納された抽出対象ＤＢを用いて、撮影データに含まれる抽出対象を抽出する（Ｓ４０１）。場所特定部１４０は、情報端末３００から取得した位置情報と、抽出部１３０から取得した抽出対象の情報とを用いて場所を特定する（Ｓ４０２）。ここでは、場所特定部１４０は、情報端末３００が「Ａ国」の「路上」に存在すると特定したとする。

行動検出部１５０は、撮影データに含まれる対象者の情報、または撮影データに含まれる音の情報に基づいて、対象者の行動を検出する（Ｓ４０３）。例えば、行動検出部１５０は、対象者の「たばこの所持」を検出したとする。

規則情報検出部１１１は、場所特定部１４０が特定した場所の情報と、行動検出部１５０が検出した対象者の行動の情報との両方を含む規則情報が、ＤＢサーバ２００に格納された規則情報ＤＢに存在するか否かを判定する（Ｓ４０４）。規則情報ＤＢに、特定した場所の情報と検出した行動の情報とが存在する場合（Ｓ４０４の「Ｙｅｓ」）、規則情報検出部１１１は、その情報を有する規則情報に含まれる規則に関する情報を検出する（Ｓ４０５）。例えば、特定した場所の情報として「Ａ国」及び「路上」が特定され、検出した対象者の行動の情報として「たばこの所持」が検出された場合、規則情報検出部１１１は、図１３の規則情報ＤＢにおいて一行目の規則に関する情報を検出する。

通知部１２０は、規則情報検出部１１１が検出した規則情報に含まれる注意喚起情報を、情報端末３００に通知する（Ｓ４０６）。例えば、図１３の規則情報ＤＢにおける一行目の規則情報が検出された場合、通知部１２０は、「禁煙指示」を情報端末３００に通知する。Ｓ４０４の処理において、特定した場所の情報と検出した対象者の行動とを含む規則情報が、規則情報ＤＢに存在しない場合、規則情報検出部１１１は、規則情報が検出されなかったことを示す情報を通知部１２０に送る。通知部１２０は、規則情報が検出されなかったことを示す情報を情報端末３００に送信する（Ｓ４０７）。

情報端末３００の提示部３３０は、情報処理装置１０１から注意喚起情報（規則に関する情報）を受信した場合、注意喚起情報を提示する。図１５は、提示部３３０が注意喚起情報を提示する一例を示す図である。情報端末３００が、図４に示すような眼鏡型の端末であり、眼鏡のレンズ部分が透過型のディスプレイである場合、例えば図１５に示すように、提示部３３０は、ディスプレイに「路上で喫煙してはいけません！」と文字を表示する。また、提示部３３０は、図１５に示すように、対象者の手付近に「×」の記号を表示する。このように提示部３３０は、文字のみでなく記号を用いて注意喚起情報を提示してもよい。

以上のように、第３の実施形態にかかる情報処理装置１０２は、撮影データに基づいて、対象者の行動をさらに検出し、検出された対象者の行動の情報と、対象者が存在する場所の情報とを用いて、規則に関する情報を検出する。この構成により、情報処理装置１０２は、対象者の行動を踏まえて、規則に関する情報を検出するので、対象者が存在する場所と、対象者の行動とに、より適合する規則に関する情報を対象者に通知することができる。すなわち、第３の実施形態にかかる情報処理装置１０２は、対象の人物に、場所に応じた法規やマナーに関する情報の通知を行うことが可能になるという効果が得られる。

また、第３の実施形態にかかる情報処理装置１０２は、上述した構成により、対象者が規則に違反する行動をとった場合に、対象者に規則違反であることを通知することができる。また、情報処理装置１０２は、対象者が規則に違反すると予測される行動をとった場合に、対象者に注意喚起を行うことができる。

［変形例１］
情報端末は、情報処理装置と一体化されてもよい。

図１６は、変形例１にかかる情報処理システム１００２の構成の一例を示すブロック図である。図１６に示すように、変形例１にかかる情報処理システム１００２では、情報端末３００に情報処理装置１０２が一体化されている。すなわち、変形例１にかかる情報端末３００は、撮影部３１０、位置情報取得部３２０、及び提示部３３０に加え、規則情報検出部１１１、通知部１２０、抽出部１３０、場所特定部１４０及び行動検出部１５０をさらに備える。

変形例１にかかる情報処理システム１００２の動作は、図１４に示す規則情報取得処理の動作が、情報端末３００内で行われることを除いて、第３の実施形態で説明した動作と同様である。

変形例１にかかる情報端末３００は、第３の実施形態において説明した情報処理装置１０２と同様の効果を奏する。

なお、変形例１にかかる情報端末３００は、情報処理装置１０２に代わり、情報処理装置１００、または情報処理装置１０１と一体化されてもよい。

［変形例２］
第２及び第３の実施形態において、情報端末３００は眼鏡型の端末であり、眼鏡のレンズ部分が透過型のディスプレイである例について説明したが、情報端末３００は、非透過のディスプレイを有していてもよい。すなわち、情報端末３００を装着した対象者が、ディスプレイ越しに周囲の状況を視認することができないディスプレイを、情報端末３００は有していてもよい。

このとき、情報端末３００が稼働している間、提示部３３０は、撮影部３１０で生成された撮影データを表示する。そして、Ｓ２０７の情報を提示する処理において、提示部３３０は、撮影データに重畳して注意喚起情報を表示する。

［変形例３］
各実施形態において、情報端末３００は、眼鏡型の端末でなくともよい。

例えば、情報端末３００は、携帯電話、スマートフォン及びタブレット等の携帯端末であってもよい。このとき、対象者は周囲を撮影できるように携帯端末を所持すればよい。

［変形例４］
各実施形態において、情報端末３００における提示部３３０の注意喚起情報の提示方法は、ディスプレイに表示することに限られない。

例えば、情報端末３００は、スピーカを備えており、注意喚起情報を、音を用いて提示してもよい。

また、情報端末３００は、光源装置を備えており、注意喚起情報を、光を用いて提示してもよい。このとき、対象者が規則に違反する行動をとった場合に光源装置を発光させるようにしてもよい。

また、情報端末３００は、バイブレータを備えており、注意喚起情報を、振動を用いて提示してもよい。このとき、対象者が規則に違反する行動をとった場合、または対象者が規則に違反する虞のある行動をとった場合に、情報端末３００を振動させるようにしてもよい。

なお、注意喚起情報は、音、光または振動の情報として、規則情報ＤＢに格納されていてもよいし、注意喚起情報を音、光または振動の情報に変換する機能を、情報端末３００または、情報処理装置が備えてもよい。

このように、情報端末３００は、カメラと、スピーカ、光源装置、またはバイブレータとを備えた端末であってもよい。

［変形例５］
各実施形態において、位置情報取得部３２０及び提示部３３０は、情報端末３００に備えられていなくともよい。すなわち、情報処置装置と通信可能な装置であって、図示しない装置が位置情報取得部３２０及び提示部３３０を備えていてもよい。また、位置情報取得部３２０及び提示部３３０を、それぞれ異なる装置が備えていてもよい。

位置情報取得部３２０はが、情報端末３００とは異なる装置に備えられる場合、位置情報取得部３２０を備える装置は、当該装置の位置情報を、情報端末３００が撮影データを情報処理装置に送るタイミングに応じて、情報処理装置に送る。この場合、当該装置は、対象者によって所持され、例えば、撮影データの送信に合わせた対象者からの指令によって位置情報が送信される。

また、情報処理装置は、位置情報及び撮影データに基づいて検出した規則に関する情報を、提示部３３０を備える装置に送る。このように、情報処理装置が、情報端末３００とは異なる装置を介して対象者に規則に関する情報を通知してもよい。

＜情報処理装置のハードウェアの構成例＞
上述した第１、第２及び第３の実施形態にかかる情報処理装置を構成するハードウェアについて説明する。図１７は、各実施形態における情報処理装置を実現するコンピュータ装置のハードウェア構成の一例を示すブロック図である。図１７が示す各ブロックは、各実施形態における情報処理装置及び情報処理方法を実現するコンピュータ装置１０と、ソフトウェアとの組み合わせにより実現できる。

図１７に示すように、コンピュータ装置１０は、プロセッサ１１、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１２、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１３、記憶装置１４、入出力インタフェース１５、バス１６、及びドライブ装置１７を備える。

記憶装置１４は、プログラム（コンピュータプログラム）１８を格納する。プロセッサ１１は、ＲＡＭ１２を用いて本情報処理装置にかかるプログラム１８を実行する。具体的には、例えば、プログラム１８は、図３、または図８、図９及び図１４に示す処理をコンピュータに実行させるプログラムを含む。プロセッサ１１が、プログラム１８を実行することに応じて、本情報処理装置の各構成要素（上述した、規則情報検出部１１０、１１１及び通知部１２０等）の機能が実現される。プログラム１８は、ＲＯＭ１３に記憶されていてもよい。また、プログラム１８は、記録媒体２０に記録され、ドライブ装置１７を用いて読み出されてもよいし、図示しない外部装置から図示しないネットワークを介してコンピュータ装置１０に送信されてもよい。

入出力インタフェース１５は、周辺機器（キーボード、マウス、表示装置など）１９とデータをやり取りする。入出力インタフェース１５は、データを取得または出力する手段として機能する。バス１６は、各構成要素を接続する。

なお、情報処理装置の実現方法には様々な変形例がある。例えば、情報処理装置は、専用の装置として実現することができる。また、情報処理装置は、複数の装置の組み合わせに基づいて実現することができる。

各実施形態の機能における各構成要素を実現するためのプログラムを記録媒体に記録させ、該記録媒体に記録されたプログラムをコードとして読み出し、コンピュータにおいて実行する処理方法も各実施形態の範疇に含まれる。すなわち、コンピュータ読取可能な記録媒体も各実施形態の範囲に含まれる。また、上述のプログラムが記録された記録媒体、及びそのプログラム自体も各実施形態に含まれる。

該記録媒体は、例えばフロッピー（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ（Ｃｏｍｐａｃｔ Ｄｉｓｃ）－ＲＯＭ、磁気テープ、不揮発性メモリカード、またはＲＯＭであるが、この例に限らない。また該記録媒体に記録されたプログラムは、単体で処理を実行しているプログラムに限らず、他のソフトウェア、拡張ボードの機能と共同して、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）上で動作して処理を実行するプログラムも各実施形態の範疇に含まれる。

以上、上述した実施形態を参照して本開示を説明した。しかしながら、本開示は、上述した実施形態には限定されない。即ち、本開示は、本開示のスコープ内において、種々の上記開示要素の多様な組み合わせ乃至選択等、当業者が理解し得る様々な態様を適用することができる。

上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。

（付記１）
場所に応じて定められた規則に関する情報と前記場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと前記情報端末の位置情報とに基づいて特定された場所の情報を利用して、前記規則に関する情報を検出する規則情報検出手段と、
検出された前記規則に関する情報を、前記対象者に向けて通知する通知手段と、を備える、
情報処理装置。

（付記２）
前記撮影データに含まれる抽出対象を抽出する抽出手段をさらに備え、
前記規則情報検出手段は、当該抽出された抽出対象の情報と前記位置情報とに基づいて特定された前記場所の情報を利用して、前記規則に関する情報を検出する、
付記１に記載の情報処理装置。

（付記３）
前記撮影データに基づいて、前記対象者の行動を検出する行動検出手段をさらに備え、
前記データベースは、人物の行動の情報をさらに前記規則に関する情報に関連付けて格納し、
前記規則情報検出手段は、検出された前記対象者の行動の情報も利用して前記規則に関する情報を検出する、
付記１または２に記載の情報処理装置。

（付記４）
前記データベースは、前記場所に関わる音の情報をさらに前記規則に関する情報に関連付けて格納し、
前記規則情報検出手段は、前記情報端末に備えられているマイクにより取得された音の情報も利用して前記規則に関する情報を検出する、
付記１乃至３のいずれか一項に記載の情報処理装置。

（付記５）
付記１乃至４のいずれか一項に記載の情報処理装置と、前記情報端末とを備え、
前記情報端末は、
前記撮影データを生成する撮影手段と、
前記位置情報を取得する位置情報取得手段と、
前記規則に関する情報を提示する提示手段と、
を有する、
情報処理システム。

（付記６）
前記提示手段は、前記規則に関する情報を音、光、もしくは振動を用いて提示する、または前記規則に関する情報を表示して提示する、付記５に記載の情報処理システム。

（付記７）
場所に応じて定められた規則に関する情報と前記場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと前記情報端末の位置情報とに基づいて特定された場所の情報を利用して、前記規則に関する情報を検出し、
検出した前記規則に関する情報を、前記対象者に向けて通知する、
情報処理方法。

（付記８）
前記撮影データに含まれる抽出対象を抽出し、
当該抽出した抽出対象の情報と前記位置情報とに基づいて特定された前記場所の情報を利用して、前記規則に関する情報を検出する、
付記７に記載の情報処理方法。

（付記９）
前記撮影データに基づいて、前記対象者の行動を検出し、
前記データベースは、人物の行動の情報をさらに前記規則に関する情報に関連付けて格納し、
検出した前記対象者の行動の情報も利用して前記規則に関する情報を検出する、
付記７または８に記載の情報処理方法。

（付記１０）
前記データベースは、音の情報をさらに関連付けて格納し、
前記情報端末に備えられているマイクにより取得された音の情報も利用して前記規則に関する情報を検出する、
付記７乃至９のいずれか一項に記載の情報処理方法。

（付記１１）
前記撮影データを生成し、
前記位置情報を取得し、
前記規則に関する情報を提示する、
付記７乃至１０のいずれか一項に記載の情報処理方法。

（付記１２）
前記規則に関する情報を音、光、もしくは振動を用いて提示する、または前記規則に関する情報を表示して提示する、付記１１に記載の情報処理方法。

（付記１３）
撮影データを生成する撮影手段と、
自端末の位置情報を取得する位置情報取得手段と、
場所に応じて定められた規則に関する情報と前記場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと前記情報端末の位置情報とに基づいて特定された場所の情報を利用して、前記規則に関する情報を検出する規則情報検出手段と、
検出された前記規則に関する情報を、前記対象者に向けて通知する通知手段と、
前記規則に関する情報を提示する提示手段と、を備える、
情報端末。

（付記１４）
場所に応じて定められた規則に関する情報と前記場所の情報とを関連付けて格納するデータベースから、対象者が所持する情報端末により生成された撮影データと前記情報端末の位置情報とに基づいて特定された場所の情報を利用して、前記規則に関する情報を検出する処理と、
検出した前記規則に関する情報を、前記対象者に向けて通知する処理と、をコンピュータに実行させる、
プログラム。

１０ コンピュータ装置
１１ プロセッサ
１２ ＲＡＭ
１３ ＲＯＭ
１４ 記憶装置
１５ 入出力インタフェース
１６ バス
１７ ドライブ装置
１８ プログラム
１９ 周辺機器
２０ 記録媒体
１００、１０１、１０２ 情報処理装置
１１０、１１１ 規則情報検出部
１２０ 通知部
１３０ 抽出部
１４０ 場所特定部
１５０ 行動検出部
２００ データベースサーバ
３００ 情報端末
１０００、１００１、１００２ 情報処理システム

Claims (10)

1. 対象者が所持する情報端末により生成された撮影データと、前記情報端末の位置情報と、に基づいて、前記対象者が存在する地域と施設または環境とを含む場所を特定する場所特定手段と、
   地域と施設または環境とに応じて定められた規則に関する情報と、地域と施設または環境とを示す場所の情報と、を関連付けて格納するデータベースから、特定された場所の情報を利用して、前記規則に関する情報を検出する規則情報検出手段と、
   検出された前記規則に関する情報を、前記対象者に向けて通知する通知手段と、を備える、
   情報処理装置。
2. 前記撮影データに含まれる抽出対象を抽出する抽出手段をさらに備え、
   前記場所特定手段は、当該抽出された抽出対象の情報と前記位置情報とに基づいて、前記対象者が存在する場所を特定する、
   請求項１に記載の情報処理装置。
3. 前記撮影データに基づいて、前記対象者の行動を検出する行動検出手段をさらに備え、
   前記データベースは、人物の行動の情報をさらに前記規則に関する情報に関連付けて格納し、
   前記規則情報検出手段は、検出された前記対象者の行動の情報も利用して前記規則に関する情報を検出する、
   請求項１または２に記載の情報処理装置。
4. 前記行動検出手段は、前記撮影データに含まれる音から抽出される特徴量を用いて、音の特徴量と人物の行動とを関連付けて格納する第２データベースから、前記対象者の行動を検出する、
   請求項３に記載の情報処理装置。
5. 前記データベースは、前記場所に関わる音の情報をさらに前記規則に関する情報に関連付けて格納し、
   前記規則情報検出手段は、前記情報端末に備えられているマイクにより取得された音の情報も利用して前記規則に関する情報を検出する、
   請求項１乃至４のいずれか一項に記載の情報処理装置。
6. 請求項１乃至５のいずれか一項に記載の情報処理装置と、前記情報端末とを備え、
   前記情報端末は、
   前記撮影データを生成する撮影手段と、
   前記位置情報を取得する位置情報取得手段と、
   前記規則に関する情報を提示する提示手段と、
   を有する、
   情報処理システム。
7. 前記提示手段は、前記規則に関する情報を音、光、もしくは振動を用いて提示する、または前記規則に関する情報を表示して提示する、請求項６に記載の情報処理システム。
8. 前記規則に関する情報が検出されなかった場合、前記提示手段は、提示する前記規則に関する情報が無いことを示す情報を提示する、
   請求項６または７に記載の情報処理システム。
9. コンピュータが、
   対象者が所持する情報端末により生成された撮影データと、前記情報端末の位置情報と、に基づいて、前記対象者が存在する地域と施設または環境とを含む場所を特定し、
   地域と施設または環境とに応じて定められた規則に関する情報と、地域と施設または環境とを示す場所の情報と、を関連付けて格納するデータベースから、特定された場所の情報を利用して、前記規則に関する情報を検出し、
   検出した前記規則に関する情報を、前記対象者に向けて通知する、
   情報処理方法。
10. 対象者が所持する情報端末により生成された撮影データと、前記情報端末の位置情報と、に基づいて、前記対象者が存在する地域と施設または環境とを含む場所を特定する処理と、
    地域と施設または環境とに応じて定められた規則に関する情報と、地域と施設または環境とを示す場所の情報と、を関連付けて格納するデータベースから、特定された場所の情報を利用して、前記規則に関する情報を検出する処理と、
    検出した前記規則に関する情報を、前記対象者に向けて通知する処理と、をコンピュータに実行させる、
    プログラム。

Images