【０００１】
【発明の属する技術分野】
本発明は、利用者の現在位置から見える店舗、デパート、レストラン、ホール、美術館、博物館、他の文化施設、遊箔施設、交通機関、公共施設等の施設についての情報を容易に取得することのできる施設案内システムに関する。
【０００２】
【従来の技術】
従来、この種の施設案内システムとして、ナビゲーション装置がよく知られている。ナビゲーション装置では、施設名を音声や文字で入力することにより、施設情報を含む道路地図データから該当する施設を検索して、その場所を地図上に表示することができる。また、車両走行時にスキー場、ゴルフ場等を音声入力すると、音声認識処理により対応する地図情報を読み出して該当する施設の名称を表示する車載用地図表示装置が知られている（例えば、特許文献１参照）。一方、車両走行時の進行方向の景色に係わる地形情報を、記憶装置から読み出して３次元表示する景色表示システムが知られている（例えば、特許文献２参照）。この装置では、車両の進行方向を観察者の視線方向として、その方向における景色の画像を作成して表示装置の画面に３次元表示することができ、その対象物の名称も表示することができる。
【０００３】
【特許文献１】
特開平９−４２９８７号公報（第１−４頁、図１）
【特許文献２】
特開平８−３２７３７５号公報（第１−４頁、図１）
【０００４】
【発明が解決しようとする課題】
しかしながら、上記従来の施設案内システムでは、ジャンル名や施設名、住所や電話番号等から現在地や目的地付近の施設を地図上で検索することは可能であるが、視界内に見える施設が何であるか分からない場合には検索のしようがなかった。また、車両の外側に見える山や建物等の施設の名称を地図データから読み出して表示することはできるが、それらは車両の方向に限定されるため、任意の方向における施設についての情報は得られないという問題があった。
【０００５】
本発明は、このような従来の問題を解決するものであり、施設の名称が分からなくても、利用者から見て任意の方向における施設についての情報を容易に取得することのできる施設案内システムを提供することを目的とする。
【０００６】
上記目的を達成するために、本発明の施設案内システムは、ネットワークに接続された携帯端末装置とサーバとを備え、前記携帯端末装置は、データの送受信が可能な通信手段と、現在位置を検出する現在位置検出手段と、前記現在位置における視界内の施設に対する方位を検出する方位検出手段と、前記施設に関する質問を入力する入力手段と、前記検出された現在位置データと方位データと前記施設に関する質問データとを含む案内要求を前記通信手段を通じて前記サーバに送信し、前記サーバから受信した前記案内要求に対する案内応答を出力する出力手段とを備え、前記サーバは、前記携帯端末装置から案内要求を受信する受信手段と、前記受信した案内要求を基に前記施設に関する情報を地図データベースから検索する検索手段と、前記検索結果を基に案内応答を作成する案内応答作成手段と、前記作成した案内応答を前記ネットワークを通じて前記携帯端末装置へ送信する送信手段とを備えたことを特徴とする。この構成により、利用者は、現在位置から見える施設が何であるか分からない場合に、その施設に携帯端末装置を向けながら、例えば「あの店なに？」と入力するだけで、携帯端末装置が、現在の位置データと施設に対する方位データと質問データとを通信手段を通じて外部のサーバに送信し、サーバが、それらのデータを基に地図データを検索して、施設についての案内情報を携帯端末装置に送り返すので、利用者は、その施設の名称が分からない場合でも、その施設についての案内情報を容易に取得することができる。
【０００７】
また、本発明の施設案内システムは、前記携帯端末装置が、前記施設を撮影する撮影手段と、前記撮影した画像データから前記施設の形状データを抽出する画像処理手段とを備え、前記形状データを前記案内要求に含めて前記サーバに送信することを特徴とする。この構成により、利用者は、施設が何であるか分からない場合に、その施設を撮影してその形状データをサーバに送ることにより、より確度の高い情報をサーバから取得することができる。
【０００８】
また、本発明の施設案内システムは、前記携帯端末装置の入力手段が、前記施設についての質問を５０音により入力する操作キーであり、前記入力された文字コードデータを前記案内要求に含めて前記サーバへ送信することを特徴とする。この構成により、利用者は、施設が何であるか分からない場合に、例えば「あの店なに？」と１音ずつ入力するだけで、質問データを容易に作成することができる。
【０００９】
また、本発明の施設案内システムは、前記携帯端末装置の入力手段が、前記施設についての質問を音声で入力する音声入力手段であり、前記入力された音声データを前記案内要求に含めて前記サーバに送信することを特徴とする。この構成により、利用者は、施設が何であるか分からない場合に、例えば「あの店なに？」と音声入力するだけで、質問データを容易に作成することができる。
【００１０】
また、本発明の施設案内システムは、前記携帯端末装置の現在位置検出手段が、ＧＰＳ受信機であり、前記ＧＰＳ受信器により受信した経度緯度データを前記案内要求に含めて前記サーバへ送信することを特徴とする。この構成により、携帯端末装置の現在位置を容易に検出することができる。
【００１１】
また、本発明の施設案内システムは、前記携帯端末装置の方位検出手段が、地磁気センサであり、前記地磁気センサにより検出された絶対方位データを前記案内要求に含めて前記サーバへ送信することを特徴とする。この構成により、利用者が携帯端末装置を施設に向けることにより、現在地からのその施設の方位を容易に検出することができる。
【００１２】
また、本発明の施設案内システムは、前記サーバが、前記受信手段により施設の管理者から受信した施設案内情報を蓄積する案内情報データベースを備え、前記施設案内情報を含めて前記案内応答を作成することを特徴とする。この構成により、利用者は、施設が何であるか分からない場合に、その施設に携帯端末装置を向けながら、例えば「あれなに？」と質問するだけで、サーバからその施設の種類だけでなく、その施設におけるイベント情報や展示内容やお買い得情報などの公告宣伝情報を容易に取得することができ、施設側も客に対する宣伝を行うことができる。
【００１３】
また、本発明の施設案内システムは、前記サーバが、前記施設の名称を１つだけ含む情報を地図データベースから検索して出力することを特徴とする。この構成により、例えば店が連なっている場合に、その最も特徴的な店についての情報だけを出力することができる。
【００１４】
また、本発明の施設案内システムは、前記サーバが、前記施設の名称を複数含む情報を地図データベースから検索して出力することを特徴とする。この構成により、例えば店が連なっている場合に、その特徴的な複数の店についてそれぞれの情報を出力することができる。
【００１５】
【発明の実施の形態】
以下、本発明の実施の形態について図面を参照して説明する。図１は本実施の形態における携帯端末装置の概略構成を示しており、携帯電話機として構成されている。図１において、アンテナ１は、基地局との間で電波の送受信を行うもので、基地局はインターネットに接続されている。送受信部２は、アンテナ１を通じて送信する電波または受信した電波の周波数制御を行って所定のチャンネルを選択する。信号処理部３は、選択したチャンネルで送信する音声データおよび画像データの符号化および変調を行うとともに、受信した音声データおよび画像データの復調および復号化を行う。制御部４は、ＣＰＵ、ＲＡＭ、ＲＯＭ、Ｉ／Ｏを備えたマイクロプロセッサであり、装置全体を制御する。マイク５は、通話および制御のための音声入力を行う。スピーカ６は、通話相手の音声およびデータ処理された合成音を出力する。音声処理部７は、マイク５から入力された音声をデジタル変換して音声データとして出力するとともに、デジタル音声データをアナログ変換してスピーカ６から出力する。ＣＣＤカメラ８は、ＣＣＤイメージセンサを用いて、撮影対象を光電変換して出力するものであり、ＣＣＤイメージセンサの前に電子的に制御可能な赤外線フィルタを備え、夜間でも撮影できるようになっている。画像処理部９は、ＣＣＤカメラ８からの信号を前処理してデジタルデータに変換した後、エッジ検出による特徴抽出を行って形状データを出力する。ＧＰＳ受信器１０は、ＧＰＳアンテナで受信した複数の衛星からの電波を演算することで現在位置（緯度・経度）を求めるものである。方位センサ１１は、電子的な地磁気センサであり、絶対方位を出力する。液晶表示器１２は、液晶ディスプレイを用いて文字や図形を表示する。キー操作部１３は、テンキーや機能キーからなるキーパッドである。携帯電話機１４は、少なくともこれらの構成要素を含んで構成される。
【００１６】
図２は本実施の形態における携帯電話機１４の外観を示しており、筐体の上部にアンテナ１が上方に向けて取り付けられ、筐体の表側にはスピーカ６、液晶表示器１２、キー操作部１３およびマイク５が配置されている。ＣＣＤカメラ８は、筐体上部の裏側に配置されている。施設を撮影する場合は、キー操作部１３のモード切替ボタン１３ａを押して施設案内モードに切り替えた後、ＣＣＤカメラ８を施設の方向に向けて、液晶表示器１２にその撮影画像を表示しながら撮影ボタン１３ｂを押す。
【００１７】
図３はサーバ２１の構成を示しており、インターネット２０に接続された送受信部２２と、データ処理部２３および制御部２４とを備え、制御部２４には、音声認識部２５、データ検索部２６、案内応答作成部２７、単語辞書データベース２８、地図データベース２９、案内情報データベース３０、通信記録部３１が接続されている。送受信部２２は、インターネット２０を通じて携帯電話機１４と通話および通信を行う受信手段および送信手段を構成し、データ処理部２３は、受信データまたは送信データの変復調処理および符号化復号化処理を行う。制御部２４は、受信データの中から音声データによる質問データを音声認識部２５に渡し、音声認識部２５は、その質問データを単語辞書データベース２８の音声データと比較し、一致するものを選んで文字コードデータを出力する。データ検索部２６は、その文字コードデータと受信した位置データと方位データと形状データを基に、該当する施設の名称を地図データベース２９の中から検索する。地図データベース２９には、施設についての平面形状データと立面形状データ、および位置データと名称データとが格納されている。したがって、データ検索部２６は、文字コードデータと位置データと方位データと形状データとから、所定の位置の所定の方向における所定の形状を有する施設の名称を検索することができる。データ検索部２６はまた、検索された施設の名称を基に、案内情報データベース３０内のその施設についての案内広告情報を検索する。案内情報データベース３０には、施設の管理者からインターネット２０を通じて受信した案内公告情報が格納されている。例えば施設が店舗やデパートの場合は、バーゲンセールや特売品などのお買い得情報を含む公告宣伝情報が、その施設に割り当てられたコード番号と関連付けて格納してある。検索された施設の名称および案内公告情報は、案内応答作成部２７が所定のフォーマットに合成して案内応答を作成し、データ処理部２３で送信データに変換され、送受信部２２からインターネット２０を介して案内要求を行った携帯電話機１４に向けて送信する。通信記録部３１は、受信した携帯電話機１４の電話番号と受信事項と送信事項と日時とを記録し、必要な場合には課金処理を行う。
【００１８】
次に、本実施の形態における施設案内システムの動作について図４および図５を参照して説明する。利用者が携帯電話機１４のキー操作部１３からモード切替ボタン１３ａを押すと、制御部４は、通話モードから施設案内モードに切り替えるとともに（ステップＳ１）、ＧＰＳ受信器１０から現在位置データを取り込み、ＲＡＭに記憶する（ステップＳ２）。次いで利用者が、ＣＣＤカメラ８を施設に向けて撮影ボタン１３ｂを押すと、ＣＣＤカメラ８が施設を撮影し（ステップＳ３）、画像処理部９がその撮影画像から形状データを抽出する処理を行う（ステップＳ４）。同時に、方位センサ１１がＣＣＤカメラ８を向けた方向である撮影方位を検出する（ステップＳ５）。次いで、利用者がマイク５に向かって「あの店、何？」などの質問を音声で発すると（ステップＳ６）、音声処理部部７がその音声をデジタルデータに変換して出力する。制御部４は、音声処理部７から質問データが入力されたかどうかを調べ（ステップＳ７）、入力されていない場合は、ガイダンスメッセージをスピーカ６から出力して発声を促す。この発声は単語だけを入力することが好ましいが、単語でなく文章、例えば「あの店は何ですか」と発声する利用者がいる場合もあるので、音声処理部７は、マイク５から入力された音声が文章である場合は、単語だけを抽出して質問データとする。制御部４は、形状データおよび質問データが入力されると、現在位置データおよび方位データとともにデータ処理部３に送り、データ処理部３で必要な符号化、変調を行って送信データを作成し、送受信部２から案内要求としてアンテナ１を通じて基地局へ発信し、基地局からインターネット２０を介してサーバ２１へ送信する（ステップＳ８）。
【００１９】
サーバ２１では、図５に示すように、予め施設管理者からその施設についての案内情報や公告宣伝情報をインターネット２０を通じて受信し、案内情報データベース３０にその施設のコード番号とともに登録しておく（ステップＳ１１）。
そして、インターネット２０を通じて携帯電話機１４から案内要求を受信すると（ステップＳ１２）、データ検索部２６が、その案内要求の中の現在位置データ、方位データ、形状データ、質問データ等を基に、該当する施設の名称を地図データベース２９から検索する（ステップＳ１３）。その際、案内要求の中にデジタル音声データが含まれている場合には、音声認識部２５が単語辞書データベース２８を参照して音声認識を行い、質問データの内容を解析する。また、該当する位置に複数の施設が連なっている場合は、その最も特徴的な施設を１つだけ抽出するか、または複数の施設を順番に抽出する。どちらにするかは予め設定しておく。次いで、その施設の案内広告情報が案内情報データベース３０に登録されているかどうかを調べ（ステップＳ１４）、登録されていれば、その案内広告情報を抽出する（ステップＳ１５）。そして、検出した施設の名称と案内公告情報とを、案内応答作成部２７により組み合わせて案内応答を作成し、データ処理部２３で送信データとして作成し、送受信部２２からインターネット２０を通じて携帯電話機１４へ送信する（ステップＳ１６）。そして最後に、受信事項と送信事項からなる通信履歴を通信記録部３１に記録する（ステップＳ１７）。
【００２０】
図４において、携帯電話機１４の送受信部２が、インターネット２０および基地局を介してサーバ２１からの案内応答を受信すると（ステップＳ９）、データ処理部３は、受信周波数をベースバンド信号に復調し、復号化処理を行って制御部４に渡す。制御部４では、案内応答の中の文字データや画像データを液晶表示器１２に出力して文字や図形を表示するとともに、音声データをスピーカ６から出力する（ステップＳ１０）。
【００２１】
このように、本実施の形態によれば、利用者が、視界内の施設が何であるかを知りたいときに、その施設に携帯電話機１４のＣＣＤカメラ８を向けて撮影しながら、マイク５に向けて、例えば「あれは何？」と音声入力するだけで、その映像データおよび質問データとＧＰＳ受信器１０による現在位置データと方位センサ１１による方位データとを含む案内要求がサーバに向けて送信され、サーバが、その施設についての名称を含む案内情報を携帯電話機１４に送り返してくるので、利用者から見て任意の方向における施設についての情報を容易に取得することができる。
【００２２】
なお、上記実施の形態では、入力手段としてマイク５と音声処理部７により入力された音声データを質問データとして出力するようにしたが、キー操作部１３から５０音の文字で１音ずつを入力することで質問を文字コードデータで行うようにしてもよい。この場合には、一般的な携帯電話機の機能をそのまま使用するので、構成が簡略化され、コストの増大を抑えることができる。
【００２３】
また、上記実施の形態では、ＣＣＤカメラ８と画像処理部９により施設を撮影して形状データを抽出するようにしたが、これらを使用せずに、現在位置データと方位データと質問データのみをサーバに送るようにしてもよい。この場合には、構成がより一層簡略化され、コストの増大を抑えることができる。
【００２４】
また、上記実施の形態では、方位センサ１１として地磁気センサを使用したが、ＧＰＳ受信器１０により方位データを取得することもできる。これは、携帯電話機を胸に当てた状態から施設の方向へ腕を突き出すことにより、胸の位置と前方の携帯電話機の位置との差分から方位を算出するものである。
【００２５】
また、サーバ２１から携帯電話機１４へ送る施設についての情報は、文字情報、図形情報、音声情報またはそれらの組み合わせとなるが、文字情報の場合は文字コードデータとして送り、音声情報の場合は音声合成により作成したメッセージを音声データとして送る。画像情報の場合は、施設の図形または名称や文字をデフォルメ化した図形データとして送り、これを携帯電話機１４の液晶表示器１２に表示する。その際に、視認対象物の文字や画像、背景等をフラッシングさせたり、太字で表示したり、拡大表示することにより、施設を他から明瞭に区別して表示するようにしてもい。
【００２６】
また、上記実施の形態では、本発明を携帯電話機として構成した場合の例を示したが、本発明をＰＤＡのような携帯端末装置としても構成することができる。
【００２７】
【発明の効果】
以上説明したように、本発明の施設案内システムは、ネットワークに接続された携帯端末装置とサーバとを備え、携帯端末装置は、データの送受信が可能な通信手段と、現在位置を検出する現在位置検出手段と、現在位置における視界内の施設に対する方位を検出する方位検出手段と、施設に関する質問を入力する入力手段と、検出された現在位置データと方位データと施設に関する質問データとを含む案内要求を通信手段を通じてサーバに送信し、サーバから受信した案内要求に対する案内応答を出力する出力手段とを備え、サーバは、携帯端末装置から案内要求を受信する受信手段と、受信した案内要求を基に施設に関する情報を地図データベースから検索する検索手段と、検索結果を基に案内応答を作成する案内応答作成手段と、作成した案内応答をネットワークを通じて携帯端末装置へ送信する送信手段とを備えているので、利用者は、現在位置から見える施設が何であるか分からない場合に、その施設に携帯端末装置を向けながら、例えば「あの店なに？」と入力するだけで、外部のサーバが、その施設についての案内情報を送り返してくるので、利用者は、その施設の名称が分からない場合でも、その施設についての案内情報を容易に取得することができるという優れた効果を有する。
【図面の簡単な説明】
【図１】本発明の実施の形態における携帯電話機の構成を示す概略ブロック図
【図２】本発明の実施の形態における携帯電話機の外観を示す正面図
【図３】本発明の実施の形態におけるサーバの構成を示す概略ブロック図
【図４】本発明の実施の形態における携帯電話機側の施設案内処理を示す概略フロー図
【図５】本発明の実施の形態におけるサーバ側の施設案内処理を示す概略フロー図
【符号の説明】
１ アンテナ
２ 送受信部
３ データ処理部
４ 制御部
５ マイク
６ スピーカ
７ 音声処理部
８ ＣＣＤカメラ
９ 画像処理部
１０ ＧＰＳ受信器
１１ 方位センサ
１２ 液晶表示器
１３ キー操作部
１４ 携帯電話機
２０ インターネット
２１ サーバ
２２ 送受信部
２３ データ処理部
２４ 制御部
２５ 音声認識部
２６ データ検索部
２７ 案内応答作成部
２８ 単語辞書データベース
２９ 地図データベース
３０ 案内情報データベース
３１ 通信記録部[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention makes it possible to easily obtain information about facilities such as stores, department stores, restaurants, halls, museums, museums, other cultural facilities, play foil facilities, transportation facilities, public facilities, etc., which are visible from the current position of the user. A facility guidance system that can be used.
[0002]
[Prior art]
Conventionally, a navigation device is well known as this kind of facility guidance system. In the navigation device, by inputting a facility name by voice or text, a corresponding facility can be searched from road map data including facility information, and the location can be displayed on a map. Also, there is known an in-vehicle map display device that reads a corresponding map information by voice recognition processing and displays a name of a corresponding facility when a ski area, a golf course, or the like is input by voice while the vehicle is running (for example, see Patent Document 1). 1). On the other hand, a landscape display system is known in which terrain information relating to a landscape in a traveling direction during traveling of a vehicle is read from a storage device and three-dimensionally displayed (for example, see Patent Document 2). With this device, the traveling direction of the vehicle is set as the line of sight of the observer, an image of the scenery in that direction can be created and three-dimensionally displayed on the screen of the display device, and the name of the object can also be displayed. .
[0003]
[Patent Document 1]
JP-A-9-42987 (pages 1-4, FIG. 1)
[Patent Document 2]
JP-A-8-327375 (pages 1-4, FIG. 1)
[0004]
[Problems to be solved by the invention]
However, in the above-described conventional facility guidance system, it is possible to search for a facility near the current location or the destination on a map from a genre name, a facility name, an address, a telephone number, etc., but what facilities are visible in the field of view. If you didn't know, you couldn't search. In addition, the names of facilities such as mountains and buildings that can be seen outside the vehicle can be read from the map data and displayed, but since these are limited to the direction of the vehicle, information on the facilities in any direction can be obtained. There was no problem.
[0005]
The present invention solves such a conventional problem, and a facility guidance system that can easily acquire information about a facility in an arbitrary direction as viewed from a user even if the name of the facility is not known. The purpose is to provide.
[0006]
In order to achieve the above object, a facility guidance system according to the present invention includes a portable terminal device and a server connected to a network, wherein the portable terminal device detects communication means capable of transmitting and receiving data, and detects a current position. Current position detecting means, an azimuth detecting means for detecting an azimuth of a facility within the field of view at the current position, an inputting means for inputting a question about the facility, and the detected current position data, azimuth data and the facility. Output means for transmitting a guidance request including question data to the server through the communication means, and outputting a guidance response to the guidance request received from the server, wherein the server transmits a guidance request from the mobile terminal device. Receiving means for receiving, and searching means for searching information on the facility from a map database based on the received guidance request, And greetings creating means for creating a greeting based on the search results, characterized in that the guide response the created and a transmitting means for transmitting to the portable terminal device via the network. With this configuration, when the user does not know what facility is visible from the current location, the user simply points the mobile terminal device to the facility and inputs, for example, "What's that store?" , The current position data, the azimuth data for the facility, and the question data are transmitted to an external server through communication means, and the server searches for map data based on the data, and provides guidance information about the facility to the portable terminal device. , The user can easily obtain the guidance information about the facility even if he does not know the name of the facility.
[0007]
Further, the facility guidance system of the present invention, wherein the portable terminal device includes: a photographing unit that photographs the facility; and an image processing unit that extracts shape data of the facility from the photographed image data. The information is transmitted to the server while being included in the guidance request. With this configuration, when the user does not know what the facility is, the user can obtain more accurate information from the server by photographing the facility and sending the shape data to the server.
[0008]
Further, in the facility guidance system of the present invention, the input means of the portable terminal device is an operation key for inputting a question about the facility in 50 sounds, and the input character code data is included in the guidance request. It is transmitted to a server. With this configuration, if the user does not know what the facility is, the user can easily create the question data simply by inputting, for example, "what's that store?"
[0009]
Further, in the facility guidance system of the present invention, the input means of the portable terminal device is a voice input means for inputting a question about the facility by voice, and the input request includes the input voice data in the guidance request and the server Is transmitted. With this configuration, if the user does not know what the facility is, the user can easily create the question data simply by inputting a voice, for example, “What is that store?”.
[0010]
Further, in the facility guidance system of the present invention, the current position detection means of the portable terminal device is a GPS receiver, and the longitude and latitude data received by the GPS receiver is included in the guidance request and transmitted to the server. It is characterized by. With this configuration, the current position of the mobile terminal device can be easily detected.
[0011]
Further, the facility guidance system of the present invention is characterized in that the azimuth detecting means of the portable terminal device is a geomagnetic sensor, and the absolute azimuth data detected by the geomagnetic sensor is included in the guidance request and transmitted to the server. And With this configuration, the user can easily detect the azimuth of the facility from the current location by pointing the portable terminal device at the facility.
[0012]
Further, in the facility guidance system according to the present invention, the server includes a guidance information database that stores facility guidance information received from a facility manager by the receiving unit, and creates the guidance response including the facility guidance information. It is characterized by the following. With this configuration, when the user does not know what the facility is, the user can turn the portable terminal device to the facility and simply ask, for example, "What is that?" In addition, it is possible to easily obtain publicity information such as event information, exhibition contents, and bargain information at the facility, and the facility can also advertise to customers.
[0013]
Further, the facility guidance system of the present invention is characterized in that the server retrieves information including only one name of the facility from a map database and outputs the information. With this configuration, for example, when shops are connected, only information about the most characteristic shop can be output.
[0014]
Further, the facility guidance system of the present invention is characterized in that the server retrieves information including a plurality of names of the facility from a map database and outputs the information. With this configuration, for example, when shops are connected, it is possible to output information about each of the characteristic shops.
[0015]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings. FIG. 1 shows a schematic configuration of a mobile terminal device according to the present embodiment, which is configured as a mobile phone. In FIG. 1, an antenna 1 transmits and receives radio waves to and from a base station, and the base station is connected to the Internet. The transmission / reception unit 2 controls the frequency of a radio wave transmitted or received through the antenna 1 and selects a predetermined channel. The signal processing unit 3 encodes and modulates audio data and image data transmitted on the selected channel, and demodulates and decodes the received audio data and image data. The control unit 4 is a microprocessor including a CPU, a RAM, a ROM, and an I / O, and controls the entire device. The microphone 5 performs voice input for a telephone call and control. The loudspeaker 6 outputs the voice of the other party and the synthesized sound processed. The audio processing unit 7 converts the audio input from the microphone 5 into digital data and outputs it as audio data, and also converts the digital audio data into analog data and outputs it from the speaker 6. The CCD camera 8 uses a CCD image sensor to photoelectrically convert and output an object to be photographed. The CCD camera 8 is provided with an electronically controllable infrared filter in front of the CCD image sensor so that it can photograph at night. I have. The image processing unit 9 pre-processes the signal from the CCD camera 8 and converts it into digital data, and then performs feature extraction by edge detection and outputs shape data. The GPS receiver 10 calculates a current position (latitude / longitude) by calculating radio waves from a plurality of satellites received by a GPS antenna. The direction sensor 11 is an electronic geomagnetic sensor and outputs an absolute direction. The liquid crystal display 12 displays characters and figures using a liquid crystal display. The key operation unit 13 is a keypad including numeric keys and function keys. The mobile phone 14 is configured to include at least these components.
[0016]
FIG. 2 shows an appearance of a mobile phone 14 according to the present embodiment, in which an antenna 1 is attached to an upper part of a housing so as to face upward, and a speaker 6, a liquid crystal display 12, and a key operation unit are provided on the front side of the housing. 13 and a microphone 5 are arranged. The CCD camera 8 is arranged on the back side of the upper part of the housing. When photographing the facility, the mode is switched to the facility guidance mode by pressing the mode switching button 13a of the key operation unit 13, and then the CCD camera 8 is turned to the facility and photographed while displaying the photographed image on the liquid crystal display 12. Press the button 13b.
[0017]
FIG. 3 shows a configuration of the server 21. The server 21 includes a transmission / reception unit 22 connected to the Internet 20, a data processing unit 23, and a control unit 24. The control unit 24 includes a voice recognition unit 25, a data search unit 26 , A guidance response creating unit 27, a word dictionary database 28, a map database 29, a guidance information database 30, and a communication recording unit 31. The transmitting / receiving unit 22 constitutes a receiving unit and a transmitting unit for making and communicating with the mobile phone 14 via the Internet 20, and the data processing unit 23 performs a modulation / demodulation process and a coding / decoding process of the reception data or the transmission data. The control unit 24 passes the question data based on the voice data to the voice recognition unit 25 from the received data, and the voice recognition unit 25 compares the question data with the voice data in the word dictionary database 28, and selects a match. Output character code data. The data search unit 26 searches the map database 29 for the name of the corresponding facility based on the character code data, the received position data, the direction data, and the shape data. The map database 29 stores planar shape data and elevation shape data, and position data and name data of the facility. Therefore, the data search unit 26 can search the name of the facility having the predetermined shape at the predetermined position in the predetermined direction from the character code data, the position data, the direction data, and the shape data. The data search unit 26 also searches for guidance advertisement information for the facility in the guidance information database 30 based on the searched facility name. The guidance information database 30 stores guidance notice information received from the facility manager via the Internet 20. For example, when the facility is a store or a department store, the advertisement information including bargain information such as bargain sale and bargain sale information is stored in association with the code number assigned to the facility. The retrieved facility name and guidance announcement information are combined into a predetermined format by the guidance response creation unit 27 to create a guidance response, converted into transmission data by the data processing unit 23, and transmitted from the transmission / reception unit 22 via the Internet 20. To the mobile phone 14 that has requested the guidance. The communication recording unit 31 records the received telephone number of the mobile phone 14, the received items, the transmitted items, and the date and time, and performs a billing process if necessary.
[0018]
Next, the operation of the facility guidance system according to the present embodiment will be described with reference to FIGS. When the user presses the mode switching button 13a from the key operation unit 13 of the mobile phone 14, the control unit 4 switches from the call mode to the facility guidance mode (step S1), and fetches the current position data from the GPS receiver 10, It is stored in the RAM (step S2). Next, when the user points the CCD camera 8 toward the facility and presses the photographing button 13b, the CCD camera 8 photographs the facility (step S3), and the image processing unit 9 performs processing for extracting shape data from the photographed image. (Step S4). At the same time, the azimuth sensor 11 detects the shooting azimuth that is the direction in which the CCD camera 8 is turned (step S5). Next, when the user asks the microphone 5 a question such as "that store, what?" By voice (step S6), the voice processing unit 7 converts the voice into digital data and outputs it. The control unit 4 checks whether or not the question data has been input from the voice processing unit 7 (step S7). If not, the control unit 4 outputs a guidance message from the speaker 6 to urge the utterance. Although it is preferable to input only words in this utterance, there may be a user who utters a sentence instead of a word, for example, "What is that store?" If the spoken voice is a sentence, only words are extracted as question data. When the shape data and the question data are input, the control unit 4 sends the data together with the current position data and the azimuth data to the data processing unit 3, and performs necessary encoding and modulation in the data processing unit 3 to create transmission data. A transmission request is transmitted from the transmission / reception unit 2 to the base station via the antenna 1 as a guidance request, and transmitted from the base station to the server 21 via the Internet 20 (step S8).
[0019]
As shown in FIG. 5, the server 21 receives guide information and publicity information about the facility from the facility manager via the Internet 20 in advance and registers the guide information and the facility code number in the guide information database 30 (step S1). S11).
Then, when a guidance request is received from the mobile phone 14 via the Internet 20 (step S12), the data search unit 26 corresponds to the current position data, azimuth data, shape data, question data, etc. in the guidance request. The name of the facility is searched from the map database 29 (step S13). At this time, if digital voice data is included in the guidance request, the voice recognition unit 25 performs voice recognition with reference to the word dictionary database 28 and analyzes the contents of the question data. When a plurality of facilities are connected to the corresponding position, only one of the most characteristic facilities is extracted, or a plurality of facilities are sequentially extracted. Which is to be set in advance. Next, it is determined whether or not the guidance advertisement information of the facility is registered in the guidance information database 30 (step S14). If the guidance advertisement information is registered, the guidance advertisement information is extracted (step S15). Then, a guidance response is created by combining the detected facility name and the guidance announcement information by the guidance response creation unit 27, created as transmission data by the data processing unit 23, and transmitted from the transmission / reception unit 22 to the mobile phone 14 through the Internet 20. It transmits (step S16). Finally, a communication history including the reception items and the transmission items is recorded in the communication recording unit 31 (step S17).
[0020]
In FIG. 4, when the transmission / reception unit 2 of the mobile phone 14 receives a guidance response from the server 21 via the Internet 20 and the base station (step S9), the data processing unit 3 demodulates the reception frequency into a baseband signal. , Performs a decoding process and passes the result to the control unit 4. The control unit 4 outputs character data and image data in the guidance response to the liquid crystal display 12 to display characters and graphics, and outputs voice data from the speaker 6 (step S10).
[0021]
As described above, according to the present embodiment, when the user wants to know what the facility within the field of view is, he or she shoots the CCD camera 8 of the mobile phone 14 at the facility and shoots the microphone 5. For example, simply inputting a voice, "What is that?", Sends a guidance request including the video data and question data, the current position data from the GPS receiver 10 and the direction data from the direction sensor 11 to the server. Then, since the server returns the guide information including the name of the facility to the mobile phone 14, information about the facility in an arbitrary direction as viewed from the user can be easily acquired.
[0022]
In the above embodiment, the voice data input by the microphone 5 and the voice processing unit 7 is output as question data as input means. By doing so, the question may be asked using character code data. In this case, since the function of a general mobile phone is used as it is, the configuration is simplified, and an increase in cost can be suppressed.
[0023]
In the above-described embodiment, the facility is photographed by the CCD camera 8 and the image processing unit 9 to extract the shape data. However, these are not used, and only the current position data, the direction data, and the question data are used. It may be sent to a server. In this case, the configuration is further simplified, and an increase in cost can be suppressed.
[0024]
Further, in the above embodiment, the geomagnetic sensor is used as the direction sensor 11, but the direction data can be acquired by the GPS receiver 10. This is to calculate the azimuth from the difference between the position of the chest and the position of the mobile phone in front by protruding the arm toward the facility from a state where the mobile phone is placed on the chest.
[0025]
The information about the facility sent from the server 21 to the mobile phone 14 is character information, graphic information, voice information, or a combination thereof. In the case of character information, the information is sent as character code data, and in the case of voice information, voice synthesis is performed. Is sent as voice data. In the case of image information, the figure or name or character of the facility is sent as deformed figure data, which is displayed on the liquid crystal display 12 of the mobile phone 14. At this time, the facility may be clearly distinguished from others by flashing, bolding, or enlarging the characters, images, backgrounds, and the like of the visual recognition target.
[0026]
Further, in the above-described embodiment, an example is described in which the present invention is configured as a mobile phone, but the present invention can also be configured as a mobile terminal device such as a PDA.
[0027]
【The invention's effect】
As described above, the facility guidance system of the present invention includes a portable terminal device and a server connected to a network, the portable terminal device includes a communication unit capable of transmitting and receiving data, and a current position for detecting a current position. Detecting means, azimuth detecting means for detecting the azimuth of the facility within the field of view at the current position, input means for inputting a question about the facility, and a guidance request including the detected current position data, azimuth data, and question data about the facility. Output means for transmitting a guidance response to the guidance request received from the server, and receiving means for receiving the guidance request from the portable terminal device; and Search means for searching for information on facilities from the map database, guidance response creation means for creating a guidance response based on the search results, creation Transmitting means for transmitting the guidance response to the portable terminal device through the network, so that when the user does not know what facility is visible from the current position, while pointing the portable terminal device to that facility, for example, Just enter "What's that store?" And the external server sends back the guidance information about the facility, so even if the user doesn't know the name of the facility, the guidance information about the facility is available. Can be easily obtained.
[Brief description of the drawings]
FIG. 1 is a schematic block diagram showing a configuration of a mobile phone according to an embodiment of the present invention. FIG. 2 is a front view showing an appearance of the mobile phone according to the embodiment of the present invention. FIG. 4 is a schematic block diagram showing a configuration of a server. FIG. 4 is a schematic flowchart showing facility guidance processing on a mobile phone side in an embodiment of the present invention. FIG. 5 shows a facility guidance process on a server side in an embodiment of the present invention. Schematic flow diagram [Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 Antenna 2 Transmission / reception part 3 Data processing part 4 Control part 5 Microphone 6 Speaker 7 Audio processing part 8 CCD camera 9 Image processing part 10 GPS receiver 11 Direction sensor 12 Liquid crystal display 13 Key operation part 14 Mobile telephone 20 Internet 21 Server 22 Transmission / reception unit 23 Data processing unit 24 Control unit 25 Voice recognition unit 26 Data search unit 27 Guidance response creation unit 28 Word dictionary database 29 Map database 30 Guidance information database 31 Communication recording unit
