JP2019049486A - Display control device, display control method, and program - Google Patents

Abstract

To present a route guidance to a user in a situation effective for the user.SOLUTION: A display control device includes: a storage unit for storing destination information; a positional information acquisition unit for acquiring positional information indicating the current place of the user; a troubled state detection unit for detecting the troubled state of the user; and a display control unit for making a display unit display a route guidance used for moving from the current place of the user indicated by the positional information to a destination indicated by the destination information stored in the storage unit, on the basis of the fact that the troubled state of the user has been detected by the troubled state detection unit.SELECTED DRAWING: Figure 3

Description

本発明は、表示制御装置、表示制御方法およびプログラムに関する。   The present invention relates to a display control device, a display control method, and a program.

近日、インターネットを通じて提供されるルート検索サービスが広く利用されている。例えば、鉄道のルート検索サービスでは、ユーザが出発駅、目的駅および出発日時などの検索条件を入力すると、検索結果としてルート案内がユーザに提示される。ユーザは、一般的に、目的地に向けて出発する前に、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）またはスマートフォンなどを用いてこのようなルート検索サービスを利用する。   Recently, route search services provided via the Internet are widely used. For example, in the railway route search service, when the user inputs search conditions such as a departure station, a destination station, and a departure date and time, route guidance is presented to the user as a search result. A user generally uses such a route search service using a personal computer (PC) or a smartphone before leaving for a destination.

特開２０１７−１５４８５号公報JP, 2017-15485, A

しかし、ユーザが目的地に向けて出発する前にルート案内を確認しても、目的地に到着する途中にユーザがルート案内を忘れる場合、および、実際の移動がルート案内の通りに進まない場合などがあり、このような場合、ユーザは現在地から目的駅に至るためのルート案内の提示を望み得る。また、同じ方面に向かう複数の種類の列車が存在する乗車駅または乗換駅において、ユーザは駅の電子案内表を見てもどの列車に乗るべきか迷う場合がある。   However, even if the user confirms route guidance before leaving for the destination, the user may forget the route guidance while arriving at the destination, and the actual movement does not follow the route guidance. In such a case, the user may wish to present route guidance for reaching the destination station from the current location. In addition, in a boarding station or a transfer station where there are multiple types of trains heading in the same direction, the user may be confused as to which train should be taken even by looking at the station's electronic guide sheet.

特許文献１には、グラス型端末を用いたナビゲーションシステムが開示されている。上記、グラス型端末は、設定された目的地と現在位置に基づき、現在位置から目的地までの移動ルートを検索し、検索された移動ルートに従って移動方向を表示する。特許文献１に記載されたナビゲーションシステムに関連して、逐次ユーザに最新のルート案内を提示するシステムを構築することが考えられる。しかし、ユーザが望んでいないタイミングでルート案内が繰り返し提示されることは、ユーザにとって煩雑である。   Patent Document 1 discloses a navigation system using a glass terminal. Above, the glass type terminal searches for a moving route from the current position to the destination based on the set destination and the current position, and displays the moving direction according to the searched moving route. In relation to the navigation system described in Patent Document 1, it is conceivable to construct a system that sequentially presents the latest route guidance to the user. However, it is troublesome for the user that route guidance is repeatedly presented at a time when the user does not want it.

そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、ユーザにとって有用な状況でユーザにルート案内を提示することが可能な、新規かつ改良された表示制御装置、表示制御方法およびプログラムを提供することにある。   Therefore, the present invention has been made in view of the above problems, and an object of the present invention is to provide a new and improved display capable of presenting route guidance to a user in a useful situation for the user. Provided are a control device, a display control method, and a program.

上記課題を解決するために、本発明のある観点によれば、目的地情報を記憶する記憶部と、ユーザの現在地を示す位置情報を取得する位置情報取得部と、前記ユーザの困惑状態を検出する困惑検出部と、前記困惑検出部により前記ユーザの困惑状態が検出されたことに基づき、前記位置情報が示す前記ユーザの現在地から前記記憶部に記憶された目的地情報が示す目的地に移動するためのルート案内を表示部に表示させる表示制御部と、を備える、表示制御装置が提供される。   To solve the above problems, according to one aspect of the present invention, a storage unit that stores destination information, a position information acquisition unit that acquires position information that indicates the current position of the user, and the confusion state of the user are detected. Moving from the current location of the user indicated by the position information to the destination indicated by the destination information stored in the storage unit, based on the confusion detection unit detecting the confusion and the confusion detection unit detecting the confusion state of the user And a display control unit that causes the display unit to display route guidance for the display control unit.

前記表示制御部は、前記ユーザの困惑状態の程度に応じて、前記ルート案内を異なる態様で前記表示部に表示させてもよい。   The display control unit may cause the display unit to display the route guidance in a different manner in accordance with the degree of confusion state of the user.

前記表示制御部は、前記ユーザの困惑状態の程度が高いほど情報量が低くなるように、前記ルート案内を前記表示部に表示させてもよい。   The display control unit may cause the display unit to display the route guidance such that the amount of information decreases as the degree of confusion of the user increases.

前記困惑検出部は、前記ユーザの眼球運動に基づいて前記ユーザの困惑状態を検出してもよい。   The puzzle detection unit may detect the puzzle state of the user based on eye movement of the user.

前記困惑検出部は、前記ユーザの頭部運動に基づいて前記ユーザの困惑状態を検出してもよい。   The puzzle detection unit may detect a puzzle state of the user based on head movement of the user.

前記表示制御装置は、前記ユーザの視野の少なくとも一部を含む撮像画像を取得する画像取得部と、前記撮像画像から所定のオブジェクトを検出するオブジェクト検出部と、をさらに備え、前記表示制御部は、前記困惑検出部により前記ユーザの困惑状態が検出され、かつ、前記オブジェクト検出部により前記所定のオブジェクトが検出されたことに基づき、前記ルート案内を前記表示部に表示させてもよい。   The display control device further includes an image acquisition unit that acquires a captured image including at least a part of the field of view of the user, and an object detection unit that detects a predetermined object from the captured image, and the display control unit The route guidance may be displayed on the display unit based on the confusion detection unit detecting the confusion state of the user and the object detection unit detecting the predetermined object.

前記ルート案内は、移動機関を利用するルートを案内し、前記所定のオブジェクトは、前記移動機関の乗物の出発を案内する電子案内表であってもよい。   The route guidance may guide a route using a mobile engine, and the predetermined object may be an electronic guidance table for guiding a departure of a vehicle of the mobile engine.

前記困惑検出部は、前記位置情報が示す前記ユーザの現在地が設定エリアに到達したことに基づいて前記困惑状態の検出処理を開始してもよい。   The confusion detection unit may start the confusion state detection processing based on the current position of the user indicated by the position information reaching a setting area.

前記画像取得部は、前記位置情報が示す前記ユーザの現在地が設定エリアに到達したことに基づいて前記撮像画像の取得を開始してもよい。   The image acquisition unit may start acquisition of the captured image based on the current position of the user indicated by the position information reaching a setting area.

また、上記課題を解決するために、本発明の別の観点によれば、目的地情報を記憶することと、ユーザの現在地を示す位置情報を取得することと、前記ユーザの困惑状態を検出することと、前記ユーザの困惑状態が検出されたことに基づき、前記位置情報が示す前記ユーザの現在地から前記目的地情報が示す目的地に移動するためのルート案内を表示部に表示させることと、を含む、表示制御方法が提供される。   In order to solve the above problems, according to another aspect of the present invention, storing destination information, acquiring position information indicating a user's current location, and detecting the user's confusion state Displaying on the display unit a route guidance for moving from the current location of the user indicated by the position information to a destination indicated by the destination information based on the detection of the confusion state of the user; And a display control method is provided.

また、上記課題を解決するために、本発明の別の観点によれば、コンピュータに、目的地情報を記憶することと、ユーザの現在地を示す位置情報を取得することと、前記ユーザの困惑状態を検出することと、前記ユーザの困惑状態が検出されたことに基づき、前記位置情報が示す前記ユーザの現在地から前記目的地情報が示す目的地に移動するためのルート案内を表示部に表示させることと、を実行させるための、プログラムが提供される。   In order to solve the above problems, according to another aspect of the present invention, storing destination information in a computer, acquiring position information indicating the current position of the user, and confusion state of the user And displaying on the display unit a route guidance for moving from the current location of the user indicated by the position information to the destination indicated by the destination information, based on the detection of the user's confusion state. A program is provided to execute the program.

以上説明したように本発明によれば、ユーザにとって有用な状況でユーザにルートの検索結果を提示することが可能である。   As described above, according to the present invention, it is possible to present route search results to a user in a situation useful to the user.

本発明の実施形態によるルート案内システムの構成を示す説明図である。It is an explanatory view showing the composition of the route guidance system by the embodiment of the present invention. ウェアラブル端末が表示するルート案内の具体例を示す説明図である。It is explanatory drawing which shows the specific example of the route guidance which a wearable terminal displays. 第１の実施形態によるウェアラブル端末の構成を示す説明図である。It is an explanatory view showing the composition of the wearable terminal by a 1st embodiment. 簡易形式のルート案内を示す説明図である。It is an explanatory view showing route guidance of a simple type. 通常形式のルート案内を示す説明図である。It is explanatory drawing which shows the route guidance of a normal form. 第１の実施形態によるウェアラブル端末の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the wearable terminal by 1st Embodiment. 第２の実施形態によるウェアラブル端末の構成を説明図である。It is an explanatory view of composition of a wearable terminal by a 2nd embodiment. 第２の実施形態によるウェアラブル端末の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the wearable terminal by 2nd Embodiment. ウェアラブル端末のハードウェア構成を示したブロック図である。It is a block diagram showing the hardware constitutions of a wearable terminal.

以下に添付図面を参照しながら、本発明の実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。   Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. In the present specification and the drawings, components having substantially the same functional configuration will be assigned the same reference numerals and redundant description will be omitted.

また、本明細書及び図面において、実質的に同一の機能構成を有する複数の構成要素を、同一の符号の後に異なるアルファベットを付して区別する場合もある。ただし、実質的に同一の機能構成を有する複数の構成要素の各々を特に区別する必要がない場合、複数の構成要素の各々に同一符号のみを付する。   Further, in the present specification and the drawings, a plurality of components having substantially the same functional configuration may be distinguished by attaching different alphabets to the same reference numerals. However, when it is not necessary to distinguish each of a plurality of components having substantially the same functional configuration, each of the plurality of components is only given the same reference numeral.

＜ルート案内システムの構成＞
本発明の実施形態は、ユーザに指定された目的地から出発地に至るまでのルートを検索し、検索結果をユーザに提示するシステムに関する。当該システムは、例えば、鉄道、バスおよび飛行機などの公共の移動機関を利用するルートの検索に適用され得る。以下では、本発明の実施形態の一例として、鉄道を利用するルートの検索を行い、検索結果であるルート案内をユーザに提示するルート案内システムを説明する。 <Configuration of route guidance system>
An embodiment of the present invention relates to a system for searching for a route from a destination designated by a user to a departure place and presenting search results to the user. The system can be applied, for example, to search for routes using public mobiles such as railways, buses and planes. In the following, as an example of the embodiment of the present invention, a route guidance system will be described which searches for a route using a railway and presents the user with route guidance as a search result.

図１は、本発明の実施形態によるルート案内システムの構成を示す説明図である。図１に示したように、本発明の実施形態によるルート案内システムは、ウェアラブル端末２０およびルート検索サーバ３０を含む。   FIG. 1 is an explanatory view showing the configuration of a route guidance system according to an embodiment of the present invention. As shown in FIG. 1, a route guidance system according to an embodiment of the present invention includes a wearable terminal 20 and a route search server 30.

ウェアラブル端末２０およびルート検索サーバ３０は図１に示したようにネットワーク１２を介して接続される。ネットワーク１２は、ネットワーク１２に接続されている装置から送信される情報の有線、または無線の伝送路である。例えば、ネットワーク１２は、インターネット、電話回線網、衛星ネットワークなどの公衆回線網や、Ｅｔｈｅｒｎｅｔ（登録商標）を含む各種のＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）などを含んでもよい。また、ネットワーク１２は、ＩＰ−ＶＰＮ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ−Ｖｉｒｔｕａｌ Ｐｒｉｖａｔｅ Ｎｅｔｗｏｒｋ）などの専用回線網を含んでもよい。   The wearable terminal 20 and the route search server 30 are connected via the network 12 as shown in FIG. The network 12 is a wired or wireless transmission path of information transmitted from devices connected to the network 12. For example, the network 12 may include the Internet, a public network such as a telephone network, a satellite network, various LANs (Local Area Networks) including Ethernet (registered trademark), a WAN (Wide Area Network), and the like. Also, the network 12 may include a dedicated line network such as an Internet Protocol-Virtual Private Network (IP-VPN).

ウェアラブル端末２０は、ユーザに装着された状態でユーザによって携帯される。本発明の実施形態によるウェアラブル端末２０は、例えば出発駅および目的駅を指定する検索条件をルート検索サーバ３０に送信し、ルート検索サーバ３０から受信される検索結果をルート案内として表示する。   The wearable terminal 20 is carried by the user while being worn by the user. The wearable terminal 20 according to the embodiment of the present invention transmits, for example, search conditions specifying a departure station and a target station to the route search server 30, and displays the search results received from the route search server 30 as route guidance.

図２は、ウェアラブル端末２０が表示するルート案内の具体例を示す説明図である。図２に示したルート案内は、出発駅がＡ駅であり目的駅がＣ駅である場合のルート案内であり、Ａ駅でｘｘｘ線に乗車した後、Ｂ駅でｙｙｙ線に乗り換えるべきことが示されている。その他、ルート案内は、出発駅であるＡ駅およびＢ駅の発車時刻、Ｃ駅への到着時刻、および運賃などの情報を含む。   FIG. 2 is an explanatory view showing a specific example of route guidance displayed by the wearable terminal 20. As shown in FIG. The route guidance shown in FIG. 2 is route guidance when the departure station is station A and the target station is station C, and after taking the xxx line at station A, it is necessary to change to line yyy at station B It is shown. In addition, route guidance includes information such as departure times of departure stations A and B, arrival time to station C, and fares.

なお、図２においてはルート案内を表示する表示制御装置の一例としてグラス型のウェアラブル端末を示したが、表示制御装置はグラス型のウェアラブル端末に限定されない。例えば、表示制御装置は腕時計型またはネックレス型などの他の種類のウェアラブル端末であってもよい。また、表示制御装置はウェアラブル端末に限定されず、表示制御装置はスマートフォンおよび携帯電話などの携帯端末であってもよい。   Although FIG. 2 shows a glass-type wearable terminal as an example of a display control device for displaying route guidance, the display control device is not limited to the glass-type wearable terminal. For example, the display control device may be a watch-type or other type of wearable terminal such as a necklace-type. Further, the display control device is not limited to the wearable terminal, and the display control device may be a mobile terminal such as a smartphone and a mobile phone.

ルート検索サーバ３０は、鉄道の路線情報、各駅の列車時刻表などを記憶しており、ウェアラブル端末２０から受信した検索条件に従ってルートを検索し、検索結果をウェアラブル端末２０に送信する。   The route search server 30 stores railway route information, train timetables of each station, etc., searches for a route according to the search condition received from the wearable terminal 20, and transmits the search result to the wearable terminal 20.

（背景）
上述したウェアラブル端末２０のユーザは、目的地に向けて出発する前にルート検索を実行してルート案内を確認することができる。しかし、目的地に到着する途中にユーザがルート案内を忘れる場合、および、実際の移動がルート案内の通りに進まない場合などがあり、このような場合、ユーザは現在地から目的駅に至るためのルート案内の提示を望み得る。同じ方面に向かう複数の種類の列車が存在する乗車駅または乗換駅において、ユーザは駅の電子案内表を見てもどの列車に乗るべきか迷う場合がある。 (background)
The user of the wearable terminal 20 described above can perform route search and confirm route guidance before leaving for a destination. However, there are cases where the user forgets the route guidance while arriving at the destination, and when the actual movement does not follow the route guidance. In such a case, the user is required to reach the destination station from the current location. It may be desirable to present route guidance. In a boarding station or a transfer station where there are multiple types of trains heading in the same direction, the user may be unsure of which train to ride even if he looks at the station's electronic guide sheet.

この点に関し、ユーザが目的地に向けて出発した後も、ユーザの現在地から目的地までのルート案内を逐次ユーザに提示する方法も考えられる。しかし、ユーザが望んでいないタイミングでルート案内が繰り返し提示されることは、ユーザにとって煩雑である。   In this regard, it is also conceivable to provide the user with route guidance from the user's current location to the destination sequentially, even after the user departs for the destination. However, it is troublesome for the user that route guidance is repeatedly presented at a time when the user does not want it.

本発明の幾つかの実施形態によれば、ユーザにとって有用な状況でルート案内を提示することが可能である。特に、本発明の幾つかの実施形態によれば、ユーザが乗車すべき列車が分からず困惑している状況においてユーザにルート案内を提示し得る。以下、このような本発明の幾つかの実施形態を順次詳細に説明する。なお、本明細書においては各実施形態によるウェアラブル端末をウェアラブル端末２０と総称し、各実施形態によるウェアラブル端末をウェアラブル端末２１、２２のように末尾に異なる数字を付して区別する。   According to some embodiments of the present invention, it is possible to present route guidance in a context that is useful to the user. In particular, according to some embodiments of the present invention, route guidance may be presented to the user in situations where the user is confused and unsure of the train to be boarded. Hereinafter, some embodiments of the present invention will be sequentially described in detail. In the present specification, wearable terminals according to the respective embodiments are collectively referred to as the wearable terminals 20, and wearable terminals according to the respective embodiments are distinguished by appending different numbers to the end like the wearable terminals 21 and 22.

＜第１の実施形態＞
（ウェアラブル端末の構成）
図３は、第１の実施形態によるウェアラブル端末２１の構成を示す説明図である。図３に示したように、第１の実施形態によるウェアラブル端末２１は、通信部２２０、表示部２２４、操作部２２８、撮像部２３２、収音部２３６、位置推定部２４０、センサ部２４４、制御部２５０および記憶部２７０を備える。 First Embodiment
(Configuration of wearable terminal)
FIG. 3 is an explanatory view showing the configuration of the wearable terminal 21 according to the first embodiment. As shown in FIG. 3, the wearable terminal 21 according to the first embodiment includes a communication unit 220, a display unit 224, an operation unit 228, an imaging unit 232, a sound collection unit 236, a position estimation unit 240, a sensor unit 244, and control. A unit 250 and a storage unit 270 are provided.

通信部２２０は、ルート検索サーバ３０と通信するインタフェースである。通信部２２０は、操作部２２８または収音部２３６を介して入力された出発地、目的地または出発時刻を含む検索条件をルート検索サーバ３０に送信する送信部、および、ルート検索サーバ３０から検索結果であるルート案内を受信する受信部としての機能を有する。   The communication unit 220 is an interface that communicates with the route search server 30. The communication unit 220 transmits to the route search server 30 a search condition including the departure place, the destination, or the departure time input through the operation unit 228 or the sound collection unit 236, and searches from the route search server 30. It has a function as a receiver that receives the resulting route guidance.

表示部２２４は、ルート案内を表示する。表示部２２４は、例えば、ウェアラブル端末２１のレンズに貼られた液晶フィルムおよび当該液晶フィルムに映像を投影する投影部で構成されてもよい。   The display unit 224 displays route guidance. The display unit 224 may be configured of, for example, a liquid crystal film attached to the lens of the wearable terminal 21 and a projection unit that projects an image on the liquid crystal film.

操作部２２８は、ユーザがウェアラブル端末２１に情報または指示を入力するために操作を行う構成である。ユーザは、操作部２２８を操作することで、出発地、目的地または出発時刻を含む検索条件を入力することが可能である。当該操作部２２８は、例えばタッチパネルであってもよいし、ボタンであってもよい。   The operation unit 228 is configured to perform an operation for the user to input information or an instruction to the wearable terminal 21. The user can operate the operation unit 228 to input a search condition including a departure place, a destination, or a departure time. The operation unit 228 may be, for example, a touch panel or a button.

撮像部２３２は、撮像面に集光された被写体像を電気的信号に変換することにより撮像画像を取得する画像取得部である。本実施形態による撮像部２３２の撮像範囲は、ユーザの視野の少なくとも一部を含む。このため、撮像部２３２はユーザの目の近くに位置し、撮像部２３２の画角はユーザの視線方向を含むことが望ましい。   The imaging unit 232 is an image acquisition unit that acquires a captured image by converting an object image collected on the imaging surface into an electrical signal. The imaging range of the imaging unit 232 according to the present embodiment includes at least a part of the field of view of the user. Therefore, it is desirable that the imaging unit 232 be located near the eyes of the user, and the angle of view of the imaging unit 232 include the direction of the user's gaze.

収音部２３６は、空気的な振動である音声を電気的信号に変換することにより音声データを取得する音声取得部である。ユーザは、出発地、目的地または出発時刻を発声することにより、検索条件を入力することが可能である。   The sound collection unit 236 is a sound acquisition unit that acquires sound data by converting sound that is airy vibration into an electrical signal. The user can input the search condition by speaking out the departure place, the destination place or the departure time.

位置推定部２４０は、ウェアラブル端末２１の現在位置を推定する。位置推定部２４０は、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）衛星から受信される航法メッセージを解析することによりウェアラブル端末２１の現在位置を推定してもよい。または、位置推定部２４０は、複数のアクセスポイントから受信されるビーコンの受信強度に基づきウェアラブル端末２１の現在位置を推定してもよい。   The position estimation unit 240 estimates the current position of the wearable terminal 21. The position estimation unit 240 may estimate the current position of the wearable terminal 21 by analyzing a navigation message received from a GPS (Global Positioning System) satellite. Alternatively, the position estimation unit 240 may estimate the current position of the wearable terminal 21 based on the reception strength of beacons received from a plurality of access points.

センサ部２４４は、ユーザの動きや状態を検出する。具体的には、第１の実施形態によるセンサ部２４４はユーザの眼球運動を検出するセンサを有し、このようなセンサとしては、眼電位センサおよび赤外線センサなどが挙げられる。   The sensor unit 244 detects the movement or state of the user. Specifically, the sensor unit 244 according to the first embodiment has a sensor that detects eye movement of the user, and such sensors include an electro-oculogram sensor, an infrared sensor, and the like.

制御部２５０は、ウェアラブル端末２１の動作全般を制御する。特に、本実施形態による制御部２５０は、ユーザの困惑状態が検出された場合に、ユーザの現在地から目的地に至るためのルート案内を表示部２２４に表示させる。このような制御部２５０の機能は、図３に示したように、エリア判定部２５１、眼球運動パターン検出部２５２、眼球運動速度特定部２５３、オブジェクト検出部２５４、検索制御部２５５および表示制御部２５６の機能に細分化される。   The control unit 250 controls the overall operation of the wearable terminal 21. In particular, when the puzzled state of the user is detected, the control unit 250 according to the present embodiment causes the display unit 224 to display route guidance for reaching the destination from the current location of the user. The function of the control unit 250 is, as shown in FIG. 3, an area determination unit 251, an eye movement pattern detection unit 252, an eye movement speed identification unit 253, an object detection unit 254, a search control unit 255, and a display control unit. It is subdivided into 256 functions.

エリア判定部２５１は、ウェアラブル端末２１（ユーザ）が設定エリアに到達したか否かを判定する。設定エリアは、駅のホームやコンコースに設置されており、列車の出発を案内する電子案内表を含むエリアである。エリア判定部２５１は、例えば、位置推定部２４０により推定されるウェアラブル端末２１の現在位置に基づいてウェアラブル端末２１が設定エリアに到達したか否かを判定することが可能である。また、電子案内表の近傍に設置されたアクセスポイントが所定のフラグを含むビーコンを送信する場合、エリア判定部２５１は、通信部２２０により所定のフラグを含むビーコンが受信されたか否かに基づいてウェアラブル端末２１が設定エリアに到達したか否かを判定することが可能である。   The area determination unit 251 determines whether the wearable terminal 21 (user) has reached the setting area. The setting area is an area which is installed at the station home or concourse and includes an electronic guide sheet for guiding the departure of the train. The area determination unit 251 can determine, for example, based on the current position of the wearable terminal 21 estimated by the position estimation unit 240, whether the wearable terminal 21 has reached the setting area. When the access point installed near the electronic guidance table transmits a beacon including a predetermined flag, the area determination unit 251 determines whether the communication unit 220 receives a beacon including the predetermined flag. It is possible to determine whether the wearable terminal 21 has reached the setting area.

ここで、本実施形態は、電子案内表を見てユーザが困惑している状況においてユーザにルート案内を提示するものである。ユーザが電子案内表の近くに存在する場合、ユーザが電子案内表を見て困惑している可能性があるので、ユーザが電子案内表を見ているか否かを検出するための構成、およびユーザが困惑しているか否かを検出するための構成が動作していることが望ましい。一方、ユーザが電子案内表の近くに存在しない場合、ユーザが電子案内表を見て困惑している可能性が低いので、ユーザが電子案内表を見ているか否かを検出するための構成、およびユーザが困惑しているか否かを検出するための構成は停止していてもよい。このような観点から、ユーザが電子案内表を見ていることを検出するための撮像部２３２およびオブジェクト検出部２５４、ユーザの困惑状態を検出するためのセンサ部２４４および眼球運動パターン検出部２５２などは、ウェアラブル端末２１が設定エリアに到達したことに基づいて起動され、ウェアラブル端末２１が設定エリアから離れたことに基づいて停止されてもよい。   Here, in the present embodiment, route guidance is presented to the user in a situation where the user is confused by looking at the electronic guidance table. The configuration for detecting whether or not the user is looking at the electronic guidance list, since the user may be confused by looking at the electronic guidance list if the user is near the electronic guidance list, and the user It is desirable that a configuration for detecting whether or not the user is confused is operating. On the other hand, when the user is not present near the electronic guidance table, there is a low possibility that the user is confused by looking at the electronic guidance table, so that the configuration for detecting whether the user is looking at the electronic guidance table And the configuration for detecting whether or not the user is puzzled may be stopped. From such a viewpoint, an imaging unit 232 and an object detection unit 254 for detecting that the user is looking at the electronic guidance table, a sensor unit 244 for detecting a user's puzzled state, an eye movement pattern detection unit 252 and the like May be activated based on the wearable terminal 21 reaching the setting area, and may be stopped based on the wearable terminal 21 leaving the setting area.

眼球運動パターン検出部２５２は、センサ部２４４から出力される情報に基づき、ユーザの眼球運動から所定の眼球運動パターンを検出する。所定の眼球運動パターンは、ユーザが困惑している際に生じると考えられる運動パターンであり、例えば、眼球が１または２以上の方向上で所定回数（例えば、５回）以上に亘って反復するパターンであってもよい。すなわち、眼球運動パターン検出部２５２は、ユーザの困惑状態を検出する困惑検出部としての機能を有する。   The eye movement pattern detection unit 252 detects a predetermined eye movement pattern from the eye movement of the user based on the information output from the sensor unit 244. The predetermined eye movement pattern is a movement pattern that is considered to occur when the user is puzzled, and for example, the eyeball repeats at least a predetermined number of times (for example, five times) in one or more directions. It may be a pattern. That is, the eye movement pattern detection unit 252 has a function as a puzzle detection unit that detects the puzzle state of the user.

眼球運動速度特定部２５３は、眼球運動パターン検出部２５２により所定の眼球運動パターンが検出された際の眼球の運動速度を特定する。眼球の運動速度が速いほどユーザの困惑状態の程度が高いと考えられる。このため、眼球運動速度特定部２５３は、ユーザの困惑状態の程度を特定する構成とも言える。   The eye movement speed specifying unit 253 specifies the movement speed of the eye when the eye movement pattern detection unit 252 detects a predetermined eye movement pattern. It is considered that the higher the movement speed of the eyeball, the higher the degree of confusion of the user. Therefore, it can be said that the eye movement speed identification unit 253 is also a configuration that identifies the degree of confusion state of the user.

オブジェクト検出部２５４は、撮像部２３２により取得された撮像画像から所定のオブジェクトを検出する。本実施形態において、当該所定のオブジェクトは電子案内表である。撮像部２３２の撮像範囲がユーザの視野を含むことは上述した通りであるので、オブジェクト検出部２５４が所定のオブジェクト（電子案内表）を検出したことは、所定のオブジェクトがユーザの視野に入っている可能性が高いことを意味する。なお、オブジェクト検出部２５４は、撮像画像に所定時間（例えば、５秒）以上に亘って所定のオブジェクトが含まれる場合に当該所定のオブジェクトを検出してもよい。   The object detection unit 254 detects a predetermined object from the captured image acquired by the imaging unit 232. In the present embodiment, the predetermined object is an electronic guidance table. As described above, the imaging range of the imaging unit 232 includes the field of view of the user. Therefore, when the object detection unit 254 detects a predetermined object (electronic guidance table), the predetermined object enters the field of view of the user It means that there is a high possibility. The object detection unit 254 may detect the predetermined object when the captured image includes a predetermined object for a predetermined time (for example, 5 seconds) or more.

検索制御部２５５は、ユーザにより指定された出発駅、目的駅または出発時刻を含む検索条件を通信部２２０にルート検索サーバ３０へ送信させ、目的駅を記憶部２７０に記憶させる。その後、検索制御部２５５は、電子案内表を見てユーザが困惑している状況において、ユーザの現在地または現在駅、および記憶部２７０に事前に記憶された目的駅を含む検索条件を通信部２２０にルート検索サーバ３０に送信させる。すなわち、検索制御部２５５は、エリア判定部２５１によりウェアラブル端末２１が設定エリアに到達したと判定され、眼球運動パターン検出部２５２により所定の眼球運動パターンが検出され、オブジェクト検出部２５４により撮像画像から所定のオブジェクトが検出されたことに基づき、上記検索条件を通信部２２０にルート検索サーバ３０へ送信させる。ユーザの現在地としては位置推定部２４０により推定された位置情報を使用可能である。検索制御部２５５は、地図情報を用いてユーザの現在地から現在駅を得ることも可能である。   The search control unit 255 causes the communication unit 220 to transmit search conditions including the departure station, the target station or the departure time specified by the user to the route search server 30, and stores the target station in the storage unit 270. Thereafter, the search control unit 255 causes the communication unit 220 to search for the search conditions including the current location or the current station of the user and the target station stored in advance in the storage unit 270 in a situation where the user is confused by viewing the electronic guidance table. To the route search server 30. That is, in the search control unit 255, the area determination unit 251 determines that the wearable terminal 21 has reached the set area, the eye movement pattern detection unit 252 detects a predetermined eye movement pattern, and the object detection unit 254 detects from the captured image Based on the detection of the predetermined object, the communication unit 220 transmits the search condition to the route search server 30. The position information estimated by the position estimation unit 240 can be used as the current position of the user. The search control unit 255 can also obtain the current station from the current location of the user using the map information.

表示制御部２５６は、ルート検索サーバ３０から通信部２２０により受信されるルート案内を表示部２２４に表示させる。例えば、表示制御部２５６は、ユーザの困惑状態の程度に応じてルート案内を異なる態様で表示部２２４に表示させる。表示制御部２５６は、困惑状態の程度として、眼球運動速度特定部２５３により特定された眼球の運動速度を参照する。ここで、ユーザの困惑状態の程度が高い場合にはユーザには簡単な情報が提示されることが望ましいと考えられる。このため、表示制御部２５６は、ユーザの困惑状態の程度が高いほど、すなわち眼球運動速度特定部２５３により特定された眼球の運動速度が速いほど情報量が少なくなるようにルート案内を表示部２２４に表示させてもよい。以下、図４および図５を参照して、異なる態様で表示されるルート案内の具体例を説明する。   The display control unit 256 causes the display unit 224 to display the route guidance received by the communication unit 220 from the route search server 30. For example, the display control unit 256 causes the display unit 224 to display route guidance in a different manner according to the degree of the user's confusion state. The display control unit 256 refers to the movement velocity of the eyeball identified by the eye movement velocity identification unit 253 as the degree of confusion. Here, it is considered desirable that simple information be presented to the user when the degree of user confusion is high. Therefore, the display control unit 256 displays the route guidance on the display unit 224 such that the amount of information decreases as the degree of the user's puzzled state increases, that is, as the eye movement speed specified by the eye movement speed specifying unit 253 increases. It may be displayed on the screen. Hereinafter, with reference to FIG. 4 and FIG. 5, the example of the route guidance displayed in a different aspect is demonstrated.

図４は、簡易形式のルート案内を示す説明図である。図５は、通常形式のルート案内を示す説明図である。図４および図５は、ユーザがＢ駅に到着して乗換が分からずに電子案内表を見て困惑している状況で表示され得るルート案内である。表示制御部２５６は、眼球運動速度特定部２５３により特定された眼球の運動速度が所定値（例えば、２５０ｄｅｇ／ｓｅｃ）以上であった場合、通常形式よりも情報量が少ない簡易形式のルート案内を表示部２２４に表示させてもよい。簡易形式のルート案内は、例えば図４に示したように、乗換先のホームの番号（７番線）、乗換先の列車の発車時刻（１０：３５発）および車両種類（ｙｙｙ線普通）、および行動を促す指示文（に乗って下さい。）のみを含む。   FIG. 4 is an explanatory view showing a simplified form of route guidance. FIG. 5 is an explanatory view showing route guidance of a normal type. FIGS. 4 and 5 show route guidance that can be displayed in a situation where the user arrives at station B and sees the electronic guidance table without being aware of a transfer. When the movement speed of the eyeball specified by the eye movement speed specifying unit 253 is equal to or higher than a predetermined value (for example, 250 deg / sec), the display control unit 256 performs route guidance in a simplified format having a smaller amount of information than the normal format. It may be displayed on the display unit 224. For example, as shown in FIG. 4, a simplified form of route guidance includes the number of the transfer destination home (line 7), the departure time of the transfer destination train (10:35) and the type of vehicle (usually yyy line), Includes only instructions that prompt you to take action.

これに対し、表示制御部２５６は、眼球運動速度特定部２５３により特定された眼球の運動速度が所定値（例えば、２５０ｄｅｇ／ｓｅｃ）未満であった場合、全体のルート情報を含む通常形式のルート案内を表示部２２４に表示させてもよい。通常形式のルート案内は、例えば図５に示したように、乗換先のホームの番号（７番線）、乗換先の列車の発車時刻（１０：３５発）および車両種類（ｙｙｙ線普通）に加え、目的駅への到着時刻（１０：４９着）および所要時間などの情報を含む。   On the other hand, when the movement speed of the eyeball specified by the eye movement speed specifying unit 253 is less than a predetermined value (for example, 250 deg / sec), the display control unit 256 performs a normal route including the entire route information. The guidance may be displayed on the display unit 224. For example, as shown in FIG. 5, the route guidance of the normal form is added to the number of the transfer destination home (line 7), the departure time of the transfer destination train (10:35) and the type of vehicle (normal yyy line). It includes information such as arrival time to the destination station (10:49) and travel time.

図３を参照してウェアラブル端末２１の構成の説明に戻ると、記憶部２７０は、ウェアラブル端末２１の動作に用いられる多様な情報を記憶する。例えば、記憶部２７０は、制御部２５０が上述した各機能を実現するためのプログラムを記憶する。また、記憶部２７０は、検索条件として用いられた目的駅を示す情報を記憶する。   Returning to the description of the configuration of the wearable terminal 21 with reference to FIG. 3, the storage unit 270 stores various information used for the operation of the wearable terminal 21. For example, the storage unit 270 stores a program for realizing the functions described above by the control unit 250. In addition, the storage unit 270 stores information indicating a target station used as a search condition.

（ウェアラブル端末の動作）
以上、第１の実施形態によるウェアラブル端末２１の構成を説明した。続いて、図６を参照して、第１の実施形態によるウェアラブル端末２１の動作を整理する。 (Operation of wearable terminal)
The configuration of the wearable terminal 21 according to the first embodiment has been described above. Subsequently, the operation of the wearable terminal 21 according to the first embodiment will be organized with reference to FIG.

図６は、第１の実施形態によるウェアラブル端末２１の動作を示すフローチャートである。図６に示したように、まず、ユーザにより指定された出発駅および目的駅を含む検索条件を通信部２２０がルート検索サーバ３０に送信し（Ｓ３０４）、検索結果としてルート検索サーバ３０から受信されるルート案内を表示部２２４が表示する（Ｓ３０８）。ここで、記憶部２７０は検索条件として用いられた目的駅を示す情報を記憶する（Ｓ３１２）。   FIG. 6 is a flowchart showing the operation of the wearable terminal 21 according to the first embodiment. As shown in FIG. 6, first, the communication unit 220 transmits the search condition including the departure station and the target station designated by the user to the route search server 30 (S304), and is received from the route search server 30 as a search result. The display unit 224 displays a route guide (S308). Here, the storage unit 270 stores information indicating the target station used as the search condition (S312).

その後、ユーザが設定エリアに到達したとエリア判定部２５１が判定すると（Ｓ３１６／Ｙｅｓ）、エリア判定部２５１は、撮像部２３２およびセンサ部２４４を起動する（Ｓ３２０）。そして、センサ部２４４の出力情報から眼球運動パターン検出部２５２により所定の眼球運動パターンが検出された場合（Ｓ３２４／Ｙｅｓ）、眼球運動速度特定部２５３が眼球の運動速度を特定する（Ｓ３２８）。さらに、撮像部２３２が取得した撮像画像からオブジェクト検出部２５４により所定のオブジェクトが検出されたことに基づき（Ｓ３３２／Ｙｅｓ）、検索制御部２５５が、ユーザの現在地または現在駅、およびＳ３１２において記憶部２７０に記憶された目的駅を含む検索条件を通信部２２０にルート検索サーバ３０に送信させる（Ｓ３３６）。   Thereafter, when the area determination unit 251 determines that the user has reached the setting area (S316 / Yes), the area determination unit 251 activates the imaging unit 232 and the sensor unit 244 (S320). When the eye movement pattern detection unit 252 detects a predetermined eye movement pattern from the output information of the sensor unit 244 (S324 / Yes), the eye movement speed specifying unit 253 specifies the movement speed of the eye (S328). Furthermore, based on the fact that the object detection unit 254 detects a predetermined object from the captured image acquired by the imaging unit 232 (S332 / Yes), the search control unit 255 stores the user's current location or current station, and the storage unit in S312. The route search server 30 is made to transmit the search condition including the target station stored in 270 to the communication unit 220 (S 336).

そして、表示制御部２５６は、眼球運動速度特定部２５３により特定された眼球の運動速度が所定値以上であった場合（Ｓ３４０／Ｙｅｓ）、簡易形式のルート案内を表示部２２４に表示させる（Ｓ３４４）。一方、表示制御部２５６は、眼球運動速度特定部２５３により特定された眼球の運動速度が所定値未満であった場合（Ｓ３４０／Ｎｏ）、通常形式のルート案内を表示部２２４に表示させる（Ｓ３４８）。   Then, when the movement speed of the eyeball specified by the eye movement speed specifying unit 253 is equal to or higher than the predetermined value (S340 / Yes), the display control unit 256 causes the display unit 224 to display the simplified route guidance (S344). ). On the other hand, when the movement speed of the eyeball specified by the eye movement speed specifying unit 253 is less than the predetermined value (S340 / No), the display control unit 256 causes the display unit 224 to display the route guidance in the normal format (S348). ).

（作用効果）
以上説明したように、本実施形態によれば、ルート案内に従って移動中のユーザが、電子案内表に表示された複数の列車情報を見比べてどの列車に乗るべきか困惑している状況において、ユーザにルート案内（乗車案内）を提示することが可能である。すなわち、ユーザにとって有用な状況においてユーザにルート案内を提示することが可能である。また、本実施形態によるウェアラブル端末２１はユーザの困惑状態の程度が高い場合に具体的かつ簡潔に今すべきことをユーザに提示することが可能である。 (Action effect)
As described above, according to the present embodiment, the user who is moving according to the route guidance is compared with the plurality of train information displayed in the electronic guidance table, and in a situation where he is confused as to which train to ride It is possible to present route guidance (ride guidance) on That is, it is possible to present route guidance to the user in a situation useful to the user. Also, the wearable terminal 21 according to the present embodiment can present to the user what to do now in a concrete and concise manner when the degree of confusion of the user is high.

＜第２の実施形態＞
以上、本発明の第１の実施形態を説明した。続いて、本発明の第２の実施形態を説明する。本発明の第２の実施形態によるウェアラブル端末２２は、ユーザの困惑状態を第１の実施形態によるウェアラブル端末２１と異なる方法で検出する。 Second Embodiment
The first embodiment of the present invention has been described above. Subsequently, a second embodiment of the present invention will be described. The wearable terminal 22 according to the second embodiment of the present invention detects the puzzled state of the user in a method different from the wearable terminal 21 according to the first embodiment.

（ウェアラブル端末の構成）
図７は、第２の実施形態によるウェアラブル端末２２の構成を説明図である。図７に示したように、第２の実施形態によるウェアラブル端末２２は、通信部２２０、表示部２２４、操作部２２８、撮像部２３２、収音部２３６、位置推定部２４０、センサ部２４８、制御部２６０および記憶部２７０を備える。通信部２２０、表示部２２４、操作部２２８、撮像部２３２、収音部２３６、位置推定部２４０および記憶部２７０の構成は第１の実施形態で説明した通りであるので、ここでの詳細な説明を省略する。 (Configuration of wearable terminal)
FIG. 7 is an explanatory diagram of a configuration of the wearable terminal 22 according to the second embodiment. As shown in FIG. 7, the wearable terminal 22 according to the second embodiment includes a communication unit 220, a display unit 224, an operation unit 228, an imaging unit 232, a sound collection unit 236, a position estimation unit 240, a sensor unit 248, and control. A unit 260 and a storage unit 270 are provided. The configurations of the communication unit 220, the display unit 224, the operation unit 228, the imaging unit 232, the sound collection unit 236, the position estimation unit 240, and the storage unit 270 are the same as described in the first embodiment. I omit explanation.

センサ部２４８は、ユーザの頭部運動を検出するセンサを有し、このようなセンサとしては、加速度センサおよびジャイロセンサなどが挙げられる。   The sensor unit 248 includes a sensor that detects the head movement of the user, and examples of such a sensor include an acceleration sensor and a gyro sensor.

制御部２６０は、エリア判定部２５１、オブジェクト検出部２５４、頭部運動パターン検出部２６２、頭部運動速度特定部２６３、検索制御部２６５、表示制御部２６６、の機能を有する。エリア判定部２５１、オブジェクト検出部２５４の機能は第１の実施形態で説明した通りである。   The control unit 260 has functions of an area determination unit 251, an object detection unit 254, a head movement pattern detection unit 262, a head movement speed identification unit 263, a search control unit 265, and a display control unit 266. The functions of the area determination unit 251 and the object detection unit 254 are as described in the first embodiment.

頭部運動パターン検出部２６２は、センサ部２４８から出力される情報に基づき、ユーザの頭部運動から所定の頭部運動パターンを検出する。所定の頭部運動パターンは、ユーザが困惑している際に生じると考えられる運動パターンであり、例えば、頭部が１または２以上の方向上で所定回数（例えば、５回）以上に亘って反復するパターンであってもよい。すなわち、頭部運動パターン検出部２６２は、ユーザの困惑状態を検出する困惑検出部としての機能を有する。   The head movement pattern detection unit 262 detects a predetermined head movement pattern from the user's head movement based on the information output from the sensor unit 248. The predetermined head movement pattern is a movement pattern that is considered to occur when the user is puzzled, and for example, the head moves over a predetermined number of times (for example, five times) in one or more directions. It may be a repeating pattern. That is, the head movement pattern detection unit 262 has a function as a puzzle detection unit that detects a puzzle state of the user.

頭部運動速度特定部２６３は、頭部運動パターン検出部２６２により所定の頭部運動パターンが検出された際の頭部の運動速度を特定する。頭部の運動速度が速いほどユーザの困惑状態の程度が高いと考えられる。このため、頭部運動速度特定部２６３は、ユーザの困惑状態の程度を特定する構成とも言える。   The head movement speed specifying unit 263 specifies the movement speed of the head when the head movement pattern detection unit 262 detects a predetermined head movement pattern. It is considered that the higher the movement speed of the head, the higher the degree of confusion of the user. For this reason, it can be said that the head movement speed identification unit 263 is also a configuration that identifies the degree of confusion state of the user.

検索制御部２６５は、電子案内表を見てユーザが困惑している状況において、ユーザの現在地または現在駅、および記憶部２７０に事前に記憶された目的駅を含む検索条件を通信部２２０にルート検索サーバ３０に送信させる。すなわち、検索制御部２６５は、エリア判定部２５１によりウェアラブル端末２２が設定エリアに到達したと判定され、頭部運動パターン検出部２６２により所定の眼球運動パターンが検出され、オブジェクト検出部２５４により撮像画像から所定のオブジェクトが検出されたことに基づき、上記検索条件を通信部２２０にルート検索サーバ３０へ送信させる。   The search control unit 265 routes the search condition including the current location or the current station of the user and the target station stored in advance in the storage unit 270 to the communication unit 220 in a situation where the user is confused by seeing the electronic guidance table. It is sent to the search server 30. That is, in the search control unit 265, the area determination unit 251 determines that the wearable terminal 22 has reached the set area, the head movement pattern detection unit 262 detects a predetermined eye movement pattern, and the object detection unit 254 detects an image The above search conditions are transmitted to the route search server 30 based on the detection of the predetermined object from the above.

表示制御部２６６は、ルート検索サーバ３０から通信部２２０により受信されるルート案内を表示部２２４に表示させる。例えば、表示制御部２６６は、ユーザの困惑状態の程度に応じてルート案内を異なる態様で表示部２２４に表示させる。表示制御部２６６は、困惑状態の程度として、頭部運動速度特定部２６３により特定された頭部の運動速度を参照する。ここで、ユーザの困惑状態の程度が高い場合にはユーザには簡単な情報が提示されることが望ましいと考えられる。このため、表示制御部２６６は、ユーザの困惑状態の程度が高いほど、すなわち頭部運動速度特定部２６３により特定された眼球の運動速度が速いほど情報量が少なくなるようにルート案内を表示部２２４に表示させてもよい。情報量が少ない簡易形式のルート案内および全体のルート情報を含む通常形式のルート案内は図４および図５を参照して説明した通りである。   The display control unit 266 causes the display unit 224 to display the route guidance received by the communication unit 220 from the route search server 30. For example, the display control unit 266 causes the display unit 224 to display route guidance in a different manner according to the degree of the user's confusion state. The display control unit 266 refers to the movement speed of the head specified by the head movement speed specifying unit 263 as the degree of confusion. Here, it is considered desirable that simple information be presented to the user when the degree of user confusion is high. Therefore, the display control unit 266 displays the route guidance so that the amount of information decreases as the degree of the user's puzzled state increases, that is, as the eye movement speed specified by the head movement speed specifying unit 263 increases. It may be displayed at 224. The conventional type route guidance including the simplified type route guidance and the entire route information with a small amount of information is as described with reference to FIGS. 4 and 5.

（ウェアラブル端末の動作）
以上、第２の実施形態によるウェアラブル端末２２の構成を説明した。続いて、図８を参照して、第２の実施形態によるウェアラブル端末２２の動作を整理する。 (Operation of wearable terminal)
The configuration of the wearable terminal 22 according to the second embodiment has been described above. Subsequently, the operation of the wearable terminal 22 according to the second embodiment will be organized with reference to FIG.

図８は、第２の実施形態によるウェアラブル端末２２の動作を示すフローチャートである。図８に示したＳ４２４、Ｓ４２８およびＳ４４０の処理が図６を参照して説明した第１の実施形態によるウェアラブル端末２１の動作と異なるので、以下ではＳ４２４、Ｓ４２８およびＳ４４０の処理を主に説明する。   FIG. 8 is a flowchart showing the operation of the wearable terminal 22 according to the second embodiment. Since the processing of S424, S428 and S440 shown in FIG. 8 is different from the operation of the wearable terminal 21 according to the first embodiment described with reference to FIG. 6, the processing of S424, S428 and S440 will mainly be described below. .

Ｓ３２０において撮像部２３２およびセンサ部２４８が起動された後、センサ部２４８の出力情報から頭部運動パターン検出部２６２により所定の頭部運動パターンが検出された場合（Ｓ４２４／Ｙｅｓ）、頭部運動速度特定部２６３が眼球の運動速度を特定する（Ｓ４２８）。さらに、撮像部２３２が取得した撮像画像からオブジェクト検出部２５４により所定のオブジェクトが検出されたことに基づき（Ｓ３３２／Ｙｅｓ）、検索制御部２５５が、ユーザの現在地または現在駅、およびＳ３１２において記憶部２７０に記憶された目的駅を含む検索条件を通信部２２０にルート検索サーバ３０に送信させる（Ｓ３３６）。   When the head movement pattern detection unit 262 detects a predetermined head movement pattern from the output information of the sensor unit 248 after the imaging unit 232 and the sensor unit 248 are activated in S320 (S424 / Yes), the head movement The velocity identification unit 263 identifies the movement velocity of the eye (S428). Furthermore, based on the fact that the object detection unit 254 detects a predetermined object from the captured image acquired by the imaging unit 232 (S332 / Yes), the search control unit 255 stores the user's current location or current station, and the storage unit in S312. The route search server 30 is made to transmit the search condition including the target station stored in 270 to the communication unit 220 (S 336).

そして、表示制御部２５６は、頭部運動速度特定部２６３により特定された眼球の運動速度が所定値以上であった場合（Ｓ４４０／Ｙｅｓ）、簡易形式のルート案内を表示部２２４に表示させる（Ｓ３４４）。一方、表示制御部２５６は、頭部運動速度特定部２６３により特定された眼球の運動速度が所定値未満であった場合（Ｓ４４０／Ｎｏ）、通常形式のルート案内を表示部２２４に表示させる（Ｓ３４８）。   Then, when the motion speed of the eyeball specified by the head motion speed specification unit 263 is equal to or higher than the predetermined value (S440 / Yes), the display control unit 256 causes the display unit 224 to display the simplified route guidance ( S344). On the other hand, when the movement speed of the eyeball specified by the head movement speed specifying unit 263 is less than the predetermined value (S440 / No), the display control unit 256 causes the display unit 224 to display the route guidance in the normal format S348).

以上説明したように、第２の実施形態によれば、頭部運動からユーザの困惑状態を検出して、ユーザにとって有用な状況でユーザにルート案内を提示することが可能である。   As described above, according to the second embodiment, it is possible to detect the puzzled state of the user from the head movement and present route guidance to the user in a useful situation for the user.

＜ハードウェア構成＞
以上、本発明の各実施形態を説明した。上述した困惑状態の検出や表示制御などの情報処理は、ソフトウェアと、以下に説明するウェアラブル端末２０のハードウェアとの協働により実現される。 <Hardware configuration>
The embodiments of the present invention have been described above. The information processing such as the detection of the puzzled state and the display control described above is realized by the cooperation of software and the hardware of the wearable terminal 20 described below.

図９は、ウェアラブル端末２０のハードウェア構成を示したブロック図である。ウェアラブル端末２０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２０１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）２０２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２０３と、ホストバス２０４と、を備える。また、ウェアラブル端末２０は、ブリッジ２０５と、外部バス２０６と、インタフェース２０７と、入力装置２０８と、表示装置２０９と、音声出力装置２１０と、ストレージ装置（ＨＤＤ）２１１と、ドライブ２１２と、ネットワークインタフェース２１５とを備える。   FIG. 9 is a block diagram showing the hardware configuration of the wearable terminal 20. As shown in FIG. The wearable terminal 20 includes a central processing unit (CPU) 201, a read only memory (ROM) 202, a random access memory (RAM) 203, and a host bus 204. The wearable terminal 20 also includes a bridge 205, an external bus 206, an interface 207, an input device 208, a display device 209, an audio output device 210, a storage device (HDD) 211, a drive 212, and a network interface. And 215.

ＣＰＵ２０１は、演算処理装置および制御装置として機能し、各種プログラムに従ってウェアラブル端末２０内の動作全般を制御する。また、ＣＰＵ２０１は、マイクロプロセッサであってもよい。ＲＯＭ２０２は、ＣＰＵ２０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ２０３は、ＣＰＵ２０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。これらはＣＰＵバスなどから構成されるホストバス２０４により相互に接続されている。これらＣＰＵ２０１、ＲＯＭ２０２およびＲＡＭ２０３とソフトウェアとの協働により、制御部２５０または制御部２６０の機能が実現され得る。   The CPU 201 functions as an arithmetic processing unit and a control unit, and controls the overall operation in the wearable terminal 20 according to various programs. The CPU 201 may also be a microprocessor. The ROM 202 stores programs used by the CPU 201, calculation parameters, and the like. The RAM 203 temporarily stores programs used in the execution of the CPU 201, parameters and the like that appropriately change in the execution. These are mutually connected by a host bus 204 configured of a CPU bus and the like. The cooperation of the CPU 201, the ROM 202 and the RAM 203 with the software can realize the function of the control unit 250 or the control unit 260.

ホストバス２０４は、ブリッジ２０５を介して、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ／Ｉｎｔｅｒｆａｃｅ）バスなどの外部バス２０６に接続されている。なお、必ずしもホストバス２０４、ブリッジ２０５および外部バス２０６を分離構成する必要はなく、１つのバスにこれらの機能を実装してもよい。   The host bus 204 is connected to an external bus 206 such as a peripheral component interconnect / interface (PCI) bus via the bridge 205. Note that the host bus 204, the bridge 205, and the external bus 206 do not necessarily have to be separately configured, and these functions may be implemented on one bus.

入力装置２０８は、マウス、キーボード、タッチパネル、ボタン、マイクロフォン、センサ、スイッチおよびレバーなどユーザが情報を入力するための入力手段と、ユーザによる入力に基づいて入力信号を生成し、ＣＰＵ２０１に出力する入力制御回路などから構成されている。ウェアラブル端末２０のユーザは、該入力装置２０８を操作することにより、ウェアラブル端末２０に対して各種のデータを入力したり処理動作を指示したりすることができる。   The input device 208 generates an input signal based on an input by the user such as a mouse, a keyboard, a touch panel, a button, a microphone, a sensor, a switch, a lever, etc., and an input by the user. It comprises a control circuit and the like. The user of the wearable terminal 20 can input various data to the wearable terminal 20 and instruct processing operations by operating the input device 208.

表示装置２０９は、液晶ディスプレイ（ＬＣＤ）装置、プロジェクター装置、ＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）装置およびランプなどの表示装置を含む。また、音声出力装置２１０は、スピーカおよびヘッドホンなどの音声出力装置を含む。   The display device 209 includes a display device such as a liquid crystal display (LCD) device, a projector device, an organic light emitting diode (OLED) device, and a lamp. Also, the audio output device 210 includes an audio output device such as a speaker and headphones.

ストレージ装置２１１は、本実施形態にかかるウェアラブル端末２０の記憶部の一例として構成されたデータ格納用の装置である。ストレージ装置２１１は、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置および記憶媒体に記録されたデータを削除する削除装置などを含んでもよい。ストレージ装置２１１は、例えば、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）またはＳＳＤ（Ｓｏｌｉｄ Ｓｔｒａｇｅ Ｄｒｉｖｅ）、あるいは同等の機能を有するメモリ等で構成される。このストレージ装置２１１は、ストレージを駆動し、ＣＰＵ２０１が実行するプログラムや各種データを格納する。   The storage device 211 is a device for data storage configured as an example of a storage unit of the wearable terminal 20 according to the present embodiment. The storage device 211 may include a storage medium, a recording device that records data in the storage medium, a reading device that reads data from the storage medium, and a deletion device that deletes data recorded in the storage medium. The storage device 211 is configured of, for example, a hard disk drive (HDD) or a solid storage drive (SSD), a memory having an equivalent function, or the like. The storage device 211 drives a storage, and stores programs executed by the CPU 201 and various data.

ドライブ２１２は、記憶媒体用リーダライタであり、ウェアラブル端末２０に内蔵、あるいは外付けされる。ドライブ２１２は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記憶媒体２４に記録されている情報を読み出して、ＲＡＭ２０３またはストレージ装置２１１に出力する。また、ドライブ２１２は、リムーバブル記憶媒体２４に情報を書き込むこともできる。   The drive 212 is a reader / writer for a storage medium, and is built in or externally attached to the wearable terminal 20. The drive 212 reads out information recorded in a removable storage medium 24 such as a mounted magnetic disk, optical disk, magneto-optical disk, or semiconductor memory, and outputs the information to the RAM 203 or storage device 211. The drive 212 can also write information to the removable storage medium 24.

ネットワークインタフェース２１５は、例えば、ネットワーク１２に接続するための通信デバイス等で構成された通信インタフェースである。また、ネットワークインタフェース２１５は、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）対応通信装置であっても、有線による通信を行うワイヤー通信装置であってもよい。   The network interface 215 is, for example, a communication interface configured of a communication device or the like for connecting to the network 12. Further, the network interface 215 may be a communication device compatible with a wireless LAN (Local Area Network) or a wire communication device performing communication by wire.

＜むすび＞
以上説明したように、本発明の各実施形態によれば、ルート案内に従って移動中のユーザが、電子案内表に表示された複数の列車情報を見比べてどの列車に乗るべきか困惑している状況において、ユーザにルート案内（乗車案内）を提示することが可能である。すなわち、ユーザにとって有用な状況においてユーザにルート案内を提示することが可能である。 <End>
As described above, according to each embodiment of the present invention, a user who is moving according to route guidance is confused about which train should be taken by comparing a plurality of train information displayed in the electronic guidance table. It is possible to present route guidance (ride guidance) to the user. That is, it is possible to present route guidance to the user in a situation useful to the user.

なお、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。   Although the preferred embodiments of the present invention have been described in detail with reference to the accompanying drawings, the present invention is not limited to such examples. It is obvious that those skilled in the art to which the present invention belongs can conceive of various changes or modifications within the scope of the technical idea described in the claims. Of course, it is understood that these also fall within the technical scope of the present invention.

例えば、上記ではユーザの困惑状態の検出を眼球運動または頭部運動に基づいて行う例を説明したが、困惑状態の検出はかかる例に限定されない。例えば、眼球運動または頭部運動に加えて、あるいは代えて、ユーザの脈拍または歩行速度に基づいてユーザの困惑状態を検出することも可能である。ウェアラブル端末２０が有するイヤホンに脈拍検出手段を実装することにより、ユーザの脈拍数を容易に取得することが可能である。眼球運動または頭部運動に加えてユーザの脈拍数を用いてユーザの困惑状態を検出する場合、ウェアラブル端末２０は、例えば眼球の運動速度が所定値以上であり、かつ脈拍数が所定数以上であることに基づき簡易形式のルート案内を表示してもよい。   For example, although the example which performs detection of a user's confusion state based on eye movement or head movement was explained above, detection of a confusion state is not limited to this example. For example, in addition to or instead of eye movement or head movement, it is also possible to detect the user's puzzled state based on the user's pulse or walking speed. By installing the pulse detection means in the earphones of the wearable terminal 20, it is possible to easily obtain the pulse rate of the user. When the user's puzzled state is detected using the user's pulse rate in addition to eye movement or head movement, the wearable terminal 20 has, for example, an eye movement speed of at least a predetermined value and a pulse rate of at least a predetermined number A simplified route guide may be displayed based on certain things.

また、撮像画像に所定時間以上に亘って所定のオブジェクト（電子案内表）が含まれることは、ユーザが乗車すべき列車が分からずに困惑して電子案内表を見続けている可能性がある。そこで、ウェアラブル端末２０は、撮像画像に所定時間以上に亘って所定のオブジェクト（電子案内表）が含まれることをユーザの困惑状態として検出してもよい。   In addition, when the captured image includes a predetermined object (electronic guidance table) for a predetermined time or more, the user may be confused and continue looking at the electronic guidance table without knowing the train to be taken . Therefore, the wearable terminal 20 may detect that a predetermined object (electronic guidance table) is included in the captured image for a predetermined time or more as the user's puzzled state.

また、本明細書のウェアラブル端末２０の処理における各ステップは、必ずしもフローチャートとして記載された順序に沿って時系列に処理する必要はない。例えば、ウェアラブル端末２０の処理における各ステップは、フローチャートとして記載した順序と異なる順序で処理されても、並列的に処理されてもよい。   In addition, each step in the processing of the wearable terminal 20 in the present specification does not necessarily have to be processed chronologically in the order described as the flowchart. For example, each step in the process of the wearable terminal 20 may be processed in an order different from the order described as the flowchart, or may be processed in parallel.

また、ウェアラブル端末２０に内蔵されるＣＰＵ、ＲＯＭおよびＲＡＭなどのハードウェアに、上述したウェアラブル端末２０の各構成と同等の機能を発揮させるためのコンピュータプログラムも作成可能である。また、該コンピュータプログラムを記憶させた記憶媒体も提供される。   In addition, it is possible to create a computer program for causing hardware such as a CPU, a ROM, and a RAM built in the wearable terminal 20 to exhibit the same function as each configuration of the wearable terminal 20 described above. There is also provided a storage medium storing the computer program.

２０、２１、２２ ウェアラブル端末
３０ ルート検索サーバ
２２０ 通信部
２２４ 表示部
２２８ 操作部
２３２ 撮像部
２３６ 収音部
２４０ 位置推定部
２４４ センサ部
２４８ センサ部
２５０、２６０ 制御部
２５１ エリア判定部
２５２ 眼球運動パターン検出部
２５３ 眼球運動速度特定部
２５４ オブジェクト検出部
２５５、２６５ 検索制御部
２５６、２６６ 表示制御部
２６２ 頭部運動パターン検出部
２６３ 頭部運動速度特定部
２７０ 記憶部
20, 21, 22 Wearable Terminal 30 Route Search Server 220 Communication Unit 224 Display Unit 228 Operation Unit 232 Imaging Unit 236 Pickup Unit 240 Position Estimation Unit 244 Sensor Unit 248 Sensor Unit 250, 260 Control Unit 251 Area Determination Unit 252 Eye Movement Pattern Detection unit 253 Eye movement speed identification unit 254 Object detection unit 255, 265 Search control unit 256, 266 Display control unit 262 Head movement pattern detection unit 263 Head movement speed identification unit 270 Storage unit

Claims (11)

目的地情報を記憶する記憶部と、
ユーザの現在地を示す位置情報を取得する位置情報取得部と、
前記ユーザの困惑状態を検出する困惑検出部と、
前記困惑検出部により前記ユーザの困惑状態が検出されたことに基づき、前記位置情報が示す前記ユーザの現在地から前記記憶部に記憶された目的地情報が示す目的地に移動するためのルート案内を表示部に表示させる表示制御部と、
を備える、表示制御装置。 A storage unit that stores destination information;
A position information acquisition unit that acquires position information indicating the current position of the user;
A puzzle detection unit for detecting a puzzle state of the user;
The route guidance for moving from the current location of the user indicated by the position information to the destination indicated by the destination information stored in the storage unit is detected based on the confusion detection unit detecting the confusion state of the user. A display control unit to be displayed on the display unit;
A display control device comprising: 前記表示制御部は、前記ユーザの困惑状態の程度に応じて、前記ルート案内を異なる態様で前記表示部に表示させる、請求項１に記載の表示制御装置。   The display control device according to claim 1, wherein the display control unit causes the display unit to display the route guidance in a different manner in accordance with the degree of confusion state of the user. 前記表示制御部は、前記ユーザの困惑状態の程度が高いほど情報量が低くなるように、前記ルート案内を前記表示部に表示させる、請求項２に記載の表示制御装置。   The display control device according to claim 2, wherein the display control unit causes the display unit to display the route guidance such that the amount of information decreases as the degree of the user's confusion state increases. 前記困惑検出部は、前記ユーザの眼球運動に基づいて前記ユーザの困惑状態を検出する、請求項１〜３のいずれか一項に記載の表示制御装置。   The display control device according to any one of claims 1 to 3, wherein the confusion detection unit detects a confusion state of the user based on eye movement of the user. 前記困惑検出部は、前記ユーザの頭部運動に基づいて前記ユーザの困惑状態を検出する、請求項１〜３のいずれか一項に記載の表示制御装置。   The display control device according to any one of claims 1 to 3, wherein the confusion detection unit detects a confusion state of the user based on head movement of the user. 前記表示制御装置は、
前記ユーザの視野の少なくとも一部を含む撮像画像を取得する画像取得部と、
前記撮像画像から所定のオブジェクトを検出するオブジェクト検出部と、
をさらに備え、
前記表示制御部は、前記困惑検出部により前記ユーザの困惑状態が検出され、かつ、前記オブジェクト検出部により前記所定のオブジェクトが検出されたことに基づき、前記ルート案内を前記表示部に表示させる、請求項１〜４のいずれか一項に記載の表示制御装置。 The display control device
An image acquisition unit configured to acquire a captured image including at least a part of the field of view of the user;
An object detection unit that detects a predetermined object from the captured image;
And further
The display control unit causes the display unit to display the route guidance based on the confusion detection unit detecting the confusion state of the user and the object detection unit detecting the predetermined object. The display control apparatus as described in any one of Claims 1-4. 前記ルート案内は、移動機関を利用するルートを案内し、
前記所定のオブジェクトは、前記移動機関の乗物の出発を案内する電子案内表である、請求項６に記載の表示制御装置。 The route guidance guides a route using a mobile organization,
The display control device according to claim 6, wherein the predetermined object is an electronic guidance table for guiding departure of a vehicle of the mobile engine. 前記困惑検出部は、前記位置情報が示す前記ユーザの現在地が設定エリアに到達したことに基づいて前記困惑状態の検出処理を開始する、請求項１〜７のいずれか一項に記載の表示制御装置。   The display control according to any one of claims 1 to 7, wherein the confusion detection unit starts the process of detecting the confusion state based on the current position of the user indicated by the position information reaching a setting area. apparatus. 前記画像取得部は、前記位置情報が示す前記ユーザの現在地が設定エリアに到達したことに基づいて前記撮像画像の取得を開始する、請求項６または７に記載の表示制御装置。   The display control device according to claim 6, wherein the image acquisition unit starts acquisition of the captured image based on the current position of the user indicated by the position information reaching a setting area. 目的地情報を記憶することと、
ユーザの現在地を示す位置情報を取得することと、
前記ユーザの困惑状態を検出することと、
前記ユーザの困惑状態が検出されたことに基づき、前記位置情報が示す前記ユーザの現在地から前記目的地情報が示す目的地に移動するためのルート案内を表示部に表示させることと、
を含む、表示制御方法。 Remembering destination information,
Obtaining location information indicating a user's current location;
Detecting the puzzled state of the user;
Displaying on the display unit a route guidance for moving from the current location of the user indicated by the position information to a destination indicated by the destination information, based on the detection of the puzzled state of the user;
Display control method including. コンピュータに、
目的地情報を記憶することと、
ユーザの現在地を示す位置情報を取得することと、
前記ユーザの困惑状態を検出することと、
前記ユーザの困惑状態が検出されたことに基づき、前記位置情報が示す前記ユーザの現在地から前記目的地情報が示す目的地に移動するためのルート案内を表示部に表示させることと、
を実行させるための、プログラム。 On the computer
Remembering destination information,
Obtaining location information indicating a user's current location;
Detecting the puzzled state of the user;
Displaying on the display unit a route guidance for moving from the current location of the user indicated by the position information to a destination indicated by the destination information, based on the detection of the puzzled state of the user;
A program for running

Images