JP2019074387A - Guidance control device, guidance control method, and program for guidance control - Google Patents

Guidance control device, guidance control method, and program for guidance control Download PDF

Info

Publication number
JP2019074387A
JP2019074387A JP2017199893A JP2017199893A JP2019074387A JP 2019074387 A JP2019074387 A JP 2019074387A JP 2017199893 A JP2017199893 A JP 2017199893A JP 2017199893 A JP2017199893 A JP 2017199893A JP 2019074387 A JP2019074387 A JP 2019074387A
Authority
JP
Japan
Prior art keywords
guidance
image
guidance control
control device
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2017199893A
Other languages
Japanese (ja)
Inventor
廣瀬 智博
Tomohiro Hirose
智博 廣瀬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pioneer Corp
Original Assignee
Pioneer Electronic Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pioneer Electronic Corp filed Critical Pioneer Electronic Corp
Priority to JP2017199893A priority Critical patent/JP2019074387A/en
Publication of JP2019074387A publication Critical patent/JP2019074387A/en
Priority to JP2022100371A priority patent/JP2022153363A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Navigation (AREA)
  • Telephonic Communication Services (AREA)

Abstract

To provide a guidance control device that, even when a terminal device and a smartphone are in proximity to each other and the terminal device is not provided with a display, can appropriately provide information by using the terminal device.SOLUTION: A guidance control device comprises: an interface 1 that is connected by radio respectively to a smartphone SP that displays a guidance image and a smart speaker SK that outputs a voice for movement guidance; a determination unit 2 that, when the smartphone SP and the smart speaker SK are in a vehicle C, determines whether the guidance image is displayed; and a control unit 3 that makes an output mode of the voice for movement guidance different according to a result of determination made by the determination unit.SELECTED DRAWING: Figure 3

Description

本願は、案内制御装置、案内制御方法及び案内制御用プログラムの技術分野に属する。より詳細には、例えば車両等の移動体の移動案内の方法等を制御する案内制御装置及び案内制御方法並びに当該案内制御装置用のプログラムの技術分野に属する。   The present application belongs to the technical field of a guidance control device, a guidance control method, and a program for guidance control. More specifically, the present invention belongs to the technical field of a guidance control device and guidance control method for controlling a method of movement guidance of a mobile object such as a vehicle, and a program for the guidance control device.

近年、インターネットに接続されたホームサーバを例えば一般住宅内に設置し、当該ホームサーバを介してインターネットから種々の情報を収集することが行われている。また、その住宅内にある照明のオン/オフやテレビのチャンネル切り換え等を、上記ホームサーバに接続された端末装置内に備えられたマイク及びスピーカを用いた音声の指令により行うことも検討されている。このような技術を開示した先行技術文献としては、例えば下記特許文献1が挙げられる。   BACKGROUND In recent years, home servers connected to the Internet have been installed, for example, in homes, and various types of information are collected from the Internet through the home servers. In addition, it is also considered to turn on / off the lighting in the house, switch channels of the television, etc., by voice command using a microphone and a speaker provided in the terminal device connected to the home server. There is. As a prior art document which disclosed such a technique, the following patent document 1 is mentioned, for example.

特開2016−114744号公報JP, 2016-114744, A

一方、このような端末装置は小型で可搬性があるため、それを車両内に置くことで、それを当該車両の移動を案内するナビゲーション装置や車両のエアコン等を制御するための装置として用いることができれば、便利である。   On the other hand, since such a terminal device is small and portable, it can be used as a navigation device for guiding the movement of the vehicle or a device for controlling an air conditioner of the vehicle or the like by placing it in the vehicle. If you can, it is convenient.

しかしながら、上記特許文献1に記載されている端末装置には、従来のナビゲーション装置として用いられているディスプレイが備えられていない。このディスプレイは、例えば移動案内用の地図や経路を含む画像を表示するものであり、当該移動案内としては重要な部材である。他方、車両内に持ち込むことができ且つディスプレイを備える携帯可能な物としては、いわゆるスマートフォン等が挙げられるが、これらスマートフォン等と上記端末装置とを連携させて車両の移動案内を行うことは、従来検討されていなかった。   However, the terminal device described in Patent Document 1 does not have a display used as a conventional navigation device. The display is, for example, for displaying an image including a map and a route for movement guidance, and is an important member as the movement guidance. On the other hand, examples of portable objects that can be brought into a vehicle and equipped with a display include so-called smartphones and the like, and performing movement guidance of the vehicle by linking these smartphones and the above terminal device It was not considered.

そこで本願は、上記の問題点及び要請に鑑みて為されたもので、その課題の一例は、上記端末装置と上記スマートフォン等とが近接して存在し(より具体的には、例えば一の車両内に存在し)且つその端末装置にディスプレイが備えられていない場合でも、その端末装置を用いて的確に車両の移動案内等の情報の提供を行うことが可能な案内制御装置及び案内制御方法並びに当該案内制御装置用のプログラムを提供することにある。   Therefore, the present application has been made in view of the above problems and requests, and an example of the problem is that the terminal device and the smartphone and the like are close to each other (more specifically, for example, one vehicle Even if the terminal device is provided with a display, even if the terminal device is not provided with a display, a guidance control device and guidance control method capable of accurately providing information such as vehicle movement guidance using the terminal device, and guidance control method Providing a program for the guidance control device.

上記の課題を解決するために、請求項1に記載の発明は、画像を表示する表示装置と、音声を出力する出力装置と、に、通信によりそれぞれ接続可能な接続手段と、前記表示装置及び前記出力装置が予め設定された範囲内にあるか否かを判定する判定手段と、前記判定手段による判定結果に応じて、前記音声の出力態様を異ならせる制御手段と、を備える。   In order to solve the above-mentioned problems, the invention according to claim 1 is a connecting device which can be connected by communication to a display device for displaying an image and an output device for outputting an audio, and the display device and The apparatus comprises: determination means for determining whether or not the output device is within a preset range; and control means for varying the output mode of the voice according to the determination result by the determination means.

上記の課題を解決するために、請求項11に記載の発明は、通信によりそれぞれ接続可能な接続手段と、判定手段と、制御手段と、を備える案内制御装置において実行される案内制御方法であって、前記表示装置及び前記出力装置が予め設定された範囲内にあるか否かを前記判定手段により判定する判定工程と、前記判定工程における判定結果に応じて、前記制御手段により前記音声の出力態様を異ならせる制御工程と、を含む。   In order to solve the above-described problems, the invention according to claim 11 is a guidance control method executed in a guidance control device including connection means connectable by communication, determination means, and control means. A determination step of determining whether the display device and the output device are within a preset range by the determination means, and output of the sound by the control means according to the determination result in the determination step And d) controlling the aspect differently.

上記の課題を解決するために、請求項12に記載の発明は、コンピュータを、請求項1から請求項10のいずれか一項に記載の案内制御装置として機能させる。   In order to solve the above-mentioned subject, the invention according to claim 12 makes a computer function as a guidance control device according to any one of claims 1 to 10.

実施形態に係る案内制御装置の概要構成を示すブロック図である。It is a block diagram showing a schematic structure of a guidance control device concerning an embodiment. 実施例に係る案内制御システムの概要構成を示すブロック図である。It is a block diagram showing the outline composition of the guidance control system concerning an example. 実施例に係るサーバ装置等の概要構成を示すブロック図であり、(a)は当該サーバ装置の概要構成を示すブロック図であり、(b)は実施例に係るスマートスピーカの概要構成を示すブロック図であり、(c)は実施例に係るスマートフォンの概要構成を示すブロック図である。It is a block diagram which shows schematic structure of the server apparatus etc. which concern on an Example, (a) is a block diagram which shows schematic structure of the said server apparatus, (b) is a block which shows schematic structure of the smart speaker which concerns on an Example. It is a figure and (c) is a block diagram showing a schematic structure of a smart phone concerning an example. 実施例に係る案内制御処理を示すフローチャートである。It is a flow chart which shows guidance control processing concerning an example.

次に、本願を実施するための形態について、図1を用いて説明する。なお図1は、実施形態に係る案内制御装置の概要構成を示すブロック図である。   Next, a mode for carrying out the present application will be described with reference to FIG. FIG. 1 is a block diagram showing a schematic configuration of the guidance control device according to the embodiment.

図1に示すように、実施形態に係る案内制御装置Sは、接続手段1と、判定手段2と、制御手段3と、を備えて構成されている。   As shown in FIG. 1, the guidance control device S according to the embodiment includes a connection unit 1, a determination unit 2, and a control unit 3.

この構成において接続手段1は、画像を表示する表示装置SPと、音声を出力する出力装置SKと、に、通信によりそれぞれ接続可能とされている。この場合の通信として、有線通信であるか、無線通信であるか、又は直接的な通信であるか間接的な通信であるか、或いはそれが準拠すべき規格等は問われないが、例えば、表示装置SPと出力装置SKとに対して接続手段1は無線により接続される。   In this configuration, the connection unit 1 can be connected to the display device SP for displaying an image and the output device SK for outputting an audio through communication. The communication in this case may be wired communication, wireless communication, direct communication or indirect communication, or a standard to which it should conform, for example, The connection means 1 is connected wirelessly to the display device SP and the output device SK.

そして判定手段2は、表示装置SP及び出力装置SKが予め設定された範囲内にあるか否かを判定する。   Then, the determination means 2 determines whether or not the display device SP and the output device SK are within a preset range.

これにより制御手段3は、判定手段2による判定結果に応じて、出力装置SKによる音声の出力態様を異ならせる。   Thereby, the control means 3 makes the output mode of the sound by the output device SK different according to the determination result by the determination means 2.

以上説明したように、実施形態に係る案内制御装置Sの動作によれば、画像を表示する表示装置SPと、音声を出力する出力装置SKと、が既定範囲内にあるか否かの判定結果に応じて上記音声の出力態様を異ならせる。よって、別個の上記表示装置SPと上記出力装置SKとが共に既定範囲内にあるか否かに応じて、必要な情報を音声のみにより的確に提供することができる。   As described above, according to the operation of the guidance control device S according to the embodiment, it is determined whether the display device SP that displays an image and the output device SK that outputs an audio are within the predetermined range. In accordance with the above, the output mode of the voice is made different. Therefore, depending on whether or not both the separate display device SP and the output device SK are within the predetermined range, the necessary information can be provided more accurately by voice only.

次に、上述した実施形態に対応する具体的な実施例について、図面を用いて説明する。なお以下に説明する実施例は、いわゆるスマートスピーカ及びスマートフォンが一の車両内で使用されており、且つ、当該スマートスピーカ及びスマートフォンが例えばインターネット等のネットワークを介してサーバ装置に接続されている案内制御システムを用いて当該車両の移動を案内する場合に実施形態を適用した場合の実施例である。このとき上記スマートスピーカとは、例えば、少なくともマイク、スピーカ及び通信用のインターフェース等を備えており、インターネット等のネットワークとの間の情報又はデータ或いはメッセージの授受が可能な装置をいう。そして、上記スマートフォンが実施形態に係る表示装置SPの一例に相当し、上記スマートスピーカが実施形態に係る出力装置SKの一例に相当する。   Next, specific examples corresponding to the above-described embodiment will be described using the drawings. In the embodiment described below, guidance control is used in which so-called smart speakers and smart phones are used in one vehicle, and the smart speakers and smart phones are connected to a server device via a network such as the Internet. It is an example at the time of applying an embodiment, when guiding movement of the vehicles concerned using a system. At this time, the above-mentioned smart speaker is, for example, a device that includes at least a microphone, a speaker, an interface for communication, and the like, and can exchange information or data or messages with a network such as the Internet. The smartphone corresponds to an example of the display device SP according to the embodiment, and the smart speaker corresponds to an example of the output device SK according to the embodiment.

また、図2は実施例に係る案内制御システムの概要構成を示すブロック図であり、図3は実施例に係るサーバ装置等の概要構成を示すブロック図であり、図4は実施例に係る案内制御処理を示すフローチャートである。このとき図2及び図3では、図1に示した実施形態に係る案内制御装置Sにおける各構成部材に対応する実施例の構成部材それぞれについて、当該案内制御装置Sにおける各構成部材と同一の部材番号を用いている。   2 is a block diagram showing a schematic configuration of the guidance control system according to the embodiment, FIG. 3 is a block diagram showing a schematic configuration of a server apparatus etc. according to the embodiment, and FIG. 4 is a guide according to the embodiment It is a flowchart which shows control processing. At this time, in FIG. 2 and FIG. 3, the same members as the respective constituent members in the guidance control device S, regarding the respective constituent members of the embodiment corresponding to the respective constituent members in the guidance control device S according to the embodiment shown in FIG. The number is used.

図2に示すように実施例に係る案内制御システムSSは、その使用者が運転する上記車両C内に存在する(例えば車両C内に置かれている)スマートスピーカSKと、その使用者の有するスマートフォンSPと、サーバ装置Sと、により構成されている。このとき、車両Cを運転する使用者がスマートフォンSPの所有者でもあることから、図2に示すように、スマートスピーカSKとスマートフォンSPとは、結果として一の車両C内に置かれていることになる。そして、当該サーバ装置Sと上記スマートスピーカSK、及び当該サーバ装置Sと上記スマートフォンSPが、上記ネットワークNWを介して相互にメッセージ及び諸データ等の授受が可能とされている。この構成により実施例に係る案内制御システムSSでは、以下に詳説する実施例に係る案内制御処理が実行される。また、上記サーバ装置Sが実施形態に係る案内制御装置Sの一例に相当する。   As shown in FIG. 2, the guidance control system SS according to the embodiment includes the smart speaker SK (for example, placed in the vehicle C) present in the vehicle C driven by the user and the user It is comprised by smart phone SP and server apparatus S. At this time, since the user driving the vehicle C is also the owner of the smartphone SP, as shown in FIG. 2, the smart speaker SK and the smartphone SP are placed in one vehicle C as a result. become. Then, the server apparatus S and the smart speaker SK, and the server apparatus S and the smartphone SP can mutually exchange messages and various data via the network NW. With this configuration, in the guidance control system SS according to the embodiment, guidance control processing according to the embodiment described in detail below is executed. In addition, the server device S corresponds to an example of the guidance control device S according to the embodiment.

なお図2においては図示を省略しているが、実施例に係る案内制御システムSSでは、複数の車両C内にそれぞれ置かれたスマートフォンSP及びスマートスピーカSKと、図2に示すサーバ装置Sと、が、ネットワークNWを介してスマートフォンSP及びスマートスピーカSKごとに別個に接続されている。そして実施例に係る案内制御システムSSでは、一の車両C内に存在するスマートフォンSP及びスマートスピーカSKを対象として、実施例に係る案内制御処理がそれぞれ実行される。このとき、同一使用者のスマートスピーカSKと一のスマートフォンSPとが一の車両C内に存在して実施例に係る案内制御処理の対象となった場合でも、別のタイミングでは、同一使用者の他のスマートフォンSPとスマートスピーカSKが一の車両C内に存在し、これらが実施例に係る案内制御処理の対象となり得る。   In addition, although illustration is abbreviate | omitted in FIG. 2, in the guidance control system SS which concerns on an Example, smart phone SP and smart speaker SK each arrange | positioned in several vehicles C, and the server apparatus S shown in FIG. Are separately connected to the smartphone SP and the smart speaker SK via the network NW. Then, in the guidance control system SS according to the embodiment, the guidance control processing according to the embodiment is respectively executed on the smartphone SP and the smart speaker SK existing in one vehicle C. At this time, even when the smart speaker SK of the same user and the smartphone SP of one user exist in one vehicle C and become a target of the guidance control process according to the embodiment, at different timings, the same user's Another smart phone SP and smart speaker SK exist in one vehicle C, and these can be targets of guidance control processing according to the embodiment.

即ち図2に示す案内制御システムSSにおける実施例に係る案内制御処理としては、先ず、一の車両C内に置かれているスマートスピーカSK及びスマートフォンSPはそれぞれ、それらの使用者を識別するためのユーザIDと、それらの現在位置を示す現在位置情報と、スマートスピーカSK又はスマートフォンSPのいずれであるかを判別でき且つ同一種類の機器内でも各機器個体を区別可能な機器判別情報と、を含む現状情報を、例えば予め設定された時間ごとにネットワークNWを介してサーバ装置Sに送信する。またスマートフォンSPから送信される上記現状情報には、上記のユーザID等に加えて、当該スマートフォンSPの後述するディスプレイ上に上記車両Cの移動を案内するための画面(画像)が表示されているか否かを示す表示状態情報が含まれている。なお以下の説明において、上記車両Cの移動を案内するための画面(画像)を、単に「案内画像」と称する。ここで「案内画像」とは、具体的な案内、例えば、経路誘導情報を表示する画面のみならず、単純な地図表示や、又はナビゲーションアプリケーションの画像が表示されていることを含む。   That is, in the guidance control process according to the embodiment in the guidance control system SS shown in FIG. 2, first, the smart speaker SK and the smart phone SP placed in one vehicle C respectively identify their users. Includes user ID, current position information indicating their current position, and device determination information that can determine whether the device is the smart speaker SK or the smart phone SP and can distinguish each device individual even within the same type of device The current status information is transmitted to the server apparatus S via the network NW, for example, every preset time. In addition to the user ID and the like described above, is the screen (image) for guiding the movement of the vehicle C displayed on the display of the smart phone SP described later in the current information transmitted from the smart phone SP? Display state information indicating whether or not to be included is included. In the following description, the screen (image) for guiding the movement of the vehicle C is simply referred to as a “guidance image”. Here, the "guide image" includes not only a screen for displaying specific guidance, for example, route guidance information, but also a simple map display or an image of a navigation application being displayed.

そして、スマートフォンSPのディスプレイ上に上記案内画像が表示されていることが上記表示状態情報で示されている場合にサーバ装置Sは、当該案内画像を用いた車両Cの移動案内を行う。なお以下の説明において、上記案内画像を用いた(換言すれば、当該案内画像が表示されているスマートフォンSPを用いた)車両Cの移動案内を、単に「画像使用案内」と称する。一方、スマートフォンSPの電源がオフとされている等により上記ディスプレイそのものが機能していないか、又は当該ディスプレイ上に上記案内画像が表示されていない(例えば、ナビゲーションアプリケーションとは関係のないメールアプリケーションなどが表示されている)ことが上記表示状態情報で示されている場合にサーバ装置Sは、スマートスピーカSKを用いた音声のみによる車両Cの移動案内を行う。なお以下の説明において、上記音声のみによる車両Cの移動案内を、単に「画像非使用案内」と称する。そして、上記画像使用案内と上記画像非使用案内とを比較した場合、後者が上記音声のみによる車両Cの移動案内であることに起因して、両者の内容には種々の相違点が設けられている。この相違点については、後ほど詳述する。   Then, when the display state information indicates that the guidance image is displayed on the display of the smartphone SP, the server apparatus S performs movement guidance of the vehicle C using the guidance image. In the following description, movement guidance of the vehicle C using the above guidance image (in other words, using the smartphone SP on which the guidance image is displayed) will be referred to simply as "image usage guidance". On the other hand, the display itself is not functioning because the power of the smartphone SP is turned off or the guidance image is not displayed on the display (for example, a mail application unrelated to the navigation application) Is indicated by the display state information, the server apparatus S performs movement guidance of the vehicle C only by voice using the smart speaker SK. In the following description, the movement guidance of the vehicle C only by the voice is simply referred to as "image non-use guidance". And when the said image use guidance and the said image non-use guidance are compared, various differences are provided in the content of both since the latter is movement guidance of the vehicle C only by the said audio | voice There is. This difference will be described in detail later.

次に、実施例に係るサーバ装置S等の概要構成等について、図3を用いて説明する。   Next, a schematic configuration and the like of the server apparatus S and the like according to the embodiment will be described with reference to FIG.

初めに、実施例に係るサーバ装置Sの概要構成等について、図3(a)を用いて説明する。図3(a)に示すように、実施例に係るサーバ装置Sは、インターフェース1と、CPU、ROM(Read Only Memory)及びRAM(Random Access Memory)等からなる処理部4と、例えばHDD(Hard Disc Drive)又はSSD(Solid State Drive)等からなる記録部5と、液晶ディスプレイ等からなるディスプレイ6と、キーボード及びマウス等からなる操作部7と、により構成されている。   First, a schematic configuration and the like of the server apparatus S according to the embodiment will be described with reference to FIG. As illustrated in FIG. 3A, the server apparatus S according to the embodiment includes an interface 1, a processing unit 4 including a CPU, a read only memory (ROM), a random access memory (RAM), and the like; The recording unit 5 includes a disc drive, an SSD (solid state drive), and the like, a display 6 including a liquid crystal display and the like, and an operation unit 7 including a keyboard and a mouse.

また処理部4は、判定部2と、制御部3と、により構成されている。このとき判定部2及び制御部3は、処理部4を構成する上記CPU等を含むハードウェアロジック回路として構成されていてもよいし、後述する実施例に係る案内制御処理のうちサーバ装置Sが実行すべき処理に相当するプログラムを上記CPUが読み出して実行することにより、ソフトウェア的に実現されるものであってもよい。   The processing unit 4 is configured by the determination unit 2 and the control unit 3. At this time, the determination unit 2 and the control unit 3 may be configured as a hardware logic circuit including the above-described CPU and the like that constitute the processing unit 4, and the server apparatus S performs guidance control processing according to an embodiment described later. The program may be realized as software by the CPU reading and executing a program corresponding to a process to be executed.

更に上記構成において、インターフェース1が実施形態に係る接続手段1の一例に相当し、判定部2が実施形態に係る判定手段2の一例に相当し、制御部3が実施形態に係る制御手段3の一例にする。そして、図3(a)において破線で示す通り、上記インターフェース1、上記判定部2及び上記制御部3により、実施形態に係る案内制御装置Sの一例が構成されている。またインターフェース1が、本願に係る「表示装置識別情報取得手段」の一例及び「出力装置識別情報取得手段」の一例にそれぞれ相当し、処理部4が本願に係る「同一性判定手段」の一例に相当する。   Furthermore, in the above configuration, the interface 1 corresponds to an example of the connection unit 1 according to the embodiment, the determination unit 2 corresponds to an example of the determination unit 2 according to the embodiment, and the control unit 3 corresponds to the control unit 3 according to the embodiment. Take an example. And as shown with a broken line in Drawing 3 (a), an example of guidance control device S concerning an embodiment is constituted by the above-mentioned interface 1, the above-mentioned judgment part 2, and the above-mentioned control part 3. The interface 1 corresponds to an example of the “display device identification information acquisition means” and an example of the “output device identification information acquisition means” according to the present invention, and the processing unit 4 is an example of the “identity determination means” according to the present application. Equivalent to.

以上のサーバ装置Sの構成においてインターフェース1は、処理部4の制御の下、サーバ装置Sと、スマートスピーカSK及びスマートフォンSPと、の間のネットワークNWを介したメッセージ及び諸データ等の授受を制御する。   In the configuration of the server apparatus S described above, the interface 1 controls transmission and reception of messages and various data via the network NW between the server apparatus S and the smart speaker SK and the smartphone SP under the control of the processing unit 4 Do.

また記録部5には、実施例に係る案内制御処理のうちサーバ装置Sが実行すべき処理に相当するプログラムが不揮発性に記録されていると共に、当該案内制御処理の実行に際して必要なデータ等が一時的に記録される。更に記録部5には、スマートスピーカSK及びスマートフォンSPの使用者を識別するためのユーザIDに関連付けて、その使用者の要求に基づく過去の案内制御処理に関連する地点又は地物(例えば目的地としての施設等。以下同様。)の検索結果であって、複数の検索手法によって得られた複数の検索結果それぞれの、他の使用者を含む使用者からの要求に基づく検索数を示す検索数情報が記録されている。このとき、当該検索数情報により示される検索数に、スマートスピーカSK及びスマートフォンSPの使用者からの今回の要求に基づく検索数が含まれていなくてもよい。更にこれに加えて記録部5には、上記ユーザIDに関連付けて、その使用者による過去の検索履歴を示す検索履歴情報が記録されている。なおこのときの検索履歴情報は、スマートスピーカSKの使用者とスマートフォンSPの使用者とが異なる場合は、少なくともどちらか一方の使用者による検索の履歴を示す検索履歴情報であってもよい。また、上記検索数情報及び上記検索履歴情報は、図示しない外部のサーバ装置等から取得されるものであってもよい。   In the recording unit 5, a program corresponding to a process to be executed by the server device S in the guidance control process according to the embodiment is recorded in a non-volatile manner, and data etc. necessary for executing the guidance control process are stored. It is temporarily recorded. Furthermore, the recording unit 5 is associated with a user ID for identifying the user of the smart speaker SK and the smartphone SP, and a point or feature (for example, a destination) related to the past guidance control processing based on the request of the user The number of searches that are the search results of the same as the facilities etc.) and which indicates the number of searches based on the request from the user including other users for each of the plurality of search results obtained by the plurality of search methods. Information is recorded. At this time, the number of searches based on the current request from the user of the smart speaker SK and the smartphone SP may not be included in the number of searches indicated by the search number information. Furthermore, in addition to this, in the recording unit 5, search history information indicating a search history of the user in the past is recorded in association with the user ID. When the user of the smart speaker SK and the user of the smartphone SP are different, the search history information at this time may be search history information indicating a history of searches by at least one of the users. The search number information and the search history information may be acquired from an external server device or the like (not shown).

一方操作部7は、サーバ装置Sの動作を指示するための管理者又は操作者による操作が当該操作部7において実行されると、当該操作に対応する操作信号を生成して処理部4に出力する。これにより処理部4並びに当該処理部4の判定部2及び制御部3は、当該操作信号に基づき、記録部5に記録されている上記プログラムや上記データ或いは情報を用いつつ、スマートスピーカSK及びスマートフォンSPとの間で必要なメッセージ及び諸データ等の授受を行って、実施例に係る案内制御処理のうちサーバ装置Sが実行すべき処理を中心的に実行する。更に当該処理の実行に必要なデータはディスプレイ6を介して上記管理者又は上記操作者に提示される。   On the other hand, when an operation by the administrator or operator for instructing the operation of the server apparatus S is executed in the operation unit 7, the operation unit 7 generates an operation signal corresponding to the operation and outputs it to the processing unit 4 Do. As a result, the processing unit 4 and the determination unit 2 and the control unit 3 of the processing unit 4 use the program and the data or information recorded in the recording unit 5 based on the operation signal, while the smart speaker SK and the smartphone Necessary messages and various data are exchanged with the SP, and the processing to be executed by the server device S in the guidance control processing according to the embodiment is mainly performed. Furthermore, data required to execute the process is presented to the administrator or the operator via the display 6.

次に、実施例に係るスマートスピーカSKの概要構成について、図3(b)を用いて説明する。図3(b)に示すように、実施例に係るスマートスピーカSKは、インターフェース10と、CPU11と、小型の液晶ディスプレイ又はLED(Light Emission Diode)等からなるインジケータ12と、スピーカ13と、ROM及びRAM等からなるメモリ14と、マイク15と、GPS(Global Positioning System)センサ等からなるセンサ部16と、により構成されている。なお、上記小型の液晶ディスプレイによりインジケータ12が構成される場合、例えば、その液晶ディスプレイは、数文字程度の文字表示等の機能しか有しておらず、従来のナビゲーション装置に備えられた液晶ディスプレイ等のように、詳細な案内用の地図やルートの表示はできない構成とされている。この構成においてインターフェース10は、CPU11の制御の下、サーバ装置Sとの間のネットワークNWを介したメッセージ及び諸データ等の授受を制御する。またメモリ14には、実施例に係る案内制御処理のうちスマートスピーカSKが実行すべき処理に相当するプログラムが不揮発性に記録されていると共に、当該案内制御処理の実行に際して必要な諸データ等が一時的に記録される。一方マイク15は、CPU11の制御の下、使用者がスマートスピーカSKに向かって発話したとき、その音声を検出し、対応する音声データをCPU11に出力する。このとき当該発話には、スマートスピーカSKの動作を指示するための使用者による発話が含まれている。そしてマイク15は、当該発話に対応する上記音声データをCPU11に出力する。これによりCPU11は、当該音声データに基づき、メモリ14に記録されている上記プログラムや上記諸データ等を用いつつ、サーバ装置Sとの間で必要なメッセージ及び諸データ等の授受を行って、実施例に係る案内制御処理のうちスマートスピーカSKが実行すべき処理を中心的に実行する。このとき当該処理には、上記センサ部16を構成するGPSセンサを用いたスマートスピーカSKの現在位置の検出処理等が含まれる。更に当該処理の実行状態は、CPU11の制御の下、インジケータ12を介して使用者に提示される。更にスピーカ13は、CPU11の制御の下、当該処理として必要な音声を出力(放音)して使用者に認識させる。更にまたCPU11は、上記画像非使用案内を行う場合、スピーカ13を介して当該移動案内に必要な音声を出力する。またCPU11は、上記画像使用案内を行う場合でも、スピーカ13を介して当該移動案内に必要な音声を出力する。このとき、実施例に係る案内制御処理では、上述したように画像非使用案内が必要な音声のみによる移動案内であることに起因して、上記画像使用案内に必要な音声の内容と、上記画像非使用案内に必要な音声の内容と、の間に様々な相違点が設けられている。   Next, the schematic configuration of the smart speaker SK according to the embodiment will be described with reference to FIG. As shown in FIG. 3B, the smart speaker SK according to the embodiment includes an interface 10, a CPU 11, an indicator 12 formed of a small liquid crystal display or an LED (Light Emission Diode), a speaker 13, a ROM, and the like. It is comprised by the memory 14 which consists of RAM etc., the microphone 15, and the sensor part 16 which consists of a GPS (Global Positioning System) sensor etc. When the indicator 12 is configured by the small liquid crystal display, for example, the liquid crystal display only has a function of displaying characters of several characters or the like, and the liquid crystal display etc. provided in a conventional navigation device As shown in the figure, the map and route for detailed guidance can not be displayed. In this configuration, the interface 10 controls the exchange of messages and data with the server apparatus S via the network NW under the control of the CPU 11. In the memory 14, a program corresponding to the process to be executed by the smart speaker SK in the guidance control process according to the embodiment is recorded in a non-volatile manner, and various data etc. necessary for executing the guidance control process are stored. It is temporarily recorded. On the other hand, when the user speaks toward the smart speaker SK under the control of the CPU 11, the microphone 15 detects the voice and outputs corresponding voice data to the CPU 11. At this time, the utterance includes the utterance by the user for instructing the operation of the smart speaker SK. Then, the microphone 15 outputs the voice data corresponding to the utterance to the CPU 11. Thereby, based on the voice data, the CPU 11 transmits and receives necessary messages and various data with the server apparatus S while using the program and the various data recorded in the memory 14, In the guidance control process according to the example, the process to be executed by the smart speaker SK is mainly performed. At this time, the process includes a process of detecting the current position of the smart speaker SK using the GPS sensor constituting the sensor unit 16 or the like. Furthermore, the execution state of the process is presented to the user via the indicator 12 under the control of the CPU 11. Furthermore, the speaker 13 outputs (sounds off) a sound necessary for the process under the control of the CPU 11 to cause the user to recognize it. Furthermore, the CPU 11 outputs a voice necessary for the movement guidance through the speaker 13 when the image non-use guidance is performed. Further, even when the image usage guidance is performed, the CPU 11 outputs a voice necessary for the movement guidance via the speaker 13. At this time, in the guidance control process according to the embodiment, as described above, the content of the voice necessary for the image use guidance and the image due to the movement guidance only by the voice requiring the image non-use guidance. There are various differences between the content of audio required for non-use guidance.

最後に、実施例に係るスマートフォンSPの概要構成について、図3(c)を用いて説明する。図3(c)に示すように、実施例に係るスマートフォンSPは、インターフェース20と、CPU21と、液晶ディスプレイ等からなるディスプレイ22と、操作ボタン又はタッチパネル等からなる操作部23と、スピーカ24と、GPSセンサ等からなるセンサ部25と、ROM及びRAM等からなるメモリ26と、により構成されている。この構成においてインターフェース20は、CPU21の制御の下、サーバ装置Sとの間のネットワークNWを介したメッセージ及び諸データ等の授受を制御する。またメモリ26には、実施例に係る案内制御処理のうちスマートフォンSPが実行すべき処理に相当するプログラムが不揮発性に記録されていると共に、当該案内制御処理の実行に際して必要な諸データ等が一時的に記録される。一方操作部23は、スマートフォンSPの動作を指示するためのその使用者による操作が当該操作部23において実行されると、当該操作に対応する操作信号を生成してCPU21に出力する。これによりCPU21は、当該操作信号に基づき、メモリ26に記録されている上記プログラムや上記諸データ等を用いつつ、サーバ装置Sとの間で必要なメッセージ及び諸データ等の授受を行って、実施例に係る案内制御処理のうちスマートフォンSPが実行すべき処理を中心的に実行する。このとき当該処理には、上記GPSセンサを用いたスマートフォンSPの現在位置の検出処理等が含まれる。またCPU21は、上記画像使用案内を行う場合、ディスプレイ22上に当該移動案内に必要な案内画像を表示すると共に、スピーカ24を介して当該移動案内に必要な音声を出力する。   Finally, a schematic configuration of the smartphone SP according to the embodiment will be described with reference to FIG. As shown in FIG. 3C, the smartphone SP according to the embodiment includes an interface 20, a CPU 21, a display 22 including a liquid crystal display or the like, an operation unit 23 including an operation button or a touch panel, and a speaker 24. It is comprised by the sensor part 25 which consists of a GPS sensor etc., and the memory 26 which consists of ROM, RAM etc. In this configuration, the interface 20 controls exchange of messages and data with the server apparatus S via the network NW under the control of the CPU 21. In the memory 26, a program corresponding to a process to be executed by the smartphone SP in the guidance control process according to the embodiment is recorded in a non-volatile manner, and various data etc. necessary for executing the guidance control process are temporarily stored. Are recorded. On the other hand, when the operation by the user for instructing the operation of the smartphone SP is executed in the operation unit 23, the operation unit 23 generates an operation signal corresponding to the operation and outputs the operation signal to the CPU 21. Thereby, based on the operation signal, the CPU 21 transmits and receives necessary messages and various data with the server apparatus S while using the program and the various data stored in the memory 26. Among the guidance control processing according to the example, the processing to be executed by the smartphone SP is mainly performed. At this time, the process includes a process of detecting the current position of the smartphone SP using the GPS sensor. Further, when performing the image use guidance, the CPU 21 displays a guide image necessary for the movement guide on the display 22 and outputs a sound necessary for the movement guide through the speaker 24.

次に、上記サーバ装置S等により実行される、実施例に係る案内制御処理について、纏めて図4を用いて説明する。なお図4において、サーバ装置SとスマートスピーカSK等との間で授受される各メッセージの流れは破線矢印で示されており、また、上記画像使用案内及び上記画像非使用案内それぞれに必要な諸データ等の流れは白抜き両矢印で示されている。更に図4にそれぞれ示すサーバ装置S、スマートスピーカSK及びスマートフォンSPにおける処理は、例えば、これらサーバ装置S等それぞれの電源がオンとされたタイミングから開始される。   Next, guidance control processing according to the embodiment, which is executed by the server apparatus S or the like, will be collectively described with reference to FIG. In FIG. 4, the flow of each message exchanged between the server apparatus S and the smart speaker SK etc. is shown by a broken arrow, and various items necessary for the image use guide and the image non-use guide are shown. The flow of data etc. is indicated by the open double arrows. Further, the processing in the server device S, the smart speaker SK, and the smartphone SP shown in FIG. 4 is started, for example, from the timing when the power of each of the server devices S is turned on.

図4に示すように、先ずスマートスピーカSKのCPU11及びスマートフォンSPのCPU21はそれぞれ、実施例に係る案内制御処理が開始されると、センサ部16を用いたスマートスピーカSKの現在位置等の検出処理、及びセンサ部25を用いたスマートフォンSPの現在位置等の検出処理をそれぞれ行う。その後上記CPU11は、上記検出された現在位置を示す現在位置情報及びスマートスピーカSKの使用者を識別するためのユーザIDを含む現状情報をサーバ装置Sに送信するために予め設定されたタイミングが到来したか否かを監視する(ステップS25)。また上記CPU21は、上記検出された現在位置を示す現在位置情報及びスマートフォンSPの使用者を識別するためのユーザID、並びにディスプレイ22自体が機能しており且つ案内画像が表示されているか否かを示す上記表示状態情報を含む現状情報をサーバ装置Sに送信するために予め設定されたタイミングが到来したか否かを監視する(ステップS15)。ステップS15及びステップS25の監視において、当該タイミングが到来していない場合(ステップS15:NO及びステップS25:NO)、上記CPU11及び上記CPU21はそれぞれ、当該タイミングの到来の監視を継続する。一方ステップS15及びステップS25の監視において、当該タイミングが到来していた場合(ステップS15:YES及びステップS25:YES)、上記CPU11及び上記CPU21はそれぞれ、スマートフォンSP及びスマートスピーカSKとしての上記現状情報を、ネットワークNWを介してサーバ装置Sに送信する(ステップS16及びステップS26)。なお、上記ステップS15、上記ステップS16、上記ステップS25及び上記ステップS26における上記現状情報の生成処理及び送信処理は、実施例に係る案内制御処理の実行とは無関係に、予め設定された間隔の上記タイミングごとに継続して実行される。その後CPU21は、後述するステップS17に移行する。一方CPU11は次に、実施例に係る案内制御処理の開始がスマートスピーカSKの使用者から指示されたか否かを監視する(ステップS27)。このとき、当該案内制御処理の開始は、例えばマイク15を介した当該使用者による当該開始を示す既定の開始指示音声の発話により、指示される。そして、ステップS27の監視において当該開始の指示があった場合(ステップS27:YES)、CPU11は、スマートスピーカSKにおいて当該開始の指示があった旨の案内開始メッセージを、ネットワークNWを介してサーバ装置Sに送信する(ステップS28)。その後CPU11は、後述するステップS29に移行する。一方、ステップS27の監視において開始の指示がない場合(ステップS27:NO)、上記CPU11はスマートスピーカSKとしての他の処理に移行する。   As shown in FIG. 4, first, when the guidance control process according to the embodiment is started, the CPU 11 of the smart speaker SK and the CPU 21 of the smartphone SP each detect the current position of the smart speaker SK using the sensor unit 16 And the detection process of the present position etc. of smart phone SP using the sensor part 25 is performed, respectively. Thereafter, the timing set in advance for transmitting, to the server apparatus S, the current information including the current position information indicating the detected current position and the user ID for identifying the user of the smart speaker SK comes. It is monitored whether or not it has been made (step S25). In addition, the CPU 21 detects current position information indicating the detected current position, a user ID for identifying a user of the smartphone SP, and whether the display 22 itself is functioning and a guidance image is displayed. It is monitored whether or not a timing set in advance for transmitting current information including the display state information to be shown to the server apparatus S has arrived (step S15). In the monitoring of step S15 and step S25, when the timing has not arrived (step S15: NO and step S25: NO), the CPU 11 and the CPU 21 continue monitoring the arrival of the timing. On the other hand, in the monitoring of step S15 and step S25, when the timing has arrived (step S15: YES and step S25: YES), the CPU 11 and the CPU 21 respectively transmit the current information as the smartphone SP and the smart speaker SK. , And transmits to the server apparatus S via the network NW (step S16 and step S26). In addition, the generation process and the transmission process of the present condition information in the step S15, the step S16, the step S25, and the step S26 are performed at predetermined intervals regardless of the execution of the guidance control process according to the embodiment. It is continuously executed at each timing. Thereafter, the CPU 21 proceeds to step S17 described later. On the other hand, the CPU 11 next monitors whether the start of the guidance control process according to the embodiment is instructed by the user of the smart speaker SK (step S27). At this time, the start of the guidance control process is instructed by, for example, the utterance of a predetermined start instruction voice indicating the start by the user via the microphone 15. Then, when there is an instruction of the start in the monitoring of step S27 (step S27: YES), the CPU 11 transmits a guidance start message to the effect that the instruction of the start is received in the smart speaker SK via the network NW as a server device Send to S (step S28). Thereafter, the CPU 11 shifts to step S29 described later. On the other hand, when there is no start instruction in the monitoring of step S27 (step S27: NO), the CPU 11 shifts to another process as the smart speaker SK.

一方サーバ装置Sの処理部4は、実施例に係る案内制御処理が開始されると、スマートフォンSP又はスマートスピーカSKのいずれか又は双方から上記現状情報がネットワークNWを介して送信されてきたか否かを監視する(ステップS1)。ステップS1の監視において当該現状情報の受信がない場合(ステップS1:NO)、処理部4は引き続き当該監視を継続する。一方ステップS1の監視においていずれかの現状情報を受信した場合(ステップS1:YES)、処理部4は、各受信した現状情報を、それらに対応するユーザIDに関連付けて記録部5に記録する(ステップS2)。これによりサーバ装置Sでは、スマートフォンSP及びスマートスピーカSKそれぞれの現在位置等やスマートフォンSPにおける案内画像の表示の有無を、それぞれの使用者ごとに把握できることになる。なお、上記ステップS1及び上記ステップS2における上記現状情報の受信処理及び記録処理は、実施例に係る案内制御処理の実行とは無関係に、各現状情報が送信されてきたタイミングで実行される。   On the other hand, when the guidance control process according to the embodiment is started, the processing unit 4 of the server apparatus S determines whether the above-mentioned current information has been transmitted from the smart phone SP or the smart speaker SK via the network NW. Is monitored (step S1). When there is no reception of the said present condition information in monitoring of step S1 (step S1: NO), the process part 4 continues the said monitoring continuously. On the other hand, when any current information is received in the monitoring of step S1 (step S1: YES), the processing unit 4 records each received current information in the recording unit 5 in association with the corresponding user ID ( Step S2). As a result, in the server device S, the current positions of the smartphone SP and the smart speaker SK, etc., and the presence or absence of the display of the guide image on the smartphone SP can be grasped for each user. The reception process and the recording process of the present status information in the step S1 and the step S2 are executed at the timing when each present status information is transmitted regardless of the execution of the guidance control process according to the embodiment.

次に処理部4は、スマートスピーカSKから上記案内開始メッセージがネットワークNWを介して送信されてきたか否かを監視する(ステップS3)。ステップS3の監視において当該案内開始メッセージの受信がない場合(ステップS3:NO)、処理部4はサーバ装置Sとしての他の処理に移行する。   Next, the processing unit 4 monitors whether the guidance start message has been transmitted from the smart speaker SK via the network NW (step S3). When the guidance start message is not received in the monitoring of step S3 (step S3: NO), the processing unit 4 shifts to another process as the server apparatus S.

一方ステップS3の監視においてスマートスピーカSKからの案内開始メッセージを受信した場合(ステップS3:YES)、処理部4は次に、当該受信した案内開始メッセージの送信元たるスマートスピーカSKの使用者と、上記ステップS16で現状情報を送信してきているスマートフォンSPの使用者と、が同一であるか否かを、上記ステップS1及びステップS2で記録していた現状情報に含まれているユーザIDに基づいて判定する(ステップS4)。ステップS4の判定において当該送信元たるスマートスピーカSK及びスマートフォンSPの使用者が同一でない場合(ステップS4:NO)、処理部4は後述するステップS9に移行する。   On the other hand, when the guidance start message from the smart speaker SK is received in the monitoring in step S3 (step S3: YES), the processing unit 4 next uses the user of the smart speaker SK as the transmission source of the received guidance start message. Based on the user ID included in the current information recorded in the steps S1 and S2, it is determined whether the user of the smartphone SP transmitting the current information in the step S16 is the same or not. It determines (step S4). If it is determined in step S4 that the users of the smart speaker SK and the smartphone SP, which are the transmission sources, are not the same (step S4: NO), the processing unit 4 proceeds to step S9 described later.

一方ステップS4の判定において案内開始メッセージの送信元たるスマートスピーカSK及び現状情報の送信元たるスマートフォンSPの使用者が同一である場合(ステップS4:YES)、処理部4は次に、当該送信元たるスマートスピーカSKとスマートフォンSPとの間の距離が予め設定された閾値距離以下であるか否かを、上記ステップS1及びステップS2で記録していた現状情報に含まれている現在位置情報に基づいて判定する(ステップS5)。このとき上記閾値距離は、例えば、スマートスピーカSK及びスマートフォンSPが一の車両C内に存在している(置かれている)と見做し得る距離として予め設定された閾値距離である。この閾値距離は、例えば各種設計事項として予め定められるものであり、具体的には例えば2メートルである。ステップS5の判定において当該送信元たるスマートスピーカSKとスマートフォンSPとの間の距離が上記閾値距離より離れている場合(ステップS5:NO)、処理部4は後述するステップS9に移行する。他方ステップS5の判定において当該送信元たるスマートスピーカSKとスマートフォンSPとの間の距離が上記閾値距離以下である場合(ステップS5:YES)、処理部4の判定部2は次に、上記ステップS1及びステップS2で記録していた現状情報に含まれているスマートフォンSPの表示状態情報に基づいて、当該現状情報の送信元たるスマートフォンSPのディスプレイ22に案内画像が表示されているか否かを判定する(ステップS6)。ステップS6の判定において、当該ディスプレイ22に案内画像が表示されている場合(ステップS6:YES)、処理部4の制御部3は、当該ディスプレイ22に表示されている案内画像を用いた実施例に係る画像使用案内を、当該スマートフォンSPとの間での画像使用案内用画像データの授受及びスマートスピーカSKとの間での画像使用案内用音声データの授受により実行する(ステップS7。後述するステップS18及びステップS33参照)。なお実施例に係る画像使用案内では、当該画像使用案内に必要な案内音声は、スマートフォンSPのスピーカ24からではなく、後述するようにスマートスピーカSKのスピーカ13から出力される。また制御部3は、スマートスピーカSKへの上記画像使用案内用音声データの送信を開始する前に、スマートスピーカSKを用いた実施例に係る画像使用案内を行う旨の画像使用案内指示メッセージを、ネットワークNWを介してスマートスピーカSKに送信する(ステップS7。後述するステップS29参照。)。その後処理部4は、例えばスマートフォンSP及びスマートスピーカSKの使用者が運転する車両Cが目的地に到着した等の理由により、実施例に係る案内制御処理を終了するか否かを判定する(ステップS8)。ステップS8の判定において当該案内制御処理を終了しない場合(ステップS8:NO)、処理部4は上記ステップS4に戻って実施例に係る案内制御処理のうちサーバ装置Sが実行すべき処理を繰り返す。一方ステップS8の判定において当該案内制御処理を終了する場合(ステップS8:YES)、処理部4はサーバ装置Sとしての他の処理に移行する。なおこの場合の他の処理にも、上記現状情報の受信処理及び記録処理が継続して含まれている。   On the other hand, when the smart speaker SK which is the transmission source of the guidance start message and the user of the smartphone SP which is the transmission source of the current information are the same in the determination of step S4 (step S4: YES), the processing unit 4 next Whether the distance between the smart speaker SK and the smartphone SP is equal to or less than a preset threshold distance is based on the current position information included in the current information recorded in the steps S1 and S2. To determine (step S5). At this time, the threshold distance is, for example, a threshold distance set in advance as a distance where the smart speaker SK and the smartphone SP can be regarded as being present (placed) in one vehicle C. The threshold distance is, for example, predetermined as various design matters, and is specifically, for example, 2 meters. If it is determined in step S5 that the distance between the smart speaker SK as the transmission source and the smartphone SP is greater than the threshold distance (step S5: NO), the processing unit 4 proceeds to step S9 described later. On the other hand, when the distance between the smart speaker SK as the transmission source and the smartphone SP is equal to or less than the threshold distance in the determination of step S5 (step S5: YES), the determination unit 2 of the processing unit 4 next performs the step S1. And based on the display condition information of the smartphone SP included in the current condition information recorded in step S2, it is determined whether or not the guidance image is displayed on the display 22 of the smartphone SP as the transmission source of the current condition information. (Step S6). In the determination in step S6, when the guidance image is displayed on the display 22 (step S6: YES), the control unit 3 of the processing unit 4 is an embodiment using the guidance image displayed on the display 22. The image usage guidance is executed by exchanging image usage guidance image data with the smartphone SP and with image usage guidance voice data with the smart speaker SK (step S7: step S18 described later). And step S33). In the image use guidance according to the embodiment, the guide sound necessary for the image use guidance is output not from the speaker 24 of the smartphone SP but from the speaker 13 of the smart speaker SK as described later. Further, the control unit 3 displays an image usage guidance instruction message to perform image usage guidance according to the embodiment using the smart speaker SK before starting transmission of the voice data for guidance of image usage to the smart speaker SK. It transmits to the smart speaker SK via the network NW (step S7; see step S29 described later). After that, the processing unit 4 determines whether to end the guidance control process according to the embodiment, for example, because the vehicle C driven by the user of the smartphone SP and the smart speaker SK has arrived at the destination, etc. (step S8). If it is determined in step S8 that the guidance control process is not ended (step S8: NO), the processing unit 4 returns to step S4 and repeats the process to be executed by the server apparatus S in the guidance control process according to the embodiment. On the other hand, when the guidance control process is ended in the determination of step S8 (step S8: YES), the processing unit 4 shifts to another process as the server apparatus S. In addition, the reception process and the recording process of the said present condition information are continuously included also in the other process in this case.

他方、上記ステップS16によりスマートフォンSPとしての上記現状情報を送信したら、次にスマートフォンSPのCPU21は、そのディスプレイ22に案内画像が表示されているか否かを改めて確認する(ステップS17)。ステップS17の確認において、当該案内画像が表示されている場合(ステップS17:YES)、CPU21は、当該案内画像を用いた実施例に係る画像使用案内を、サーバ装置Sとの間での上記画像使用案内用画像データの授受により実行する(ステップS18。ステップS7参照)。その後CPU21は、例えば上記車両Cが目的地に到着した等の理由により、実施例に係る案内制御処理を終了するか否かを判定する(ステップS19)。ステップS19の判定において当該案内制御処理を終了しない場合(ステップS19:NO)、CPU21は上記ステップS17に戻って実施例に係る案内制御処理のうちスマートフォンSPが実行すべき処理を繰り返す。一方ステップS19の判定において当該案内制御処理を終了する場合(ステップS19:YES)、CPU21はスマートフォンSPとしての他の処理に移行する。なおこの場合の他の処理にも、上記現状情報の生成処理及び送信処理が継続して含まれている。   On the other hand, when the current status information as the smartphone SP is transmitted in step S16, next, the CPU 21 of the smartphone SP checks again whether or not the guidance image is displayed on the display 22 (step S17). In the confirmation of step S17, when the guidance image is displayed (step S17: YES), the CPU 21 transmits the image usage guidance according to the embodiment using the guidance image to the above-described image with the server apparatus S. It is executed by exchanging image data for use guidance (step S18, see step S7). After that, the CPU 21 determines whether to end the guidance control process according to the embodiment, for example, because the vehicle C has arrived at the destination (step S19). When the guidance control process is not ended in the determination of step S19 (step S19: NO), the CPU 21 returns to step S17 and repeats the process to be executed by the smartphone SP in the guidance control process according to the embodiment. On the other hand, when the guidance control process is ended in the determination of step S19 (step S19: YES), the CPU 21 shifts to another process as the smartphone SP. The other process in this case also includes the process of generating the current information and the process of transmitting the current information.

ここで、実施例に係る上記画像使用案内においては(ステップS7、ステップS20、ステップS33)、例えば案内用の地点の検索処理にあっては、サーバ装置Sの記録部5に記録されている上記検索数情報に基づく上記画像使用案内用画像データを用いて、当該検索数情報により示される検索数が最も多い検索結果から順に、予め設定された数の検索結果がスマートフォンSPのディスプレイ22に表示される。また当該検索処理として、記録部5に記録されている上記検索履歴情報に基づき、スマートフォンSPの使用者の検索履歴のうち最新の地点又は最も検索数が多い地点のいずれかをディスプレイ22に表示するように構成してもよい。また、例えば目的地までのルートの探索処理及び当該目的地までの実際の誘導処理としては、サーバ装置Sから送信されてくる上記画像使用案内用画像データを用いた当該探索処理に関連する画像及び当該誘導処理に関連する画像それぞれの表示が、上記画像使用案内用画像データを用いてスマートフォンSPのディスプレイ22により行われる。このとき、上記検索処理、上記探索処理及び上記誘導処理に必要な音声は、サーバ装置Sから送信されてくる上記画像使用案内用音声データを用いて、後述するようにスマートスピーカSKのスピーカ13から出力される。   Here, in the image use guidance according to the embodiment (step S7, step S20, step S33), for example, in the search processing of a point for guidance, the above described in the recording unit 5 of the server apparatus S The search results of the preset number are displayed on the display 22 of the smartphone SP in order from the search result having the largest number of searches indicated by the search number information using the image use guidance image data based on the search number information Ru. Further, as the search processing, based on the search history information recorded in the recording unit 5, the display 22 displays either the latest spot or the spot with the largest number of searches in the search history of the user of the smartphone SP. It may be configured as follows. In addition, for example, as a search process of a route to a destination and an actual guidance process to the destination, an image related to the search process using the image use guidance image data transmitted from the server apparatus S and The display of each image relevant to the said guidance process is performed by the display 22 of smart phone SP using the said image use guidance image data. At this time, the voice necessary for the search process, the search process, and the guide process is transmitted from the server apparatus S using the image use guidance voice data transmitted from the speaker 13 of the smart speaker SK as described later. It is output.

なお、CPU21による上記ステップS17の判定において、何らかの理由で案内画像が表示されなくなったことが上記表示状態情報により示されている場合(ステップS17:NO)、サーバ装置Sの処理部4は、当該案内画像をディスプレイ22に表示させる旨の案内画像表示指示メッセージを生成し、ネットワークNWを介してスマートフォンSPに送信する(ステップS7)。そして、案内画像が表示されていなかった(ステップS17:NO)スマートフォンSPのCPU21は、当該案内画像表示指示メッセージの受信を監視し(ステップS20)、当該案内画像表示指示メッセージを受信したら(ステップS20:YES)、当該案内画像をディスプレイ22に表示し(ステップS21)、その後上記ステップS18に移行する。一方、案内画像が表示されていなかった場合であっても上記案内画像表示指示メッセージが受信されないときは(ステップS20:NO)、CPU21は画像使用案内を実行せずにスマートフォンSPとしての他の処理に移行する。   In addition, in determination of the said step S17 by CPU21, when it is shown by the said display state information that the guidance image was not displayed for some reason (step S17: NO), the process part 4 of the server apparatus S concerned A guidance image display instruction message to display a guidance image on the display 22 is generated and transmitted to the smartphone SP via the network NW (step S7). Then, the guidance image is not displayed (step S17: NO) The CPU 21 of the smartphone SP monitors the reception of the guidance image display instruction message (step S20), and when the guidance image display instruction message is received (step S20). (YES), the guidance image is displayed on the display 22 (step S21), and then the process proceeds to step S18. On the other hand, when the guidance image display instruction message is not received even when the guidance image is not displayed (step S20: NO), the CPU 21 does not execute the image usage guidance and performs other processing as the smartphone SP. Migrate to

次に上記ステップS6の判定において、スマートフォンSPのディスプレイ22に案内画像が表示されていないか、又はディスプレイ22自体が機能していない場合(ステップS6:NO)、サーバ装置Sの処理部4の制御部3は、スマートスピーカSKのみを用いた実施例に係る画像非使用案内を行う旨の画像非使用案内指示メッセージを、ネットワークNWを介してスマートスピーカSKに送信する(ステップS9)。その後制御部3は、スマートスピーカSKを用いた実施例に係る画像非使用案内を、当該スマートスピーカSKとの間での画像非使用案内用データの授受により実行する(ステップS10)。その後処理部4は上記ステップS8に移行する。   Next, in the determination of step S6, when the guidance image is not displayed on the display 22 of the smartphone SP or the display 22 itself is not functioning (step S6: NO), control of the processing unit 4 of the server device S The unit 3 transmits an image non-use guidance instruction message for performing image non-use guidance according to the embodiment using only the smart speaker SK to the smart speaker SK via the network NW (step S9). Thereafter, the control unit 3 executes the image non-use guide according to the embodiment using the smart speaker SK by exchanging image non-use guide data with the smart speaker SK (step S10). Thereafter, the processing unit 4 shifts to step S8.

他方、上記ステップS28によりスマートスピーカSKとしての上記案内開始メッセージを送信したら、次にスマートスピーカSKのCPU11は、上記画像使用案内指示メッセージを受信したか否かを監視する(ステップS29。ステップS7参照)。そしてステップS29の監視において当該画像使用案内指示メッセージを受信したら(ステップS29:YES)、CPU11は、実施例に係る画像使用案内を、サーバ装置Sとの間での上記画像使用案内用音声データの授受により実行する(ステップS33。ステップS7及びステップS18参照)。   On the other hand, when the guidance start message as the smart speaker SK is transmitted at step S28, the CPU 11 of the smart speaker SK next monitors whether the image use guidance instruction message has been received (step S29: see step S7). ). And if the said image use guidance instruction | indication message is received in monitoring of step S29 (step S29: YES), CPU11 will use the image use guidance which concerns on an Example about the said image use guidance voice data between the server apparatus S, It performs by sending and receiving (step S33. Refer to step S7 and step S18).

ここで、スマートスピーカSKとしての実施例に係る上記画像使用案内においては、例えば案内用の地点の検索処理にあっては、当該検索処理用の画像のみが上述したようにスマートフォンSPのディスプレイ22に表示され、当該検索処理用の音声はスマートフォンSPのスピーカ13から出力される。また同様に、実施例に係る上記画像使用案内としての探索処理や誘導処理にあっては、当該探索処理に関連する画像及び当該誘導処理に関連する画像それぞれの表示がスマートフォンSPのディスプレイ22により行われ、上記探索処理及び上記誘導処理に必要な音声はスマートスピーカSKのスピーカ13から出力される。   Here, in the image use guidance according to the embodiment as the smart speaker SK, for example, in the search processing of a point for guidance, only the image for the search processing is displayed on the display 22 of the smartphone SP as described above. The displayed sound is output from the speaker 13 of the smartphone SP. Similarly, in the search processing and guidance processing as the image use guidance according to the embodiment, the display of the image related to the search processing and the image related to the guidance processing is performed by the display 22 of the smartphone SP. The sound necessary for the search process and the guidance process is output from the speaker 13 of the smart speaker SK.

その後CPU11は、例えば上記車両Cが目的地に到着した等の理由により、実施例に係る案内制御処理を終了するか否かを判定する(ステップS32)。ステップS32の判定において当該案内制御処理を終了しない場合(ステップS32:NO)、CPU11は上記ステップS29に戻って実施例に係る案内制御処理のうちスマートスピーカSKが実行すべき処理を繰り返す。一方ステップS32の判定において当該案内制御処理を終了する場合(ステップS32:YES)、CPU11はスマートスピーカSKとしての他の処理に移行する。なおこの場合の他の処理にも、上記現状情報の生成処理及び送信処理が継続して含まれている。   Thereafter, the CPU 11 determines whether or not the guidance control process according to the embodiment is ended, for example, because the vehicle C has arrived at the destination (step S32). When the guidance control process is not ended in the determination of step S32 (step S32: NO), the CPU 11 returns to step S29 and repeats the process to be executed by the smart speaker SK in the guidance control process according to the embodiment. On the other hand, when the guidance control process is ended in the determination of step S32 (step S32: YES), the CPU 11 shifts to another process as the smart speaker SK. The other process in this case also includes the process of generating the current information and the process of transmitting the current information.

一方上記ステップS29の監視において上記画像使用案内指示メッセージを受信しない場合(ステップS29:NO)、次にCPU11は、上記画像非使用案内指示メッセージを受信したか否かを監視する(ステップS30。ステップS9参照)。そしてステップS30の監視において当該画像非使用案内指示メッセージを受信したら(ステップS30:YES)、CPU11は、実施例に係る画像非使用案内を、サーバ装置Sとの間での上記画像非使用案内用音声データの授受により実行する(ステップS31。ステップS10参照)。その後CPU11は上記ステップS32に移行する。他方、上記ステップS30の監視において画像非使用案内指示メッセージを受信しない場合(ステップS30:NO)は、CPU11は上記ステップS29に戻って、画像使用案内指示メッセージ又は画像非使用案内指示メッセージの受信を確認する動作を継続する。   On the other hand, if the image use guidance instruction message is not received in the monitoring of the step S29 (step S29: NO), then the CPU 11 monitors whether the image non-use guidance instruction message is received (step S30: step). See S9). And if the said image non-use guidance instruction message is received in monitoring of step S30 (step S30: YES), CPU11 for the said image non-use guidance between the server apparatus S and the image non-use guidance which concerns on an Example. It is executed by exchanging voice data (step S31, see step S10). Thereafter, the CPU 11 shifts to step S32. On the other hand, when the image non-use guidance instruction message is not received in the monitoring of the step S30 (step S30: NO), the CPU 11 returns to the step S29 to receive the image use guidance instruction message or the image non-use guidance instruction message. Continue the action to check.

ここで、実施例に係る上記画像非使用案内においては(ステップS10、ステップS31参照)、例えば案内用の地点の検索処理にあっては、サーバ装置Sの記録部5に記録されている上記検索数情報に基づき、当該検索数情報により示される検索数が最も多い一の検索結果のみがスマートスピーカSKのスピーカ13からの発話のみにより出力される。この場合に上記案内画像は使用されない。また当該検索処理として、記録部5に記録されている上記検索履歴情報に基づき、スマートフォンSPの使用者の検索履歴のうち最新の地点又は最も検索数が多い地点のみを示す発話のみをスピーカ13から出力するように構成してもよい。更に、予め設定された重み付けを行った結果のスコアが最も高い検索結果のみをスマートスピーカSKのスピーカ13からの発話により出力するように構成してもよい。   Here, in the image non-use guidance according to the embodiment (see step S10 and step S31), for example, in the search processing of a point for guidance, the search recorded in the recording unit 5 of the server apparatus S Based on the number information, only one search result having the largest number of searches indicated by the search number information is output only by the speech from the speaker 13 of the smart speaker SK. In this case, the guidance image is not used. In addition, as the search processing, based on the search history information recorded in the recording unit 5, only the utterance indicating only the latest spot or the spot with the largest number of searches in the search history of the user of the smartphone SP is It may be configured to output. Furthermore, it may be configured to output only the search result having the highest score of the result of the preset weighting by the utterance from the speaker 13 of the smart speaker SK.

また、例えば目的地までのルートの探索処理としては、上記画像使用案内を行う場合よりも、スマートスピーカSKからの音声のみで案内を行うことが難しい移動方法が少なくなるように当該ルートを決定するように構成するのが望ましい。このようなルートの決定方法の一例としては、例えば当該ルートを構成する道路に割り当てられたリンクコストと当該ルートを構成する交差点に割り当てられたターンコストの合計を最小とするようにルートを決定する方法が挙げられる。なおこのようなルートの決定方法については、例えば本願の出願人による日本特許第4361595号に詳しい。   In addition, for example, as a route search process to a destination, the route is determined so that there are less moving methods in which it is difficult to provide guidance using only the sound from the smart speaker SK than when providing the image usage guide. It is desirable to configure as follows. As an example of such a route determination method, for example, the route is determined so as to minimize the total of the link cost assigned to the road that constitutes the route and the turn cost assigned to the intersection that constitutes the route. The method is mentioned. The method of determining such a route is described in detail, for example, in Japanese Patent No. 4361595 by the present applicant.

更に、例えば目的地までの実際の誘導処理としては、スマートスピーカSKからの音声のみを用いて、以下のi)乃至iv)のいずれかのように地点を案内することが挙げられる。
i)画像使用案内の場合よりも地点案内用の音声のスマートスピーカSKからの出力回数を増加させる。
ii)案内すべき地点が交差点である場合において、当該交差点の名称の呼称自体を音声としてスマートスピーカSKから出力させる。
iii)案内すべき地点を示す地物又は当該地点に対応した地物のうち車両Cから実際に視認可能な地物を示す音声をスマートスピーカSKから出力させる。
iv)案内すべき地点が交差点である場合において、当該交差点の車両Cが進むべき分岐を当該交差点の他の分岐との相対的な関係を用いて示す音声をスマートスピーカSKから出力させる。
Furthermore, for example, as an actual guidance process to the destination, guiding a point as in any one of the following i) to iv) using only the sound from the smart speaker SK can be mentioned.
i) Increase the number of times of output from the smart speaker SK for point guidance voices more than in the case of image usage guidance.
ii) When the point to be guided is an intersection, the name itself of the name of the intersection is output from the smart speaker SK as a voice.
iii) The smart speaker SK outputs a voice indicating a feature that indicates a point to be guided or a feature that is actually visible from the vehicle C among features corresponding to the point.
iv) When the point to be guided is an intersection, the smart speaker SK outputs a voice indicating the branch to which the vehicle C at the intersection should travel using the relative relationship with other branches of the intersection.

ここで上記i)の案内方法として具体的には、例えば画像使用案内では案内対象の地点までの距離が700メートル、300メートル及び直前の三回案内音声を出力させるところ、実施例に係る画像非使用案内では、上記三つのタイミングに加えて案内対象の地点までの距離が1,000メートルでも案内音声を出力させる案内方法が挙げられる。   Here, as the guidance method of the above i), specifically, for example, in the image usage guidance, when the distance to the point of the guidance target is 700 meters, 300 meters and the last three guidance voices are output In the use guidance, in addition to the above three timings, there is a guidance method for outputting a guidance voice even if the distance to the point of guidance is 1,000 meters.

また上記iv)の案内方法として具体的には、例えば案内対象の交差点において直角右方向の分岐と直進する分岐との間の右斜め前の分岐へと車両Cを誘導すべき場合、スマートスピーカSKからの案内音声として例えば、「右折道路から二番目の斜め右に進む道路に進入して下さい。」といった案内音声を出力することが挙げられる。   Further, as the guidance method of the above iv), specifically, for example, when the vehicle C is to be led to the front right diagonal between the rightward branch and the straight branch at the intersection to be guided, the smart speaker SK For example, a guidance voice such as "Please enter the second road from the right-turn road to the diagonal right" should be output as the guidance voice from the above.

なお、実施例に係る画像使用案内の場合は、上記i)乃至上記iv)が実行されないか、又は、その頻度を画像非使用案内に比べて低減させるか、或いはその案内の情報量を画像非使用案内に比べて低減させる。よってこれらの場合は、案内画像が併用できるときに上記i)乃至上記iv)が実行されることの煩わしさを使用者に感じさせることがない。   In the case of the image use guidance according to the embodiment, the above i) to iv) are not executed, or the frequency is reduced compared to the image non-use guidance or the information amount of the guidance is not the image non-use Reduce compared to the use guide. Therefore, in these cases, when the guide image can be used in combination, the user does not feel the inconvenience of performing the above i) to the above iv).

また、音声のみを用いた誘導処理が極端に複雑となる場合(例えば分岐が多い交差点や目標となる地物が複雑となる場合、或いは目標となる地物自体が車両Cから視認できない場合)等、予め設定された条件が満たされた場合にサーバ装置Sの処理部4の制御部3は、当該スマートスピーカSKと同じ車両C内にあるはずのスマートフォンSPに対して上記案内画像表示指示メッセージを送信し、そのディスプレイ22に案内画像を強制的に表示させることで(上記ステップS23参照)、上記画像使用案内を併用するように構成することもできる。なおこの場合の「音声のみを用いた誘導処理が極端に複雑となる場合」とは、例えば、分岐が多い交差点や、目標となる地物が複雑となる場合、又は目標となる地物自体が車両Cから視認できない場合等が挙げられる。   In addition, when the guidance processing using only voice becomes extremely complicated (for example, when an intersection with many branches or a target feature becomes complicated, or when the target feature itself can not be viewed from the vehicle C), etc. When the preset condition is satisfied, the control unit 3 of the processing unit 4 of the server device S sends the guidance image display instruction message to the smartphone SP that should be in the same vehicle C as the smart speaker SK. By transmitting the information and forcibly displaying the guidance image on the display 22 (see the above step S23), it is also possible to configure to use the above-mentioned image usage guidance together. In this case, “in the case where the guidance processing using only voice is extremely complicated” means, for example, an intersection with many branches, a case where the target feature becomes complicated, or a target feature itself The case where it can not visually recognize from vehicles C etc. are mentioned.

なお実施例に係る案内制御処理では、上記ステップS18、上記ステップS31及び上記ステップS33等により案内が実行されるが、その後、案内終了までの間も、前述の通り、上記ステップS15、上記ステップS16、上記ステップS25及び上記ステップS26における上記現状情報の生成処理及び送信処理や、上記ステップS1及び上記ステップS2における上記現状情報の受信処理及び記録処理は、予め設定された間隔の上記タイミングごとに継続して実行される。そのため、例えば、画像使用案内が実行されていても、その後、スマートフォンSPの電源が切られる、スマートフォンSPとスマートスピーカSKが予め設定された範囲外(例えば、予め設定された閾値距離以上の位置関係)になるなど画像使用案内の条件を満たさなくなったことが判定されると、画像非使用案内に切り替えるように構成することも可能である。また、その逆に、画像非使用案内中に、画像使用案内の条件を満たすと、画像使用案内に切り替えるように構成することも可能である。   In the guidance control process according to the embodiment, the guidance is executed by the above step S18, the above step S31, the above step S33, etc. Thereafter, even before the end of the guidance, the above step S15, the above step S16 as described above. The generation process and transmission process of the current status information in the step S25 and the step S26, and the reception process and recording process of the current status information in the step S1 and the step S2 are continued at each timing of the preset interval. To be executed. Therefore, for example, even if the image use guidance is executed, the power of the smartphone SP is turned off after that, the smartphone SP and the smart speaker SK are out of the preset range (for example, the positional relationship more than the preset threshold distance) When it is determined that the condition for the image use guidance is not satisfied, for example, it may be configured to switch to the image non-use guidance. Also, conversely, it is possible to be configured to switch to the image use guidance when the condition of the image use guidance is satisfied during the image non-use guidance.

以上それぞれ説明したように、実施例に係る案内制御処理によれば、案内画像を表示するスマートフォンSPと、移動案内用の音声を出力するスマートスピーカSKと、が閾値距離以下の範囲内にあるか否かの判定結果(図4ステップS5参照)に応じてスマートスピーカSKからの音声の出力態様を異ならせる。よって、別個の上記スマートフォンSPと上記スマートスピーカSKとが共に閾値距離範囲内にあるか否かに応じて、必要な情報を音声のみにより的確に提供することができる。   As described above, according to the guidance control process according to the embodiment, whether the smartphone SP that displays the guidance image and the smart speaker SK that outputs the voice for movement guidance are within the range of the threshold distance or less The output mode of the sound from the smart speaker SK is made different according to the determination result (see step S5 in FIG. 4) of whether or not it is not. Therefore, necessary information can be accurately provided only by voice depending on whether or not the separate smartphone SP and the smart speaker SK are both within the threshold distance range.

なお、上記スマートフォンSPと上記スマートスピーカSKとが予め設定されたか範囲内にあるか否かを判断する手段としては、前述の距離により判断する方法に限られない。例えば、予め設定された範囲を、特定の空間と設定することも可能である。例えば、当該特定の空間を特定の自動車内と設定し、具体的には、当該車両内に特定の電波を発生させ、当該車両外には当該電波が発生し得ない(例えば当該車両から漏れない)よう技術的に工夫する。更に当該特定の電波を検知するセンサを上記スマートフォンSPと上記スマートスピーカSKに設け、そのセンサの検知結果を現状情報の一部としてサーバ装置Sに送信することで、上記スマートフォンSPと上記スマートスピーカSKがともに特定の自動車内に存在するか否かをサーバ装置Sにおいて判断することが可能となる。   In addition, as a means to determine whether the said smart phone SP and the said smart speaker SK exist in advance or in the range, it is not restricted to the method of judging by the above-mentioned distance. For example, it is also possible to set a preset range as a specific space. For example, the specific space is set as a specific car, specifically, a specific radio wave is generated in the vehicle, and the radio wave can not be generated outside the vehicle (for example, it does not leak from the vehicle ) Technically devise. Furthermore, a sensor for detecting the specific radio wave is provided in the smart phone SP and the smart speaker SK, and the detection result of the sensor is transmitted to the server apparatus S as a part of current information, thereby the smart phone SP and the smart speaker SK. It is possible to determine in the server apparatus S whether or not both exist in a specific car.

また、スマートフォンSPの使用者とスマートスピーカSKの使用者との同一性の判定結果(図4ステップS4参照)と、上記スマートフォンSPと上記スマートスピーカSKとが共に閾値距離範囲内にある場合における案内画像が表示されているか否かの判定結果(図4ステップS5参照)と、に応じてスマートスピーカSKからの音声の出力態様を異ならせる場合には、使用者の同一性をも加味した上で、音声のみにより必要な情報を的確に提供することができる。   In addition, the guidance result in the case where the determination result of the identity between the user of the smartphone SP and the user of the smart speaker SK (see step S4 in FIG. 4) and the smartphone SP and the smart speaker SK are both within the threshold distance range When the output mode of the sound from the smart speaker SK is different according to the determination result (see step S5 in FIG. 4) of whether the image is displayed or not, the identity of the user is also taken into consideration. Necessary information can be accurately provided only by voice.

更に、検索用又は案内用の案内画像が表示されているか否かを判定し(図4ステップS6参照)、スマートフォンSP及びスマートスピーカSKが上記閾値距離以内の位置に存在し、且つ、当該案内画像が表示されているか否かの判定結果に応じて、スマートスピーカSKからの音声の出力態様を異ならせる場合には、案内画像の表示の有無に応じて音声により必要な情報を的確に適用することができる。   Furthermore, it is determined whether a guide image for search or guidance is displayed (see step S6 in FIG. 4), and the smartphone SP and the smart speaker SK exist at a position within the threshold distance, and the guide image When the output mode of the sound from the smart speaker SK is made different according to the determination result of whether or not is displayed, the necessary information is properly applied by the sound according to the presence or absence of the display of the guidance image. Can.

更に、上記スマートフォンSPと上記スマートスピーカSKとが共に閾値距離範囲内にあり且つ案内画像が表示されていると判定された場合に、スマートスピーカSKからの音声の出力態様に関連する内容の画像をスマートフォンSPのディスプレイ22に表示させる場合には、当該画像を用いてより的確に情報を提供することができる。   Furthermore, when it is determined that both the smartphone SP and the smart speaker SK are within the threshold distance range and the guidance image is displayed, the image of the content related to the output mode of the sound from the smart speaker SK is When displaying on the display 22 of the smartphone SP, information can be provided more accurately using the image.

更にまた、上記スマートフォンSPと上記スマートスピーカSKとが共に閾値距離範囲内にある場合に案内画像が表示されており、且つ、スマートフォンSPの使用者とスマートスピーカSKの使用者との同一であると判定された場合に、スマートスピーカSKからの音声の出力態様に関連する内容の画像をスマートフォンSPのディスプレイ22に表示させる場合は、使用者の同一性も加味した上で、画像を用いてより的確に情報を提供することができる。   Furthermore, the guidance image is displayed when the smartphone SP and the smart speaker SK are both within the threshold distance range, and the user of the smartphone SP is identical to the user of the smart speaker SK. When it is determined that the image of the content related to the output mode of the sound from the smart speaker SK is displayed on the display 22 of the smartphone SP, the identity of the user is also taken into consideration, and more accurate using the image Can provide information.

また、スマートスピーカSKからの音声の出力態様がナビゲーション用の出力態様である場合は、ナビゲーションを行う場合においてスマートフォンSPにおける案内画像が非表示である場合でも、必要な情報を音声のみにより的確に提供することができる。   Further, when the output mode of the voice from the smart speaker SK is an output mode for navigation, even when the guidance image on the smartphone SP is not displayed when performing navigation, necessary information is accurately provided only by the voice. can do.

更に、上記ナビゲーションが経路設定処理を含む場合は、経路設定処理を含むナビゲーションを行う場合においてスマートフォンSPにおける案内画像が非表示である場合でも、必要な情報を音声のみにより的確に提供することができる。   Furthermore, when the above navigation includes a route setting process, even when the guidance image on the smartphone SP is not displayed when performing the navigation including the route setting process, necessary information can be provided more accurately by voice only. .

更にまた、上記ナビゲーションが経路誘導処理を含む場合は、経路誘導処理を含むナビゲーションを行う場合においてスマートフォンSPにおける案内画像が非表示である場合でも、必要な情報を音声のみにより的確に提供することができる。   Furthermore, when the navigation includes the route guidance processing, even when the guidance image on the smartphone SP is not displayed when the navigation including the route guidance processing is performed, the necessary information can be provided more accurately only by the voice. it can.

また、スマートスピーカSKからの音声の出力態様が検索用の出力態様である場合は、検索を行う場合においてスマートフォンSPにおける案内画像が非表示である場合でも、必要な情報を音声のみにより的確に提供することができる。   In addition, when the output mode of the voice from the smart speaker SK is the output mode for search, even when the guidance image on the smartphone SP is not displayed when the search is performed, the necessary information is accurately provided only by the voice. can do.

更に、スマートスピーカSKからの音声の出力態様が地点検索用の出力態様である場合は、地点検索を行う場合においてスマートフォンSPにおける案内画像が非表示である場合でも、必要な情報を音声のみにより的確に提供することができる。   Furthermore, when the output mode of the voice from the smart speaker SK is the output mode for the point search, even when the guidance image on the smartphone SP is not displayed when performing the point search, the necessary information can be accurately determined only by the voice. Can be provided.

また、実施例に係る画像非使用案内の場合は、地点等の検索結果として一の当該検査結果のみを含む音声を出力させるので、案内画像が非表示であっても、車両Cの使用者が認識し易い態様で的確に検索結果を出力させることができる。   Further, in the case of the image non-use guidance according to the embodiment, since the voice including only one relevant inspection result is output as the search result of the point etc., the user of the vehicle C can It is possible to accurately output the search result in an easy-to-recognize manner.

更に、実施例に係る画像非使用案内の場合に、複数の検索手法によって得られた複数の検索結果それぞれの過去の検索数を示す検索数情報に基づき、複数の検索結果のうち検索数が最も大きい当該検索結果のみを含む音声を出力させるので、案内画像が非表示であっても、より一般的且つ的確な検索結果を出力させることができる。   Furthermore, in the case of the image non-use guide according to the embodiment, the number of searches is the largest among the plurality of search results based on the search number information indicating the number of past searches for each of the plurality of search results obtained by the plurality of search methods. Since the voice including only the large search result is output, more general and accurate search results can be output even if the guide image is not displayed.

一方実施例に係る画像非使用案内の場合に、スマートフォンSPの使用者又はスマートスピーカSKの使用者の少なくともいずれか一方による過去の検索履歴を示す検索履歴情報に基づいて、一の検査結果のみを含む音声を出力させる場合は、案内画像が非表示であっても、当該いずれかの使用者に適した的確な検索結果を出力させることができる。   On the other hand, in the case of the image non-use guide according to the embodiment, only one test result is displayed based on search history information indicating a search history in the past by at least one of the smartphone SP user and the smart speaker SK user. In the case of outputting the voice including, even when the guide image is not displayed, it is possible to output the accurate search result suitable for any one of the users.

また、上記i)乃至上記iv)のように音声で地点を案内する場合は、案内画像が非表示であっても、地点の情報を音声のみにより的確に出力させることができる。   Further, when the point is guided by voice as in the above i) to iv), even if the guide image is not displayed, the information of the point can be accurately output only by the voice.

更に実施例に係る画像非使用案内の場合に、案内画像を表示しながら移動案内を行う場合よりも移動案内用の音声のみで移動案内を行うことが難しい移動方法が少なくなるように、車両Cが移動すべきルートを決定し、その決定されたルートに従って音声のみで車両Cを案内するときには、音声のみで移動案内を行うことが難しい移動方法が少なくなるようにルートが決定されるので、当該音声のみにより、より的確に案内を行うことができる。   Furthermore, in the case of the image non-use guidance according to the embodiment, the vehicle C is such that there are less moving methods in which it is difficult to provide the movement guidance with only the voice for movement guidance than when performing the movement guidance while displaying the guidance image. When the route to move is determined and the vehicle C is guided by voice only according to the determined route, the route is determined such that there are less moving methods in which it is difficult to provide a moving guide by voice only. Guidance can be more accurately provided only by voice.

更にまた実施例に係る画像非使用案内中に既定の条件が満たされた場合に案内画像を表示させる(図4ステップS21参照)ので、必要な場合に案内画像を表示させることで、より的確な案内を実現することができる。   Furthermore, since the guidance image is displayed when the predetermined condition is satisfied during the image non-use guidance according to the embodiment (see step S21 in FIG. 4), displaying the guidance image when necessary makes the display more accurate. Guidance can be realized.

なお上述した実施例では、実施例に係るスマートフォンSP及びスマートスピーカSKが車両C内に置かれている場合の画像使用案内及び画像非使用案内についてそれぞれ説明したが、これ以外に、スマートフォンSPと同機能の携帯型無線電話機(携帯電話)と、スピーカ付のタブレット端末と、が一の車両内に置かれている場合における画像使用案内及び画像非使用案内に本願を適用することも可能である。   In the above-described embodiment, the image use guidance and the image non-use guidance in the case where the smartphone SP and the smart speaker SK according to the embodiment are placed in the vehicle C have been described respectively. The present invention can also be applied to image use guidance and image non-use guidance in the case where a portable wireless telephone (mobile phone) having a function and a tablet terminal with a speaker are placed in one vehicle.

また上述した実施例では、スマートフォンSPとスマートスピーカSKとが閾値距離以下の範囲に存在しているか否かをそれぞれの現在位置情報を用いて判定したが(図4ステップS5参照)、これ以外に、スマートフォンSPとスマートスピーカSKとがいわゆる近距離無線通信で接続されているか否かに基づいて、両者が閾値距離以下の範囲に存在しているか否かを判定するように構成することもできる。この場合は、当該近距離通信の接続限界に相当する距離を上記閾値距離に対応させればよい。   In the above-described embodiment, whether or not the smartphone SP and the smart speaker SK exist within the range equal to or less than the threshold distance is determined using the respective current position information (see FIG. 4, step S5). Alternatively, based on whether the smartphone SP and the smart speaker SK are connected by so-called short distance wireless communication, it may be configured to determine whether or not both are in the range equal to or less than the threshold distance. In this case, the distance corresponding to the connection limit of the short distance communication may be made to correspond to the threshold distance.

更に、上記画像非使用案内時の音声による案内において、いわゆる同音異義語間の相違を使用者に理解させるべく、例えば付加的な説明を音声により追加するように構成してもよい。   Furthermore, in the audio guidance at the time of the image non-use guidance, in order to make the user understand the difference between so-called homonyms, for example, additional description may be added by audio.

更にまた、上述した実施例では車両C内にスマートスピーカSKとスマートフォンSPとが存在する場合について説明したが、本願は、自動車、二輪車、歩行者などの移動体にも適用可能である。   Furthermore, although the case where smart speaker SK and smart phone SP exist in vehicles C was explained in the example mentioned above, this application is applicable also to mobiles, such as a car, a two-wheeled vehicle, and a pedestrian.

また、図4に示すステップS4乃至ステップS6のうち、ステップS4及びステップS6の判定をしないでステップS5の判定のみにより、画像使用案内を実行するか画像非使用案内を実行するかを決めるように構成してもよい。   Further, among the steps S4 to S6 shown in FIG. 4, it is determined whether the image use guidance or the image non-use guidance is performed only by the determination of step S5 without performing the determination of step S4 and step S6. It may be configured.

更に、検索に関する実施例は、必ずしも、案内に関する検索にのみ適用されるものではない。   Furthermore, the search embodiment is not necessarily applied only to guidance searches.

更にまた、図4左に示したサーバ装置Sとして実行されるべき案内制御処理を示すフローチャートに相当するプログラムを、光ディスク又はハードディスク等の記録媒体に記録しておき、或いはインターネット等のネットワークを介して取得しておき、これを汎用のマイクロコンピュータ等に読み出して実行することにより、当該マイクロコンピュータ等を実施例に係るサーバ装置Sの処理部4、判定部3及び制御部3として機能させることも可能である。   Furthermore, a program corresponding to a flowchart showing a guidance control process to be executed as the server apparatus S shown on the left of FIG. 4 is recorded in a recording medium such as an optical disk or a hard disk, or via a network such as the Internet It is also possible to cause the microcomputer etc. to function as the processing unit 4, the judgment unit 3 and the control unit 3 of the server apparatus S according to the embodiment by acquiring it and reading it out for execution on a general-purpose microcomputer etc. It is.

1 接続手段(インターフェース)
2 判定手段(判定部)
3 制御手段(制御部)
4 処理部
11、21 CPU
S 案内制御装置(サーバ装置)
C 移動体(車両)
SS 案内制御システム
SK 出力装置(スマートスピーカ)
SP 表示装置(スマートフォン)
1 Connection means (interface)
2 Determination means (determination unit)
3 Control means (control unit)
4 processor 11, 21 CPU
S Guidance control device (server device)
C Mobile (vehicle)
SS guidance control system SK output device (smart speaker)
SP display device (smart phone)

Claims (12)

画像を表示する表示装置と、音声を出力する出力装置と、に、通信によりそれぞれ接続可能な接続手段と、
前記表示装置及び前記出力装置が予め設定された範囲内にあるか否かを判定する判定手段と、
前記判定手段による判定結果に応じて、前記音声の出力態様を異ならせる制御手段と、
を備えることを特徴とする案内制御装置。
Connection means connectable to each of the display device for displaying an image and the output device for outputting an audio through communication;
A determination unit that determines whether the display device and the output device are within a preset range;
Control means for changing the output mode of the voice according to the determination result by the determination means;
A guidance control device comprising:
請求項1に記載の案内制御装置において、
前記表示装置を識別するための表示装置識別情報を前記接続手段を介して取得する表示装置識別情報取得手段と、
前記出力装置を識別するための出力装置識別情報を前記接続手段を介して取得する出力装置識別情報取得手段と、
取得された前記表示装置識別情報及び前記出力装置識別情報に基づいて、前記表示装置の使用者と前記出力装置の使用者との同一性を判定する同一性判定手段と、
を更に備え、
前記制御手段は、前記同一性の判定結果と、前記判定手段による前記判定結果と、に応じて前記出力態様を異ならせることを特徴とする案内制御装置。
In the guidance control device according to claim 1,
Display device identification information acquisition means for acquiring display device identification information for identifying the display device via the connection means;
An output device identification information acquisition unit that acquires output device identification information for identifying the output device via the connection unit;
An identity determining unit that determines the identity between the user of the display device and the user of the output device based on the acquired display device identification information and the output device identification information;
And further
The guidance control device, wherein the control means makes the output mode different according to the determination result of the identity and the determination result by the determination means.
請求項1又は請求項2に記載の案内制御装置において、
前記判定手段は更に、検索用又は案内用の前記画像が表示されているか否かを判定し、
前記制御手段は、前記表示装置及び前記出力装置が予め設定された範囲内にあり、且つ、当該画像が表示されているか否かの前記判定手段による判定結果に応じて、前記音声の出力態様を異ならせることを特徴とする案内制御装置。
In the guidance control device according to claim 1 or 2,
The determination means further determines whether the search or guidance image is displayed.
The control means is configured to output the sound according to a determination result by the determination means whether the display device and the output device are in a preset range and the image is displayed. A guidance control device characterized by being different.
請求項1から請求項3のいずれか一項に記載の案内制御装置において、
前記表示装置及び前記出力装置が前記予め設定された範囲内にあり且つ前記画像が表示されていると前記判定手段により判定された場合に、前記制御手段は、前記出力態様に関連する内容の当該画像を表示させることを特徴とする案内制御装置。
The guidance control device according to any one of claims 1 to 3.
When it is determined by the determination unit that the display device and the output device are within the preset range and the image is displayed, the control unit is configured to A guidance control device characterized by displaying an image.
請求項2に記載の案内制御装置において、
前記判定手段は更に、検索用又は案内用の前記画像が表示されているか否かを判定し、
前記表示装置及び前記出力装置が前記予め設定された範囲内にあり且つ前記画像が表示されていると前記判定手段により判定され、更に当該表示装置の前記使用者と当該出力装置の前記使用者との同一であると前記同一性判定手段により判定された場合に、前記制御手段は、前記出力態様に関連する内容の当該画像を表示させることを特徴とする案内制御装置。
In the guidance control device according to claim 2,
The determination means further determines whether the search or guidance image is displayed.
It is determined by the determination means that the display device and the output device are within the preset range and the image is displayed, and the user of the display device and the user of the output device A guidance control apparatus characterized in that the control means displays the image of the content related to the output mode when it is determined by the identity determination means that they are the same.
請求項1から請求項5のいずれか一項に記載の案内制御装置において、
前記音声は、ナビゲーション用の音声であることを特徴とする案内制御装置。
In the guidance control device according to any one of claims 1 to 5,
The guidance control device, wherein the voice is a voice for navigation.
請求項6に記載の案内制御装置において、
前記ナビゲーションは、経路設定処理を含むナビゲーションであることを特徴とする案内制御装置。
In the guidance control device according to claim 6,
The guidance control device, wherein the navigation is a navigation including a route setting process.
請求項6に記載の案内制御装置において、
前記ナビゲーションは、経路誘導処理を含むナビゲーションであることを特徴とする案内制御装置。
In the guidance control device according to claim 6,
A guidance control device characterized in that the navigation is navigation including route guidance processing.
請求項1から請求項5のいずれか一項に記載の案内制御装置において、
前記音声は、検索用の音声出力態様であることを特徴とする案内制御装置。
In the guidance control device according to any one of claims 1 to 5,
The guidance control device, wherein the voice is a voice output mode for search.
請求項9に記載の案内制御装置において、
前記検索は、地点検索であることを特徴とする案内制御装置。
In the guidance control device according to claim 9,
The guidance control apparatus characterized in that the search is a point search.
画像を表示する表示装置と、音声を出力する出力装置と、に、通信によりそれぞれ接続可能な接続手段と、判定手段と、制御手段と、を備える案内制御装置において実行される案内制御方法であって、
前記表示装置及び前記出力装置が予め設定された範囲内にあるか否かを前記判定手段により判定する判定工程と、
前記判定工程における判定結果に応じて、前記制御手段により前記音声の出力態様を異ならせる制御工程と、
を含むことを特徴とする案内制御方法。
It is a guidance control method performed in a guidance control device provided with the connection means which can be connected by communication to a display device which displays an image, and an output device which outputs sound, respectively, judgment means, and control means. ,
A determination step of determining whether the display device and the output device are within a preset range by the determination means;
A control step of making the output mode of the voice different by the control unit according to the determination result in the determination step;
A guidance control method characterized by including.
コンピュータを、請求項1から請求項10のいずれか一項に記載の案内制御装置として機能させることを特徴とする案内制御用プログラム。   The program for guidance control which makes a computer function as a guidance control device according to any one of claims 1 to 10.
JP2017199893A 2017-10-13 2017-10-13 Guidance control device, guidance control method, and program for guidance control Pending JP2019074387A (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2017199893A JP2019074387A (en) 2017-10-13 2017-10-13 Guidance control device, guidance control method, and program for guidance control
JP2022100371A JP2022153363A (en) 2017-10-13 2022-06-22 Server device, information processing method, and server program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017199893A JP2019074387A (en) 2017-10-13 2017-10-13 Guidance control device, guidance control method, and program for guidance control

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2022100371A Division JP2022153363A (en) 2017-10-13 2022-06-22 Server device, information processing method, and server program

Publications (1)

Publication Number Publication Date
JP2019074387A true JP2019074387A (en) 2019-05-16

Family

ID=66544002

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2017199893A Pending JP2019074387A (en) 2017-10-13 2017-10-13 Guidance control device, guidance control method, and program for guidance control
JP2022100371A Pending JP2022153363A (en) 2017-10-13 2022-06-22 Server device, information processing method, and server program

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2022100371A Pending JP2022153363A (en) 2017-10-13 2022-06-22 Server device, information processing method, and server program

Country Status (1)

Country Link
JP (2) JP2019074387A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020202548A (en) * 2019-06-06 2020-12-17 バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド Network accessing method and apparatus for voice device, and storage medium

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014085844A (en) * 2012-10-24 2014-05-12 Alpine Electronics Inc On-vehicle system
JP2015184072A (en) * 2014-03-20 2015-10-22 本田技研工業株式会社 navigation server and program

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8204681B2 (en) * 2006-04-11 2012-06-19 Pioneer Corporation Navigation apparatus, route guide method and program
JP2008204165A (en) * 2007-02-20 2008-09-04 Xanavi Informatics Corp Navigator
JP2012088288A (en) * 2010-10-22 2012-05-10 Alpine Electronics Inc Data reception system of portable apparatus attached with navigation function

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014085844A (en) * 2012-10-24 2014-05-12 Alpine Electronics Inc On-vehicle system
JP2015184072A (en) * 2014-03-20 2015-10-22 本田技研工業株式会社 navigation server and program

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020202548A (en) * 2019-06-06 2020-12-17 バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド Network accessing method and apparatus for voice device, and storage medium
JP7048557B2 (en) 2019-06-06 2022-04-05 バイドゥ オンライン ネットワーク テクノロジー(ペキン) カンパニー リミテッド Network connection methods, devices and storage media for voice devices

Also Published As

Publication number Publication date
JP2022153363A (en) 2022-10-12

Similar Documents

Publication Publication Date Title
US10205770B2 (en) Mobile device application integration with infotainment head units
JP6103620B2 (en) In-vehicle information system, information terminal, application execution method, program
US10854077B2 (en) Parking management system and parking management method
KR20150074413A (en) Method and apparatus for updating information for vehicle
JP2016024212A (en) Information processing device, information processing method and program
US20140015667A1 (en) Automatically locating fire alarms
CN107077844B (en) Method and device for realizing voice combined assistance and robot
CN105491576A (en) Method and device for acquiring network test data
CN106254426B (en) Method and device for whistling through terminal
JP6362875B2 (en) In-vehicle device, in-vehicle information system
CN105091894A (en) Navigation method, intelligent terminal device and wearable device
JP6076027B2 (en) Navigation system
CN104280042A (en) Method and device for acquiring navigation information
CN105448085A (en) Road crossing prompting method, device, and terminal device
CN105188027A (en) Nearby user searching method and device
JP2013257268A (en) Information generation device, navigation device, control method, program, and recording medium
JP5832394B2 (en) Navigation device
JP2017142229A (en) Method, stationary device, and system for determining position
JP2022153363A (en) Server device, information processing method, and server program
US20160134719A1 (en) Methods and systems for displaying graphic representations in a user interface
JP2015010889A (en) Determining program, determining server, and determining system
US9456338B2 (en) Control apparatus and wireless communication system
JP2015148831A (en) On-vehicle information system, information terminal, and application execution method
CN109299359B (en) Road condition query method, device, terminal and storage medium
JP2013201653A (en) Mobile terminal controller

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200907

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210805

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210908

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211105

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220322