JP2018059834A - Navigation system, occupant monitoring device, information terminal device, server, and navigation program - Google Patents
Navigation system, occupant monitoring device, information terminal device, server, and navigation program Download PDFInfo
- Publication number
- JP2018059834A JP2018059834A JP2016198006A JP2016198006A JP2018059834A JP 2018059834 A JP2018059834 A JP 2018059834A JP 2016198006 A JP2016198006 A JP 2016198006A JP 2016198006 A JP2016198006 A JP 2016198006A JP 2018059834 A JP2018059834 A JP 2018059834A
- Authority
- JP
- Japan
- Prior art keywords
- control unit
- information
- route
- destination
- recommended
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012806 monitoring device Methods 0.000 title claims description 27
- 238000003384 imaging method Methods 0.000 claims abstract description 71
- 238000001514 detection method Methods 0.000 claims abstract description 63
- 230000002159 abnormal effect Effects 0.000 claims description 28
- 230000005856 abnormality Effects 0.000 claims description 9
- 238000012544 monitoring process Methods 0.000 claims description 4
- 239000000809 air pollutant Substances 0.000 claims description 3
- 231100001243 air pollutant Toxicity 0.000 claims description 3
- 230000008859 change Effects 0.000 description 33
- 238000004891 communication Methods 0.000 description 32
- 230000006870 function Effects 0.000 description 28
- 238000012545 processing Methods 0.000 description 20
- 238000000034 method Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 9
- 230000008569 process Effects 0.000 description 7
- 230000007613 environmental effect Effects 0.000 description 4
- 238000013500 data storage Methods 0.000 description 3
- 238000003915 air pollution Methods 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 230000005281 excited state Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 101001139126 Homo sapiens Krueppel-like factor 6 Proteins 0.000 description 1
- 230000017531 blood circulation Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000006996 mental state Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000004576 sand Substances 0.000 description 1
- 230000001932 seasonal effect Effects 0.000 description 1
Images
Landscapes
- Instructional Devices (AREA)
- Navigation (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
この発明は、ナビゲーションシステム、乗員監視装置、情報端末装置、サーバ、およびナビゲーション用プログラムに関する。 The present invention relates to a navigation system, an occupant monitoring device, an information terminal device, a server, and a navigation program.
特許文献１には、自動車等の車内に取り付けられたカメラによって撮影された画像から、運転者の状態を解析して、居眠りやよそ見、わき見等の危険な状態を察知し、運転者への警告を行う運転者状況判定装置が開示されている。 In Patent Document 1, a driver's state is analyzed from an image taken by a camera mounted in a vehicle such as an automobile, and a dangerous state such as snoozing, looking away, or sidewalk is detected, and a warning is given to the driver. A driver status determination device that performs the above is disclosed.
特許文献１には、運転者が危険な状態であることを察知した場合に、例えば、アラーム音等を発生させ、運転者に警告を与えることが開示されている。しかし、当該運転者状況判定装置は、運転者が撮影された画像から運転者の状態を解析し、危険な状態を察知した場合に、運転者に警告を与えるものに過ぎず、当該危険な状態の内容に応じて走行することを推奨するルートを出力するものではなかった。 Patent Document 1 discloses that, for example, an alarm sound is generated and a warning is given to the driver when the driver detects that the driver is in a dangerous state. However, the driver status determination device only analyzes the driver's state from the image taken by the driver and senses a dangerous state, but only gives a warning to the driver. It was not intended to output a route recommended to travel according to the contents of.
この発明は、上記のような課題を解決するためになされたもので、撮像データに基づき乗員の異変が検出されると、当該異変の内容に応じて走行することを推奨するルートを選択可能に出力するナビゲーションシステム、乗員監視装置、情報端末装置、サーバ、およびナビゲーション用プログラムを得ることを目的とする。 The present invention has been made to solve the above-described problems, and when an occupant's change is detected based on imaging data, a route that recommends traveling according to the content of the change can be selected. An object is to obtain an output navigation system, an occupant monitoring device, an information terminal device, a server, and a navigation program.
この発明に係るナビゲーションシステムは、乗員の顔を撮像する撮像部を制御して、撮像データを生成する撮像制御部と、撮像データに基づいて、乗員の異変情報を検出する検出部と、車両の現在位置から、設定された目的地までのルートを検索し、目的地までのルート案内を行うとともに、検出部で異変情報が検出されると、当該異変情報の内容に応じて走行することを推奨する推奨ルートを検索する制御部と、制御部で検索された推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部とを備える。 A navigation system according to the present invention controls an imaging unit that images an occupant's face to generate imaging data, a detection unit that detects occupant abnormality information based on the imaging data, a vehicle It is recommended to search for the route from the current position to the set destination, provide route guidance to the destination, and if abnormal information is detected by the detection unit, it is recommended to drive according to the content of the abnormal information And a display output control unit that generates and outputs screen information for selecting whether or not to start route guidance for the recommended route searched by the control unit.
この発明によれば、撮像データに基づき乗員の異変が検出されると、当該異変の内容に応じて走行することを推奨するルートを選択可能に出力するナビゲーションシステム、乗員監視装置、情報端末装置、サーバ、およびナビゲーション用プログラムを得ることができる。 According to the present invention, when an occupant change is detected based on the imaging data, a navigation system, an occupant monitoring device, an information terminal device, which outputs a route recommended to travel according to the contents of the change, A server and a navigation program can be obtained.
以下、この発明をより詳細に説明するために、この発明を実施するための形態について、添付の図面に従って説明する。 Hereinafter, in order to explain the present invention in more detail, modes for carrying out the present invention will be described with reference to the accompanying drawings.
実施の形態１．
図１は、本発明の実施の形態１に係るナビゲーションシステム１の構成を示すブロック図の一例である。
Embodiment 1 FIG.
FIG. 1 is an example of a block diagram showing a configuration of a navigation system 1 according to Embodiment 1 of the present invention.
図１に示すように、ナビゲーションシステム１は、乗員監視装置２および情報端末装置３を備える。乗員監視装置２は、車両に搭載される。情報端末装置３は、車両に搭載されるナビゲーション装置、または乗員に所持されて車両に持ち込まれる携帯端末である。携帯端末とは、例えば、ポータブルナビゲーションデバイス、タブレットＰＣ、またはスマートフォンである。乗員監視装置２と情報端末装置３とは、有線または無線で接続される。
As shown in FIG. 1, the navigation system 1 includes an
乗員監視装置２は、撮像部２１、撮像制御部２２、検出部２３、および通信制御部２４を備える。
乗員監視装置２は、運転者を撮像し、後述する異変情報を検出する。運転者を撮像する乗員監視装置２は、例えば、メータまたはステアリングの周辺に設置される。また、乗員監視装置２の撮像対象は、運転者に限定されるものではなく、助手席または後部座席の同乗者（以下、同乗者という）を撮像対象としてもよい。その場合、同乗者を撮像することができる位置に乗員監視装置２を適宜設置する。
実施の形態１では、運転者および同乗者を撮像する場合について説明する。以下、乗員という場合、運転者および同乗者のことを指す。
The
The
In the first embodiment, a case where a driver and a passenger are imaged will be described. Hereinafter, the term “occupant” refers to the driver and passengers.
撮像部２１は、乗員の顔を撮像する。撮像部２１は、例えば、カメラである。また、撮像部２１は、赤外線ＬＥＤ（不図示）を備える。撮像部２１は、赤外線ＬＥＤを点灯することで、夜間でも乗員の顔を撮像することができる。また、詳細は後述するが、撮像部２１の赤外線ＬＥＤを点灯することで、検出部２３において赤外線の反射強度の検出が可能になる。
The
撮像制御部２２は、撮像部２１を制御して、撮像データを生成する。撮像制御部２２は、撮像データを検出部２３に出力する。
The
検出部２３は、撮像データに基づいて、乗員の異変情報を検出する。異変情報の詳細については後述する。検出部２３は、異変情報を検出すると、異変情報を通信制御部２４に出力する。
The
通信制御部２４は、情報の送信および受信を行う。通信制御部２４は、検出部２３から取得した異変情報を情報端末装置３に送信する。また、通信制御部２４は、ネットワークに接続可能である。
The
実施の形態１において、検出部２３が検出する異変情報には、（１）運転者または同乗者がマスクを着用していることを示す異変情報（以下、第１の異変情報という）、（２）運転者または同乗者がサングラスを着用していることを示す異変情報（以下、第２の異変情報という）、（３）運転者または同乗者が眼帯を着用していることを示す異変情報（以下、第３の異変情報という）、（４）運転者または同乗者の目が充血していることを示す異変情報（以下、第４の異変情報という）、（５）基準時間内における運転者の瞬きの回数が閾値（以下、第１の閾値という）より大きいことを示す異変情報（以下、第５の異変情報という）、（６）基準時間内における運転者の心拍数が閾値（以下、第２の閾値という）より大きいことを示す異変情報（以下、第６の異変情報という）、（７）基準時間内における運転者の心拍数が閾値（以下、第３の閾値という）より小さいことを示す異変情報（以下、第７の異変情報という）がある。第５の異変情報、第６の異変情報、および第７の異変情報において、基準時間とは、例えば１０秒である。
In the first embodiment, the change information detected by the
撮像制御部２２が撮像部２１の赤外線ＬＥＤを点灯し、運転者の顔に赤外線を照射すると、運転者の顔の血液の流れの変化に伴い、当該赤外線の反射強度は変化する。検出部２３は、撮像データに基づいて、当該赤外線の反射強度の変化を検出することで、運転者の心拍数を計測する。これにより、検出部２３は、第６の異変情報および第７異変情報を検出することができる。
When the
次に、乗員監視装置２のハードウェア構成例について説明する。
図２Ａ、図２Ｂは、実施の形態１に係る乗員監視装置２のハードウェア構成例を示す図である。
乗員監視装置２における、撮像制御部２２、検出部２３および通信制御部２４は、図２Ａに示すように専用のハードウェアである処理回路１００ａであってもよいし、図２Ｂに示すようにメモリ１００ｃに格納されているプログラムを実行するプロセッサ１００ｂであってもよい。
Next, a hardware configuration example of the
2A and 2B are diagrams illustrating a hardware configuration example of the
The
図２Ａに示すように、撮像制御部２２、検出部２３および通信制御部２４が専用のハードウェアである場合、処理回路１００ａは、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field-programmable Gate Array）、またはこれらを組み合わせたものが該当する。撮像制御部２２、検出部２３および通信制御部２４の各部の機能それぞれを処理回路で実現してもよいし、各部の機能をまとめて１つの処理回路で実現してもよい。
As shown in FIG. 2A, when the
図２Ｂに示すように、撮像制御部２２、検出部２３および通信制御部２４がプロセッサ１００ｂである場合、各部の機能は、ソフトウェア、ファームウェア、またはソフトウェアとファームウェアとの組み合わせにより実現される。ソフトウェアまたはファームウェアはプログラムとして記述され、メモリ１００ｃに格納される。プロセッサ１００ｂは、メモリ１００ｃに記憶されたプログラムを読み出して実行することにより、撮像制御部２２、検出部２３および通信制御部２４の各機能を実現する。即ち、撮像制御部２２、検出部２３および通信制御部２４は、プロセッサ１００ｂにより実行されるときに、後述する図６に示すステップＳＴ２〜ステップＳＴ５が実行されることになるプログラムを格納するためのメモリ１００ｃを備える。また、これらのプログラムは、撮像制御部２２、検出部２３および通信制御部２４の手順または方法をコンピュータに実行させるものであるともいえる。
As illustrated in FIG. 2B, when the
ここで、プロセッサ１００ｂとは、例えば、ＣＰＵ（Central Processing Unit）、処理装置、演算装置、プロセッサ、マイクロプロセッサ、マイクロコンピュータ、またはＤＳＰ（Digital Signal Processor）等のことである。
メモリ１００ｃは、例えば、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、フラッシュメモリ、ＥＰＲＯＭ（Erasable Programmable ROM）、ＥＥＰＲＯＭ（Electrically EPROM）等の不揮発性または揮発性の半導体メモリであってもよいし、ハードディスク、フレキシブルディスク等の磁気ディスクであってもよいし、ミニディスク、ＣＤ（Compact Disc）、ＤＶＤ（Digital Versatile Disc）等の光ディスクであってもよい。
Here, the
The
なお、撮像制御部２２、検出部２３および通信制御部２４の各機能について、一部を専用のハードウェアで実現し、一部をソフトウェアまたはファームウェアで実現するようにしてもよい。このように、乗員監視装置２における処理回路１００ａは、ハードウェア、ソフトウェア、ファームウェア、またはこれらの組み合わせによって、上述の各機能を実現することができる。
In addition, about each function of the
情報端末装置３は、制御部３１、表示出力制御部３２、音声出力制御部３３、通信制御部３４、入力部３５、自車位置取得部３６、地図データ取得部３７、出力部３８、および環境情報取得部３９を備える。
The
通信制御部３４は、情報の送信および受信を行う。また、通信制御部３４は、乗員監視装置２から異変情報を受信すると、当該異変情報を制御部３１に出力する。また、通信制御部３４は、ネットワークに接続可能である。
The
入力部３５は、目的地等の情報の入力を受け付ける。
自車位置取得部３６は、ＧＰＳ（Global Positioning System）衛星（不図示）からＧＰＳ信号を受信し、自車の現在位置を取得する。
地図データ取得部３７は、地図データ記憶部４から地図データを取得する。なお、地図データ取得部３７は、地図データ記憶部４が設けられた車両外部のサーバ（不図示）から当該地図データを取得してもよい。
出力部３８は、情報を表示する。出力部３８は、例えばディスプレイである。
The
The own vehicle position acquisition unit 36 receives a GPS signal from a GPS (Global Positioning System) satellite (not shown), and acquires the current position of the own vehicle.
The map
The
制御部３１は、入力部３５を介して目的地が入力され、目的地が設定されると、目的地、自車の現在位置、および地図データに基づいて、車両の現在位置から目的地までのルート（以下、目的地ルートという）を検索する。制御部３１は、検索した目的地ルート、自車の現在位置、および地図データを表示出力制御部３２に出力するとともに、目的地までのルート案内を開始する。また、制御部３１は、目的地までのルート案内情報を音声出力制御部３３に出力する。
音声出力制御部３３は、目的地までのルート案内情報に基づいて音声情報を生成し、当該音声情報をスピーカ５に出力する。
When the destination is input via the
The voice
表示出力制御部３２は、目的地ルートを取得すると、目的地ルート、自車の現在位置、および地図データに基づき、画面情報（以下、目的地案内画面情報という）を生成し、出力部３８に出力する。
図３は、目的地案内画面情報の一例を示したものである。図３に示すように、目的地案内画面情報には、目的地ルートが反映される。
When the display
FIG. 3 shows an example of destination guidance screen information. As shown in FIG. 3, the destination route is reflected in the destination guidance screen information.
制御部３１は、乗員監視装置２から異変情報を取得すると、異変情報、自車の現在位置、および地図データに基づいて、異変情報の内容に応じて走行することを推奨するルート（以下、推奨ルートという）を検索する。なお、制御部３１は、取得した異変情報によっては、環境情報取得部３９から後述する環境情報をさらに取得し、環境情報にも基づいて推奨ルートを検索する。
制御部３１は、検索した推奨ルートを表示出力制御部３２に出力する。
When the
The
環境情報取得部３９は、通信制御部３４を介して、ネットワークから環境情報を取得する。環境情報には、花粉情報、大気汚染情報等がある。花粉情報とは、現在位置周辺、目的地ルート周辺、または目的地周辺における花粉の飛散量を示す情報である。大気汚染情報とは、現在位置周辺、目的地ルート周辺、または目的地周辺におけるＰＭ２．５、黄砂等の大気汚染物質の飛散量を示す情報である。
The environment
表示出力制御部３２は、推奨ルートを取得すると、推奨ルートのルート案内を開始するか否かを選択する画面情報（以下、ルート選択画面情報という）を生成し、出力部３８に出力する。実施の形態１では、表示出力制御部３２は、推奨ルート、推奨ルートのルート案内を開始するか否かを選択させるためのＧＵＩ（Graphical User Interface）ボタン、目的地ルート、自車の現在位置、および地図データに基づき、ルート選択画面情報を生成する。
図４Ａは、ルート選択画面情報の一例を示したものである。図４Ａに示すように、ルート選択画面情報には、目的地ルートおよび推奨ルートが反映される。また、図４Ｂに示すように、環境情報取得部３９から取得した環境情報をルート選択画面情報に反映してもよい。この場合、制御部３１は、環境情報取得部３９から取得した環境情報を表示出力制御部３２に出力する。
When acquiring the recommended route, the display
FIG. 4A shows an example of route selection screen information. As shown in FIG. 4A, the route selection screen information reflects the destination route and the recommended route. Further, as shown in FIG. 4B, the environment information acquired from the environment
制御部３１は、推奨ルートのルート案内を開始する旨の入力がされたか否かを判断する。制御部３１は、入力部３５を介して、推奨ルートのルート案内を開始する旨の入力がされたか、または、推奨ルートのルート案内を開始しない旨の入力がされたかに基づいて、当該判断を行う。制御部３１は、入力部３５を介して、推奨ルートのルート案内を開始する旨の入力がされたと判断すると、推奨ルートを目的地ルートとするルート変更指示を表示出力制御部３２に出力する。
The
表示出力制御部３２は、ルート変更指示を取得すると、推奨ルートを目的地ルートとする目的地案内画面情報を生成し、出力部３８に出力する。
Upon obtaining the route change instruction, the display
ここで、制御部３１が、第１の異変情報（運転者または同乗者がマスクを着用していることを示す異変情報）を取得した場合に検索する推奨ルートについて説明する。
制御部３１は、第１の異変情報を取得すると、環境情報取得部３９から環境情報をさらに取得する。制御部３１は、第１の推奨ルートとして、花粉または大気汚染物質の飛散量が多いエリア内にある道路を回避して目的地に至るルートを検索する。
ここで、花粉の種類は、季節や草木の種類によって変化する。そこで、制御部３１は、環境情報取得部３９から環境情報として、季節情報および草木の分布情報をさらに取得し、現在の季節において花粉を発生させる草木が多く分布しているエリアを求め、当該エリア内にある道路を回避するルートを検索してもよい。
Here, the recommended route to be searched when the
When the
Here, the type of pollen varies depending on the season and the type of plant. Therefore, the
次に、制御部３１が、第２の異変情報（運転者または同乗者がサングラスを着用していることを示す異変情報）を取得した場合に検索する推奨ルートについて説明する。
制御部３１は、第２の異変情報を取得すると、第２の推奨ルートとして、乗員が日光に晒されることになる道路を回避して目的地に至るルートを検索する。乗員が日光に晒されることになる道路とは、例えば、海沿いの道路である。海沿いの道路では、日光を遮る建物や植物等が少ない。また、当該道路では、海面からの反射光にも晒される。
Next, a description will be given of a recommended route to be searched when the
When acquiring the second incident information, the
次に、制御部３１が、第３の異変情報（運転者または同乗者が眼帯を着用していることを示す異変情報）、または第４の異変情報（運転者または同乗者の目が充血していることを示す異変情報）を取得した場合に検索する推奨ルートについて説明する。
制御部３１は、第３の異変情報または第４の異変情報を取得すると、第３の推奨ルートとして、現在位置周辺、目的地ルート周辺、または目的地周辺にある、眼科に至るルートを検索する。
さらに、第３の異変情報が、運転者が眼帯を着用していることを示している場合、制御部３１は、第４の推奨ルートとして、見通しのよい道路を走行して目的地に至るルートを検索する。見通しのよい道路とは、例えば、大通りである。これは、運転者が眼帯を着用していると、片目運転となり遠近感がなくなることを考慮したものである。
Next, the
When acquiring the third event information or the fourth event information, the
Furthermore, when the third anomaly information indicates that the driver is wearing an eyepatch, the
次に、制御部３１が、第５の異変情報（基準時間内における運転者の瞬きの回数が第１の閾値より大きいことを示す異変情報）を取得した場合に検索する推奨ルートについて説明する。
制御部３１は、第５の異変情報を取得すると、第５の推奨ルートとして、仮眠を取ることができる場所に至るルートを検索する。これは、運転者の目が疲れていると判断し、運転者に休憩を促すものである。仮眠が取ることができる場所とは、例えば、サービスエリア、パーキングエリア、ホテル等である。
Next, the recommended route to be searched when the
When acquiring the fifth anomaly information, the
次に、制御部３１が、第６の異変情報（基準時間内における運転者の心拍数が第２の閾値より大きいことを示す異変情報）を取得した場合に検索する推奨ルートについて説明する。
制御部３１は、第６の異変情報を取得すると、第６の推奨ルートとして、車両の交通量が少ない道路であり、かつ、道幅の広い道路を走行して目的地に至るルートを検索する。これは、運転者の精神状態が興奮状態にあると判断し、当該興奮状態を鎮静化させることを目的とする。
Next, a description will be given of a recommended route to be searched when the
When acquiring the sixth anomaly information, the
次に、制御部３１が、第７の異変情報（基準時間内における運転者の心拍数が第３の閾値より小さいことを示す異変情報）を取得した場合に検索する推奨ルートについて説明する。
制御部３１は、第７の異変情報を取得すると、第７の推奨ルートとして、現在位置周辺、目的地ルート周辺、または目的地周辺にある、病院に至るルートを検索する。これは、運転者の健康状態が異常であると判断し、病院に立ち寄ることを促すものである。
Next, a description will be given of a recommended route to be searched when the
When acquiring the seventh incident information, the
次に、情報端末装置３のハードウェア構成例について説明する。
図５Ａ、図５Ｂは、実施の形態１に係る情報端末装置３のハードウェア構成例を示す図である。
情報端末装置３における、制御部３１、表示出力制御部３２、音声出力制御部３３、通信制御部３４、入力部３５、自車位置取得部３６、地図データ取得部３７、出力部３８および環境情報取得部３９は、図５Ａに示すように専用のハードウェアである処理回路１００ｄであってもよいし、図５Ｂに示すようにメモリ１００ｆに格納されているプログラムを実行するプロセッサ１００ｅであってもよい。
Next, a hardware configuration example of the
5A and 5B are diagrams illustrating a hardware configuration example of the
In the
図５Ａに示すように、制御部３１、表示出力制御部３２、音声出力制御部３３、通信制御部３４、自車位置取得部３６、地図データ取得部３７、および環境情報取得部３９が専用のハードウェアである場合、処理回路１００ｄは、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field-programmable Gate Array）、またはこれらを組み合わせたものが該当する。制御部３１、表示出力制御部３２、音声出力制御部３３、通信制御部３４、入力部３５、自車位置取得部３６、地図データ取得部３７、出力部３８および環境情報取得部３９の各部の機能それぞれを処理回路で実現してもよいし、各部の機能をまとめて１つの処理回路で実現してもよい。
As shown in FIG. 5A, the
図５Ｂに示すように、制御部３１、表示出力制御部３２、音声出力制御部３３、通信制御部３４、自車位置取得部３６、地図データ取得部３７、および環境情報取得部３９がプロセッサ１００ｅである場合、各部の機能は、ソフトウェア、ファームウェア、またはソフトウェアとファームウェアとの組み合わせにより実現される。ソフトウェアまたはファームウェアはプログラムとして記述され、メモリ１００ｆに格納される。プロセッサ１００ｅは、メモリ１００ｆに記憶されたプログラムを読み出して実行することにより、制御部３１、表示出力制御部３２、音声出力制御部３３、通信制御部３４、自車位置取得部３６、地図データ取得部３７、および環境情報取得部３９の各機能を実現する。即ち、制御部３１、表示出力制御部３２、音声出力制御部３３、通信制御部３４、自車位置取得部３６、地図データ取得部３７、および環境情報取得部３９は、プロセッサ１００ｅにより実行されるときに、後述する図６に示すステップＳＴ６〜ステップＳＴ１２が実行されることになるプログラムを格納するためのメモリ１００ｆを備える。また、これらのプログラムは、制御部３１、表示出力制御部３２、音声出力制御部３３、通信制御部３４、自車位置取得部３６、地図データ取得部３７、および環境情報取得部３９の手順または方法をコンピュータに実行させるものであるともいえる。
As shown in FIG. 5B, a
ここで、プロセッサ１００ｅとは、例えば、ＣＰＵ（Central Processing Unit）、処理装置、演算装置、プロセッサ、マイクロプロセッサ、マイクロコンピュータ、またはＤＳＰ（Digital Signal Processor）等のことである。
メモリ１００ｆは、例えば、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、フラッシュメモリ、ＥＰＲＯＭ（Erasable Programmable ROM）、ＥＥＰＲＯＭ（Electrically EPROM）等の不揮発性または揮発性の半導体メモリであってもよいし、ハードディスク、フレキシブルディスク等の磁気ディスクであってもよいし、ミニディスク、ＣＤ（Compact Disc）、ＤＶＤ（Digital Versatile Disc）等の光ディスクであってもよい。
Here, the
The
なお、制御部３１、表示出力制御部３２、音声出力制御部３３、通信制御部３４、自車位置取得部３６、地図データ取得部３７、および環境情報取得部３９の各機能について、一部を専用のハードウェアで実現し、一部をソフトウェアまたはファームウェアで実現するようにしてもよい。このように、情報端末装置３における処理回路１００ｄは、ハードウェア、ソフトウェア、ファームウェア、またはこれらの組み合わせによって、上述の各機能を実現することができる。
A part of each function of the
次に、ナビゲーションシステム１の動作について、図６のフローチャートを用いて説明する。
制御部３１は、目的地が設定されると、目的地までのルート案内を行う（ステップＳＴ１）。
次に、撮像制御部２２は、乗員の顔を撮像する撮像部２１を制御して、撮像データを生成し、撮像データを検出部２３に出力する（ステップＳＴ２）。
次に、検出部２３は、撮像データに基づいて、異変情報が検出されたか否かを判定する（ステップＳＴ３）。ステップＳＴ３において、異変情報が検出された場合（ステップＳＴ３；ＹＥＳ）、検出部２３は、異変情報を通信制御部２４に出力する（ステップＳＴ４）。
次に、通信制御部２４は、異変情報を情報端末装置３に送信する（ステップＳＴ５）。
一方、ステップＳＴ２において、異変情報が検出されなかった場合（ステップＳＴ３；ＮＯ）、ステップＳＴ１に戻り、目的地までのルート案内を行う。
Next, the operation of the navigation system 1 will be described using the flowchart of FIG.
When the destination is set, the
Next, the
Next, the
Next, the
On the other hand, if no change information is detected in step ST2 (step ST3; NO), the process returns to step ST1 to provide route guidance to the destination.
制御部３１は、異変情報を取得すると、推奨ルートを検索する（ステップＳＴ６）。
次に、制御部３１は、当該異変情報に対する推奨ルートを、現在、目的地ルートとしているか否かを判断する（ステップＳＴ７）。
ステップＳＴ７において、当該異変情報に対する推奨ルートを、現在、目的地ルートとしている場合（ステップＳＴ７；ＹＥＳ）、ステップＳＴ１に戻り、目的地までのルート案内を行う。
一方、ステップＳＴ７において、当該異変情報に対する推奨ルートを、現在、目的地ルートとしていない場合（ステップＳＴ７；ＮＯ）、制御部３１は、推奨ルートを表示出力制御部３２に出力する（ステップＳＴ８）。
次に、表示出力制御部３２は、推奨ルートを取得すると、ルート選択画面情報を生成し、出力部３８に出力する（ステップＳＴ９）。
When acquiring the abnormal information, the
Next, the
In step ST7, when the recommended route for the anomaly information is currently the destination route (step ST7; YES), the process returns to step ST1 to provide route guidance to the destination.
On the other hand, when the recommended route for the anomaly information is not currently set as the destination route in step ST7 (step ST7; NO), the
Next, when acquiring the recommended route, the display
次に、制御部３１は、推奨ルートのルート案内を開始する旨の入力がされたか否かを判断する（ステップＳＴ１０）。例えば、出力部３８がタッチパネル式のディスプレイであって、入力部３５を兼ねる場合、制御部３１は、図４Ａに示したＧＵＩボタンの「はい」または「いいえ」のうち、どちらが操作されたかに基づき、当該判断を行う。また、入力部３５が、車両に搭載された他のデバイスである場合、制御部３１は、当該デバイスにより「はい」または「いいえ」のうち、どちらが選択されたかに基づき、当該判断を行う。
Next, the
ステップＳＴ１０において、推奨ルートのルート案内を開始する旨の入力がされたと判断した場合（ステップＳＴ１０；ＹＥＳ）、制御部３１は、推奨ルートを目的地ルートとするルート変更指示を表示出力制御部３２に出力する（ステップＳＴ１１）。
一方、ステップＳＴ１０において、推奨ルートのルート案内を開始しない旨の入力がされたと判断した場合（ステップＳＴ１０；ＮＯ）、ステップＳＴ１に戻り、目的地までのルート案内を行う。
If it is determined in step ST10 that an input to start route guidance for the recommended route has been made (step ST10; YES), the
On the other hand, if it is determined in step ST10 that an input indicating that the route guidance for the recommended route is not started is made (step ST10; NO), the process returns to step ST1 to perform route guidance to the destination.
ステップＳＴ１０において、表示出力制御部３２は、ルート変更指示を取得すると、推奨ルートを目的地ルートとする新たな目的地案内画面情報を生成し、出力部３８に出力する（ステップＳＴ１２）。そして、再びステップＳＴ１に戻る。
In step ST10, when acquiring the route change instruction, the display
上記では、ステップＳＴ８において、制御部３１が、１つの異変情報に対し、１つの推奨ルートを検索し、当該推奨ルートを出力する場合について説明した。ここで、同ステップにおいて、制御部３１が、１つの異変情報に対し、複数の推奨ルートを検索し、当該複数の推奨ルートを出力する場合について説明する。
この場合、ステップＳＴ８において、制御部３１は、当該複数の推奨ルートを、表示出力制御部３２に出力する。次に、ステップＳＴ９において、表示出力制御部３２は、当該複数の推奨ルートのうち、例えば、現在位置から目的地に至るまでの走行距離が短い推奨ルートから順に、ルート選択画面情報を生成し、出力部３８に出力する。そして、ステップＳＴ１０において、制御部３１は、当該推奨ルートのルート案内を開始するか否かを判断する。
In the above, a case has been described where, in step ST8, the
In this case, in step ST8, the
また、ステップＳＴ８において、制御部３１が、複数の異変情報を同時に取得し、各異変情報に対する推奨ルートを検索して、当該推奨ルートを出力する場合について説明する。
この場合、ステップＳＴ８において、制御部３１は、各異変情報に対する推奨ルートを検索して、複数の推奨ルートを表示出力制御部３２に出力する。このとき、制御部３１は、各推奨ルートがどの異変情報に対する推奨ルートであるかという情報を、表示出力制御部３２に出力する。次に、ステップＳＴ９において、表示出力制御部３２は、例えば、異変情報ごとに順番に、当該異変情報に対応する推奨ルートのルート選択画面情報を生成し、出力部３８に出力する。そして、ステップＳＴ１０において、制御部３１は、当該推奨ルートのルート案内を開始するか否かを判断する。なお、各異変情報にあらかじめ優先度を定めておき、表示出力制御部３２が、当該優先度の高いものから順番に、ルート選択画面情報を生成し、出力するようにしてもよい。
Further, a case will be described in which, in step ST8, the
In this case, in step ST8, the
以上のように、実施の形態１に係るナビゲーションシステム１は、乗員の顔を撮像する撮像部２１を制御して、撮像データを生成する撮像制御部２２と、撮像データに基づいて、乗員の異変情報を検出する検出部２３と、車両の現在位置から、設定された目的地までのルートを検索し、目的地までのルート案内を行うとともに、検出部２３で異変情報が検出されると、当該異変情報の内容に応じて走行することを推奨する推奨ルートを検索する制御部３１と、制御部３１で検索された推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部３２とを備える。このため、撮像データに基づき乗員の異変が検出されると、当該異変の内容に応じて走行することを推奨するルートが選択可能に出力される。これにより、乗員は、当該推奨ルートを走行するか否か選択することができる。
As described above, the navigation system 1 according to the first embodiment controls the
実施の形態２．
実施の形態２に係るナビゲーションシステム１のブロック図は、実施の形態１における図１と同様であるため、図示および説明を省略する。
実施の形態１に係るナビゲーションシステム１は、目的地までのルート案内が行われている間に、検出部２３が異変情報を検出すると、制御部３１が推奨ルートを検索するものであった。
実施の形態２に係るナビゲーションシステム１は、実施の形態１に係るナビゲーションシステム１の機能に加え、目的地までのルート案内が行われていない間であっても、検出部２３が、第１の異変情報から第７の異変情報のうち、特定の異変情報を検出した場合には、制御部３１が推奨ルートを検索するものである。
Since the block diagram of the navigation system 1 according to the second embodiment is the same as that in FIG. 1 in the first embodiment, illustration and description thereof are omitted.
In the navigation system 1 according to the first embodiment, when the
In the navigation system 1 according to the second embodiment, in addition to the function of the navigation system 1 according to the first embodiment, even when the route guidance to the destination is not performed, the
以下に、検出部２３が検出する特定の異変情報と、当該異変情報を取得した場合に、制御部３１が検索する推奨ルートについて説明する。
検出部２３が、第３の異変情報（運転者または同乗者が眼帯を着用していることを示す異変情報）、または第４の異変情報（運転者または同乗者の目が充血していることを示す異変情報）を取得すると、制御部３１は、第８の推奨ルートとして、現在位置周辺にある、眼科に至るルートを検索する。
検出部２３が、第５の異変情報（基準時間内における運転者の瞬きの回数が第１の閾値より大きいことを示す異変情報）を取得すると、制御部３１は、第９の推奨ルートとして、仮眠を取ることができる場所に至るルートを検索する。
検出部２３が、第７の異変情報（基準時間内における運転者の心拍数が第３の閾値より小さいことを示す異変情報）を取得すると、制御部３１は、第１０の推奨ルートとして、現在位置周辺にある、病院に至るルートを検索する。
Below, the specific change information which the
The
When the
When the
次に、ナビゲーションシステム１の動作について、図７のフローチャートを用いて説明する。以下の動作は、目的地までのルート案内が行われていない間に実行される。
撮像制御部２２は、乗員の顔を撮像する撮像部２１を制御して、撮像データを生成し、撮像データを検出部２３に出力する（ステップＳＴ２１）。
次に、検出部２３は、撮像データに基づいて、異変情報が検出されたか否かを判定する（ステップＳＴ２２）。ステップＳＴ２２において、異変情報が検出された場合（ステップＳＴ２２；ＹＥＳ）、検出部２３は、異変情報を通信制御部２４に出力する（ステップＳＴ２３）。
次に、通信制御部２４は、異変情報を情報端末装置３に送信する（ステップＳＴ２４）。
一方、ステップＳＴ２２において、異変情報が検出されなかった場合（ステップＳＴ２２；ＮＯ）、ステップＳＴ２１に戻る。
Next, the operation of the navigation system 1 will be described using the flowchart of FIG. The following operations are executed while route guidance to the destination is not performed.
The
Next, the
Next, the
On the other hand, when the abnormal information is not detected in step ST22 (step ST22; NO), the process returns to step ST21.
次に、制御部３１は、異変情報を取得すると、推奨ルートを検索する（ステップＳＴ２５）。そして、制御部３１は、検索した推奨ルートを表示出力制御部３２に出力する（ステップＳＴ２６）。
次に、表示出力制御部３２は、推奨ルートを取得すると、ルート選択画面情報を生成し、出力部３８に出力する（ステップＳＴ２７）。実施の形態２では、表示出力制御部３２は、推奨ルート、推奨ルートのルート案内を開始するか否かを選択させるためのＧＵＩ（Graphical User Interface）ボタン、自車の現在位置、および地図データに基づき、ルート選択画面情報を生成する。
Next, when acquiring the abnormality information, the
Next, when acquiring the recommended route, the display
次に、制御部３１は、推奨ルートのルート案内を開始する旨の入力がされたか否かを判断する（ステップＳＴ２８）。
ステップＳＴ２８において、推奨ルートのルート案内を開始する旨の入力がされたと判断した場合（ステップＳＴ２８；ＹＥＳ）、制御部３１は、推奨ルートを目的地ルートとする指示を表示出力制御部３２に出力する（ステップＳＴ２９）。
一方、ステップＳＴ２８において、推奨ルートのルート案内を開始しない旨の入力がされたと判断した場合（ステップＳＴ２８；ＮＯ）、ステップＳＴ２１に戻る。
Next, the
When it is determined in step ST28 that an input to start route guidance for the recommended route has been made (step ST28; YES), the
On the other hand, if it is determined in step ST28 that an input indicating that the route guidance for the recommended route is not started is made (step ST28; NO), the process returns to step ST21.
ステップＳＴ２９において、表示出力制御部３２は、推奨ルートを目的地ルートとする指示を取得すると、推奨ルートを目的地ルートとする目的地案内画面情報を生成し、出力部３８に出力する（ステップＳＴ３０）。
ステップＳＴ３０の後、図６に示したステップＳＴ１に移行し、制御部３１は、目的地までのルート案内を開始する。以降は、図６のフローチャートに示された動作が、適宜実行されることになる。
In step ST29, when the display
After step ST30, the process proceeds to step ST1 shown in FIG. 6, and the
上記では、ステップＳＴ３０の後、図６に示したステップＳＴ１に移行する場合について説明したが、これに限定されるものではない。例えば、ステップＳＴ３０において、表示出力制御部３２が、第１０の推奨ルート（現在位置周辺にある、病院に至るルート）を目的地ルートとする目的地案内画面情報を生成し、出力部３８に出力した場合には、目的地に到達するまでの間、別の異変情報が検出されても推奨ルートを検索しないようにしてもよい。これは、病院に到達することを優先させるためである。
In the above description, the case where the process proceeds to step ST1 shown in FIG. 6 after step ST30 has been described. However, the present invention is not limited to this. For example, in step ST30, the display
以上のように、実施の形態２に係るナビゲーションシステム１によれば、目的地までのルート案内が行われていない間であっても、乗員について特定の異変が検出された場合には、推奨ルートが検索されるとともに、当該推奨ルートが選択可能に出力される。これにより、乗員は、当該推奨ルートを走行するか否か選択することができる。 As described above, according to the navigation system 1 according to the second embodiment, even when the route guidance to the destination is not performed, the recommended route is detected when a specific abnormality is detected for the occupant. Is searched and the recommended route is output in a selectable manner. Thereby, the occupant can select whether or not to travel the recommended route.
上述の説明は、実施の形態１に係るナビゲーションシステム１、および実施の形態２に係るナビゲーションシステム１の構成の一例であり、乗員監視装置２の各部の機能を、情報端末装置３が担うように構成してもよい。
例えば、検出部２３の機能を、情報端末装置３が有するように構成してもよい。この場合、情報端末装置３が、図６のステップＳＴ１、ステップＳＴ３〜ステップＳＴ１２の処理、図７のステップＳＴ２２〜ステップＳＴ３０の処理を行うことになる。
The above description is an example of the configuration of the navigation system 1 according to the first embodiment and the navigation system 1 according to the second embodiment, and the
For example, the
また、情報端末装置３の各部の機能を、乗員監視装置２が担うように構成してもよい。例えば、制御部３１の機能、表示出力制御部３２の機能、自車位置取得部３６の機能、地図データ取得部３７の機能、および環境情報取得部３９の機能を、乗員監視装置２が有するように構成してもよい。当該構成では、乗員監視装置２は、情報端末装置３の入力部３５を介して入力された情報を、情報端末装置３から取得する。この場合、乗員監視装置２が、図６のステップＳＴ１〜ステップＳＴ１２の処理、図７のステップＳＴ２１〜ステップＳＴ３０の処理を行うことになる。
Moreover, you may comprise so that the passenger |
また、図８は、実施の形態１に係るナビゲーションシステム１、および実施の形態２に係るナビゲーションシステム１の別の構成の概要を示す図である。
本構成は、乗員監視装置２の各部の機能と、情報端末装置３の各部の機能とを、外部のサーバ６が担うように構成したものである。サーバ６は、ネットワークを介して、乗員監視装置２および情報端末装置３と通信する。
サーバ６は、例えば、検出部２３の機能、制御部３１の機能、表示出力制御部３２の機能、地図データ取得部３７の機能、および環境情報取得部３９の機能を有する。また、サーバ６は、情報端末装置３の入力部３５を介して入力された情報、および、情報端末装置３の自車位置取得部３６が取得した自車の現在位置を、情報端末装置３から取得する。この場合、サーバ６が、図６のステップＳＴ１、ステップＳＴ３〜ステップＳＴ１２の処理、および図７のステップＳＴ２２〜ステップＳＴ３０の処理を行うことになる。
FIG. 8 is a diagram showing an outline of another configuration of the navigation system 1 according to the first embodiment and the navigation system 1 according to the second embodiment.
This configuration is configured such that the
The
なお、本発明はその発明の範囲内において、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは実施の形態において任意の構成要素の省略が可能である。 In the present invention, within the scope of the invention, free combinations of the respective embodiments, modifications of arbitrary components of the respective embodiments, or omission of arbitrary components in the embodiments are possible.
１ ナビゲーションシステム、２ 乗員監視装置、３ 情報端末装置、４ 地図データ記憶部、５ スピーカ、６ サーバ、２１ 撮像部、２２ 撮像制御部、２３ 検出部、２４ 通信制御部、３１ 制御部、３２ 表示出力制御部、３３ 音声出力制御部、３４ 通信制御部、３５ 入力部、３６ 自車位置取得部、３７ 地図データ取得部、３８ 出力部、３９ 環境情報取得部。 1 navigation system, 2 occupant monitoring device, 3 information terminal device, 4 map data storage unit, 5 speaker, 6 server, 21 imaging unit, 22 imaging control unit, 23 detection unit, 24 communication control unit, 31 control unit, 32 display Output control unit, 33 voice output control unit, 34 communication control unit, 35 input unit, 36 own vehicle position acquisition unit, 37 map data acquisition unit, 38 output unit, 39 environment information acquisition unit.
Claims (17)
前記撮像データに基づいて、乗員の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記異変情報が検出されると、当該異変情報の内容に応じて走行することを推奨する推奨ルートを検索する制御部と、
前記制御部で検索された前記推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部と
を備えることを特徴とするナビゲーションシステム。 An imaging control unit that controls the imaging unit that captures the face of the occupant and generates imaging data;
Based on the imaging data, a detection unit that detects occupant anomaly information;
The route from the current position of the vehicle to the set destination is searched, route guidance to the destination is performed, and when the abnormal information is detected by the detection unit, the information is changed according to the content of the abnormal information. A control unit that searches for a recommended route recommended to travel;
A display output control unit that generates and outputs screen information for selecting whether or not to start route guidance for the recommended route searched by the control unit.
前記検出部は、運転者または同乗者がマスクを着用していることを示す第１の異変情報を検出し、
前記制御部は、前記検出部で前記第１の異変情報が検出されると、前記環境情報に基づき、前記推奨ルートとして、花粉または大気汚染物質の飛散量が多いエリア内にある道路を回避して前記目的地に至る第１の推奨ルートを検索し、
前記表示出力制御部は、前記目的地までのルートおよび前記第１の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項１または請求項２記載のナビゲーションシステム。 An environment information acquisition unit that acquires environment information from the network is further provided.
The detection unit detects first anomaly information indicating that a driver or a passenger is wearing a mask,
When the first abnormality information is detected by the detection unit, the control unit avoids a road in an area where a large amount of pollen or air pollutants is scattered as the recommended route based on the environment information. Search for the first recommended route to the destination,
The navigation system according to claim 1 or 2, wherein the display output control unit generates and outputs the screen information reflecting the route to the destination and the first recommended route.
前記制御部は、前記検出部で前記第２の異変情報が検出されると、前記推奨ルートとして、乗員が日光に晒されることになる道路を回避して前記目的地に至る第２の推奨ルートを検索し、
前記表示出力制御部は、前記目的地までのルートおよび前記第２の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項１または請求項２記載のナビゲーションシステム。 The detection unit detects second anomaly information indicating that a driver or a passenger is wearing sunglasses,
When the detection unit detects the second anomaly information, the control unit avoids a road on which an occupant is exposed to sunlight and avoids a road that leads to the destination as the recommended route. Search for
The navigation system according to claim 1, wherein the display output control unit generates and outputs the screen information reflecting the route to the destination and the second recommended route.
前記制御部は、前記検出部で前記第３の異変情報または前記第４の異変情報が検出されると、前記推奨ルートとして、現在位置周辺、目的地ルート周辺、または目的地周辺にある、眼科に至る第３の推奨ルートを検索し、
前記表示出力制御部は、前記目的地までのルートおよび前記第３の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項１または請求項２記載のナビゲーションシステム。 The detection unit detects third anomaly information indicating that the driver or passenger is wearing an eye patch, or fourth anomaly information indicating that the driver's or passenger's eyes are congested. And
When the detection unit detects the third anomaly information or the fourth anomaly information, the control unit has an ophthalmology located around the current position, the destination route, or the destination as the recommended route. Search for the 3rd recommended route to
The navigation system according to claim 1 or 2, wherein the display output control unit generates and outputs the screen information reflecting the route to the destination and the third recommended route.
前記表示出力制御部は、前記目的地までのルートおよび前記第４の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項５記載のナビゲーションシステム。 When the third anomaly information is information indicating that the driver is wearing an eye patch, the control unit travels on a high-visibility road and reaches the destination as the recommended route. Search for recommended routes for
The navigation system according to claim 5, wherein the display output control unit generates and outputs the screen information reflecting the route to the destination and the fourth recommended route.
前記制御部は、前記検出部で前記第５の異変情報が検出されると、前記推奨ルートとして、仮眠を取ることができる場所に至る第５の推奨ルートを検索し、
前記表示出力制御部は、前記目的地までのルートおよび前記第５の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項１または請求項２記載のナビゲーションシステム。 The detection unit detects fifth anomaly information indicating that the number of blinks of the driver within a reference time is greater than a first threshold,
When the detection unit detects the fifth anomaly information, the control unit searches for a fifth recommended route to a place where a nap can be taken as the recommended route,
The navigation system according to claim 1 or 2, wherein the display output control unit generates and outputs the screen information reflecting the route to the destination and the fifth recommended route.
前記制御部は、前記検出部で前記第６の異変情報が検出されると、前記推奨ルートとして、車両の交通量が少ない道路であり、かつ、道幅の広い道路を走行して前記目的地に至る第６の推奨ルートを検索し、
前記表示出力制御部は、前記目的地までのルートおよび前記第６の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項２記載のナビゲーションシステム。 The detector detects sixth anomaly information indicating that the heart rate of the driver within a reference time is greater than a second threshold;
When the detection unit detects the sixth anomaly information, the control unit travels on a road with a small amount of vehicle traffic and a wide road to the destination as the recommended route. Search for the 6th recommended route to
The navigation system according to claim 2, wherein the display output control unit generates and outputs the screen information reflecting the route to the destination and the sixth recommended route.
前記制御部は、前記検出部で前記第７の異変情報が検出されると、前記推奨ルートとして、現在位置周辺、目的地ルート周辺、または目的地周辺にある、病院に至る第７の推奨ルートを検索し、
前記表示出力制御部は、前記目的地までのルートおよび前記第７の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項２記載のナビゲーションシステム。 The detection unit detects seventh anomaly information indicating that the heart rate of the driver within a reference time is smaller than a third threshold;
When the detection unit detects the seventh anomaly information, the control unit detects, as the recommended route, a seventh recommended route leading to a hospital around the current position, around the destination route, or around the destination. Search for
The navigation system according to claim 2, wherein the display output control unit generates and outputs the screen information reflecting the route to the destination and the seventh recommended route.
前記制御部は、前記目的地までのルート案内を行っていない間に、前記検出部で前記第３の異変情報または前記第４の異変情報が検出されると、前記推奨ルートとして、現在位置周辺にある、眼科に至る第８の推奨ルートを検索し、
前記表示出力制御部は、前記第８の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項１または請求項２記載のナビゲーションシステム。 The detection unit detects third anomaly information indicating that the driver or passenger is wearing an eye patch, or fourth anomaly information indicating that the driver's or passenger's eyes are congested. And
When the control unit detects the third anomaly information or the fourth anomaly information while the route guidance to the destination is not being performed, the control unit detects the recommended route and the vicinity of the current position. Search for the 8th recommended route to Ophthalmology in
The navigation system according to claim 1 or 2, wherein the display output control unit generates and outputs the screen information in which the eighth recommended route is reflected.
前記制御部は、前記目的地までのルート案内を行っていない間に、前記検出部で前記第５の異変情報が検出されると、前記推奨ルートとして、仮眠を取ることができる場所に至る第９の推奨ルートを検索し、
前記表示出力制御部は、前記第９の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項１または請求項２記載のナビゲーションシステム。 The detection unit detects fifth anomaly information indicating that the number of blinks of the driver within a reference time is greater than a first threshold,
When the control unit detects the fifth anomaly information while the route guidance to the destination is not being performed, the control unit reaches the place where a nap can be taken as the recommended route. Search for 9 recommended routes,
The navigation system according to claim 1, wherein the display output control unit generates and outputs the screen information in which the ninth recommended route is reflected.
前記制御部は、前記目的地までのルート案内を行っていない間に、前記検出部で前記第７の異変情報が検出されると、前記推奨ルートとして、現在位置周辺にある、病院に至る第１０の推奨ルートを検索し、
前記表示出力制御部は、前記第１０の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項２記載のナビゲーションシステム。 The detection unit detects seventh anomaly information indicating that the heart rate of the driver within a reference time is smaller than a third threshold;
If the seventh anomaly information is detected by the detection unit while the route guidance to the destination is not performed, the control unit detects the recommended route as the first route to the hospital around the current position. Search 10 recommended routes,
The navigation system according to claim 2, wherein the display output control unit generates and outputs the screen information in which the tenth recommended route is reflected.
前記制御部および前記表示出力制御部は、車両に搭載され、または当該車両に持ち込まれる情報端末装置に設けられることを特徴とする請求項１記載のナビゲーションシステム。 The imaging unit, the imaging control unit, and the detection unit are provided in an occupant monitoring device mounted on a vehicle,
The navigation system according to claim 1, wherein the control unit and the display output control unit are provided in an information terminal device that is mounted on a vehicle or brought into the vehicle.
乗員の顔を撮像して生成された撮像データに基づいて、乗員の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記異変情報が検出されると、当該異変情報の内容に応じて走行することを推奨する推奨ルートを検索する制御部と、
前記制御部で検索された前記推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部と
を備えることを特徴とする情報端末装置。 An information terminal device mounted on a vehicle or brought into the vehicle,
A detection unit for detecting anomaly information of an occupant based on imaging data generated by imaging an occupant's face;
The route from the current position of the vehicle to the set destination is searched, route guidance to the destination is performed, and when the abnormal information is detected by the detection unit, the information is changed according to the content of the abnormal information. A control unit that searches for a recommended route recommended to travel;
An information terminal device comprising: a display output control unit that generates and outputs screen information for selecting whether or not to start route guidance for the recommended route searched by the control unit.
乗員の顔を撮像する撮像部を制御して、撮像データを生成する撮像制御部と、
前記撮像データに基づいて、乗員の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記異変情報が検出されると、当該異変情報の内容に応じて走行することを推奨する推奨ルートを検索する制御部と、
前記制御部で検索された前記推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部と
を備えることを特徴とする乗員監視装置。 An occupant monitoring device mounted on a vehicle,
An imaging control unit that controls the imaging unit that captures the face of the occupant and generates imaging data;
Based on the imaging data, a detection unit that detects occupant anomaly information;
The route from the current position of the vehicle to the set destination is searched, route guidance to the destination is performed, and when the abnormal information is detected by the detection unit, the information is changed according to the content of the abnormal information. A control unit that searches for a recommended route recommended to travel;
An occupant monitoring apparatus comprising: a display output control unit that generates and outputs screen information for selecting whether to start route guidance for the recommended route searched by the control unit.
前記撮像データに基づいて、乗員の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記異変情報が検出されると、当該異変情報の内容に応じて走行することを推奨する推奨ルートを検索する制御部と、
前記制御部で検索された前記推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部と
を備えることを特徴とするサーバ。 A server that receives imaging data generated by imaging an occupant's face from an occupant monitoring device mounted on the vehicle, and transmits screen information to an information terminal device mounted on the vehicle or brought into the vehicle. And
Based on the imaging data, a detection unit that detects occupant anomaly information;
The route from the current position of the vehicle to the set destination is searched, route guidance to the destination is performed, and when the abnormal information is detected by the detection unit, the information is changed according to the content of the abnormal information. A control unit that searches for a recommended route recommended to travel;
A display output control unit that generates and outputs screen information for selecting whether to start route guidance for the recommended route searched by the control unit.
乗員の顔を撮像して生成された撮像データに基づいて、乗員の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記異変情報が検出されると、当該異変情報の内容に応じて走行することを推奨する推奨ルートを検索する制御部と、
前記制御部で検索された前記推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部として機能させるためのナビゲーション用プログラム。 A computer installed in or brought into the vehicle
A detection unit for detecting anomaly information of an occupant based on imaging data generated by imaging an occupant's face;
The route from the current position of the vehicle to the set destination is searched, route guidance to the destination is performed, and when the abnormal information is detected by the detection unit, the information is changed according to the content of the abnormal information. A control unit that searches for a recommended route recommended to travel;
A navigation program for functioning as a display output control unit that generates and outputs screen information for selecting whether or not to start route guidance for the recommended route searched by the control unit.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016198006A JP6712825B2 (en) | 2016-10-06 | 2016-10-06 | Navigation system, occupant monitoring device, information terminal device, server, and navigation program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016198006A JP6712825B2 (en) | 2016-10-06 | 2016-10-06 | Navigation system, occupant monitoring device, information terminal device, server, and navigation program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2018059834A true JP2018059834A (en) | 2018-04-12 |
| JP6712825B2 JP6712825B2 (en) | 2020-06-24 |
Family
ID=61909910
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016198006A Active JP6712825B2 (en) | 2016-10-06 | 2016-10-06 | Navigation system, occupant monitoring device, information terminal device, server, and navigation program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6712825B2 (en) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2020101696A (en) * | 2018-12-21 | 2020-07-02 | トヨタ自動車株式会社 | Map generation device, map generation system, map generation method, and map generation program |
| CN111464971A (en) * | 2019-01-22 | 2020-07-28 | 本田技研工业株式会社 | Guidance system, guidance method, and storage medium |
| JP2021009629A (en) * | 2019-07-02 | 2021-01-28 | ヤフー株式会社 | Estimation device, estimation method, and estimation program |
| JP2021032829A (en) * | 2019-08-29 | 2021-03-01 | ダイハツ工業株式会社 | Vehicle guidance system |
| CN115417265A (en) * | 2022-09-27 | 2022-12-02 | 重庆迈高电梯有限公司 | Elevator authentication system based on elevator taking safety management |
Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH08159800A (en) * | 1994-12-02 | 1996-06-21 | Nippondenso Co Ltd | Route guiding apparatus for vehicle |
| WO2001062534A2 (en) * | 2000-02-22 | 2001-08-30 | Park Won Hee | Driver condition monitoring apparatus |
| JP2004184285A (en) * | 2002-12-04 | 2004-07-02 | Denso Corp | Cooperative control system for vehicle |
| JP2004246708A (en) * | 2003-02-14 | 2004-09-02 | Mazda Motor Corp | Health care system, health care method and health care program for automobile |
| JP2005108033A (en) * | 2003-09-30 | 2005-04-21 | Toshiba Corp | Driver condition determination device and method |
| JP2007205765A (en) * | 2006-01-31 | 2007-08-16 | Equos Research Co Ltd | Route searching apparatus |
| JP2008204224A (en) * | 2007-02-21 | 2008-09-04 | Clarion Co Ltd | Awakening support device, awakening support method and control program |
| JP2008292369A (en) * | 2007-05-25 | 2008-12-04 | Victor Co Of Japan Ltd | Navigation device |
| JP2009166783A (en) * | 2008-01-18 | 2009-07-30 | Toyota Motor Corp | Symptom inference device |
| JP2010208540A (en) * | 2009-03-11 | 2010-09-24 | Omron Corp | Control device, method, and program |
| JP2014075059A (en) * | 2012-10-04 | 2014-04-24 | Denso Corp | Driving support device, and driving support method |
| JP2016063339A (en) * | 2014-09-17 | 2016-04-25 | 日産自動車株式会社 | Communication controller and communication control method |
| JP2016133981A (en) * | 2015-01-19 | 2016-07-25 | アイシン精機株式会社 | Driving support device |
-
2016
- 2016-10-06 JP JP2016198006A patent/JP6712825B2/en active Active
Patent Citations (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH08159800A (en) * | 1994-12-02 | 1996-06-21 | Nippondenso Co Ltd | Route guiding apparatus for vehicle |
| WO2001062534A2 (en) * | 2000-02-22 | 2001-08-30 | Park Won Hee | Driver condition monitoring apparatus |
| JP2001238858A (en) * | 2000-02-22 | 2001-09-04 | Genki Boku | Device for monitoring drivers |
| JP2004184285A (en) * | 2002-12-04 | 2004-07-02 | Denso Corp | Cooperative control system for vehicle |
| JP2004246708A (en) * | 2003-02-14 | 2004-09-02 | Mazda Motor Corp | Health care system, health care method and health care program for automobile |
| JP2005108033A (en) * | 2003-09-30 | 2005-04-21 | Toshiba Corp | Driver condition determination device and method |
| JP2007205765A (en) * | 2006-01-31 | 2007-08-16 | Equos Research Co Ltd | Route searching apparatus |
| JP2008204224A (en) * | 2007-02-21 | 2008-09-04 | Clarion Co Ltd | Awakening support device, awakening support method and control program |
| JP2008292369A (en) * | 2007-05-25 | 2008-12-04 | Victor Co Of Japan Ltd | Navigation device |
| JP2009166783A (en) * | 2008-01-18 | 2009-07-30 | Toyota Motor Corp | Symptom inference device |
| JP2010208540A (en) * | 2009-03-11 | 2010-09-24 | Omron Corp | Control device, method, and program |
| JP2014075059A (en) * | 2012-10-04 | 2014-04-24 | Denso Corp | Driving support device, and driving support method |
| JP2016063339A (en) * | 2014-09-17 | 2016-04-25 | 日産自動車株式会社 | Communication controller and communication control method |
| JP2016133981A (en) * | 2015-01-19 | 2016-07-25 | アイシン精機株式会社 | Driving support device |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2020101696A (en) * | 2018-12-21 | 2020-07-02 | トヨタ自動車株式会社 | Map generation device, map generation system, map generation method, and map generation program |
| CN111464971A (en) * | 2019-01-22 | 2020-07-28 | 本田技研工业株式会社 | Guidance system, guidance method, and storage medium |
| CN111464971B (en) * | 2019-01-22 | 2023-11-14 | 本田技研工业株式会社 | Guidance system, guidance method, and storage medium |
| JP2021009629A (en) * | 2019-07-02 | 2021-01-28 | ヤフー株式会社 | Estimation device, estimation method, and estimation program |
| JP7347974B2 (en) | 2019-07-02 | 2023-09-20 | ヤフー株式会社 | Estimation device, estimation method, and estimation program |
| JP2021032829A (en) * | 2019-08-29 | 2021-03-01 | ダイハツ工業株式会社 | Vehicle guidance system |
| JP7349293B2 (en) | 2019-08-29 | 2023-09-22 | ダイハツ工業株式会社 | Vehicle guidance system |
| CN115417265A (en) * | 2022-09-27 | 2022-12-02 | 重庆迈高电梯有限公司 | Elevator authentication system based on elevator taking safety management |
| CN115417265B (en) * | 2022-09-27 | 2023-12-15 | 重庆迈高电梯有限公司 | Elevator authentication system based on elevator taking safety management |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6712825B2 (en) | 2020-06-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6712825B2 (en) | Navigation system, occupant monitoring device, information terminal device, server, and navigation program | |
| CN109219551B (en) | Road condition head-up display | |
| CN105136156B (en) | Adaptive navigation based on user behavior pattern and location based service | |
| EP3232289B1 (en) | Information presentation control method and autonomous vehicle, and autonomous-vehicle driving support system | |
| US10591922B2 (en) | Autonomous vehicle operation in view-obstructed environments | |
| JP6486640B2 (en) | Driving characteristic diagnostic device, driving characteristic diagnostic system, driving characteristic diagnostic method, information output device, information output method | |
| EP2668553B1 (en) | Information processing device, alarm method, and program | |
| EP3252432A1 (en) | Information-attainment system based on monitoring an occupant | |
| US20170166222A1 (en) | Assessment of human driving performance using autonomous vehicles | |
| JP6480143B2 (en) | Driving characteristic diagnosis device, driving characteristic diagnosis system, driving characteristic diagnosis method | |
| JP6323074B2 (en) | Display object information display device | |
| US9056550B2 (en) | Vehicle speed limiting and/or controlling system that is responsive to GPS signals | |
| JP6584632B2 (en) | Parking assistance device | |
| KR20080020956A (en) | Method of operating a night-view system in a vehicle and corresponding night-view system | |
| CN107408288B (en) | Warning device, warning method, and warning program | |
| WO2019212779A1 (en) | Navigation with sun glare information | |
| CN107209021B (en) | System and method for visual relevance ranking of navigation maps | |
| EP3725597A1 (en) | Monitoring system and method for target body on vehicle, and vehicle | |
| WO2018051399A1 (en) | State prediction device and state prediction method | |
| JP2017194948A (en) | Information presentation control device, automatic operation vehicle, and automatic operation vehicle supporting system | |
| CN113359974A (en) | Notification based on attention | |
| JP2008020406A (en) | Navigation device | |
| US20170176207A1 (en) | In vehicle system and method for providing information regarding points of interest | |
| US20140032099A1 (en) | Systems and methods for navigation | |
| EP3002158A1 (en) | Rearview camera with gps for image storage and retrieval |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181026 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190912 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191008 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191126 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200428 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200526 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6712825 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |