JP2018059834A - Navigation system, occupant monitoring device, information terminal device, server, and navigation program - Google Patents
Navigation system, occupant monitoring device, information terminal device, server, and navigation program Download PDFInfo
- Publication number
- JP2018059834A JP2018059834A JP2016198006A JP2016198006A JP2018059834A JP 2018059834 A JP2018059834 A JP 2018059834A JP 2016198006 A JP2016198006 A JP 2016198006A JP 2016198006 A JP2016198006 A JP 2016198006A JP 2018059834 A JP2018059834 A JP 2018059834A
- Authority
- JP
- Japan
- Prior art keywords
- control unit
- information
- route
- destination
- recommended
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012806 monitoring device Methods 0.000 title claims description 27
- 238000003384 imaging method Methods 0.000 claims abstract description 71
- 238000001514 detection method Methods 0.000 claims abstract description 63
- 230000002159 abnormal effect Effects 0.000 claims description 28
- 230000005856 abnormality Effects 0.000 claims description 9
- 238000012544 monitoring process Methods 0.000 claims description 4
- 239000000809 air pollutant Substances 0.000 claims description 3
- 231100001243 air pollutant Toxicity 0.000 claims description 3
- 230000008859 change Effects 0.000 description 33
- 238000004891 communication Methods 0.000 description 32
- 230000006870 function Effects 0.000 description 28
- 238000012545 processing Methods 0.000 description 20
- 238000000034 method Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 9
- 230000008569 process Effects 0.000 description 7
- 230000007613 environmental effect Effects 0.000 description 4
- 238000013500 data storage Methods 0.000 description 3
- 238000003915 air pollution Methods 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 230000005281 excited state Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 101001139126 Homo sapiens Krueppel-like factor 6 Proteins 0.000 description 1
- 230000017531 blood circulation Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000006996 mental state Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000004576 sand Substances 0.000 description 1
- 230000001932 seasonal effect Effects 0.000 description 1
Images
Landscapes
- Instructional Devices (AREA)
- Navigation (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
この発明は、ナビゲーションシステム、乗員監視装置、情報端末装置、サーバ、およびナビゲーション用プログラムに関する。 The present invention relates to a navigation system, an occupant monitoring device, an information terminal device, a server, and a navigation program.
特許文献1には、自動車等の車内に取り付けられたカメラによって撮影された画像から、運転者の状態を解析して、居眠りやよそ見、わき見等の危険な状態を察知し、運転者への警告を行う運転者状況判定装置が開示されている。 In Patent Document 1, a driver's state is analyzed from an image taken by a camera mounted in a vehicle such as an automobile, and a dangerous state such as snoozing, looking away, or sidewalk is detected, and a warning is given to the driver. A driver status determination device that performs the above is disclosed.
特許文献1には、運転者が危険な状態であることを察知した場合に、例えば、アラーム音等を発生させ、運転者に警告を与えることが開示されている。しかし、当該運転者状況判定装置は、運転者が撮影された画像から運転者の状態を解析し、危険な状態を察知した場合に、運転者に警告を与えるものに過ぎず、当該危険な状態の内容に応じて走行することを推奨するルートを出力するものではなかった。 Patent Document 1 discloses that, for example, an alarm sound is generated and a warning is given to the driver when the driver detects that the driver is in a dangerous state. However, the driver status determination device only analyzes the driver's state from the image taken by the driver and senses a dangerous state, but only gives a warning to the driver. It was not intended to output a route recommended to travel according to the contents of.
この発明は、上記のような課題を解決するためになされたもので、撮像データに基づき乗員の異変が検出されると、当該異変の内容に応じて走行することを推奨するルートを選択可能に出力するナビゲーションシステム、乗員監視装置、情報端末装置、サーバ、およびナビゲーション用プログラムを得ることを目的とする。 The present invention has been made to solve the above-described problems, and when an occupant's change is detected based on imaging data, a route that recommends traveling according to the content of the change can be selected. An object is to obtain an output navigation system, an occupant monitoring device, an information terminal device, a server, and a navigation program.
この発明に係るナビゲーションシステムは、乗員の顔を撮像する撮像部を制御して、撮像データを生成する撮像制御部と、撮像データに基づいて、乗員の異変情報を検出する検出部と、車両の現在位置から、設定された目的地までのルートを検索し、目的地までのルート案内を行うとともに、検出部で異変情報が検出されると、当該異変情報の内容に応じて走行することを推奨する推奨ルートを検索する制御部と、制御部で検索された推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部とを備える。 A navigation system according to the present invention controls an imaging unit that images an occupant's face to generate imaging data, a detection unit that detects occupant abnormality information based on the imaging data, a vehicle It is recommended to search for the route from the current position to the set destination, provide route guidance to the destination, and if abnormal information is detected by the detection unit, it is recommended to drive according to the content of the abnormal information And a display output control unit that generates and outputs screen information for selecting whether or not to start route guidance for the recommended route searched by the control unit.
この発明によれば、撮像データに基づき乗員の異変が検出されると、当該異変の内容に応じて走行することを推奨するルートを選択可能に出力するナビゲーションシステム、乗員監視装置、情報端末装置、サーバ、およびナビゲーション用プログラムを得ることができる。 According to the present invention, when an occupant change is detected based on the imaging data, a navigation system, an occupant monitoring device, an information terminal device, which outputs a route recommended to travel according to the contents of the change, A server and a navigation program can be obtained.
以下、この発明をより詳細に説明するために、この発明を実施するための形態について、添付の図面に従って説明する。 Hereinafter, in order to explain the present invention in more detail, modes for carrying out the present invention will be described with reference to the accompanying drawings.
実施の形態1.
図1は、本発明の実施の形態1に係るナビゲーションシステム1の構成を示すブロック図の一例である。
Embodiment 1 FIG.
FIG. 1 is an example of a block diagram showing a configuration of a navigation system 1 according to Embodiment 1 of the present invention.
図1に示すように、ナビゲーションシステム1は、乗員監視装置2および情報端末装置3を備える。乗員監視装置2は、車両に搭載される。情報端末装置3は、車両に搭載されるナビゲーション装置、または乗員に所持されて車両に持ち込まれる携帯端末である。携帯端末とは、例えば、ポータブルナビゲーションデバイス、タブレットPC、またはスマートフォンである。乗員監視装置2と情報端末装置3とは、有線または無線で接続される。
As shown in FIG. 1, the navigation system 1 includes an
乗員監視装置2は、撮像部21、撮像制御部22、検出部23、および通信制御部24を備える。
乗員監視装置2は、運転者を撮像し、後述する異変情報を検出する。運転者を撮像する乗員監視装置2は、例えば、メータまたはステアリングの周辺に設置される。また、乗員監視装置2の撮像対象は、運転者に限定されるものではなく、助手席または後部座席の同乗者(以下、同乗者という)を撮像対象としてもよい。その場合、同乗者を撮像することができる位置に乗員監視装置2を適宜設置する。
実施の形態1では、運転者および同乗者を撮像する場合について説明する。以下、乗員という場合、運転者および同乗者のことを指す。
The
The
In the first embodiment, a case where a driver and a passenger are imaged will be described. Hereinafter, the term “occupant” refers to the driver and passengers.
撮像部21は、乗員の顔を撮像する。撮像部21は、例えば、カメラである。また、撮像部21は、赤外線LED(不図示)を備える。撮像部21は、赤外線LEDを点灯することで、夜間でも乗員の顔を撮像することができる。また、詳細は後述するが、撮像部21の赤外線LEDを点灯することで、検出部23において赤外線の反射強度の検出が可能になる。
The
撮像制御部22は、撮像部21を制御して、撮像データを生成する。撮像制御部22は、撮像データを検出部23に出力する。
The
検出部23は、撮像データに基づいて、乗員の異変情報を検出する。異変情報の詳細については後述する。検出部23は、異変情報を検出すると、異変情報を通信制御部24に出力する。
The
通信制御部24は、情報の送信および受信を行う。通信制御部24は、検出部23から取得した異変情報を情報端末装置3に送信する。また、通信制御部24は、ネットワークに接続可能である。
The
実施の形態1において、検出部23が検出する異変情報には、(1)運転者または同乗者がマスクを着用していることを示す異変情報(以下、第1の異変情報という)、(2)運転者または同乗者がサングラスを着用していることを示す異変情報(以下、第2の異変情報という)、(3)運転者または同乗者が眼帯を着用していることを示す異変情報(以下、第3の異変情報という)、(4)運転者または同乗者の目が充血していることを示す異変情報(以下、第4の異変情報という)、(5)基準時間内における運転者の瞬きの回数が閾値(以下、第1の閾値という)より大きいことを示す異変情報(以下、第5の異変情報という)、(6)基準時間内における運転者の心拍数が閾値(以下、第2の閾値という)より大きいことを示す異変情報(以下、第6の異変情報という)、(7)基準時間内における運転者の心拍数が閾値(以下、第3の閾値という)より小さいことを示す異変情報(以下、第7の異変情報という)がある。第5の異変情報、第6の異変情報、および第7の異変情報において、基準時間とは、例えば10秒である。
In the first embodiment, the change information detected by the
撮像制御部22が撮像部21の赤外線LEDを点灯し、運転者の顔に赤外線を照射すると、運転者の顔の血液の流れの変化に伴い、当該赤外線の反射強度は変化する。検出部23は、撮像データに基づいて、当該赤外線の反射強度の変化を検出することで、運転者の心拍数を計測する。これにより、検出部23は、第6の異変情報および第7異変情報を検出することができる。
When the
次に、乗員監視装置2のハードウェア構成例について説明する。
図2A、図2Bは、実施の形態1に係る乗員監視装置2のハードウェア構成例を示す図である。
乗員監視装置2における、撮像制御部22、検出部23および通信制御部24は、図2Aに示すように専用のハードウェアである処理回路100aであってもよいし、図2Bに示すようにメモリ100cに格納されているプログラムを実行するプロセッサ100bであってもよい。
Next, a hardware configuration example of the
2A and 2B are diagrams illustrating a hardware configuration example of the
The
図2Aに示すように、撮像制御部22、検出部23および通信制御部24が専用のハードウェアである場合、処理回路100aは、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ASIC(Application Specific Integrated Circuit)、FPGA(Field-programmable Gate Array)、またはこれらを組み合わせたものが該当する。撮像制御部22、検出部23および通信制御部24の各部の機能それぞれを処理回路で実現してもよいし、各部の機能をまとめて1つの処理回路で実現してもよい。
As shown in FIG. 2A, when the
図2Bに示すように、撮像制御部22、検出部23および通信制御部24がプロセッサ100bである場合、各部の機能は、ソフトウェア、ファームウェア、またはソフトウェアとファームウェアとの組み合わせにより実現される。ソフトウェアまたはファームウェアはプログラムとして記述され、メモリ100cに格納される。プロセッサ100bは、メモリ100cに記憶されたプログラムを読み出して実行することにより、撮像制御部22、検出部23および通信制御部24の各機能を実現する。即ち、撮像制御部22、検出部23および通信制御部24は、プロセッサ100bにより実行されるときに、後述する図6に示すステップST2〜ステップST5が実行されることになるプログラムを格納するためのメモリ100cを備える。また、これらのプログラムは、撮像制御部22、検出部23および通信制御部24の手順または方法をコンピュータに実行させるものであるともいえる。
As illustrated in FIG. 2B, when the
ここで、プロセッサ100bとは、例えば、CPU(Central Processing Unit)、処理装置、演算装置、プロセッサ、マイクロプロセッサ、マイクロコンピュータ、またはDSP(Digital Signal Processor)等のことである。
メモリ100cは、例えば、RAM(Random Access Memory)、ROM(Read Only Memory)、フラッシュメモリ、EPROM(Erasable Programmable ROM)、EEPROM(Electrically EPROM)等の不揮発性または揮発性の半導体メモリであってもよいし、ハードディスク、フレキシブルディスク等の磁気ディスクであってもよいし、ミニディスク、CD(Compact Disc)、DVD(Digital Versatile Disc)等の光ディスクであってもよい。
Here, the
The
なお、撮像制御部22、検出部23および通信制御部24の各機能について、一部を専用のハードウェアで実現し、一部をソフトウェアまたはファームウェアで実現するようにしてもよい。このように、乗員監視装置2における処理回路100aは、ハードウェア、ソフトウェア、ファームウェア、またはこれらの組み合わせによって、上述の各機能を実現することができる。
In addition, about each function of the
情報端末装置3は、制御部31、表示出力制御部32、音声出力制御部33、通信制御部34、入力部35、自車位置取得部36、地図データ取得部37、出力部38、および環境情報取得部39を備える。
The
通信制御部34は、情報の送信および受信を行う。また、通信制御部34は、乗員監視装置2から異変情報を受信すると、当該異変情報を制御部31に出力する。また、通信制御部34は、ネットワークに接続可能である。
The
入力部35は、目的地等の情報の入力を受け付ける。
自車位置取得部36は、GPS(Global Positioning System)衛星(不図示)からGPS信号を受信し、自車の現在位置を取得する。
地図データ取得部37は、地図データ記憶部4から地図データを取得する。なお、地図データ取得部37は、地図データ記憶部4が設けられた車両外部のサーバ(不図示)から当該地図データを取得してもよい。
出力部38は、情報を表示する。出力部38は、例えばディスプレイである。
The
The own vehicle position acquisition unit 36 receives a GPS signal from a GPS (Global Positioning System) satellite (not shown), and acquires the current position of the own vehicle.
The map
The
制御部31は、入力部35を介して目的地が入力され、目的地が設定されると、目的地、自車の現在位置、および地図データに基づいて、車両の現在位置から目的地までのルート(以下、目的地ルートという)を検索する。制御部31は、検索した目的地ルート、自車の現在位置、および地図データを表示出力制御部32に出力するとともに、目的地までのルート案内を開始する。また、制御部31は、目的地までのルート案内情報を音声出力制御部33に出力する。
音声出力制御部33は、目的地までのルート案内情報に基づいて音声情報を生成し、当該音声情報をスピーカ5に出力する。
When the destination is input via the
The voice
表示出力制御部32は、目的地ルートを取得すると、目的地ルート、自車の現在位置、および地図データに基づき、画面情報(以下、目的地案内画面情報という)を生成し、出力部38に出力する。
図3は、目的地案内画面情報の一例を示したものである。図3に示すように、目的地案内画面情報には、目的地ルートが反映される。
When the display
FIG. 3 shows an example of destination guidance screen information. As shown in FIG. 3, the destination route is reflected in the destination guidance screen information.
制御部31は、乗員監視装置2から異変情報を取得すると、異変情報、自車の現在位置、および地図データに基づいて、異変情報の内容に応じて走行することを推奨するルート(以下、推奨ルートという)を検索する。なお、制御部31は、取得した異変情報によっては、環境情報取得部39から後述する環境情報をさらに取得し、環境情報にも基づいて推奨ルートを検索する。
制御部31は、検索した推奨ルートを表示出力制御部32に出力する。
When the
The
環境情報取得部39は、通信制御部34を介して、ネットワークから環境情報を取得する。環境情報には、花粉情報、大気汚染情報等がある。花粉情報とは、現在位置周辺、目的地ルート周辺、または目的地周辺における花粉の飛散量を示す情報である。大気汚染情報とは、現在位置周辺、目的地ルート周辺、または目的地周辺におけるPM2.5、黄砂等の大気汚染物質の飛散量を示す情報である。
The environment
表示出力制御部32は、推奨ルートを取得すると、推奨ルートのルート案内を開始するか否かを選択する画面情報(以下、ルート選択画面情報という)を生成し、出力部38に出力する。実施の形態1では、表示出力制御部32は、推奨ルート、推奨ルートのルート案内を開始するか否かを選択させるためのGUI(Graphical User Interface)ボタン、目的地ルート、自車の現在位置、および地図データに基づき、ルート選択画面情報を生成する。
図4Aは、ルート選択画面情報の一例を示したものである。図4Aに示すように、ルート選択画面情報には、目的地ルートおよび推奨ルートが反映される。また、図4Bに示すように、環境情報取得部39から取得した環境情報をルート選択画面情報に反映してもよい。この場合、制御部31は、環境情報取得部39から取得した環境情報を表示出力制御部32に出力する。
When acquiring the recommended route, the display
FIG. 4A shows an example of route selection screen information. As shown in FIG. 4A, the route selection screen information reflects the destination route and the recommended route. Further, as shown in FIG. 4B, the environment information acquired from the environment
制御部31は、推奨ルートのルート案内を開始する旨の入力がされたか否かを判断する。制御部31は、入力部35を介して、推奨ルートのルート案内を開始する旨の入力がされたか、または、推奨ルートのルート案内を開始しない旨の入力がされたかに基づいて、当該判断を行う。制御部31は、入力部35を介して、推奨ルートのルート案内を開始する旨の入力がされたと判断すると、推奨ルートを目的地ルートとするルート変更指示を表示出力制御部32に出力する。
The
表示出力制御部32は、ルート変更指示を取得すると、推奨ルートを目的地ルートとする目的地案内画面情報を生成し、出力部38に出力する。
Upon obtaining the route change instruction, the display
ここで、制御部31が、第1の異変情報(運転者または同乗者がマスクを着用していることを示す異変情報)を取得した場合に検索する推奨ルートについて説明する。
制御部31は、第1の異変情報を取得すると、環境情報取得部39から環境情報をさらに取得する。制御部31は、第1の推奨ルートとして、花粉または大気汚染物質の飛散量が多いエリア内にある道路を回避して目的地に至るルートを検索する。
ここで、花粉の種類は、季節や草木の種類によって変化する。そこで、制御部31は、環境情報取得部39から環境情報として、季節情報および草木の分布情報をさらに取得し、現在の季節において花粉を発生させる草木が多く分布しているエリアを求め、当該エリア内にある道路を回避するルートを検索してもよい。
Here, the recommended route to be searched when the
When the
Here, the type of pollen varies depending on the season and the type of plant. Therefore, the
次に、制御部31が、第2の異変情報(運転者または同乗者がサングラスを着用していることを示す異変情報)を取得した場合に検索する推奨ルートについて説明する。
制御部31は、第2の異変情報を取得すると、第2の推奨ルートとして、乗員が日光に晒されることになる道路を回避して目的地に至るルートを検索する。乗員が日光に晒されることになる道路とは、例えば、海沿いの道路である。海沿いの道路では、日光を遮る建物や植物等が少ない。また、当該道路では、海面からの反射光にも晒される。
Next, a description will be given of a recommended route to be searched when the
When acquiring the second incident information, the
次に、制御部31が、第3の異変情報(運転者または同乗者が眼帯を着用していることを示す異変情報)、または第4の異変情報(運転者または同乗者の目が充血していることを示す異変情報)を取得した場合に検索する推奨ルートについて説明する。
制御部31は、第3の異変情報または第4の異変情報を取得すると、第3の推奨ルートとして、現在位置周辺、目的地ルート周辺、または目的地周辺にある、眼科に至るルートを検索する。
さらに、第3の異変情報が、運転者が眼帯を着用していることを示している場合、制御部31は、第4の推奨ルートとして、見通しのよい道路を走行して目的地に至るルートを検索する。見通しのよい道路とは、例えば、大通りである。これは、運転者が眼帯を着用していると、片目運転となり遠近感がなくなることを考慮したものである。
Next, the
When acquiring the third event information or the fourth event information, the
Furthermore, when the third anomaly information indicates that the driver is wearing an eyepatch, the
次に、制御部31が、第5の異変情報(基準時間内における運転者の瞬きの回数が第1の閾値より大きいことを示す異変情報)を取得した場合に検索する推奨ルートについて説明する。
制御部31は、第5の異変情報を取得すると、第5の推奨ルートとして、仮眠を取ることができる場所に至るルートを検索する。これは、運転者の目が疲れていると判断し、運転者に休憩を促すものである。仮眠が取ることができる場所とは、例えば、サービスエリア、パーキングエリア、ホテル等である。
Next, the recommended route to be searched when the
When acquiring the fifth anomaly information, the
次に、制御部31が、第6の異変情報(基準時間内における運転者の心拍数が第2の閾値より大きいことを示す異変情報)を取得した場合に検索する推奨ルートについて説明する。
制御部31は、第6の異変情報を取得すると、第6の推奨ルートとして、車両の交通量が少ない道路であり、かつ、道幅の広い道路を走行して目的地に至るルートを検索する。これは、運転者の精神状態が興奮状態にあると判断し、当該興奮状態を鎮静化させることを目的とする。
Next, a description will be given of a recommended route to be searched when the
When acquiring the sixth anomaly information, the
次に、制御部31が、第7の異変情報(基準時間内における運転者の心拍数が第3の閾値より小さいことを示す異変情報)を取得した場合に検索する推奨ルートについて説明する。
制御部31は、第7の異変情報を取得すると、第7の推奨ルートとして、現在位置周辺、目的地ルート周辺、または目的地周辺にある、病院に至るルートを検索する。これは、運転者の健康状態が異常であると判断し、病院に立ち寄ることを促すものである。
Next, a description will be given of a recommended route to be searched when the
When acquiring the seventh incident information, the
次に、情報端末装置3のハードウェア構成例について説明する。
図5A、図5Bは、実施の形態1に係る情報端末装置3のハードウェア構成例を示す図である。
情報端末装置3における、制御部31、表示出力制御部32、音声出力制御部33、通信制御部34、入力部35、自車位置取得部36、地図データ取得部37、出力部38および環境情報取得部39は、図5Aに示すように専用のハードウェアである処理回路100dであってもよいし、図5Bに示すようにメモリ100fに格納されているプログラムを実行するプロセッサ100eであってもよい。
Next, a hardware configuration example of the
5A and 5B are diagrams illustrating a hardware configuration example of the
In the
図5Aに示すように、制御部31、表示出力制御部32、音声出力制御部33、通信制御部34、自車位置取得部36、地図データ取得部37、および環境情報取得部39が専用のハードウェアである場合、処理回路100dは、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ASIC(Application Specific Integrated Circuit)、FPGA(Field-programmable Gate Array)、またはこれらを組み合わせたものが該当する。制御部31、表示出力制御部32、音声出力制御部33、通信制御部34、入力部35、自車位置取得部36、地図データ取得部37、出力部38および環境情報取得部39の各部の機能それぞれを処理回路で実現してもよいし、各部の機能をまとめて1つの処理回路で実現してもよい。
As shown in FIG. 5A, the
図5Bに示すように、制御部31、表示出力制御部32、音声出力制御部33、通信制御部34、自車位置取得部36、地図データ取得部37、および環境情報取得部39がプロセッサ100eである場合、各部の機能は、ソフトウェア、ファームウェア、またはソフトウェアとファームウェアとの組み合わせにより実現される。ソフトウェアまたはファームウェアはプログラムとして記述され、メモリ100fに格納される。プロセッサ100eは、メモリ100fに記憶されたプログラムを読み出して実行することにより、制御部31、表示出力制御部32、音声出力制御部33、通信制御部34、自車位置取得部36、地図データ取得部37、および環境情報取得部39の各機能を実現する。即ち、制御部31、表示出力制御部32、音声出力制御部33、通信制御部34、自車位置取得部36、地図データ取得部37、および環境情報取得部39は、プロセッサ100eにより実行されるときに、後述する図6に示すステップST6〜ステップST12が実行されることになるプログラムを格納するためのメモリ100fを備える。また、これらのプログラムは、制御部31、表示出力制御部32、音声出力制御部33、通信制御部34、自車位置取得部36、地図データ取得部37、および環境情報取得部39の手順または方法をコンピュータに実行させるものであるともいえる。
As shown in FIG. 5B, a
ここで、プロセッサ100eとは、例えば、CPU(Central Processing Unit)、処理装置、演算装置、プロセッサ、マイクロプロセッサ、マイクロコンピュータ、またはDSP(Digital Signal Processor)等のことである。
メモリ100fは、例えば、RAM(Random Access Memory)、ROM(Read Only Memory)、フラッシュメモリ、EPROM(Erasable Programmable ROM)、EEPROM(Electrically EPROM)等の不揮発性または揮発性の半導体メモリであってもよいし、ハードディスク、フレキシブルディスク等の磁気ディスクであってもよいし、ミニディスク、CD(Compact Disc)、DVD(Digital Versatile Disc)等の光ディスクであってもよい。
Here, the
The
なお、制御部31、表示出力制御部32、音声出力制御部33、通信制御部34、自車位置取得部36、地図データ取得部37、および環境情報取得部39の各機能について、一部を専用のハードウェアで実現し、一部をソフトウェアまたはファームウェアで実現するようにしてもよい。このように、情報端末装置3における処理回路100dは、ハードウェア、ソフトウェア、ファームウェア、またはこれらの組み合わせによって、上述の各機能を実現することができる。
A part of each function of the
次に、ナビゲーションシステム1の動作について、図6のフローチャートを用いて説明する。
制御部31は、目的地が設定されると、目的地までのルート案内を行う(ステップST1)。
次に、撮像制御部22は、乗員の顔を撮像する撮像部21を制御して、撮像データを生成し、撮像データを検出部23に出力する(ステップST2)。
次に、検出部23は、撮像データに基づいて、異変情報が検出されたか否かを判定する(ステップST3)。ステップST3において、異変情報が検出された場合(ステップST3;YES)、検出部23は、異変情報を通信制御部24に出力する(ステップST4)。
次に、通信制御部24は、異変情報を情報端末装置3に送信する(ステップST5)。
一方、ステップST2において、異変情報が検出されなかった場合(ステップST3;NO)、ステップST1に戻り、目的地までのルート案内を行う。
Next, the operation of the navigation system 1 will be described using the flowchart of FIG.
When the destination is set, the
Next, the
Next, the
Next, the
On the other hand, if no change information is detected in step ST2 (step ST3; NO), the process returns to step ST1 to provide route guidance to the destination.
制御部31は、異変情報を取得すると、推奨ルートを検索する(ステップST6)。
次に、制御部31は、当該異変情報に対する推奨ルートを、現在、目的地ルートとしているか否かを判断する(ステップST7)。
ステップST7において、当該異変情報に対する推奨ルートを、現在、目的地ルートとしている場合(ステップST7;YES)、ステップST1に戻り、目的地までのルート案内を行う。
一方、ステップST7において、当該異変情報に対する推奨ルートを、現在、目的地ルートとしていない場合(ステップST7;NO)、制御部31は、推奨ルートを表示出力制御部32に出力する(ステップST8)。
次に、表示出力制御部32は、推奨ルートを取得すると、ルート選択画面情報を生成し、出力部38に出力する(ステップST9)。
When acquiring the abnormal information, the
Next, the
In step ST7, when the recommended route for the anomaly information is currently the destination route (step ST7; YES), the process returns to step ST1 to provide route guidance to the destination.
On the other hand, when the recommended route for the anomaly information is not currently set as the destination route in step ST7 (step ST7; NO), the
Next, when acquiring the recommended route, the display
次に、制御部31は、推奨ルートのルート案内を開始する旨の入力がされたか否かを判断する(ステップST10)。例えば、出力部38がタッチパネル式のディスプレイであって、入力部35を兼ねる場合、制御部31は、図4Aに示したGUIボタンの「はい」または「いいえ」のうち、どちらが操作されたかに基づき、当該判断を行う。また、入力部35が、車両に搭載された他のデバイスである場合、制御部31は、当該デバイスにより「はい」または「いいえ」のうち、どちらが選択されたかに基づき、当該判断を行う。
Next, the
ステップST10において、推奨ルートのルート案内を開始する旨の入力がされたと判断した場合(ステップST10;YES)、制御部31は、推奨ルートを目的地ルートとするルート変更指示を表示出力制御部32に出力する(ステップST11)。
一方、ステップST10において、推奨ルートのルート案内を開始しない旨の入力がされたと判断した場合(ステップST10;NO)、ステップST1に戻り、目的地までのルート案内を行う。
If it is determined in step ST10 that an input to start route guidance for the recommended route has been made (step ST10; YES), the
On the other hand, if it is determined in step ST10 that an input indicating that the route guidance for the recommended route is not started is made (step ST10; NO), the process returns to step ST1 to perform route guidance to the destination.
ステップST10において、表示出力制御部32は、ルート変更指示を取得すると、推奨ルートを目的地ルートとする新たな目的地案内画面情報を生成し、出力部38に出力する(ステップST12)。そして、再びステップST1に戻る。
In step ST10, when acquiring the route change instruction, the display
上記では、ステップST8において、制御部31が、1つの異変情報に対し、1つの推奨ルートを検索し、当該推奨ルートを出力する場合について説明した。ここで、同ステップにおいて、制御部31が、1つの異変情報に対し、複数の推奨ルートを検索し、当該複数の推奨ルートを出力する場合について説明する。
この場合、ステップST8において、制御部31は、当該複数の推奨ルートを、表示出力制御部32に出力する。次に、ステップST9において、表示出力制御部32は、当該複数の推奨ルートのうち、例えば、現在位置から目的地に至るまでの走行距離が短い推奨ルートから順に、ルート選択画面情報を生成し、出力部38に出力する。そして、ステップST10において、制御部31は、当該推奨ルートのルート案内を開始するか否かを判断する。
In the above, a case has been described where, in step ST8, the
In this case, in step ST8, the
また、ステップST8において、制御部31が、複数の異変情報を同時に取得し、各異変情報に対する推奨ルートを検索して、当該推奨ルートを出力する場合について説明する。
この場合、ステップST8において、制御部31は、各異変情報に対する推奨ルートを検索して、複数の推奨ルートを表示出力制御部32に出力する。このとき、制御部31は、各推奨ルートがどの異変情報に対する推奨ルートであるかという情報を、表示出力制御部32に出力する。次に、ステップST9において、表示出力制御部32は、例えば、異変情報ごとに順番に、当該異変情報に対応する推奨ルートのルート選択画面情報を生成し、出力部38に出力する。そして、ステップST10において、制御部31は、当該推奨ルートのルート案内を開始するか否かを判断する。なお、各異変情報にあらかじめ優先度を定めておき、表示出力制御部32が、当該優先度の高いものから順番に、ルート選択画面情報を生成し、出力するようにしてもよい。
Further, a case will be described in which, in step ST8, the
In this case, in step ST8, the
以上のように、実施の形態1に係るナビゲーションシステム1は、乗員の顔を撮像する撮像部21を制御して、撮像データを生成する撮像制御部22と、撮像データに基づいて、乗員の異変情報を検出する検出部23と、車両の現在位置から、設定された目的地までのルートを検索し、目的地までのルート案内を行うとともに、検出部23で異変情報が検出されると、当該異変情報の内容に応じて走行することを推奨する推奨ルートを検索する制御部31と、制御部31で検索された推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部32とを備える。このため、撮像データに基づき乗員の異変が検出されると、当該異変の内容に応じて走行することを推奨するルートが選択可能に出力される。これにより、乗員は、当該推奨ルートを走行するか否か選択することができる。
As described above, the navigation system 1 according to the first embodiment controls the
実施の形態2.
実施の形態2に係るナビゲーションシステム1のブロック図は、実施の形態1における図1と同様であるため、図示および説明を省略する。
実施の形態1に係るナビゲーションシステム1は、目的地までのルート案内が行われている間に、検出部23が異変情報を検出すると、制御部31が推奨ルートを検索するものであった。
実施の形態2に係るナビゲーションシステム1は、実施の形態1に係るナビゲーションシステム1の機能に加え、目的地までのルート案内が行われていない間であっても、検出部23が、第1の異変情報から第7の異変情報のうち、特定の異変情報を検出した場合には、制御部31が推奨ルートを検索するものである。
Since the block diagram of the navigation system 1 according to the second embodiment is the same as that in FIG. 1 in the first embodiment, illustration and description thereof are omitted.
In the navigation system 1 according to the first embodiment, when the
In the navigation system 1 according to the second embodiment, in addition to the function of the navigation system 1 according to the first embodiment, even when the route guidance to the destination is not performed, the
以下に、検出部23が検出する特定の異変情報と、当該異変情報を取得した場合に、制御部31が検索する推奨ルートについて説明する。
検出部23が、第3の異変情報(運転者または同乗者が眼帯を着用していることを示す異変情報)、または第4の異変情報(運転者または同乗者の目が充血していることを示す異変情報)を取得すると、制御部31は、第8の推奨ルートとして、現在位置周辺にある、眼科に至るルートを検索する。
検出部23が、第5の異変情報(基準時間内における運転者の瞬きの回数が第1の閾値より大きいことを示す異変情報)を取得すると、制御部31は、第9の推奨ルートとして、仮眠を取ることができる場所に至るルートを検索する。
検出部23が、第7の異変情報(基準時間内における運転者の心拍数が第3の閾値より小さいことを示す異変情報)を取得すると、制御部31は、第10の推奨ルートとして、現在位置周辺にある、病院に至るルートを検索する。
Below, the specific change information which the
The
When the
When the
次に、ナビゲーションシステム1の動作について、図7のフローチャートを用いて説明する。以下の動作は、目的地までのルート案内が行われていない間に実行される。
撮像制御部22は、乗員の顔を撮像する撮像部21を制御して、撮像データを生成し、撮像データを検出部23に出力する(ステップST21)。
次に、検出部23は、撮像データに基づいて、異変情報が検出されたか否かを判定する(ステップST22)。ステップST22において、異変情報が検出された場合(ステップST22;YES)、検出部23は、異変情報を通信制御部24に出力する(ステップST23)。
次に、通信制御部24は、異変情報を情報端末装置3に送信する(ステップST24)。
一方、ステップST22において、異変情報が検出されなかった場合(ステップST22;NO)、ステップST21に戻る。
Next, the operation of the navigation system 1 will be described using the flowchart of FIG. The following operations are executed while route guidance to the destination is not performed.
The
Next, the
Next, the
On the other hand, when the abnormal information is not detected in step ST22 (step ST22; NO), the process returns to step ST21.
次に、制御部31は、異変情報を取得すると、推奨ルートを検索する(ステップST25)。そして、制御部31は、検索した推奨ルートを表示出力制御部32に出力する(ステップST26)。
次に、表示出力制御部32は、推奨ルートを取得すると、ルート選択画面情報を生成し、出力部38に出力する(ステップST27)。実施の形態2では、表示出力制御部32は、推奨ルート、推奨ルートのルート案内を開始するか否かを選択させるためのGUI(Graphical User Interface)ボタン、自車の現在位置、および地図データに基づき、ルート選択画面情報を生成する。
Next, when acquiring the abnormality information, the
Next, when acquiring the recommended route, the display
次に、制御部31は、推奨ルートのルート案内を開始する旨の入力がされたか否かを判断する(ステップST28)。
ステップST28において、推奨ルートのルート案内を開始する旨の入力がされたと判断した場合(ステップST28;YES)、制御部31は、推奨ルートを目的地ルートとする指示を表示出力制御部32に出力する(ステップST29)。
一方、ステップST28において、推奨ルートのルート案内を開始しない旨の入力がされたと判断した場合(ステップST28;NO)、ステップST21に戻る。
Next, the
When it is determined in step ST28 that an input to start route guidance for the recommended route has been made (step ST28; YES), the
On the other hand, if it is determined in step ST28 that an input indicating that the route guidance for the recommended route is not started is made (step ST28; NO), the process returns to step ST21.
ステップST29において、表示出力制御部32は、推奨ルートを目的地ルートとする指示を取得すると、推奨ルートを目的地ルートとする目的地案内画面情報を生成し、出力部38に出力する(ステップST30)。
ステップST30の後、図6に示したステップST1に移行し、制御部31は、目的地までのルート案内を開始する。以降は、図6のフローチャートに示された動作が、適宜実行されることになる。
In step ST29, when the display
After step ST30, the process proceeds to step ST1 shown in FIG. 6, and the
上記では、ステップST30の後、図6に示したステップST1に移行する場合について説明したが、これに限定されるものではない。例えば、ステップST30において、表示出力制御部32が、第10の推奨ルート(現在位置周辺にある、病院に至るルート)を目的地ルートとする目的地案内画面情報を生成し、出力部38に出力した場合には、目的地に到達するまでの間、別の異変情報が検出されても推奨ルートを検索しないようにしてもよい。これは、病院に到達することを優先させるためである。
In the above description, the case where the process proceeds to step ST1 shown in FIG. 6 after step ST30 has been described. However, the present invention is not limited to this. For example, in step ST30, the display
以上のように、実施の形態2に係るナビゲーションシステム1によれば、目的地までのルート案内が行われていない間であっても、乗員について特定の異変が検出された場合には、推奨ルートが検索されるとともに、当該推奨ルートが選択可能に出力される。これにより、乗員は、当該推奨ルートを走行するか否か選択することができる。 As described above, according to the navigation system 1 according to the second embodiment, even when the route guidance to the destination is not performed, the recommended route is detected when a specific abnormality is detected for the occupant. Is searched and the recommended route is output in a selectable manner. Thereby, the occupant can select whether or not to travel the recommended route.
上述の説明は、実施の形態1に係るナビゲーションシステム1、および実施の形態2に係るナビゲーションシステム1の構成の一例であり、乗員監視装置2の各部の機能を、情報端末装置3が担うように構成してもよい。
例えば、検出部23の機能を、情報端末装置3が有するように構成してもよい。この場合、情報端末装置3が、図6のステップST1、ステップST3〜ステップST12の処理、図7のステップST22〜ステップST30の処理を行うことになる。
The above description is an example of the configuration of the navigation system 1 according to the first embodiment and the navigation system 1 according to the second embodiment, and the
For example, the
また、情報端末装置3の各部の機能を、乗員監視装置2が担うように構成してもよい。例えば、制御部31の機能、表示出力制御部32の機能、自車位置取得部36の機能、地図データ取得部37の機能、および環境情報取得部39の機能を、乗員監視装置2が有するように構成してもよい。当該構成では、乗員監視装置2は、情報端末装置3の入力部35を介して入力された情報を、情報端末装置3から取得する。この場合、乗員監視装置2が、図6のステップST1〜ステップST12の処理、図7のステップST21〜ステップST30の処理を行うことになる。
Moreover, you may comprise so that the passenger |
また、図8は、実施の形態1に係るナビゲーションシステム1、および実施の形態2に係るナビゲーションシステム1の別の構成の概要を示す図である。
本構成は、乗員監視装置2の各部の機能と、情報端末装置3の各部の機能とを、外部のサーバ6が担うように構成したものである。サーバ6は、ネットワークを介して、乗員監視装置2および情報端末装置3と通信する。
サーバ6は、例えば、検出部23の機能、制御部31の機能、表示出力制御部32の機能、地図データ取得部37の機能、および環境情報取得部39の機能を有する。また、サーバ6は、情報端末装置3の入力部35を介して入力された情報、および、情報端末装置3の自車位置取得部36が取得した自車の現在位置を、情報端末装置3から取得する。この場合、サーバ6が、図6のステップST1、ステップST3〜ステップST12の処理、および図7のステップST22〜ステップST30の処理を行うことになる。
FIG. 8 is a diagram showing an outline of another configuration of the navigation system 1 according to the first embodiment and the navigation system 1 according to the second embodiment.
This configuration is configured such that the
The
なお、本発明はその発明の範囲内において、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは実施の形態において任意の構成要素の省略が可能である。 In the present invention, within the scope of the invention, free combinations of the respective embodiments, modifications of arbitrary components of the respective embodiments, or omission of arbitrary components in the embodiments are possible.
1 ナビゲーションシステム、2 乗員監視装置、3 情報端末装置、4 地図データ記憶部、5 スピーカ、6 サーバ、21 撮像部、22 撮像制御部、23 検出部、24 通信制御部、31 制御部、32 表示出力制御部、33 音声出力制御部、34 通信制御部、35 入力部、36 自車位置取得部、37 地図データ取得部、38 出力部、39 環境情報取得部。 1 navigation system, 2 occupant monitoring device, 3 information terminal device, 4 map data storage unit, 5 speaker, 6 server, 21 imaging unit, 22 imaging control unit, 23 detection unit, 24 communication control unit, 31 control unit, 32 display Output control unit, 33 voice output control unit, 34 communication control unit, 35 input unit, 36 own vehicle position acquisition unit, 37 map data acquisition unit, 38 output unit, 39 environment information acquisition unit.
Claims (17)
前記撮像データに基づいて、乗員の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記異変情報が検出されると、当該異変情報の内容に応じて走行することを推奨する推奨ルートを検索する制御部と、
前記制御部で検索された前記推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部と
を備えることを特徴とするナビゲーションシステム。 An imaging control unit that controls the imaging unit that captures the face of the occupant and generates imaging data;
Based on the imaging data, a detection unit that detects occupant anomaly information;
The route from the current position of the vehicle to the set destination is searched, route guidance to the destination is performed, and when the abnormal information is detected by the detection unit, the information is changed according to the content of the abnormal information. A control unit that searches for a recommended route recommended to travel;
A display output control unit that generates and outputs screen information for selecting whether or not to start route guidance for the recommended route searched by the control unit.
前記検出部は、運転者または同乗者がマスクを着用していることを示す第1の異変情報を検出し、
前記制御部は、前記検出部で前記第1の異変情報が検出されると、前記環境情報に基づき、前記推奨ルートとして、花粉または大気汚染物質の飛散量が多いエリア内にある道路を回避して前記目的地に至る第1の推奨ルートを検索し、
前記表示出力制御部は、前記目的地までのルートおよび前記第1の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項1または請求項2記載のナビゲーションシステム。 An environment information acquisition unit that acquires environment information from the network is further provided.
The detection unit detects first anomaly information indicating that a driver or a passenger is wearing a mask,
When the first abnormality information is detected by the detection unit, the control unit avoids a road in an area where a large amount of pollen or air pollutants is scattered as the recommended route based on the environment information. Search for the first recommended route to the destination,
The navigation system according to claim 1 or 2, wherein the display output control unit generates and outputs the screen information reflecting the route to the destination and the first recommended route.
前記制御部は、前記検出部で前記第2の異変情報が検出されると、前記推奨ルートとして、乗員が日光に晒されることになる道路を回避して前記目的地に至る第2の推奨ルートを検索し、
前記表示出力制御部は、前記目的地までのルートおよび前記第2の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項1または請求項2記載のナビゲーションシステム。 The detection unit detects second anomaly information indicating that a driver or a passenger is wearing sunglasses,
When the detection unit detects the second anomaly information, the control unit avoids a road on which an occupant is exposed to sunlight and avoids a road that leads to the destination as the recommended route. Search for
The navigation system according to claim 1, wherein the display output control unit generates and outputs the screen information reflecting the route to the destination and the second recommended route.
前記制御部は、前記検出部で前記第3の異変情報または前記第4の異変情報が検出されると、前記推奨ルートとして、現在位置周辺、目的地ルート周辺、または目的地周辺にある、眼科に至る第3の推奨ルートを検索し、
前記表示出力制御部は、前記目的地までのルートおよび前記第3の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項1または請求項2記載のナビゲーションシステム。 The detection unit detects third anomaly information indicating that the driver or passenger is wearing an eye patch, or fourth anomaly information indicating that the driver's or passenger's eyes are congested. And
When the detection unit detects the third anomaly information or the fourth anomaly information, the control unit has an ophthalmology located around the current position, the destination route, or the destination as the recommended route. Search for the 3rd recommended route to
The navigation system according to claim 1 or 2, wherein the display output control unit generates and outputs the screen information reflecting the route to the destination and the third recommended route.
前記表示出力制御部は、前記目的地までのルートおよび前記第4の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項5記載のナビゲーションシステム。 When the third anomaly information is information indicating that the driver is wearing an eye patch, the control unit travels on a high-visibility road and reaches the destination as the recommended route. Search for recommended routes for
The navigation system according to claim 5, wherein the display output control unit generates and outputs the screen information reflecting the route to the destination and the fourth recommended route.
前記制御部は、前記検出部で前記第5の異変情報が検出されると、前記推奨ルートとして、仮眠を取ることができる場所に至る第5の推奨ルートを検索し、
前記表示出力制御部は、前記目的地までのルートおよび前記第5の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項1または請求項2記載のナビゲーションシステム。 The detection unit detects fifth anomaly information indicating that the number of blinks of the driver within a reference time is greater than a first threshold,
When the detection unit detects the fifth anomaly information, the control unit searches for a fifth recommended route to a place where a nap can be taken as the recommended route,
The navigation system according to claim 1 or 2, wherein the display output control unit generates and outputs the screen information reflecting the route to the destination and the fifth recommended route.
前記制御部は、前記検出部で前記第6の異変情報が検出されると、前記推奨ルートとして、車両の交通量が少ない道路であり、かつ、道幅の広い道路を走行して前記目的地に至る第6の推奨ルートを検索し、
前記表示出力制御部は、前記目的地までのルートおよび前記第6の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項2記載のナビゲーションシステム。 The detector detects sixth anomaly information indicating that the heart rate of the driver within a reference time is greater than a second threshold;
When the detection unit detects the sixth anomaly information, the control unit travels on a road with a small amount of vehicle traffic and a wide road to the destination as the recommended route. Search for the 6th recommended route to
The navigation system according to claim 2, wherein the display output control unit generates and outputs the screen information reflecting the route to the destination and the sixth recommended route.
前記制御部は、前記検出部で前記第7の異変情報が検出されると、前記推奨ルートとして、現在位置周辺、目的地ルート周辺、または目的地周辺にある、病院に至る第7の推奨ルートを検索し、
前記表示出力制御部は、前記目的地までのルートおよび前記第7の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項2記載のナビゲーションシステム。 The detection unit detects seventh anomaly information indicating that the heart rate of the driver within a reference time is smaller than a third threshold;
When the detection unit detects the seventh anomaly information, the control unit detects, as the recommended route, a seventh recommended route leading to a hospital around the current position, around the destination route, or around the destination. Search for
The navigation system according to claim 2, wherein the display output control unit generates and outputs the screen information reflecting the route to the destination and the seventh recommended route.
前記制御部は、前記目的地までのルート案内を行っていない間に、前記検出部で前記第3の異変情報または前記第4の異変情報が検出されると、前記推奨ルートとして、現在位置周辺にある、眼科に至る第8の推奨ルートを検索し、
前記表示出力制御部は、前記第8の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項1または請求項2記載のナビゲーションシステム。 The detection unit detects third anomaly information indicating that the driver or passenger is wearing an eye patch, or fourth anomaly information indicating that the driver's or passenger's eyes are congested. And
When the control unit detects the third anomaly information or the fourth anomaly information while the route guidance to the destination is not being performed, the control unit detects the recommended route and the vicinity of the current position. Search for the 8th recommended route to Ophthalmology in
The navigation system according to claim 1 or 2, wherein the display output control unit generates and outputs the screen information in which the eighth recommended route is reflected.
前記制御部は、前記目的地までのルート案内を行っていない間に、前記検出部で前記第5の異変情報が検出されると、前記推奨ルートとして、仮眠を取ることができる場所に至る第9の推奨ルートを検索し、
前記表示出力制御部は、前記第9の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項1または請求項2記載のナビゲーションシステム。 The detection unit detects fifth anomaly information indicating that the number of blinks of the driver within a reference time is greater than a first threshold,
When the control unit detects the fifth anomaly information while the route guidance to the destination is not being performed, the control unit reaches the place where a nap can be taken as the recommended route. Search for 9 recommended routes,
The navigation system according to claim 1, wherein the display output control unit generates and outputs the screen information in which the ninth recommended route is reflected.
前記制御部は、前記目的地までのルート案内を行っていない間に、前記検出部で前記第7の異変情報が検出されると、前記推奨ルートとして、現在位置周辺にある、病院に至る第10の推奨ルートを検索し、
前記表示出力制御部は、前記第10の推奨ルートが反映された前記画面情報を生成し、出力する
ことを特徴とする請求項2記載のナビゲーションシステム。 The detection unit detects seventh anomaly information indicating that the heart rate of the driver within a reference time is smaller than a third threshold;
If the seventh anomaly information is detected by the detection unit while the route guidance to the destination is not performed, the control unit detects the recommended route as the first route to the hospital around the current position. Search 10 recommended routes,
The navigation system according to claim 2, wherein the display output control unit generates and outputs the screen information in which the tenth recommended route is reflected.
前記制御部および前記表示出力制御部は、車両に搭載され、または当該車両に持ち込まれる情報端末装置に設けられることを特徴とする請求項1記載のナビゲーションシステム。 The imaging unit, the imaging control unit, and the detection unit are provided in an occupant monitoring device mounted on a vehicle,
The navigation system according to claim 1, wherein the control unit and the display output control unit are provided in an information terminal device that is mounted on a vehicle or brought into the vehicle.
乗員の顔を撮像して生成された撮像データに基づいて、乗員の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記異変情報が検出されると、当該異変情報の内容に応じて走行することを推奨する推奨ルートを検索する制御部と、
前記制御部で検索された前記推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部と
を備えることを特徴とする情報端末装置。 An information terminal device mounted on a vehicle or brought into the vehicle,
A detection unit for detecting anomaly information of an occupant based on imaging data generated by imaging an occupant's face;
The route from the current position of the vehicle to the set destination is searched, route guidance to the destination is performed, and when the abnormal information is detected by the detection unit, the information is changed according to the content of the abnormal information. A control unit that searches for a recommended route recommended to travel;
An information terminal device comprising: a display output control unit that generates and outputs screen information for selecting whether or not to start route guidance for the recommended route searched by the control unit.
乗員の顔を撮像する撮像部を制御して、撮像データを生成する撮像制御部と、
前記撮像データに基づいて、乗員の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記異変情報が検出されると、当該異変情報の内容に応じて走行することを推奨する推奨ルートを検索する制御部と、
前記制御部で検索された前記推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部と
を備えることを特徴とする乗員監視装置。 An occupant monitoring device mounted on a vehicle,
An imaging control unit that controls the imaging unit that captures the face of the occupant and generates imaging data;
Based on the imaging data, a detection unit that detects occupant anomaly information;
The route from the current position of the vehicle to the set destination is searched, route guidance to the destination is performed, and when the abnormal information is detected by the detection unit, the information is changed according to the content of the abnormal information. A control unit that searches for a recommended route recommended to travel;
An occupant monitoring apparatus comprising: a display output control unit that generates and outputs screen information for selecting whether to start route guidance for the recommended route searched by the control unit.
前記撮像データに基づいて、乗員の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記異変情報が検出されると、当該異変情報の内容に応じて走行することを推奨する推奨ルートを検索する制御部と、
前記制御部で検索された前記推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部と
を備えることを特徴とするサーバ。 A server that receives imaging data generated by imaging an occupant's face from an occupant monitoring device mounted on the vehicle, and transmits screen information to an information terminal device mounted on the vehicle or brought into the vehicle. And
Based on the imaging data, a detection unit that detects occupant anomaly information;
The route from the current position of the vehicle to the set destination is searched, route guidance to the destination is performed, and when the abnormal information is detected by the detection unit, the information is changed according to the content of the abnormal information. A control unit that searches for a recommended route recommended to travel;
A display output control unit that generates and outputs screen information for selecting whether to start route guidance for the recommended route searched by the control unit.
乗員の顔を撮像して生成された撮像データに基づいて、乗員の異変情報を検出する検出部と、
車両の現在位置から、設定された目的地までのルートを検索し、前記目的地までのルート案内を行うとともに、前記検出部で前記異変情報が検出されると、当該異変情報の内容に応じて走行することを推奨する推奨ルートを検索する制御部と、
前記制御部で検索された前記推奨ルートのルート案内を開始するか否かを選択する画面情報を生成し、出力する表示出力制御部として機能させるためのナビゲーション用プログラム。 A computer installed in or brought into the vehicle
A detection unit for detecting anomaly information of an occupant based on imaging data generated by imaging an occupant's face;
The route from the current position of the vehicle to the set destination is searched, route guidance to the destination is performed, and when the abnormal information is detected by the detection unit, the information is changed according to the content of the abnormal information. A control unit that searches for a recommended route recommended to travel;
A navigation program for functioning as a display output control unit that generates and outputs screen information for selecting whether or not to start route guidance for the recommended route searched by the control unit.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016198006A JP6712825B2 (en) | 2016-10-06 | 2016-10-06 | Navigation system, occupant monitoring device, information terminal device, server, and navigation program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016198006A JP6712825B2 (en) | 2016-10-06 | 2016-10-06 | Navigation system, occupant monitoring device, information terminal device, server, and navigation program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018059834A true JP2018059834A (en) | 2018-04-12 |
JP6712825B2 JP6712825B2 (en) | 2020-06-24 |
Family
ID=61909910
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016198006A Active JP6712825B2 (en) | 2016-10-06 | 2016-10-06 | Navigation system, occupant monitoring device, information terminal device, server, and navigation program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6712825B2 (en) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020101696A (en) * | 2018-12-21 | 2020-07-02 | トヨタ自動車株式会社 | Map generation device, map generation system, map generation method, and map generation program |
CN111464971A (en) * | 2019-01-22 | 2020-07-28 | 本田技研工业株式会社 | Guidance system, guidance method, and storage medium |
JP2021009629A (en) * | 2019-07-02 | 2021-01-28 | ヤフー株式会社 | Estimation device, estimation method, and estimation program |
JP2021032829A (en) * | 2019-08-29 | 2021-03-01 | ダイハツ工業株式会社 | Vehicle guidance system |
CN115417265A (en) * | 2022-09-27 | 2022-12-02 | 重庆迈高电梯有限公司 | Elevator authentication system based on elevator taking safety management |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08159800A (en) * | 1994-12-02 | 1996-06-21 | Nippondenso Co Ltd | Route guiding apparatus for vehicle |
WO2001062534A2 (en) * | 2000-02-22 | 2001-08-30 | Park Won Hee | Driver condition monitoring apparatus |
JP2004184285A (en) * | 2002-12-04 | 2004-07-02 | Denso Corp | Cooperative control system for vehicle |
JP2004246708A (en) * | 2003-02-14 | 2004-09-02 | Mazda Motor Corp | Health care system, health care method and health care program for automobile |
JP2005108033A (en) * | 2003-09-30 | 2005-04-21 | Toshiba Corp | Driver condition determination device and method |
JP2007205765A (en) * | 2006-01-31 | 2007-08-16 | Equos Research Co Ltd | Route searching apparatus |
JP2008204224A (en) * | 2007-02-21 | 2008-09-04 | Clarion Co Ltd | Awakening support device, awakening support method and control program |
JP2008292369A (en) * | 2007-05-25 | 2008-12-04 | Victor Co Of Japan Ltd | Navigation device |
JP2009166783A (en) * | 2008-01-18 | 2009-07-30 | Toyota Motor Corp | Symptom inference device |
JP2010208540A (en) * | 2009-03-11 | 2010-09-24 | Omron Corp | Control device, method, and program |
JP2014075059A (en) * | 2012-10-04 | 2014-04-24 | Denso Corp | Driving support device, and driving support method |
JP2016063339A (en) * | 2014-09-17 | 2016-04-25 | 日産自動車株式会社 | Communication controller and communication control method |
JP2016133981A (en) * | 2015-01-19 | 2016-07-25 | アイシン精機株式会社 | Driving support device |
-
2016
- 2016-10-06 JP JP2016198006A patent/JP6712825B2/en active Active
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08159800A (en) * | 1994-12-02 | 1996-06-21 | Nippondenso Co Ltd | Route guiding apparatus for vehicle |
WO2001062534A2 (en) * | 2000-02-22 | 2001-08-30 | Park Won Hee | Driver condition monitoring apparatus |
JP2001238858A (en) * | 2000-02-22 | 2001-09-04 | Genki Boku | Device for monitoring drivers |
JP2004184285A (en) * | 2002-12-04 | 2004-07-02 | Denso Corp | Cooperative control system for vehicle |
JP2004246708A (en) * | 2003-02-14 | 2004-09-02 | Mazda Motor Corp | Health care system, health care method and health care program for automobile |
JP2005108033A (en) * | 2003-09-30 | 2005-04-21 | Toshiba Corp | Driver condition determination device and method |
JP2007205765A (en) * | 2006-01-31 | 2007-08-16 | Equos Research Co Ltd | Route searching apparatus |
JP2008204224A (en) * | 2007-02-21 | 2008-09-04 | Clarion Co Ltd | Awakening support device, awakening support method and control program |
JP2008292369A (en) * | 2007-05-25 | 2008-12-04 | Victor Co Of Japan Ltd | Navigation device |
JP2009166783A (en) * | 2008-01-18 | 2009-07-30 | Toyota Motor Corp | Symptom inference device |
JP2010208540A (en) * | 2009-03-11 | 2010-09-24 | Omron Corp | Control device, method, and program |
JP2014075059A (en) * | 2012-10-04 | 2014-04-24 | Denso Corp | Driving support device, and driving support method |
JP2016063339A (en) * | 2014-09-17 | 2016-04-25 | 日産自動車株式会社 | Communication controller and communication control method |
JP2016133981A (en) * | 2015-01-19 | 2016-07-25 | アイシン精機株式会社 | Driving support device |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020101696A (en) * | 2018-12-21 | 2020-07-02 | トヨタ自動車株式会社 | Map generation device, map generation system, map generation method, and map generation program |
CN111464971A (en) * | 2019-01-22 | 2020-07-28 | 本田技研工业株式会社 | Guidance system, guidance method, and storage medium |
CN111464971B (en) * | 2019-01-22 | 2023-11-14 | 本田技研工业株式会社 | Guidance system, guidance method, and storage medium |
JP2021009629A (en) * | 2019-07-02 | 2021-01-28 | ヤフー株式会社 | Estimation device, estimation method, and estimation program |
JP7347974B2 (en) | 2019-07-02 | 2023-09-20 | ヤフー株式会社 | Estimation device, estimation method, and estimation program |
JP2021032829A (en) * | 2019-08-29 | 2021-03-01 | ダイハツ工業株式会社 | Vehicle guidance system |
JP7349293B2 (en) | 2019-08-29 | 2023-09-22 | ダイハツ工業株式会社 | Vehicle guidance system |
CN115417265A (en) * | 2022-09-27 | 2022-12-02 | 重庆迈高电梯有限公司 | Elevator authentication system based on elevator taking safety management |
CN115417265B (en) * | 2022-09-27 | 2023-12-15 | 重庆迈高电梯有限公司 | Elevator authentication system based on elevator taking safety management |
Also Published As
Publication number | Publication date |
---|---|
JP6712825B2 (en) | 2020-06-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6712825B2 (en) | Navigation system, occupant monitoring device, information terminal device, server, and navigation program | |
CN109219551B (en) | Road condition head-up display | |
CN105136156B (en) | Adaptive navigation based on user behavior pattern and location based service | |
EP3232289B1 (en) | Information presentation control method and autonomous vehicle, and autonomous-vehicle driving support system | |
US10591922B2 (en) | Autonomous vehicle operation in view-obstructed environments | |
JP6486640B2 (en) | Driving characteristic diagnostic device, driving characteristic diagnostic system, driving characteristic diagnostic method, information output device, information output method | |
EP2668553B1 (en) | Information processing device, alarm method, and program | |
EP3252432A1 (en) | Information-attainment system based on monitoring an occupant | |
US20170166222A1 (en) | Assessment of human driving performance using autonomous vehicles | |
JP6480143B2 (en) | Driving characteristic diagnosis device, driving characteristic diagnosis system, driving characteristic diagnosis method | |
JP6323074B2 (en) | Display object information display device | |
US9056550B2 (en) | Vehicle speed limiting and/or controlling system that is responsive to GPS signals | |
JP6584632B2 (en) | Parking assistance device | |
KR20080020956A (en) | Method of operating a night-view system in a vehicle and corresponding night-view system | |
CN107408288B (en) | Warning device, warning method, and warning program | |
WO2019212779A1 (en) | Navigation with sun glare information | |
CN107209021B (en) | System and method for visual relevance ranking of navigation maps | |
EP3725597A1 (en) | Monitoring system and method for target body on vehicle, and vehicle | |
WO2018051399A1 (en) | State prediction device and state prediction method | |
JP2017194948A (en) | Information presentation control device, automatic operation vehicle, and automatic operation vehicle supporting system | |
CN113359974A (en) | Notification based on attention | |
JP2008020406A (en) | Navigation device | |
US20170176207A1 (en) | In vehicle system and method for providing information regarding points of interest | |
US20140032099A1 (en) | Systems and methods for navigation | |
EP3002158A1 (en) | Rearview camera with gps for image storage and retrieval |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181026 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190912 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191008 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191126 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200428 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200526 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6712825 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |