JP4788624B2 - Careless warning device, vehicle equipment control method of careless warning device, and vehicle control device program - Google Patents
Careless warning device, vehicle equipment control method of careless warning device, and vehicle control device program Download PDFInfo
- Publication number
- JP4788624B2 JP4788624B2 JP2007038481A JP2007038481A JP4788624B2 JP 4788624 B2 JP4788624 B2 JP 4788624B2 JP 2007038481 A JP2007038481 A JP 2007038481A JP 2007038481 A JP2007038481 A JP 2007038481A JP 4788624 B2 JP4788624 B2 JP 4788624B2
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- control
- careless
- state
- detection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Image Processing (AREA)
- Emergency Alarm Devices (AREA)
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Description
本発明には、車両機器を制御して運転者を支援する不注意警告装置、不注意警告装置の車両機器制御方法及び車両制御装置のプログラムに関し、特に誤制御を低減した不注意警告装置、不注意警告装置の車両機器制御方法及び車両制御装置のプログラムに関する。 The present invention relates to a careless warning device that controls a vehicle device to assist a driver, a vehicle device control method for the careless warning device, and a program for the vehicle control device, and more particularly to a careless warning device that reduces erroneous control, The present invention relates to a vehicle equipment control method for a caution warning device and a program for the vehicle control device.
衝突を未然に防ぎ、また、衝突が起こった場合でもその被害を最小に留めるため車載されるプリクラッシュセイフティシステム（以下、ＰＣＳという）では、進行方向の障害物を検出して障害物との衝突の可能性に応じて車載装置を制御して、衝突被害軽減や更には障害物を回避する運転支援を実行する。また、運転者の脇見又は居眠り（以下、単に不注意状態という）を検知した場合に、運転者に警告することで注意喚起する運転支援が提案されている。 In the pre-crash safety system (hereinafter referred to as PCS) that is installed on the vehicle to prevent collisions and to minimize damage even if a collision occurs, it detects obstacles in the traveling direction and collides with obstacles. The vehicle-mounted device is controlled in accordance with the possibility of driving to reduce collision damage and further to support driving to avoid obstacles. In addition, driving assistance has been proposed that alerts a driver when a driver's side-by-side or snoozing (hereinafter simply referred to as carelessness) is detected.
しかしながら、ＰＣＳでは障害物を誤検出する場合がある場合が、不注意状態に対する警告では不注意状態の誤検知により不適切な警告が起こりうることが知られており、これを防ぐ技術が提案されている（例えば、特許文献１参照。）。特許文献１には、運転者の不注意状態を検知した場合に、運転者に警告する警報装置において、操舵角が所定以上の場合にはカーブ走行中等であると判定して警報出力を禁止する制御が記載されている。
しかしながら、不注意状態の検知を運転者の顔画像から検知する場合、光の加減などで誤検知することがあり、特許文献１記載の警告装置のように、操舵時のみ警報出力を禁止しても直線走行時の誤警報を防止できないという問題がある。
However, when detecting the inattentive state from the driver's face image, there is a possibility of erroneous detection due to light adjustment, etc. As in the warning device described in
ところで、ＰＣＳと不注意状態の検知を組み合わせ、障害物との衝突の可能性が検出された場合に運転者が不注意状態であった場合は、警報出力など車載装置の制御を早期に行う技術（以下、早期制御という）が提案されている。 By the way, combining PCS and inattentive state detection, if the driver is inadvertent when the possibility of collision with an obstacle is detected, a technology for early control of in-vehicle devices such as alarm output (Hereinafter referred to as early control) has been proposed.
図１は、早期制御の概略を示す図である。不注意状態でない場合、衝突までの時刻Ｔ１に警報音を吹鳴するが、不注意状態が検知された場合は時刻Ｔ１よりも早い時刻Ｔ２で警報音を吹鳴する。 FIG. 1 is a diagram showing an outline of early control. If not careless, a warning sound is sounded at time T1 until the collision, but if a careless state is detected, a warning sound is sounded at time T2 earlier than time T1.
しかしながら、早期制御するためには不注意状態でない場合よりも遠方の障害物との衝突の可能性を判定する必要があるため、ＰＣＳにおける衝突判定閾値を緩和することになる。すなわち、より遠方又は広範囲に障害物が検出された時点で早期制御され得ることになる。この場合、不注意状態が正常に検知されている場合は障害物との衝突の可能性に応じて適切な早期制御が実現されるが、不注意状態が誤検知されていた場合には早期制御により誤制御（警報音の吹鳴など）する時間帯又は可能性が増大してしまう（図ではＴ２とＴ１の時間）という問題がある。また、衝突判定閾値の緩和により、ミリ波レーダ装置などの障害物検出手段が不要な障害物（障害物でない、回避可能）を検出する可能性が増すため、不注意状態の誤検知による誤警報が増すことになる。 However, since it is necessary to determine the possibility of a collision with an obstacle farther away than in the case of not being careless in order to perform early control, the collision determination threshold value in the PCS is relaxed. That is, early control can be performed at the time when an obstacle is detected further away or in a wider range. In this case, if the careless state is detected normally, appropriate early control is realized according to the possibility of collision with the obstacle, but if the careless state is erroneously detected, early control is realized. Therefore, there is a problem that the time zone or possibility of erroneous control (buzzing of alarm sound, etc.) or the possibility increases (time T2 and T1 in the figure). In addition, the relaxation of the collision determination threshold increases the possibility that obstacle detection means such as a millimeter wave radar device will detect unnecessary obstacles (not obstacles, avoidable), so false alarms due to false detection of carelessness Will increase.
本発明は、上記課題に鑑み、不注意状態の誤検知による車両機器の誤制御を低減する不注意警告装置、不注意警告装置の車両機器制御方法及び車両制御装置のプログラムを提供することを目的とする。 In view of the above problems, an object of the present invention is to provide a careless warning device, a vehicle equipment control method for a careless warning device, and a program for the vehicle control device that reduce erroneous control of vehicle equipment due to erroneous detection of carelessness. And
上記課題に鑑み、本発明は、閾値時間（例えば、脇見閾値、居眠り閾値）以上の間、継続して運転者の不注意状態を検知した場合に車両機器を制御する不注意警告装置において、車両走行中に、閾値時間よりも長時間の精度判定閾値以上の間、継続して不注意状態となる精度低下状態を検知する不注意検知精度判定手段と、精度低下状態の場合、車両機器の制御を制限する車両制御制限手段と、車両周囲の障害物を検出する障害物検知手段と、 前記障害物を検出した場合であって、不注意状態の場合に不注意状態でない場合よりも早期に前記車両機器を制御する車両制御手段と、を有し、前記精度低下状態の場合、前記車両制御制限手段は早期の前記車両機器の制御を、前記障害物検知手段が先行車両を検出するまで禁止する、を有することを特徴とする。 In view of the above-described problems, the present invention provides a careless warning device that controls a vehicle device when a driver's carelessness state is continuously detected for a threshold time (for example, a side-by-side threshold value, a dozing threshold value) or longer. Inadvertent detection accuracy determination means for detecting a reduced accuracy state that continues to be inadvertent during running for more than the accuracy determination threshold value longer than the threshold time, and control of vehicle equipment in the case of reduced accuracy state Vehicle control restriction means for restricting the vehicle, obstacle detection means for detecting obstacles around the vehicle, and when the obstacle is detected, in the case of inadvertent state earlier than in the case of inadvertent state Vehicle control means for controlling vehicle equipment, and in the case of the reduced accuracy state, the vehicle control restriction means prohibits early control of the vehicle equipment until the obstacle detection means detects a preceding vehicle. , it has a It is characterized by.
本発明によれば、車両走行中の運転者が閾値時間よりも長時間、不注意状態を継続する可能性は低いことから、この場合に車両機器の制御を制限することで誤制御を防止することができる。
本発明によれば、障害物との衝突のおそれがある場合に障害物が検出されない場合よりも早期に制御される車両機器において、精度低下状態の場合には、先行車両を検出するまで早期制御を禁止することができる。先行車両に対し、閾値時間よりも長時間、不注意状態を継続する可能性は低く、また、先行車が検出されない場合は車両制御を禁止しなくても誤制御とならない。
According to the present invention, since it is unlikely that the driver who is traveling the vehicle will continue inadvertently for a longer time than the threshold time, erroneous control is prevented by limiting the control of the vehicle equipment in this case. be able to.
According to the present invention, in a vehicle device controlled earlier than when no obstacle is detected when there is a possibility of collision with an obstacle, early control is performed until a preceding vehicle is detected in the case of a reduced accuracy state. Can be prohibited. It is unlikely that the preceding vehicle will remain inadvertent for a longer time than the threshold time, and if no preceding vehicle is detected, erroneous control will not occur even if vehicle control is not prohibited.
また、本発明の一形態において、車両制御制限手段は、所定時間の間、車両機器の制御を制限することを特徴とする。 In one embodiment of the present invention, the vehicle control limiting means limits the control of the vehicle equipment for a predetermined time.
本発明によれば、光の影響など環境によって不注意状態を誤検知している場合、所定時間経過することで検知可能となる可能性が高いので、所定時間の間だけ車両機器の制御を制限する。 According to the present invention, when a careless state is erroneously detected due to an environment such as the influence of light, it is highly possible that the detection can be performed after a predetermined time has elapsed, and thus control of vehicle equipment is limited only during the predetermined time. To do.
また、本発明の一形態において、車両制御制限手段は、１トリップ（イグニッションオンからオフの間）、車両機器の制御を制限する、ことを特徴とする。 Moreover, in one form of this invention, a vehicle control restriction | limiting means restrict | limits control of a vehicle apparatus for 1 trip (between ignition ON and OFF), It is characterized by the above-mentioned.
本発明によれば、１トリップ経過すれば不注意状態を検知可能となる可能性が高いので、１トリップの間だけ車両機器の制御を制限することができる。 According to the present invention, since it is highly possible that an inattention state can be detected after one trip, the control of the vehicle device can be limited only during one trip.
また、本発明の一形態において、車両制御制限手段は、不注意状態が検知されなくなるまで、前記車両機器の制御を制限する、ことを特徴とする。 Moreover, in one form of this invention, a vehicle control restriction | limiting means restrict | limits control of the said vehicle apparatus until an inattention state is no longer detected.
本発明によれば、不注意状態が検知されなくなることで、顔向き度又は眼の開度が正常に検出可能となったと判定してよいので、不注意状態が検知されなくなるまで前記車両機器の制御を制限することができる。 According to the present invention, it is possible to determine that the degree of face orientation or the opening degree of the eyes can be normally detected when the careless state is not detected. Control can be limited.
また、本発明の一形態において、不注意検知精度判定手段が、所定期間に所定回数以上、精度低下状態を検知した場合、車両制御制限手段、１トリップの間、車両機器の制御を禁止する、ことを特徴とする。 Further, in one aspect of the present invention, when the carelessness detection accuracy determination unit detects a reduced accuracy state a predetermined number of times or more in a predetermined period, the vehicle control restriction unit prohibits control of the vehicle device during one trip. It is characterized by that.
本発明によれば、精度低下状態が頻繁に検知される場合、１トリップの間、車両制御を禁止することで、誤制御を防止することができる。 According to the present invention, when a reduced accuracy state is frequently detected, erroneous control can be prevented by prohibiting vehicle control for one trip.
また、本発明の一形態において、不注意状態を検知するため運転者の顔画像を撮影するカメラに、運転者の腕部が撮影されるおそれがあるか否かを検出する検出手段を有し、検出手段が運転者の腕部が撮影されるおそれがあることを検出した場合、車両制御制限手段は、精度低下状態であるか否かに関わらず車両機器の制御を禁止する、ことを特徴とする。 In one embodiment of the present invention, the camera that captures the driver's face image to detect an inattention state includes a detection unit that detects whether or not the driver's arm may be captured. When the detecting means detects that the driver's arm may be photographed, the vehicle control restricting means prohibits the control of the vehicle device regardless of whether or not the accuracy is reduced. And
本発明によれば、顔画像に運転者の腕部が撮影され不注意状態が誤検知されるおそれを検知し、車両機器の誤制御を防止することができる。 ADVANTAGE OF THE INVENTION According to this invention, the driver | operator's arm part is image | photographed by the face image, the possibility that a careless state may be misdetected is detected, and the erroneous control of a vehicle apparatus can be prevented.
不注意状態の誤検知による車両機器の誤制御を低減する不注意警告装置、不注意警告装置の車両機器制御方法及び車両制御装置のプログラムを提供することができる。 It is possible to provide a careless warning device, a vehicle equipment control method for a careless warning device, and a program for the vehicle control device that reduce erroneous control of vehicle equipment due to erroneous detection of carelessness.
以下、本発明を実施するための最良の形態について、図面を参照しながら実施例を挙げて説明する。本実施形態の不注意警告装置１０は、脇見又は居眠りなど運転者の不注意状態が検知された場合に警告し、また、ＰＣＳ（プリクラッシュセーフティシステム）などの制御を早期に実行する（早期制御）ものであって、不注意状態の検知精度を判定することで不注意状態の誤検知がもたらす車両機器の誤制御を低減する（以下、警告、ＰＣＳ制御を単に車両制御という）。
Hereinafter, the best mode for carrying out the present invention will be described with reference to the accompanying drawings. The
図２は、不注意警告装置１０の概略ブロック図を示す。不注意警告装置１０は、顔向き度及び眼の開度を検出する不注意検知装置２０及び不注意が検知された場合に車両制御により警告等の運転支援を実行する車両制御装置３０を有する。
FIG. 2 shows a schematic block diagram of the
始めに、不注意検知装置２０について説明する。不注意検知装置２０は、カメラ１１、画像処理ＥＣＵ１２、ミリ波レーダ装置１３、ドライビングサポートＥＣＵ（ＤＳＳ
ＥＣＵ（Electronic Control Unit）。以下、単にＤＳＳという。）１４、ステアリングホイール２２の操舵角を検出する操舵角センサ２１を有する。
First, the
ECU (Electronic Control Unit). Hereinafter, it is simply referred to as DSS. 14) A
カメラ１１は、車両の後方の斜め上方を光軸にして、例えばステアリングコラムに運転者の顔を臨むように配置される。カメラ１１はＣＣＤ（Charge Coupled Device）等の光電変換素子を有し、入射した光をその強度に応じて光を光電変換し、所定の輝度階調（例えば、２５６階調）のデジタル画像（顔画像）を出力する。ミリ波レーダ装置１３は、ミリ波レーダを照射し、車両の前方等の障害物に反射して帰ってくるまでの時間により障害物までの距離を、反射波の周波数変化により障害物との相対速度を検出することができる。また、複数設けたアンテナの強度等を演算して障害物の方向を検出する。また、操舵角センサ２１はステアリングホイール２２の操舵角を、例えば直進時の操舵角を基準に検出する非接触なロータリエンコーダである。ステアリングホイール２２は、運転者がステアリングホイール２２のどの部分を把持しているかを、例えばタッチセンサにより検出する把持部検出手段２４を有する。
The camera 11 is arranged so that the driver's face faces the steering column, for example, with the oblique upper part behind the vehicle as the optical axis. The camera 11 has a photoelectric conversion element such as a CCD (Charge Coupled Device), photoelectrically converts incident light according to its intensity, and outputs a digital image (face) of a predetermined luminance gradation (for example, 256 gradations). Image). The millimeter
画像処理ＥＣＵ１２及びＤＳＳ１４は、プログラムを実行するＣＰＵ、プログラム実行の作業領域となりまた一時的にデータを記憶するＲＡＭ、イグニションオフしてもデータを保持するＥＥＰＲＯＭ（Electronically Erasable and Programmable Read Only Memory）、データのインターフェイスとなる入出力インターフェイス、他のＥＣＵと通信する通信コントローラ、及び、プログラムを記憶するフラッシュメモリ等がバスにより接続されたマイコンにより構成される。
The
車両制御装置３０のプログラム２５は、フラッシュメモリに記憶された状態でＤＳＳ１４と共に車載されるか、又はＤＳＳ１４が車載された後に車載ＬＡＮを介してダウンロードされる。この車両制御装置３０のプログラム２５をＣＰＵが実行することで、脇見検知手段１４ａ、居眠り検知手段１４ｂ、衝突判定手段１４ｃ、不注意検知精度判定手段１４ｄ及び車両制御制限手段１４ｅが実現される。また、画像処理ＥＣＵ１２のマイコンがプログラムを実行することで顔向き検出手段１２ａ、眼の開閉検出手段１２ｂが実現される。なお、ＤＳＳ１４の例えばＲＡＭには不注意状態の検知精度の判定結果を記憶した不注意検知精度判定記憶部２３が設けられている。
The
顔画像の処理による顔向き度及び眼の開度の検出について簡単に説明する。図３は顔画像の画像処理例を示す図である。顔向き検出手段１２ａは、順次入力される顔画像から、顔の輪郭と中央線を検出し、また、眼の開閉検出手段１２ｂは、鼻孔位置、眼の位置を含む所定の眼球追跡領域を順に設定し、眼球追跡領域の中の眼の開閉を顔画像毎に検出する。 The detection of the degree of face orientation and the opening degree of the eye by processing the face image will be briefly described. FIG. 3 is a diagram illustrating an example of image processing of a face image. The face orientation detection means 12a detects the outline and center line of the face from the sequentially inputted face images, and the eye opening / closing detection means 12b sequentially selects a predetermined eye tracking region including the nostril position and the eye position. Set and detect the opening and closing of the eyes in the eyeball tracking area for each face image.
顔向き検出手段１２ａは、顔画像から顔のおよその位置を決定するため顔の輪郭を検出する。例えば、顔向き検出手段１２ａは、顔画像に対し背景が静止していることを利用して、複数の顔画像間の画素毎に画素値の変化量をカウントし、カウント結果がピークとなる画素位置を顔の横方向の輪郭位置とする。
The face orientation detection means 12a detects the outline of the face in order to determine the approximate position of the face from the face image. For example, the face
また、顔向き検出手段１２ａは、エッジ情報から顔の上下方向の輪郭を検出する。エッジ情報により、顔のパーツである、眉、まぶた、鼻孔、口角、上下の唇の境、など、肌に比べ輝度の変化の大きい画素が検出される。人の顔のパーツは左右対称に配置されているので、顔向き検出手段１２ａは左右のエッジ情報の数がほぼ均等になるように顔の中央線を検出する。
The face
そして、得られた顔の中央線から眉と推定される連続黒領域（エッジ情報で囲まれた領域）を、中央線の左右対象に検出し、これを上側の輪郭と決定する。また、眉よりも下側であって顔の中央線を跨ぎ所定以上に連続したエッジ情報を上下の唇の境とみなし、顔の下側の輪郭として決定する。このようにして、顔の輪郭位置が得られる。 Then, a continuous black region (region surrounded by edge information) estimated as eyebrows from the center line of the obtained face is detected as the left and right objects of the center line, and this is determined as the upper contour. Further, the edge information below the eyebrows and straddling the center line of the face and continuing more than a predetermined amount is regarded as the boundary between the upper and lower lips and determined as the lower contour of the face. In this way, the face contour position is obtained.
得られた中央線を顔画像毎に追跡することで、正面方向に対し運転者が顔を向いている方向を示す顔向き度が検出される。 By tracking the obtained center line for each face image, the degree of face orientation indicating the direction in which the driver is facing the face with respect to the front direction is detected.
眼の開閉検出手段１２ｂは、鼻孔位置に基づき眼球追跡領域を設定する。鼻孔位置は、顔の中心線をとおるやや縦長の鼻孔検出領域を２値化して、鼻孔の特徴（形状、大きさ、水平に２つ存在）を備える連続した黒画素の領域を鼻孔位置として決定する。そして、眼の開閉検出手段１２ｂは、鼻孔と眼の位置の関係の統計データを利用して、鼻孔位置を基準に所定の領域を眼球追跡領域として設定する。いったん、眼球追跡領域が設定された後は、その中から眼の開閉を検出することとし、眼の開閉が検出されない状態が継続すると改めて顔の輪郭から検出をやり直す。 The eye opening / closing detection means 12b sets an eyeball tracking region based on the nostril position. The nostril position is determined by binarizing a slightly longer nostril detection area along the center line of the face, and determining a continuous black pixel area having nostril characteristics (shape, size, two horizontally present) as the nostril position. To do. Then, the eye opening / closing detection means 12b uses the statistical data of the relationship between the nostril and the eye position to set a predetermined area as the eyeball tracking area based on the nostril position. Once the eyeball tracking area is set, eye opening / closing is detected from the eye tracking area, and if the state where eye opening / closing is not detected continues, detection is performed again from the contour of the face.
そして、眼の開閉検出手段１２ｂは、眼球追跡領域の上瞼と下瞼を監視することで眼の開閉を検出する。眼の開閉検出手段１２ｂは、眼球追跡領域のエッジ情報を検出し、眼球追跡領域の左の画素列から順に、上から下向きに向かってエッジ情報を検索し、エッジ情報が検索できたら１つ右の画素列について同様の検索を行っていく。したがって、この検索が右端まで終われば、上瞼の画素位置が得られる。同様に、眼球追跡領域を下から上向きに向かって検索することで、下瞼の画素位置が得られる。また、このようにして検出された上瞼の位置が、所定数の顔画像が得られる間に大きく変わるか否かにより上瞼の位置を決定してもよい。 The eye open / close detection means 12b detects the eye open / close by monitoring the upper eyelid and lower eyelid of the eyeball tracking area. The eye open / close detection means 12b detects the edge information of the eyeball tracking area, searches the edge information from top to bottom in order from the left pixel row of the eyeball tracking area, and if the edge information can be searched, one right The same search is performed for the pixel columns. Therefore, if this search is completed to the right end, the upper pixel position is obtained. Similarly, the pixel position of the lower eyelid is obtained by searching the eyeball tracking area from the bottom upward. Further, the position of the upper eyelid may be determined depending on whether or not the position of the upper eyelid detected in this way changes greatly while a predetermined number of face images are obtained.
眼の開閉検出手段１２ｂは、上瞼と下瞼の画素位置の差（上下の距離）を左から順に算出し、最大となる画素数を眼の開度とする。なお、運転者が目を閉じている場合も上下の瞼の位置から同様な処理過程により眼の開度が検出される。 The eye opening / closing detection means 12b calculates the difference (vertical distance) between the upper and lower eyelid pixel positions in order from the left, and sets the maximum number of pixels as the eye opening. Even when the driver closes his eyes, the eye opening is detected from the upper and lower eyelid positions through the same process.
脇見検知手段１４ａは、顔向き度を脇見閾値と比較して運転者の脇見を検知する。顔向き度は正面方向に対する顔向き角度であるので、顔向き度が大きいほど脇見の度合いが大きい。このため、脇見検知手段１４ａは例えば所定値Ａ以上の顔向き度が閾値時間Ｋ以上継続した場合に運転者が脇見をしていると判定する。なお、所定値Ａを可変にして、顔向き度が大きいほど継続時間を短くするなど脇見検知の判定基準は設計できる。
The aside detection means 14a detects the driver's aside by comparing the degree of face orientation with the aside threshold. Since the face orientation degree is a face orientation angle with respect to the front direction, the greater the face orientation degree, the greater the degree of looking aside. For this reason, the look-
居眠り検知手段１４ｂは、眼の開閉を判定するための閾値と眼の開度を比較して、閾値以上であれば開状態、閾値より小さければ閉状態と判定し、計測カウンタにより閉眼が連続した場合は閉眼時間を継続して計測する。そして、居眠り検知手段１４ｂは閉眼時間が居眠り閾値である閾値時間Ｌ以上となると、運転者が居眠り状態であると判定する。なお、運転者が覚醒状態から居眠り状態に移行する過程では、閾値時間Ｌには至らないが閉眼の頻度が徐々に増大するものであるため、所定時間（例えば３０秒）間の閉眼回数をカウントし、閉眼回数が所定値Ｃ以上となった場合に、居眠り又は眠気有りと判定してもよい。また、脳波、脈拍、体温、皮膚電位等により居眠り検知したり、これらにより補足して居眠り検知の精度を向上させてもよい。
The dozing detection means 14b compares the threshold value for determining the opening and closing of the eye with the opening degree of the eye, and determines that the eye is open when it is equal to or greater than the threshold, and the closed state when it is smaller than the threshold. In this case, the eye-closing time is continuously measured. Then, the dozing
衝突判定手段１４ｃは、障害物までの距離・相対速度、障害物の方向を衝突判定閾値と比較して衝突の可能性を判定する。障害物までの距離・相対速度はＴＴＣ（Time To Collision）に置き換えて扱うことができ、衝突判定手段１４ｃはＴＴＣが所定値Ｄ以下であって、車両の正面方向に対し左右に所定角度θ以内に障害物が検出される場合に衝突の可能性があると判定する。なお、ＰＣＳでは、ＴＴＣに応じて、・衝突の可能性がある場合、・衝突の可能性が高い場合、・衝突が不可避の場合、等に場合分けしてそれぞれのタイミングで車両制御を実行する。このため、所定値Ｄは複数の衝突判定閾値を有するものとなるが、本実施形態では例えば衝突の可能性がある場合の衝突判定閾値として用いる。
The
不注意検知精度判定手段１４ｄは、不注意状態（顔向き度に基づく脇見検知及び眼の開度に基づく居眠り検知）の検知精度が所定以下か否かを、例えば、顔向き度については脇見閾値よりも長時間の所定時間、眼の開度については居眠り閾値よりも長時間の所定時間（以下、これらを精度判定閾値という）継続した場合に、不注意状態の検知精度が所定以下であると判定する。また、車両が直線走行しているか否か、ステアリングホイール２２の把持位置などと組み合わせて判定してもよい。
The carelessness detection accuracy determination means 14d determines whether or not the detection accuracy of the carelessness state (aside detection based on the degree of face orientation and doze detection based on the opening degree of the eyes) is below a predetermined level. When the eye opening is continued for a predetermined time longer than the dozing threshold (hereinafter referred to as an accuracy determination threshold), the inadvertent state detection accuracy is less than the predetermined. judge. Further, whether or not the vehicle is traveling straight may be determined in combination with the gripping position of the
車両制御制限手段１４ｅは、不注意検知精度判定手段１４ｄの判定結果に基づき車両制御装置３０が実行する車両制御を、禁止を含み、制限解除条件を満たすまで制限する。例えば、脇見閾値又は居眠り閾値による判定基準を満たしていても、不注意検知精度判定手段１４ｄがこれらの検知精度が所定以上でないと判定している場合、制限解除条件を満たすまで制限する。詳しくは実施例において詳述する。
The vehicle control restriction unit 14e restricts the vehicle control performed by the
続いて、車両制御装置３０について説明する。車両制御装置３０はブレーキ（ＡＣＴ）アクチュエータ１６を制御するブレーキＥＣＵ１５、及び、警報音を吹鳴するブザー出力器１８や警告ランプ１９を制御するメータＥＣＵ１７を有する。
Next, the
ブレーキＡＣＴ１６は、運転者のブレーキペダル踏力に応じた油圧を各車輪のホイルシリンダに供給する油圧回路を備えると共に、各輪への油圧回路を開閉する開閉弁及び油圧を生成するポンプを備える。ブレーキＥＣＵ１５は、ブレーキＡＣＴ１６を制御して運転者のブレーキペダル操作に依存せずに各車輪のホイルシリンダ圧を独立に制御する。例えば、ＰＣＳでは、障害物との衝突の可能性が高くなった場合に警報ブレーキとして軽い制動が加えられ、さらに衝突が不可避となると緊急ブレーキとして緊急制動が加えられる。
The
メータＥＣＵ１７は、各種センサの信号、スイッチ類の信号、及び、各ＥＣＵからの要求に基づき、速度やエンジン回転数などの車両状態、半ドアなど警告をインストルメントパネルのメータ類に表示したり所定のランプを点灯して運転者に知らせる。また、ブザー出力器１８は、ブザーなどの警報音を出力するための音源回路及びスピーカであり、警告ランプ１９は点灯するインストルメントパネル上のランプ又はＨＵＤ（Head Up Display）の投光装置など運転者に視覚的に注意喚起するものである。
The
脇見検知手段１４ａ若しくは居眠り検知手段１４ｂにより運転者の不注意状態が検知された場合、又は、衝突判定手段１４ｃにより衝突の可能性が有ると判定された場合、メータＥＣＵ１７はＤＳＳ１４の要求によりブザー出力器１８により警報音を吹鳴し、警告ランプ１９を点灯させる。
When the driver's careless state is detected by the aside detection means 14a or the dozing detection means 14b, or when the collision determination means 14c determines that there is a possibility of a collision, the
なお、この他の車両制御として、衝突の可能性に応じてシートベルトを巻き上げるプリクラッシュシートベルト、不注意状態の運転者を注意喚起する振動体などの各種手段を備えていてもよい。 In addition, as other vehicle control, various means such as a pre-crash seat belt that winds up the seat belt according to the possibility of a collision and a vibrating body that alerts an inattentive driver may be provided.
本実施例では、不注意検知装置２０の検知精度を判定し、検知精度が所定以下の場合に車両制御を制限する不注意警告装置１０について説明する。
In this embodiment, a
光の影響による顔向き度又は眼の開度の誤検知について説明する。図４（ａ）は顔画像の一例を、図４（ｂ）はエッジ情報を取得した顔画像の一例をそれぞれ示す。図４（ａ）に示すように、運転者の右側から光が照射されているため、顔画像には背景部を含めエッジの強い陰影が複数存在している。このようなエッジの強い箇所は、図４（ｂ）に示すように窓枠エッジ３１、顔横エッジ３２、鼻横エッジ３３、服装エッジ３４等を生じさせる。このため、顔向き検出手段１２ａは窓枠エッジ３１と顔横エッジ３２を顔の横方向の輪郭と捉えるなど、運転者は正面方向を向いているにも関わらず、大きな顔向き度を検出する場合がある。また、顔向き度（すなわち中央線）が正常に検出されなければ眼球追跡領域も正常に設定されないことになるため、正確な眼の開度の検出も困難になる。したがって、顔向き度又は眼の開度が正常に検出されない状況では、不注意を検知したからといって警告しても誤警告となるおそれが高い。そこで、不注意検知精度判定手段１４ｄは、不注意状態の検知精度を判定し、車両制御制限手段１４ｅは不注意の検知精度が所定以下の場合に警報音の吹鳴などの車両制御を制限する。
An erroneous detection of the degree of face orientation or eye opening due to the influence of light will be described. FIG. 4A shows an example of a face image, and FIG. 4B shows an example of a face image from which edge information has been acquired. As shown in FIG. 4A, since light is irradiated from the right side of the driver, a plurality of shadows with strong edges including the background portion exist in the face image. As shown in FIG. 4B, such a strong edge portion generates a
〔車両走行中における長期の不注意状態の検知〕
不注意検知に基づく車両制御は、主に走行中の運転者を注意喚起する運転支援であるが、車両走行中にかかる不注意状態が予め定められた脇見閾値又は居眠り閾値よりもさらに所定以上長く継続することは考えにくい。そこで、不注意警告装置１０は、不注意状態が精度判定閾値以上の時間、継続した場合に車両制御を制限する。制限であるので脇見閾値又は居眠り閾値を緩和してもよいし、以下のように不注意状態に基づく制御を禁止してもよい。
[Detection of long-term carelessness while driving]
Vehicle control based on carelessness detection is driving assistance that mainly alerts the driver who is traveling, but the carelessness state during vehicle traveling is longer than a predetermined aside threshold or doze threshold by a predetermined amount or more. It's hard to think about continuing. Therefore, the
図５は、不注意状態が精度判定閾値以上継続した場合に、不注意警告装置１０が車両機器の制御を禁止する制御手順を示すフローチャート図である。
FIG. 5 is a flowchart showing a control procedure in which the
不注意検知精度判定手段１４ｄは、不注意状態が検知されたか否かを判定する（Ｓ１０）。すなわち、脇見検知手段１４ａが、顔画像から検出された顔向き度に基づき例えば所定値Ａ以上の顔向き度が閾値時間Ｋ以上継続したと判定したか、又は、居眠り検知手段１４ｂが、閾値時間Ｌ以上に閉眼時間が継続したと判定したか、を判定する。
The carelessness detection accuracy determination unit 14d determines whether or not a carelessness state is detected (S10). That is, whether the look-
不注意状態が検知された場合（Ｓ１０のＹｅｓ）、ＤＳＳ１４は警報音の吹鳴など所定の車両制御を実行する（Ｓ２０）。
When an inattentive state is detected (Yes in S10), the
ついで、不注意検知精度判定手段１４ｄは、走行中の不注意状態が精度判定閾値以上継続しているか否かを判定する（Ｓ３０）。精度判定閾値は、脇見検知と居眠り検知のそれぞれに適切な時間であるが、脇見検知の場合は閾値時間Ｋより長く（例えば、Ｋ×２以上）、居眠り検知の場合は閾値時間Ｌより長い（例えば、Ｌ×２以上）。 Next, the carelessness detection accuracy determination means 14d determines whether or not the carelessness state during traveling continues for more than the accuracy determination threshold (S30). The accuracy determination threshold is an appropriate time for each of the aside detection and the detection of a nap, but is longer than the threshold time K (for example, K × 2 or more) in the case of a detection of aside, and longer than the threshold time L in the case of a nap detection ( For example, L × 2 or more).
不注意状態が精度判定閾値以上継続していない場合（Ｓ３０のＮｏ）、ＤＳＳ１４は車両制御を終了する（Ｓ４０）。
When the careless state does not continue for the accuracy determination threshold or more (No in S30), the
不注意状態が精度判定閾値以上継続している場合（Ｓ３０のＹｅｓ）、車両走行中に長時間脇見し又は居眠りする可能性は低く、この場合は不注意状態を誤検知していると考えられるため、車両制御制限手段１４ｅは不注意状態の検知に基づく車両制御を禁止する（Ｓ５０）。なお、ステップＳ２０の車両制御が継続していた場合、車両制御の禁止によりこれが終了される。 If the careless state continues for more than the accuracy judgment threshold (Yes in S30), it is unlikely that the user will look aside or fall asleep while driving the vehicle. In this case, it is considered that the careless state is erroneously detected. Therefore, the vehicle control restriction unit 14e prohibits vehicle control based on detection of the careless state (S50). In addition, when the vehicle control of step S20 is continuing, this is complete | finished by prohibition of vehicle control.
ついで、車両制御制限手段１４ｅは、車両制御を禁止してから所定時間が経過したか否かを判定する（Ｓ６０）。いつまでも車両制御を禁止していると不注意状態の検知による車両制御ができなくなり、また、光の影響など、走行環境によって不注意状態を誤検知している場合、所定時間の経過により正常に検知可能となる可能性がありためである。 Next, the vehicle control restriction unit 14e determines whether or not a predetermined time has elapsed since the vehicle control was prohibited (S60). If vehicle control is prohibited forever, vehicle control based on inadvertent state detection will not be possible, and if an inadvertent state is erroneously detected due to the driving environment, such as the effect of light, it will be detected normally after a predetermined time. This is because it may be possible.
なお、所定時間の経過でなく、１トリップ（イグニッションオンからオフまでの期間。以下同。）の経過まで車両制御を禁止してもよい。 Note that the vehicle control may be prohibited not until the predetermined time has elapsed but until one trip (period from ignition on to off; the same applies hereinafter).
また、所定時間の経過でなく、注意状態が検知されるまで車両制御を禁止してもよい。注意状態とは、脇見であれば正面方向を向いていることを示す顔向き度、居眠りであれば開眼を示す眼の開度、が検出されることである。不注意状態の検知精度が所定以下となった場合、脇見又は居眠り（又は未検知）と判定されることが多いので、正面方向の顔向き度又は開眼の眼の開度が検知された場合は不注意状態を精度よく検知可能となったと判断できるためである。 Further, the vehicle control may be prohibited until a caution state is detected instead of elapse of a predetermined time. The attention state means that a face orientation degree indicating that the person is looking aside when looking aside is detected, and an eye opening degree indicating that the eyes are open if the person is dozing. If the carelessness detection accuracy falls below a certain level, it is often determined to be aside or doze (or undetected), so if the degree of face orientation in the front direction or the opening degree of the open eye is detected This is because it can be determined that the careless state can be accurately detected.
所定時間経過した場合（Ｓ６０のＹｅｓ）、車両制御制限手段１４ｅは車両制御の禁止を解除する（Ｓ７０）。 When the predetermined time has elapsed (Yes in S60), the vehicle control restriction unit 14e cancels the prohibition of vehicle control (S70).
不注意状態が精度判定閾値以上継続した場合に車両制御を禁止することで、誤った車両制御を防止することができる。 Incorrect vehicle control can be prevented by prohibiting vehicle control when the careless state continues for more than the accuracy determination threshold.
〔精度判定閾値以上の不注意状態が頻繁に発生した場合の車両制御の禁止〕
不注意状態が精度判定閾値以上に継続した場合に車両制御を禁止しても、禁止の前に車両制御が実行されるため（図５のＳ２０）、不注意状態の検知精度が所定以下であることによる車両制御が頻発した場合、運転者は煩わしさを感じざるを得ない。そこで、頻繁に不注意状態が精度判定閾値以上に継続した場合には、車両制御を禁止する不注意警告装置１０について説明する。
[Prohibition of vehicle control when inattentional conditions more than the accuracy judgment threshold occur frequently]
Even if the vehicle control is prohibited when the careless state continues to exceed the accuracy determination threshold, the vehicle control is executed before the prohibition (S20 in FIG. 5), so the detection accuracy of the careless state is below a predetermined level. If vehicle control due to this occurs frequently, the driver must feel annoyed. Accordingly, the
図６は、不注意警告装置１０が、不注意状態が精度判定閾値以上に継続した場合に車両制御を禁止すると共に、頻発した場合は不注意状態の検知に基づく車両制御を禁止する制御手順のフローチャート図を示す。なお、図６において図５と同一ステップには同一の符号を付した。
FIG. 6 shows a control procedure in which the
不注意検知精度判定手段１４ｄは、不注意状態が検知されたか否かを判定する（Ｓ１０）。すなわち、脇見検知手段１４ａが、顔画像から検出された顔向き度に基づき例えば所定値Ａ以上の顔向き度が閾値時間Ｋ以上継続したと判定したか、又は、居眠り検知手段１４ｂが、閾値時間Ｌ以上に閉眼時間が継続したと判定したか、を判定する。
The carelessness detection accuracy determination unit 14d determines whether or not a carelessness state is detected (S10). That is, whether the look-
ついで、ＤＳＳ１４はフラグがオンか否かを判定する（Ｓ１５）。このフラグは例えばイグニションオンによりオフとなるフラグであって、不注意状態が検知された場合に車両制御を実行するか否かを判定するフラグとなる。
Next, the
フラグがオフの場合（Ｓ１５のＹｅｓ）、ＤＳＳ１４は警報音の吹鳴など所定の車両制御を実行する（Ｓ２０）。
When the flag is off (Yes in S15), the
ついで、不注意検知精度判定手段１４ｄは、走行中の不注意状態が精度判定閾値以上継続しているか否かを判定する（Ｓ３０）。精度判定閾値は、脇見検知と居眠り検知のそれぞれに適切な時間であるが、脇見検知の場合は閾値時間Ｋより長く（例えば、Ｋ×２以上）、居眠り検知の場合は閾値時間Ｌより長い（例えば、Ｌ×２以上）。 Next, the carelessness detection accuracy determination means 14d determines whether or not the carelessness state during traveling continues for more than the accuracy determination threshold (S30). The accuracy determination threshold is an appropriate time for each of the aside detection and the detection of a nap, but is longer than the threshold time K (for example, K × 2 or more) in the case of a detection of aside, and longer than the threshold time L in the case of a nap detection ( For example, L × 2 or more).
不注意状態が精度判定閾値以上継続していない場合（Ｓ３０のＮｏ）、ＤＳＳ１４は車両制御を終了する（Ｓ４０）。
When the careless state does not continue for the accuracy determination threshold or more (No in S30), the
不注意状態が精度判定閾値以上継続している場合（Ｓ３０のＹｅｓ）、車両走行中に長時間脇見し又は居眠りする可能性は低く、この場合は不注意状態を誤検知していると考えられるため、車両制御制限手段１４ｅは不注意状態の検知に基づく車両制御を禁止する（Ｓ５０）。なお、ステップＳ２０の車両制御が継続していた場合、車両制御の禁止によりこれが終了される。 If the careless state continues for more than the accuracy judgment threshold (Yes in S30), it is unlikely that the user will look aside or fall asleep while driving the vehicle. In this case, it is considered that the careless state is erroneously detected. Therefore, the vehicle control restriction unit 14e prohibits vehicle control based on detection of the careless state (S50). In addition, when the vehicle control of step S20 is continuing, this is complete | finished by prohibition of vehicle control.
また、不注意検知精度判定手段１４ｄは、車両制御の禁止をＲＡＭやＥＥＰＲＯＭ等のメモリに記録する（Ｓ５５）。記録内容は、過去の所定期間に生じた車両制御の禁止の日時情報である。 Further, the carelessness detection accuracy determination unit 14d records the prohibition of vehicle control in a memory such as a RAM or an EEPROM (S55). The recorded content is date and time information for prohibiting vehicle control that has occurred in a predetermined period in the past.
ついで、車両制御制限手段１４ｅは、車両制御の禁止の解除条件が成立したか否かを判定する（Ｓ６１）。解除条件は、例えば、所定時間の経過、又は、脇見若しくは居眠りについて注意状態が検知されることである。 Next, the vehicle control restriction unit 14e determines whether or not a vehicle control prohibition release condition is satisfied (S61). The release condition is, for example, that a caution state is detected with respect to the passage of a predetermined time, or looking aside or falling asleep.
解除条件が成立した場合（Ｓ６１のＹｅｓ）、車両制御制限手段１４ｅは車両制御の禁止を解除する（Ｓ７０）。 When the release condition is satisfied (Yes in S61), the vehicle control restriction unit 14e releases the prohibition of the vehicle control (S70).
ついで、車両制御制限手段１４ｅは、不注意状態が精度判定閾値以上に継続した場合の車両制御の禁止（Ｓ５０）の頻度が所定以上か否かを判定する（Ｓ７１）。車両制御の禁止の頻度は、ステップＳ５５で記録した日時情報に基づき所定時間内に禁止回数が何回あるかにより求められる。 Next, the vehicle control restriction unit 14e determines whether or not the frequency of vehicle control prohibition (S50) when the inattention state continues to be equal to or higher than the accuracy determination threshold value is greater than or equal to a predetermined value (S71). The frequency of prohibiting vehicle control is determined by the number of prohibitions within a predetermined time based on the date / time information recorded in step S55.
車両制御の禁止の頻度が所定以上の場合（Ｓ７１のＹｅｓ）、車両制御制限手段１４ｅはフラグをオンに設定する（Ｓ７３）。したがって、頻繁に車両制御が禁止される場合、ステップＳ２０の車両制御は実行されない（Ｓ１５）。 When the frequency of prohibiting vehicle control is equal to or higher than a predetermined value (Yes in S71), the vehicle control restriction unit 14e sets the flag to ON (S73). Therefore, when vehicle control is frequently prohibited, the vehicle control in step S20 is not executed (S15).
車両制御の禁止の頻度が所定以上でない場合（Ｓ７１のＮｏ）、車両制御制限手段１４ｅは１トリップ中か否かを判定する（Ｓ７２）。 When the frequency of prohibition of vehicle control is not equal to or higher than the predetermined value (No in S71), the vehicle control restriction unit 14e determines whether one trip is being performed (S72).
そして、１トリップ中でない場合（Ｓ７２のＮｏ）、車両制御制限手段１４ｅはフラグをオフに設定する（Ｓ７４）。この判定がＮｏになるのは、イグニッションをオンした後に１度だけであるので、オンになったフラグは１トリップ中その状態を保つため、頻繁に車両制御が禁止される場合、１トリップ中はステップＳ２０の車両制御が実行されない。 If it is not during one trip (No in S72), the vehicle control restriction unit 14e sets the flag to off (S74). Since this determination is No only once after the ignition is turned on, the flag that is turned on maintains its state during one trip. Therefore, when vehicle control is frequently prohibited, during one trip The vehicle control in step S20 is not executed.
以上の処理により、不注意状態が精度判定閾値以上継続することが頻繁に起こった場合に車両制御を禁止することで、誤った車両制御を防止することができる。 By the above processing, erroneous vehicle control can be prevented by prohibiting vehicle control when the careless state frequently continues for the accuracy determination threshold or more.
〔ＰＣＳの早期制御において頻繁に不注意状態が精度判定閾値以上に継続した場合の早期制御の禁止〕
これまでは不注意状態に対する車両制御の禁止について説明したが、上記のように障害物を検知した場合、ＰＣＳは警報音の吹鳴などを早期に出力する早期制御を実行するため、この早期制御においても、不注意状態の検知精度が所定以下であることによる早期制御が頻発すると、運転者は煩わしさを感じざるを得ない。そこで、ＰＣＳの早期制御において頻繁に不注意状態が精度判定閾値以上に継続した場合には、車両制御を禁止する不注意警告装置１０について説明する。
[Prohibition of early control when inadvertent state frequently continues beyond the accuracy judgment threshold in early control of PCS]
Until now, the prohibition of vehicle control for carelessness has been described. However, when an obstacle is detected as described above, the PCS executes early control that outputs an alarm sound early. However, if early control frequently occurs due to the detection accuracy of the careless state being equal to or less than a predetermined value, the driver has to feel annoyance. Therefore, the
図７は、不注意警告装置１０が、不注意状態が精度判定閾値以上に継続した場合に早期制御を禁止すると共に、頻発した場合は不注意状態の検知に基づく早期制御を禁止する制御手順のフローチャート図を示す。なお、図７において図６と同一ステップには同一の符号を付した。
FIG. 7 shows a control procedure in which the
車両の走行中、衝突判定手段１４ｃはミリ波レーダ装置１３からの信号により障害物と衝突のおそれがあるか否かの判定を繰り返す（Ｓ１）。この障害物の検出は、早期制御に対応するため、緩和した衝突判定閾値により行う。すなわち、ＴＴＣが所定値Ｅ（＞Ｄ）以下であって、車両の正面方向に対し左右に所定角度δ（＞θ）以内に障害物が検出される場合に衝突の可能性があると判定する。
While the vehicle is traveling, the
障害物と衝突のおそれがある場合（Ｓ１のＹｅｓ）、不注意検知精度判定手段１４ｄは、不注意状態が検知されたか否かを判定する（Ｓ１０）。すなわち、脇見検知手段１４ａが、顔画像から検出された顔向き度に基づき例えば所定値Ａ以上の顔向き度が閾値時間Ｋ以上継続したと判定したか、又は、居眠り検知手段１４ｂが、閾値時間Ｌ以上に閉眼時間が継続したと判定したか、を判定する。
When there is a possibility of collision with an obstacle (Yes in S1), the carelessness detection accuracy determination unit 14d determines whether or not a carelessness state is detected (S10). That is, whether the look-
ついで、ＤＳＳ１４はフラグがオンか否かを判定する（Ｓ１５）。このフラグは例えばイグニションオンによりオフとなるフラグであって、不注意状態が検知された場合に早期制御を実行するか否かを判定するフラグとなる。
Next, the
不注意状態の検知がない場合（Ｓ１０のＮｏ）、又は、フラグがオンの場合（Ｓ１５のＹｅｓ）、ＤＳＳ１４は早期制御を行わない通常の衝突判定閾値（ＴＴＣに対し所定値Ｄ、障害物の方向に対し所定角度θ）に基づきＰＣＳ制御を実行する（Ｓ１７）。
When no carelessness is detected (No in S10) or when the flag is on (Yes in S15), the
フラグがオフの場合（Ｓ１５Ｎｏ）、ＤＳＳ１４はＰＣＳ制御における警報音の吹鳴など早期制御を実行する（Ｓ１６）。
When the flag is off (No in S15), the
ついで、不注意検知精度判定手段１４ｄは、走行中の不注意状態が精度判定閾値以上継続しているか否かを判定する（Ｓ３０）。精度判定閾値は、脇見検知と居眠り検知のそれぞれに適切な時間であるが、脇見検知の場合は閾値時間Ｋより長く（例えば、Ｋ×２以上）、居眠り検知の場合は閾値時間Ｌより長い（例えば、Ｌ×２以上）。 Next, the carelessness detection accuracy determination means 14d determines whether or not the carelessness state during traveling continues for more than the accuracy determination threshold (S30). The accuracy determination threshold is an appropriate time for each of the aside detection and the detection of a nap, but is longer than the threshold time K (for example, K × 2 or more) in the case of a detection of aside, and longer than the threshold time L in the case of a nap detection ( For example, L × 2 or more).
不注意状態が精度判定閾値以上継続していない場合（Ｓ３０のＮｏ）、ＤＳＳ１４は車両制御を終了する（Ｓ４０）。
When the careless state does not continue for the accuracy determination threshold or more (No in S30), the
不注意状態が精度判定閾値以上継続している場合（Ｓ３０のＹｅｓ）、車両走行中に長時間脇見し又は居眠りする可能性は低く、この場合は不注意状態を誤検知していると考えられるため、車両制御制限手段１４ｅは不注意状態の検知に基づく早期制御を禁止する（Ｓ５１）。なお、ステップＳ１６の早期制御が継続していた場合、早期制御の禁止によりこれが終了される。なお、早期制御を禁止しても、ＰＣＳ制御は衝突判定閾値に基づき実行される。 If the careless state continues for more than the accuracy judgment threshold (Yes in S30), it is unlikely that the user will look aside or fall asleep while driving the vehicle. In this case, it is considered that the careless state is erroneously detected. Therefore, the vehicle control restriction unit 14e prohibits early control based on detection of the careless state (S51). In addition, when the early control of step S16 is continuing, this is complete | finished by prohibition of early control. Even if early control is prohibited, PCS control is executed based on the collision determination threshold.
また、不注意検知精度判定手段１４ｄは、早期制御の禁止をＲＡＭやＥＥＰＲＯＭ等のメモリに記録する（Ｓ５５）。記録内容は、過去の所定期間に生じた早期制御の禁止の日時情報である。 The carelessness detection accuracy determination unit 14d records the prohibition of early control in a memory such as a RAM or an EEPROM (S55). The recorded content is date and time information for prohibiting early control that occurred in a predetermined period in the past.
ついで、車両制御制限手段１４ｅは、先行車が検出されるか否かを判定する（Ｓ６２）。先行車の後ろを走行している場合、運転者は正面方向に顔を向けると考えられるため、長時間にわたり不注意状態が検知されることは考えにくい。先行車の有無の判定は、ステップＳ１の障害物の判定よりも検知範囲を狭めることで不注意状態の検知精度が所定以下であることによる早期制御の禁止を適切に解除できる。先行車が検出されている場合（Ｓ６２のＹｅｓ）、早期制御の禁止を継続する。 Next, the vehicle control restriction unit 14e determines whether or not a preceding vehicle is detected (S62). When driving behind a preceding vehicle, it is unlikely that an inattention state is detected over a long period of time because the driver is considered to turn his face toward the front. The determination of the presence or absence of the preceding vehicle can appropriately cancel the prohibition of early control due to the detection accuracy of the careless state being less than or equal to the predetermined range by narrowing the detection range as compared with the determination of the obstacle in step S1. When the preceding vehicle is detected (Yes in S62), prohibition of early control is continued.
先行車が検出されない場合（Ｓ６２のＮｏ）、車両制御制限手段１４ｅは早期制御の禁止を解除する（Ｓ７０）。先行車が検出されない場合は、障害物がないのと同じ状況となるのでＰＣＳ制御が実行されないため、不注意状態の検知が長時間継続していても早期制御又はＰＣＳ制御に影響がない。 When the preceding vehicle is not detected (No in S62), the vehicle control restriction unit 14e cancels the prohibition of the early control (S70). When no preceding vehicle is detected, the situation is the same as when there is no obstacle, and PCS control is not executed. Therefore, even if detection of an inattentive state continues for a long time, early control or PCS control is not affected.
ついで、車両制御制限手段１４ｅは、不注意状態が精度判定閾値以上に継続した場合の早期制御の禁止（Ｓ５１）の頻度が所定以上か否かを判定する（Ｓ７１）。早期制御の禁止の頻度は、ステップＳ５５で記録した日時情報に基づき所定時間内に禁止回数が何回あるかにより求められる。 Next, the vehicle control restriction unit 14e determines whether or not the frequency of the early control prohibition (S51) when the inattentive state continues to be equal to or greater than the accuracy determination threshold is greater than or equal to a predetermined value (S71). The frequency of prohibition of early control is obtained by the number of prohibitions within a predetermined time based on the date / time information recorded in step S55.
早期制御の禁止の頻度が所定以上の場合（Ｓ７１のＹｅｓ）、車両制御制限手段１４ｅはフラグをオンに設定する（Ｓ７３）。したがって、頻繁に早期制御が禁止される場合、ステップＳ１６の車両制御は実行されない（Ｓ１５）。 When the frequency of prohibition of early control is equal to or higher than a predetermined value (Yes in S71), the vehicle control restriction unit 14e sets the flag to ON (S73). Therefore, when early control is frequently prohibited, the vehicle control in step S16 is not executed (S15).
早期制御の禁止の頻度が所定以上でない場合（Ｓ７１のＮｏ）、車両制御制限手段１４ｅは１トリップ中か否かを判定する（Ｓ７２）。 When the frequency of prohibition of early control is not equal to or higher than the predetermined value (No in S71), the vehicle control restriction unit 14e determines whether one trip is being performed (S72).
そして、１トリップ中でない場合（Ｓ７２のＮｏ）、車両制御制限手段１４ｅはフラグをオフに設定する（Ｓ７４）。この判定がＮｏになるのは、イグニッションをオンした後に１度だけであるので、オンになったフラグは１トリップ中その状態を保つため、頻繁に早期制御が禁止される場合、１トリップ中はステップＳ１６の早期制御が実行されない。 If it is not during one trip (No in S72), the vehicle control restriction unit 14e sets the flag to off (S74). Since this determination becomes No only once after the ignition is turned on, the flag that is turned on maintains its state during one trip, so if early control is frequently prohibited, during one trip The early control in step S16 is not executed.
以上の処理により、早期の制御のため衝突判定手段１４ｃが障害物の検知範囲を広く設定しても、不注意状態が精度判定閾値以上継続することが頻繁に起こった場合に早期制御を禁止することで、誤った車両制御を防止し運転者が煩わしさを感じることを防止できる。 With the above processing, even if the collision determination means 14c sets a wide obstacle detection range for early control, early control is prohibited when the careless state frequently continues beyond the accuracy determination threshold. Thus, erroneous vehicle control can be prevented and the driver can be prevented from feeling annoyed.
本実施例の不注意警告装置１０は、脇見又は居眠りの誤検知による誤った車両制御、PCSの誤った早期制御を低減することができる。
The
本実施例では、不注意状態の検知精度が所定以下の場合、又は、これにさらに直進走行していることを組み合わせて不注意状態の検知精度を判定し、誤った車両制御を低減する不注意警告装置１０について説明する。
In this embodiment, inadvertent state detection accuracy is less than a predetermined value, or in addition to this, the inadvertent state detection accuracy is determined by combining the fact that the vehicle is traveling straight ahead, thereby reducing erroneous vehicle control. The
本実施例では、不注意状態の検知精度が所定以下か否かを不注意検知精度判定記憶部２３に記憶しておき、車両制御制限手段１４ｅが不注意検知精度判定記憶部２３を参照して車両制御を実行する。
In the present embodiment, whether or not the detection accuracy of the careless state is equal to or less than a predetermined value is stored in the careless detection accuracy
図８（ａ）（ｂ）は不注意検知精度判定手段１４ｄが不注意状態の検知精度を判定する手順のフローチャート図を示す。図８（ａ）（ｂ）は、例えばイグニッションオンによりスタートする。イグニッションオン時に不注意検知精度判定記憶部２３には不注意状態の検知精度が正常であることを示す「ＯＫ」が記憶される。
FIGS. 8A and 8B are flowcharts showing a procedure in which the carelessness detection accuracy determination unit 14d determines the carelessness detection accuracy. 8A and 8B are started by, for example, turning on the ignition. When the ignition is on, the careless detection accuracy
まず、不注意検知精度判定手段１４ｄは、精度判定閾値以上、継続して不注意状態が検知されているか否かを判定する（Ｓ１００）。精度判定閾値は例えば、脇見検知の場合は閾値時間Ｋより長い時間（例えば、Ｋ×２以上）、居眠り検知の場合は閾値時間Ｌより長い時間（例えば、Ｌ×２以上）である。 First, the carelessness detection accuracy determination unit 14d determines whether or not a carelessness state is continuously detected for an accuracy determination threshold value or more (S100). The accuracy determination threshold is, for example, a time longer than the threshold time K (for example, K × 2 or more) in the case of aside detection, and a time longer than the threshold time L (for example, L × 2 or more) in the case of a dozing detection.
精度判定閾値以上、継続して不注意状態が検知されていない場合（Ｓ１００のＮｏ）は図８（ａ）の処理を繰り返し、精度判定閾値以上、継続して不注意状態が検知された場合（Ｓ１００のＹｅｓ）、不注意検知精度判定手段１４ｄは、不注意検知精度判定記憶部２３に「ＮＧ」を記憶させる（Ｓ１１０）。 When the careless state is not detected continuously for the accuracy determination threshold or more (No in S100), the process of FIG. 8A is repeated, and when the careless state is continuously detected for the accuracy determination threshold or more ( In S100, the carelessness detection accuracy determination unit 14d stores “NG” in the carelessness detection accuracy determination storage unit 23 (S110).
そして、不注意状態の検知精度が所定以上に戻ったか否かを判定する解除判定処理に移行する（Ｓ１２０）。 And it shifts to the cancellation | release determination process which determines whether the detection accuracy of the careless state returned to more than predetermined (S120).
なお、図８（ｂ）のステップＳ１０１に示すように、車両が直進走行しているか否かをさらに判定して不注意状態の検知精度を判定してもよい。ステップＳ１０１において不注意検知精度判定手段１４ｄは、操舵角センサ２１の検出する操舵角に基づき、精度判定閾値以上、不注意状態が検知されるか否かを判定している間、車両が直進走行していたか否かを判定する。したがって、実際には車両がバックやカーブを走行中していたため、精度判定閾値以上の時間の不注意状態が検知された場合に、不注意状態の検知精度を正確に判定することができる。なお、直進走行しているか否かは、ヨーレートセンサ、白線認識情報等をもちいてもよい。
In addition, as shown in step S101 of FIG. 8B, it may be further determined whether or not the vehicle is traveling straight, and the detection accuracy of the careless state may be determined. In step S101, the carelessness detection accuracy determination unit 14d determines whether or not an inattention state is detected beyond the accuracy determination threshold based on the steering angle detected by the
また、所定時間内の「ＮＧ」判定回数が所定回数以上の場合、解除判定処理への移行を禁止してもよい。これにより、１トリップ中は不注意検知精度判定記憶部２３の判定結果が「ＮＧ」固定される。
Further, when the number of “NG” determinations within a predetermined time is greater than or equal to a predetermined number, the transition to the release determination process may be prohibited. Thereby, the determination result of the carelessness detection accuracy
解除判定処理について図９フローチャート図に基づき説明する。不注意検知精度判定記憶部２３に「ＮＧ」が記憶されると、不注意検知精度判定手段１４ｄは解除判定処理を繰り返す。
The cancellation determination process will be described with reference to the flowchart of FIG. When “NG” is stored in the carelessness detection accuracy
不注意検知精度判定手段１４ｄは、「ＮＧ」が記憶されてから所定時間が経過したか否か、又は、注意状態を示す正面の顔向き度若しくは開眼が検知されたか否かを判定する（Ｓ２００）。所定時間の経過により不注意状態を正常に検知可能となる可能性があり、また、正面方向の顔向き度又は開眼状態の眼の開度が検知された場合は不注意状態を精度よく検知可能となったと判断できるためである。 The carelessness detection accuracy determination unit 14d determines whether or not a predetermined time has elapsed since “NG” was stored, or whether or not the degree of frontal face orientation indicating an attention state or eye opening was detected (S200). ). There is a possibility that carelessness can be detected normally after a certain amount of time has passed. In addition, carelessness can be accurately detected when the degree of face orientation in the front direction or the opening degree of the eyes in the open state is detected. It is because it can be judged that it became.
「ＮＧ」が記憶されてから所定時間が経過しておらず、又は、正面の顔向き度若しくは開眼が検知されない場合（Ｓ２００のＮｏ）、不注意検知精度判定手段１４ｄは図９の処理を繰り返し、「ＮＧ」が記憶されてから所定時間が経過したか、又は、正面の顔向き度若しくは開眼が検知された場合（Ｓ２００のＹｅｓ）、不注意検知精度判定手段１４ｄは不注意検知精度判定記憶部２３に「ＯＫ」を記憶させる（Ｓ２１０）。
If the predetermined time has not elapsed since the “NG” is stored, or the degree of frontal face orientation or eye opening is not detected (No in S200), the carelessness detection accuracy determination unit 14d repeats the process of FIG. When the predetermined time has elapsed since “NG” is stored, or when the degree of frontal face orientation or eye opening is detected (Yes in S200), the carelessness detection accuracy determination unit 14d stores the carelessness detection accuracy determination memory. The
そして、不注意状態の検知精度が所定以下か否かを判定する不注意検知精度判定処理に移行する（Ｓ２２０）。以上のように、不注意検知精度判定手段１４ｄは不注意検知精度判定処理と解除判定処理を交互に繰り返す。 Then, the process proceeds to careless detection accuracy determination processing for determining whether or not the detection accuracy of the careless state is equal to or less than a predetermined value (S220). As described above, the carelessness detection accuracy determination unit 14d alternately repeats the carelessness detection accuracy determination processing and the release determination processing.
車両制御制限手段１４ｅは車両制御するに当たり不注意検知精度判定記憶部２３の記憶内容を参照して車両制御を禁止する。すなわち、不注意状態が検知された場合、不注意検知精度判定記憶部２３の記憶内容が「ＮＧ」の場合には、車両制御制限手段１４ｅは警報音の吹鳴などの車両制御を禁止する。また、障害物との衝突の可能性が検出された場合に、不注意検知精度判定記憶部２３の記憶内容が「ＮＧ」の場合、車両制御制限手段１４ｅはＰＣＳの早期制御を禁止する。
The vehicle control restriction unit 14e prohibits vehicle control with reference to the stored contents of the carelessness detection accuracy
ところで、不注意検知精度判定記憶部２３の記憶内容が「ＮＧ」の場合、一律に早期制御を禁止せずに、衝突判定閾値を制御してもよい。衝突判定閾値を制御することで障害物検知範囲を調整できるので、説明のため障害物検知範囲として説明する。
By the way, when the storage content of the carelessness detection accuracy
図１０は、衝突判定閾値の制御の一例を示す図である。図１０（ａ）に点線で示したミリ波レーダ装置１３の障害物検知範囲は早期制御のための障害物検知範囲である。しかしながら、このように検知範囲を拡大するとミリ波レーダ装置１３が不要な障害物（障害物でない、回避可能）を検出する可能性が増すため、不注意検知精度判定記憶部２３の記憶内容が「ＮＧ」の場合は、車両の誤制御となりやすい。そこで、例えば、車両制御制限手段１４ｅは早期制御しない場合の障害物検知範囲（衝突判定閾値を大きくする）にてＰＣＳ制御を実行することで、車両の誤制御を低減できる（実質的に早期制御を禁止した場合と同様）。
FIG. 10 is a diagram illustrating an example of the control of the collision determination threshold value. The obstacle detection range of the millimeter
また、図１０（ｂ）に示すように、顔向き度の方向の障害物検知範囲を狭めてもよい。不注意検知精度判定記憶部２３の記憶内容が「ＮＧ」の場合は、運転者が正面方向を向いているのに脇見の顔向き度が検知された状態であるが、仮に顔向き度の方向を向いていた場合は早期制御の必要はなく、顔向き度と反対方向については障害物検知範囲を早期制御と同程度にすることで安全サイドの制御が可能となる（顔向き方向の衝突判定閾値を大きくする）。なお、顔向き度の大きさに応じて、障害物検知範囲を可変としてもよい。
Further, as shown in FIG. 10B, the obstacle detection range in the direction of the face orientation may be narrowed. When the content stored in the carelessness detection accuracy
以上のように、本実施例の不注意警告装置１０は、不注意状態の検知精度が所定以下であることによる車両制御を防止して、運転者が煩わしさを感じることを防止できる。
As described above, the
〔ステアリングホイール把持位置の検出による車両制御の禁止〕
光の影響等による不注意状態の検知精度の低下は不安定な場合が多いが、カメラ１１に顔以外の物が大きく映り込んだ場合も、顔向き度又は眼の開度の検知精度が低下しやすい。
[Vehicle control prohibited by detection of steering wheel grip position]
Decrease in detection accuracy of carelessness due to the influence of light and the like is often unstable. However, even when an object other than the face is reflected in the camera 11, the detection accuracy of the degree of face orientation or the opening of the eye is reduced. It's easy to do.
図１１は、運転者の腕が映り込んだ顔画像の一例を示す。カメラ１１がステアリングホイール２２を挟んで運転者の反対側に配置された場合に、運転者がステアリングホイール２２の上部（前方部）を把持していると、図１１のように運転者の腕が顔の顔横に撮影される。この腕は縦長のエッジ情報として処理されるため、誤った顔向き度及び眼の開度が検知される可能性が高まる。そこで、把持部検出手段２４がステアリングホイール２２の上部又はその近辺を把持していることを検知した場合、不注意検知精度判定手段１４ｄは不注意検知精度判定記憶部２３に「ＮＧ」を記憶させる。この場合の「ＯＫ」への解除条件は、把持部検出手段２４がステアリングホイール２２の上部又はその近辺を把持していないことの検知である。
FIG. 11 shows an example of a face image in which the driver's arm is reflected. When the camera 11 is arranged on the opposite side of the driver with the
したがって、運転者がステアリングホイール２２の上部等を把持している場合は、車両制御制限手段１４ｅは、不注意状態の検知に基づく警報音の吹鳴などの車両制御を禁止し、また、障害物との衝突の可能性が検出された場合にはＰＣＳの早期制御を禁止する。なお、図１０（ａ）（ｂ）のように衝突判定閾値を制御してもよい。
Therefore, when the driver is gripping the upper part of the
ステアリングホイール２２の把持位置に基づいた不注意検知精度判定記憶部２３の記憶内容の設定は、不注意状態の検知精度が所定以下である場合の一形態であるので、図８（ａ）（ｂ）の不注意検知精度判定、図９の解除判定と組み合わせて処理することが好適である。この場合、ステアリングホイール２２の把持位置に基づく不注意状態の検知精度の判定を優先とすることで、ステアリングホイール２２の把持位置に基づく不注意状態の検知精度の低下を確実に検出できる。
Since the setting of the storage contents of the carelessness detection accuracy
以上のように、顔画像に運転者の腕が撮影されたことによる誤った車両制御を防止して、運転者が煩わしさを感じることを防止できる。 As described above, it is possible to prevent erroneous vehicle control due to the driver's arm being photographed in the face image, and to prevent the driver from feeling troublesome.
本実施形態の不注意警告装置１０によれば、不注意状態の検知精度を判定することで、不注意状態の誤検知による車両機器の誤制御を低減することができる。
According to the
１０ 不注意警告装置
１１ カメラ
１２ 画像処理ＥＣＵ
１２ａ 顔向き検出手段
１２ｂ 眼の開閉検出手段
１３ ミリ波レーダ装置
１４ ドライバーズサポート（ＤＳＳ）ＥＣＵ
１４ａ 脇見検知手段
１４ｂ 居眠り検知手段
１４ｃ 衝突判定手段
１４ｄ 不注意検知精度判定手段
１４ｅ 車両制御制限手段
１５ ブレーキＥＣＵ
１６ ブレーキアクチュエータ
１７ メータＥＣＵ
１８ ブザー出力器
１９ 警告ランプ
２０ 不注意検知装置
２１ 操舵角センサ
２２ ステアリングホイール
２３ 不注意検知精度判定記憶部
２４ 把持部検出手段
２５ 車両制御装置のプログラム
３０ 車両制御装置
10 Inattention Warning Device 11
12a Face orientation detection means 12b Eye open / close detection means 13 Millimeter
14a Armpit detection means 14b Dozing detection means 14c Collision determination means 14d Careless detection accuracy determination means 14e Vehicle control restriction means 15 Brake ECU
16
18
Claims (8)
車両走行中に、前記閾値時間よりも長時間の精度判定閾値以上の間、継続して不注意状態となる精度低下状態を検知する不注意検知精度判定手段と、
前記精度低下状態の場合、前記車両機器の制御を制限する車両制御制限手段と、
車両周囲の障害物を検出する障害物検知手段と、
前記障害物を検出した場合であって、不注意状態の場合に不注意状態でない場合よりも早期に前記車両機器を制御する車両制御手段と、を有し、
前記精度低下状態の場合、前記車両制御制限手段は早期の前記車両機器の制御を、前記障害物検知手段が先行車両を検出するまで禁止する、
ことを特徴とする不注意警告装置。 In a careless warning device that controls vehicle equipment when a driver's carelessness is detected continuously for a threshold time or longer,
Inadvertent detection accuracy determination means for detecting a reduced accuracy state that continues to be inadvertent during the vehicle traveling for more than the accuracy determination threshold for a longer time than the threshold time;
In the case of the reduced accuracy state, vehicle control limiting means for limiting control of the vehicle device;
Obstacle detection means for detecting obstacles around the vehicle;
Vehicle control means for controlling the vehicle equipment at an earlier stage than when the obstacle is detected and in a careless state is not a careless state,
In the case of the reduced accuracy state, the vehicle control restriction unit prohibits early control of the vehicle equipment until the obstacle detection unit detects a preceding vehicle.
A careless warning device characterized by that.
ことを特徴とする請求項１記載の不注意警告装置。 The vehicle control limiting means limits the control of the vehicle device for a predetermined time;
The inattention warning device according to claim 1.
ことを特徴とする請求項１記載の不注意警告装置。 The vehicle control limiting means limits the control of the vehicle equipment during one trip;
The inattention warning device according to claim 1.
ことを特徴とする請求項１記載の不注意警告装置。 The vehicle control limiting means limits the control of the vehicle equipment until no carelessness is detected;
The inattention warning device according to claim 1.
ことを特徴とする請求項２記載の不注意警告装置。 When the carelessness detection accuracy determination means detects the reduced accuracy state a predetermined number of times or more in a predetermined period, the vehicle control restriction means prohibits control of the vehicle device during one trip.
The inattention warning device according to claim 2 characterized by things.
前記検出手段が運転者の腕部が撮影されるおそれがあることを検出した場合、前記車両 制御制限手段は、前記精度低下状態であるか否かに関わらず、前記車両機器の制御を禁止する、
ことを特徴とする請求項１記載の不注意警告装置。 The camera that shoots the driver's face image to detect the careless state has detection means for detecting whether or not the driver's arm may be shot.
When the detection means detects that the driver's arm may be photographed, the vehicle control restriction means prohibits the control of the vehicle device regardless of whether the accuracy is reduced or not. ,
The inattention warning device according to claim 1.
不注意検知精度判定手段が、車両走行中に、前記閾値時間よりも長時間の精度判定閾値以上の間、継続して不注意状態となる精度低下状態を検知するステップと、
車両制御制限手段が、前記精度低下状態の場合、前記車両機器の制御を制限するステップと、
障害物検知手段が、車両周囲の障害物を検出する障害物検知するステップと、
前記障害物検知手段が前記障害物を検出した場合であって、運転者が不注意状態の場合に、車両制御手段が不注意状態でない場合よりも早期に前記車両機器を制御するステップと、を有し、
前記精度低下状態の場合、前記車両制御制限手段は早期の前記車両機器の制御を、前記障害物検知手段が先行車両を検出するまで禁止する、
ことを特徴とする不注意警告装置の車両機器制御方法。 In the vehicle equipment control method of a careless warning device that controls a vehicle equipment when a driver's careless state is detected continuously for a threshold time or longer,
The careless detection accuracy determining means detects a reduced accuracy state that continuously becomes inattentive for a period of time longer than the accuracy determination threshold value longer than the threshold time during traveling of the vehicle;
The vehicle control limiting means limiting the control of the vehicle device when the accuracy-decreasing state; and
An obstacle detecting means for detecting an obstacle for detecting obstacles around the vehicle;
A step of controlling the vehicle device earlier when the obstacle detection means detects the obstacle and when the driver is inadvertent, than when the vehicle control means is not inadvertent. Have
In the case of the reduced accuracy state, the vehicle control restriction unit prohibits early control of the vehicle equipment until the obstacle detection unit detects a preceding vehicle.
A vehicle equipment control method for an inattention warning device.
車両走行中に、前記閾値時間よりも長時間の精度判定閾値以上の間、継続して不注意状態となる精度低下状態を検知する不注意検知精度判定ステップと、
前記精度低下状態の場合、前記車両機器の制御を制限する車両制御制限ステップと、
車両周囲の障害物を検出する障害物検知する障害物検知ステップと、
前記障害物検知手段が前記障害物を検出した場合であって、運転者が不注意状態の場合に、不注意状態でない場合よりも早期に前記車両機器を制御する車両制御ステップと、
前記精度低下状態の場合、早期の前記車両機器の制御を、前記障害物検知手段が先行車両を検出するまで禁止するステップと、
実行させるプログラム。 In the careless warning device that controls the vehicle equipment when the driver's carelessness state is continuously detected for more than the threshold time,
Inadvertent detection accuracy determination step for detecting a reduced accuracy state that continuously becomes inadvertent during the vehicle traveling for longer than the accuracy determination threshold for a longer time than the threshold time;
In the case of the reduced accuracy state, a vehicle control restriction step for restricting control of the vehicle device;
An obstacle detection step for detecting obstacles around the vehicle;
A vehicle control step of controlling the vehicle device earlier when the obstacle detection means detects the obstacle, and when the driver is careless, than when it is not careless;
In the case of the reduced accuracy state, prohibiting early control of the vehicle equipment until the obstacle detection means detects a preceding vehicle;
The program to be executed.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2007038481A JP4788624B2 (en) | 2007-02-19 | 2007-02-19 | Careless warning device, vehicle equipment control method of careless warning device, and vehicle control device program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2007038481A JP4788624B2 (en) | 2007-02-19 | 2007-02-19 | Careless warning device, vehicle equipment control method of careless warning device, and vehicle control device program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2008204107A JP2008204107A (en) | 2008-09-04 |
| JP4788624B2 true JP4788624B2 (en) | 2011-10-05 |
Family
ID=39781564
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2007038481A Active JP4788624B2 (en) | 2007-02-19 | 2007-02-19 | Careless warning device, vehicle equipment control method of careless warning device, and vehicle control device program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4788624B2 (en) |
Families Citing this family (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4900460B2 (en) * | 2009-12-14 | 2012-03-21 | 株式会社デンソー | Wheel grip detection device for steering device, program |
| JP2012084068A (en) * | 2010-10-14 | 2012-04-26 | Denso Corp | Image analyzer |
| US9292471B2 (en) | 2011-02-18 | 2016-03-22 | Honda Motor Co., Ltd. | Coordinated vehicle response system and method for driver behavior |
| US8698639B2 (en) | 2011-02-18 | 2014-04-15 | Honda Motor Co., Ltd. | System and method for responding to driver behavior |
| US9751534B2 (en) | 2013-03-15 | 2017-09-05 | Honda Motor Co., Ltd. | System and method for responding to driver state |
| JP6226135B2 (en) * | 2014-05-19 | 2017-11-08 | マツダ株式会社 | Doze driving prevention device |
| JP2018133007A (en) * | 2017-02-16 | 2018-08-23 | いすゞ自動車株式会社 | Alarm apparatus |
| JP2018151683A (en) * | 2017-03-09 | 2018-09-27 | オムロン株式会社 | Monitoring device, method, and program |
| JP7485521B2 (en) | 2020-02-28 | 2024-05-16 | 株式会社Subaru | Vehicle control device |
| JP2022077282A (en) * | 2020-11-11 | 2022-05-23 | 株式会社コムテック | Warning system |
| JP7081844B2 (en) * | 2020-11-11 | 2022-06-07 | 株式会社コムテック | Detection system |
| DE112021007703T5 (en) | 2021-08-12 | 2024-03-14 | Mitsubishi Electric Corporation | OCCUPANT CONDITION ASSESSMENT DEVICE, METHOD FOR ASSESSING THE CONDITION OF AN OCCUPANT AND OCCUPANT CONDITION ASSESSMENT SYSTEM |
| WO2023243069A1 (en) * | 2022-06-17 | 2023-12-21 | 三菱電機株式会社 | Inattentiveness determination device and inattentiveness determination method |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH07257220A (en) * | 1994-03-22 | 1995-10-09 | Toyota Motor Corp | Vigilance evaluation device for vehicle |
| JP2000301962A (en) * | 1999-04-21 | 2000-10-31 | Niles Parts Co Ltd | Eye condition detecting device and alarm device for sleep during driving |
| JP3852294B2 (en) * | 2001-03-22 | 2006-11-29 | 日産自動車株式会社 | Dozing detection device |
| JP4193765B2 (en) * | 2004-01-28 | 2008-12-10 | トヨタ自動車株式会社 | Vehicle travel support device |
| JP4397719B2 (en) * | 2004-03-30 | 2010-01-13 | 本田技研工業株式会社 | Gaze detection device |
-
2007
- 2007-02-19 JP JP2007038481A patent/JP4788624B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2008204107A (en) | 2008-09-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4788624B2 (en) | Careless warning device, vehicle equipment control method of careless warning device, and vehicle control device program | |
| JP4400624B2 (en) | Dozing prevention device and method | |
| JP5125745B2 (en) | Driving support device and driving support method | |
| US7835834B2 (en) | Method of mitigating driver distraction | |
| US10417512B2 (en) | Driver abnormality detection device and driver abnormality detection method | |
| US20100007479A1 (en) | Adaptive driver warning methodology | |
| JP5666383B2 (en) | Sleepiness estimation apparatus and sleepiness estimation method | |
| JP4655035B2 (en) | Dozing detection device, dozing detection method | |
| JP2009244959A (en) | Driving support device and driving support method | |
| JP4677963B2 (en) | Dozing detection device, dozing detection method | |
| JP2008097445A (en) | Vehicle-mounted alarm apparatus | |
| WO2014068844A1 (en) | Driving assistance device and driving assistance method | |
| JP2017182776A (en) | Vehicle periphery monitoring apparatus and computer program | |
| JP4534789B2 (en) | Vehicle alarm device | |
| JP2009219555A (en) | Drowsiness detector, driving support apparatus, drowsiness detecting method | |
| JP2017219885A (en) | Driver condition monitoring device | |
| JP2018133007A (en) | Alarm apparatus | |
| KR101500016B1 (en) | Lane Departure Warning System | |
| JP2011145922A (en) | Vehicle speed control device | |
| JP4297155B2 (en) | In-vehicle warning device | |
| JP2010100088A (en) | Drive assist system | |
| JP2012093867A (en) | Notification system | |
| JP7046748B2 (en) | Driver status determination device and driver status determination method | |
| JP5050794B2 (en) | Sleepiness detection device, sleepiness detection method | |
| JP4692447B2 (en) | Dozing detection device, dozing detection method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090601 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100830 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100907 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20101105 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110621 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110704 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140729 Year of fee payment: 3 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 4788624 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |