JPH1148820A - 居眠り警報装置 - Google Patents
居眠り警報装置Info
- Publication number
- JPH1148820A JPH1148820A JP21324797A JP21324797A JPH1148820A JP H1148820 A JPH1148820 A JP H1148820A JP 21324797 A JP21324797 A JP 21324797A JP 21324797 A JP21324797 A JP 21324797A JP H1148820 A JPH1148820 A JP H1148820A
- Authority
- JP
- Japan
- Prior art keywords
- driver
- photographing
- image
- face
- focal length
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Auxiliary Drives, Propulsion Controls, And Safety Devices (AREA)
Abstract
(57)【要約】
【課題】運転者が交替したり、シートの位置を変えたり
しても、顔撮影の位置や焦点の調整により、居眠り状態
の高い推定精度を確保する。 【解決手段】運転者の顔を撮影する手段ａと、その画像
処理を行う手段ｂと、画像の目をもとに運転者の覚醒度
を推定する手段ｃと、覚醒度の低下を判定するための閾
値を設定する手段ｄと、覚醒度の推定値と閾値との偏差
から覚醒度の低下を判定する手段ｅと、その覚醒度の低
下判定時に運転室の警報器を作動させるよう制御する手
段ｆと、顔撮影の画像を表示する手段ｈと、顔撮影の位
置および焦点距離の調整を行う手段ｇと、これら調整を
遠隔操作で制御する手段ｉと、顔撮影の位置および焦点
距離の登録データを識別番号とともに格納する手段ｋ
と、顔撮影の位置および焦点距離を計測する手段ｊと、
登録データの使用および使用データの選択を指示するた
めの手段ｍと、その指示を受けると顔撮影の位置および
焦点距離の計測値を使用データと一致させるようこれら
の調整を制御する手段ｎと、を備える。
しても、顔撮影の位置や焦点の調整により、居眠り状態
の高い推定精度を確保する。 【解決手段】運転者の顔を撮影する手段ａと、その画像
処理を行う手段ｂと、画像の目をもとに運転者の覚醒度
を推定する手段ｃと、覚醒度の低下を判定するための閾
値を設定する手段ｄと、覚醒度の推定値と閾値との偏差
から覚醒度の低下を判定する手段ｅと、その覚醒度の低
下判定時に運転室の警報器を作動させるよう制御する手
段ｆと、顔撮影の画像を表示する手段ｈと、顔撮影の位
置および焦点距離の調整を行う手段ｇと、これら調整を
遠隔操作で制御する手段ｉと、顔撮影の位置および焦点
距離の登録データを識別番号とともに格納する手段ｋ
と、顔撮影の位置および焦点距離を計測する手段ｊと、
登録データの使用および使用データの選択を指示するた
めの手段ｍと、その指示を受けると顔撮影の位置および
焦点距離の計測値を使用データと一致させるようこれら
の調整を制御する手段ｎと、を備える。
Description
【０００１】
【発明の属する技術分野】この発明は、運転者の居眠り
を検出して警報する装置の改良に関する。
を検出して警報する装置の改良に関する。
【０００２】
【従来の技術】運転者の居眠りによる事故を未然に防止
する目的から、運転者の顔を撮影する手段（ＣＣＤカメ
ラやＴＶカメラなど）をインストルパネルに配置し、そ
の画像から得られる目情報をもとに運転者の覚醒度を推
定し、覚醒度が閾値以下になると警報などを作動させる
ようにしたものが知られている（特開平７ー３２９０７
号公報，特開平７ー１５６６８２号公報，三菱電機技報
Vol.70 No.9 1996『居眠り検出技術』）。
する目的から、運転者の顔を撮影する手段（ＣＣＤカメ
ラやＴＶカメラなど）をインストルパネルに配置し、そ
の画像から得られる目情報をもとに運転者の覚醒度を推
定し、覚醒度が閾値以下になると警報などを作動させる
ようにしたものが知られている（特開平７ー３２９０７
号公報，特開平７ー１５６６８２号公報，三菱電機技報
Vol.70 No.9 1996『居眠り検出技術』）。
【０００３】
【発明が解決しようとする課題】このような従来装置に
おいて、運転者の覚醒度を適確に推定するのに最も重要
なことは、いかに運転者の目情報を精密に捕らえるかに
係っている。従来の方法では、運転者がシートの前後方
向や上下方向の位置を変更したり、運転者が交替したり
すると、カメラの捕らえる画像（視野）から運転者の顔
が外れてしまうような可能性があり、その対策としてカ
メラの撮影範囲を広角度に設定することが要求される。
しかし、そのようにカメラの視野を広角度に設定する
と、カメラの画像中に占める運転者の顔部分が小さくな
り、そこから得られる目情報も減少してしまう。つま
り、覚醒度の高い推定精度を確保するのが難しいという
不具合があった。
おいて、運転者の覚醒度を適確に推定するのに最も重要
なことは、いかに運転者の目情報を精密に捕らえるかに
係っている。従来の方法では、運転者がシートの前後方
向や上下方向の位置を変更したり、運転者が交替したり
すると、カメラの捕らえる画像（視野）から運転者の顔
が外れてしまうような可能性があり、その対策としてカ
メラの撮影範囲を広角度に設定することが要求される。
しかし、そのようにカメラの視野を広角度に設定する
と、カメラの画像中に占める運転者の顔部分が小さくな
り、そこから得られる目情報も減少してしまう。つま
り、覚醒度の高い推定精度を確保するのが難しいという
不具合があった。
【０００４】この発明は、このような問題点の有効な対
策手段の提供を目的とする。
策手段の提供を目的とする。
【０００５】
【課題を解決するための手段】第１の発明では、図３の
ように運転者の顔を撮影する手段ａと、その画像処理を
行う手段ｂと、画像の目をもとに運転者の覚醒度を推定
する手段ｃと、覚醒度の低下を判定するための閾値を設
定する手段ｄと、覚醒度の推定値と閾値との偏差から覚
醒度の低下を判定する手段ｅと、その覚醒度の低下判定
時に運転室の警報器を作動させるよう制御する手段ｆ
と、顔撮影の画像を表示する手段ｈと、顔撮影の位置お
よび焦点距離の調整を行う手段ｇと、これら調整を遠隔
操作で制御する手段ｉと、を備える。
ように運転者の顔を撮影する手段ａと、その画像処理を
行う手段ｂと、画像の目をもとに運転者の覚醒度を推定
する手段ｃと、覚醒度の低下を判定するための閾値を設
定する手段ｄと、覚醒度の推定値と閾値との偏差から覚
醒度の低下を判定する手段ｅと、その覚醒度の低下判定
時に運転室の警報器を作動させるよう制御する手段ｆ
と、顔撮影の画像を表示する手段ｈと、顔撮影の位置お
よび焦点距離の調整を行う手段ｇと、これら調整を遠隔
操作で制御する手段ｉと、を備える。
【０００６】第２の発明では、図３のように運転者の顔
を撮影する手段ａと、その画像処理を行う手段ｂと、画
像の目をもとに運転者の覚醒度を推定する手段ｃと、覚
醒度の低下を判定するための閾値を設定する手段ｄと、
覚醒度の推定値と閾値との偏差から覚醒度の低下を判定
する手段ｅと、その覚醒度の低下判定時に運転室の警報
器を作動させるよう制御する手段ｆと、顔撮影の位置お
よび焦点距離の調整を行う手段ｇと、顔撮影の位置およ
び焦点距離の登録データを識別番号とともに格納する手
段ｋと、顔撮影の位置および焦点距離を計測する手段ｊ
と、登録データの使用および使用データの選択を指示す
るための手段ｍと、その指示を受けると顔撮影の位置お
よび焦点距離の計測値を使用データと一致させるようこ
れらの調整を制御する手段ｎと、を備える。
を撮影する手段ａと、その画像処理を行う手段ｂと、画
像の目をもとに運転者の覚醒度を推定する手段ｃと、覚
醒度の低下を判定するための閾値を設定する手段ｄと、
覚醒度の推定値と閾値との偏差から覚醒度の低下を判定
する手段ｅと、その覚醒度の低下判定時に運転室の警報
器を作動させるよう制御する手段ｆと、顔撮影の位置お
よび焦点距離の調整を行う手段ｇと、顔撮影の位置およ
び焦点距離の登録データを識別番号とともに格納する手
段ｋと、顔撮影の位置および焦点距離を計測する手段ｊ
と、登録データの使用および使用データの選択を指示す
るための手段ｍと、その指示を受けると顔撮影の位置お
よび焦点距離の計測値を使用データと一致させるようこ
れらの調整を制御する手段ｎと、を備える。
【０００７】第３の発明では、図３のように運転者の顔
を撮影する手段ａと、その画像処理を行う手段ｂと、画
像の目をもとに運転者の覚醒度を推定する手段ｃと、覚
醒度の低下を判定するための閾値を設定する手段ｄと、
覚醒度の推定値と閾値との偏差から覚醒度の低下を判定
する手段ｅと、その覚醒度の低下判定時に運転室の警報
器を作動させるよう制御する手段ｆと、顔撮影の画像を
表示する手段ｈと、顔撮影の位置および焦点距離の調整
を行う手段ｇと、これら調整を遠隔操作で制御する手段
ｉと、顔撮影の位置および焦点距離の登録データを識別
番号とともに格納する手段ｋと、顔撮影の位置および焦
点距離を計測する手段ｊと、登録データの使用および使
用データの選択を指示するための手段ｍと、その指示を
受けると顔撮影の位置および焦点距離の計測値を使用デ
ータと一致させるようこれらの調整を制御する手段ｎ
と、を備える。
を撮影する手段ａと、その画像処理を行う手段ｂと、画
像の目をもとに運転者の覚醒度を推定する手段ｃと、覚
醒度の低下を判定するための閾値を設定する手段ｄと、
覚醒度の推定値と閾値との偏差から覚醒度の低下を判定
する手段ｅと、その覚醒度の低下判定時に運転室の警報
器を作動させるよう制御する手段ｆと、顔撮影の画像を
表示する手段ｈと、顔撮影の位置および焦点距離の調整
を行う手段ｇと、これら調整を遠隔操作で制御する手段
ｉと、顔撮影の位置および焦点距離の登録データを識別
番号とともに格納する手段ｋと、顔撮影の位置および焦
点距離を計測する手段ｊと、登録データの使用および使
用データの選択を指示するための手段ｍと、その指示を
受けると顔撮影の位置および焦点距離の計測値を使用デ
ータと一致させるようこれらの調整を制御する手段ｎ
と、を備える。
【０００８】第４の発明では、第３の発明において、図
３のように識別番号とともにデータの登録を指示するた
めの手段ｐと、その指示を受けると顔撮影の位置および
焦点距離の計測値を識別番号とともに格納する登録処理
を行う手段ｑと、を設ける。
３のように識別番号とともにデータの登録を指示するた
めの手段ｐと、その指示を受けると顔撮影の位置および
焦点距離の計測値を識別番号とともに格納する登録処理
を行う手段ｑと、を設ける。
【０００９】
【発明の効果】第１の発明〜第４の発明では、運転者の
顔は撮影され、その画像処理で目が抽出される。その目
をもとに運転者の覚醒度が推定され、覚醒度の推定値と
閾値との偏差から覚醒度の低下が判定される。そして、
覚醒度の低下時に運転室の警報器が作動する。また、運
転者が交替したり、シート（運転席）の前後位置などを
変えたりしたときは、顔撮影の位置および焦点距離の調
整を行えるため、覚醒度の高い推定精度を確保できる。
顔は撮影され、その画像処理で目が抽出される。その目
をもとに運転者の覚醒度が推定され、覚醒度の推定値と
閾値との偏差から覚醒度の低下が判定される。そして、
覚醒度の低下時に運転室の警報器が作動する。また、運
転者が交替したり、シート（運転席）の前後位置などを
変えたりしたときは、顔撮影の位置および焦点距離の調
整を行えるため、覚醒度の高い推定精度を確保できる。
【００１０】第１の発明では、顔撮影の画像表示を見な
がら、運転者は遠隔操作を行うことにより、顔撮影の位
置および焦点距離の調整が可能になる。顔撮影の位置
は、両目を結ぶ中心が画像の中心にくるよう調整する。
顔撮影の焦点距離は、画像上の両目を所定範囲内で最大
に捕らえるよう調整する。そのため、顔撮影の画像は、
両目を中心として適確にズームアップされるため、覚醒
度の推定精度を大幅に高められる。
がら、運転者は遠隔操作を行うことにより、顔撮影の位
置および焦点距離の調整が可能になる。顔撮影の位置
は、両目を結ぶ中心が画像の中心にくるよう調整する。
顔撮影の焦点距離は、画像上の両目を所定範囲内で最大
に捕らえるよう調整する。そのため、顔撮影の画像は、
両目を中心として適確にズームアップされるため、覚醒
度の推定精度を大幅に高められる。
【００１１】第２の発明では、運転者が登録データの使
用および使用データの選択を指示すると、顔撮影の位置
および焦点距離は、これらの計測値を登録データと一致
させるよう自動的に調整される。そのため、これらの調
整に煩わされることなく、顔画像の適確なズームアップ
が可能になる。
用および使用データの選択を指示すると、顔撮影の位置
および焦点距離は、これらの計測値を登録データと一致
させるよう自動的に調整される。そのため、これらの調
整に煩わされることなく、顔画像の適確なズームアップ
が可能になる。
【００１２】第３の発明では、登録データが使用可能な
場合は、顔撮影の位置および焦点距離の自動調整によ
り、顔画像の適確なズームアップが可能になり、登録デ
ータが使用不能な場合は、遠隔操作による手動調整に基
づいて、顔画像のズームアップを行うこともできる。つ
まり、運転者は登録データに基づく自動調整と遠隔操作
による手動調整を選択することが可能になる。
場合は、顔撮影の位置および焦点距離の自動調整によ
り、顔画像の適確なズームアップが可能になり、登録デ
ータが使用不能な場合は、遠隔操作による手動調整に基
づいて、顔画像のズームアップを行うこともできる。つ
まり、運転者は登録データに基づく自動調整と遠隔操作
による手動調整を選択することが可能になる。
【００１３】第４の発明では、識別番号とともにデータ
の登録を指示すると、登録処理が行われ、顔撮影の位置
および焦点距離の計測値を識別番号とともに格納する。
そのため、運転者は次回から遠隔操作による手動調整に
よらず、顔撮影の位置および焦点距離を自動調整するこ
とが可能になる。
の登録を指示すると、登録処理が行われ、顔撮影の位置
および焦点距離の計測値を識別番号とともに格納する。
そのため、運転者は次回から遠隔操作による手動調整に
よらず、顔撮影の位置および焦点距離を自動調整するこ
とが可能になる。
【００１４】
【発明の実施の形態】図１において、運転室のインスト
ルメントパネル１に運転者の顔を撮影するＣＣＤカメラ
２と、運転者の覚醒度の低下時に作動する警報器３が設
置される。ＣＣＤカメラ２の撮影画像を表示するモニタ
（図示せず）が運転席の近くに配置される。ＣＣＤカメ
ラ２はズームレンズが取り付けられ、その焦点距離の調
整を行う駆動部２ａを備える。ＣＣＤカメラ２はインス
トルパネル１に駆動部２ｂを介してその撮影位置（この
例では、運転者に向かう角度）が上下方向および左右方
向へ調整可能に支持される。
ルメントパネル１に運転者の顔を撮影するＣＣＤカメラ
２と、運転者の覚醒度の低下時に作動する警報器３が設
置される。ＣＣＤカメラ２の撮影画像を表示するモニタ
（図示せず）が運転席の近くに配置される。ＣＣＤカメ
ラ２はズームレンズが取り付けられ、その焦点距離の調
整を行う駆動部２ａを備える。ＣＣＤカメラ２はインス
トルパネル１に駆動部２ｂを介してその撮影位置（この
例では、運転者に向かう角度）が上下方向および左右方
向へ調整可能に支持される。
【００１５】図示しないが、ＣＣＤカメラ２の撮影位置
およびズームレンズの焦点距離を調整するためのＡスイ
ッチと、ＣＣＤカメラ２の撮影位置および焦点距離の登
録処理（データの書き換えを含む）を指示するためのＢ
スイッチと、登録データの使用および使用データの選択
（識別番号の入力による）を指示するためのＣスイッチ
と、ＣＣＤカメラの画像確認を指示するためのＤスイッ
チと、が１つの操作盤４にまとめて運転席の近くに配置
される。
およびズームレンズの焦点距離を調整するためのＡスイ
ッチと、ＣＣＤカメラ２の撮影位置および焦点距離の登
録処理（データの書き換えを含む）を指示するためのＢ
スイッチと、登録データの使用および使用データの選択
（識別番号の入力による）を指示するためのＣスイッチ
と、ＣＣＤカメラの画像確認を指示するためのＤスイッ
チと、が１つの操作盤４にまとめて運転席の近くに配置
される。
【００１６】コントローラ１０は、ＣＣＤカメラ２の撮
影位置および焦点距離などを制御するカメラ制御部５
と、ＣＣＤカメラ２の画像処理部６と、運転者の覚醒度
を推定する居眠り検出部７と、警報器３の作動を制御す
る警報部８と、から構成される。
影位置および焦点距離などを制御するカメラ制御部５
と、ＣＣＤカメラ２の画像処理部６と、運転者の覚醒度
を推定する居眠り検出部７と、警報器３の作動を制御す
る警報部８と、から構成される。
【００１７】画像処理部５には、特殊な画像フィルタを
備える。画像フィルタはＣＣＤカメラ２の画像から目を
精度よく抽出するために採用したものであり、ＣＣＤカ
メラ２で撮影された画像と顔の縦方向の長さが短い黒領
域（目など）を除去した画像との差を出力する。その出
力画像は２値化され、目などを抽出する２値画像にな
る。目の抽出不能が所定時間を越えて継続するときは、
ＣＣＤカメラ２の画像確認を促す警報ランプ（図示せ
ず）を作動させる。
備える。画像フィルタはＣＣＤカメラ２の画像から目を
精度よく抽出するために採用したものであり、ＣＣＤカ
メラ２で撮影された画像と顔の縦方向の長さが短い黒領
域（目など）を除去した画像との差を出力する。その出
力画像は２値化され、目などを抽出する２値画像にな
る。目の抽出不能が所定時間を越えて継続するときは、
ＣＣＤカメラ２の画像確認を促す警報ランプ（図示せ
ず）を作動させる。
【００１８】居眠り検出部７は、２値画像をもとに目尻
の傾きの変化から瞬きを検出する。そして、単位時間あ
たりの閉じ目（目尻の傾きが開き目の傾きよりも緩やか
になる）時間を計測し、その計測時間の積分値を覚醒度
の閾値（閾値）と比較して閾値を越えるときに覚醒度の
低下を判定する。
の傾きの変化から瞬きを検出する。そして、単位時間あ
たりの閉じ目（目尻の傾きが開き目の傾きよりも緩やか
になる）時間を計測し、その計測時間の積分値を覚醒度
の閾値（閾値）と比較して閾値を越えるときに覚醒度の
低下を判定する。
【００１９】警報部８は居眠り検出部７において、覚醒
度の低下が判定されると、運転室の警報器３を作動させ
る。なお、居眠り運転の効果的な防止手段として、覚醒
度の低下時には、車両の停止させる制御を行うようにす
ると良い。その停車制御の起動に警報器３への作動信号
が利用できる。
度の低下が判定されると、運転室の警報器３を作動させ
る。なお、居眠り運転の効果的な防止手段として、覚醒
度の低下時には、車両の停止させる制御を行うようにす
ると良い。その停車制御の起動に警報器３への作動信号
が利用できる。
【００２０】カメラ制御部５は、運転席の近くの操作盤
４において、運転者がＡスイッチを操作すると、その操
作にＣＣＤカメラ２の調整を追従させるよう駆動部２
ａ，２ｂを制御する。この遠隔操作を案内するため、画
像上で目が位置すべき目標範囲（ガイドライン）ととも
にＣＣＤカメラの撮影画像をモニタに表示する。
４において、運転者がＡスイッチを操作すると、その操
作にＣＣＤカメラ２の調整を追従させるよう駆動部２
ａ，２ｂを制御する。この遠隔操作を案内するため、画
像上で目が位置すべき目標範囲（ガイドライン）ととも
にＣＣＤカメラの撮影画像をモニタに表示する。
【００２１】各駆動部２ａ，２ｂのストロークからＣＣ
Ｄカメラ２の撮影位置および焦点距離を計測するセンサ
（図示せず）を備える。Ｃスイッチで識別番号を選ぶと
ともにＢスイッチで登録処理が指示されると、ＣＣＤカ
メラ２の撮影位置および焦点距離の計測値を識別番号と
ともにカメラ制御部５のメモリに格納する。
Ｄカメラ２の撮影位置および焦点距離を計測するセンサ
（図示せず）を備える。Ｃスイッチで識別番号を選ぶと
ともにＢスイッチで登録処理が指示されると、ＣＣＤカ
メラ２の撮影位置および焦点距離の計測値を識別番号と
ともにカメラ制御部５のメモリに格納する。
【００２２】Ｃスイッチにより、登録データの使用が選
択されるとともに使用データの識別番号が入力される
と、ＣＣＤカメラの撮影位置および焦点距離の計測値
と、メモリから選択した登録データと、に基づいて計測
値を登録データと一致させるよう各駆動部２ａ，２ｂを
制御する。Ｄスイッチにより、ＣＣＤカメラ２の画像確
認が指示されると、ガイドラインとともにＣＣＤカメラ
２の撮影画像をモニタに表示し、Ａスイッチによる調整
が行われるのを待機する。
択されるとともに使用データの識別番号が入力される
と、ＣＣＤカメラの撮影位置および焦点距離の計測値
と、メモリから選択した登録データと、に基づいて計測
値を登録データと一致させるよう各駆動部２ａ，２ｂを
制御する。Ｄスイッチにより、ＣＣＤカメラ２の画像確
認が指示されると、ガイドラインとともにＣＣＤカメラ
２の撮影画像をモニタに表示し、Ａスイッチによる調整
が行われるのを待機する。
【００２３】図３はコントローラ１０の制御内容を説明
するフローチャートであり、ステップ１で運転者の着座
時に行う、ＣＣＤカメラ２の撮影位置および焦点距離の
調整において、メモリの登録データを使用するかどうか
判定する。ｙｅｓのとき（Ｃスイッチから登録データの
使用指示がある場合）は、ステップ２でＣスイッチによ
る使用データの選択（識別番号）に応じた登録データを
メモリから読み出し、ステップ３でその登録データにＣ
ＣＤカメラの撮影位置および焦点距離を設定する。つま
り、ＣＣＤカメラ２の駆動部２ａ，２ｂに対し、その撮
影位置および焦点距離の計測値を登録データと一致させ
る制御を行う。
するフローチャートであり、ステップ１で運転者の着座
時に行う、ＣＣＤカメラ２の撮影位置および焦点距離の
調整において、メモリの登録データを使用するかどうか
判定する。ｙｅｓのとき（Ｃスイッチから登録データの
使用指示がある場合）は、ステップ２でＣスイッチによ
る使用データの選択（識別番号）に応じた登録データを
メモリから読み出し、ステップ３でその登録データにＣ
ＣＤカメラの撮影位置および焦点距離を設定する。つま
り、ＣＣＤカメラ２の駆動部２ａ，２ｂに対し、その撮
影位置および焦点距離の計測値を登録データと一致させ
る制御を行う。
【００２４】ステップ１の判定がｎｏのとき（Ｃスイッ
チから登録データの使用指示がない場合）は、ステップ
７へ飛び、ガイドラインとともにＣＣＤカメラ２の撮影
画像をモニタに表示する。ステップ８においては、モニ
タの画面を見ながら、運転者はＡスイッチにより、ＣＣ
Ｄカメラ２の駆動部２ａ，２ｂを遠隔操作する。そし
て、ＣＣＤカメラ２の撮影位置および焦点距離の調整が
完了したら、ステップ９において、登録の識別番号を選
び、Ｂスイッチで調整データの登録を指示する。ＣＣＤ
カメラ２の撮影位置および焦点距離の調整値は計測さ
れ、識別番号とともに記憶される。
チから登録データの使用指示がない場合）は、ステップ
７へ飛び、ガイドラインとともにＣＣＤカメラ２の撮影
画像をモニタに表示する。ステップ８においては、モニ
タの画面を見ながら、運転者はＡスイッチにより、ＣＣ
Ｄカメラ２の駆動部２ａ，２ｂを遠隔操作する。そし
て、ＣＣＤカメラ２の撮影位置および焦点距離の調整が
完了したら、ステップ９において、登録の識別番号を選
び、Ｂスイッチで調整データの登録を指示する。ＣＣＤ
カメラ２の撮影位置および焦点距離の調整値は計測さ
れ、識別番号とともに記憶される。
【００２５】ステップ４では、ＣＣＤカメラ２の画像確
認を行うかどうかを判定する。ｙｅｓのとき（Ｄスイッ
チから画像確認の指示がある場合）は、ステップ５でガ
イドラインとともにＣＣＤカメラ２の撮影画像をモニタ
に表示する。ステップ６では、ＣＣＤカメラ２が顔を捕
らえているかどうかを判定する。ｎｏのときは、ステッ
プ６からステップ８へ飛び、Ａスイッチによる調整およ
びその調整後のデータ登録の処理を待機する。
認を行うかどうかを判定する。ｙｅｓのとき（Ｄスイッ
チから画像確認の指示がある場合）は、ステップ５でガ
イドラインとともにＣＣＤカメラ２の撮影画像をモニタ
に表示する。ステップ６では、ＣＣＤカメラ２が顔を捕
らえているかどうかを判定する。ｎｏのときは、ステッ
プ６からステップ８へ飛び、Ａスイッチによる調整およ
びその調整後のデータ登録の処理を待機する。
【００２６】ステップ４の判定がｎｏのときは、ステッ
プ１０へ飛ぶ。また、ステップ６の判定がｙｅｓのとき
は、ステップ１０へ進む。ステップ１０では、居眠り検
出を行うため、運転者の顔をＣＣＤカメラ２で撮影す
る。ステップ１１，ステップ１２においては、ＣＣＤカ
メラ２の撮影画像を２値化して目を抽出する。
プ１０へ飛ぶ。また、ステップ６の判定がｙｅｓのとき
は、ステップ１０へ進む。ステップ１０では、居眠り検
出を行うため、運転者の顔をＣＣＤカメラ２で撮影す
る。ステップ１１，ステップ１２においては、ＣＣＤカ
メラ２の撮影画像を２値化して目を抽出する。
【００２７】ステップ１３では、目の抽出不能が所定時
間を越えて継続するかどうかを判定する。ｙｅｓのとき
は、ステップ１４でＣＣＤカメラ２の画像確認を促す警
報ランプを作動させるとともにステップ４へリターンす
る。ステップ１３の判定がｎｏのときは、ステップ１５
へ進み、目尻の傾きαを求める。ステップ１６では、α
が閾値（閉じ目を判定するための基準値であり、居眠り
検出部７のメモリに予め設定される）未満かどうかを判
定する。ｙｅｓのときは、ステップ１７で閉じ目フラグ
ｆ1を１にする。ｎｏのときは、ステップ１８で閉じ目
フラグｆ1を０にする。
間を越えて継続するかどうかを判定する。ｙｅｓのとき
は、ステップ１４でＣＣＤカメラ２の画像確認を促す警
報ランプを作動させるとともにステップ４へリターンす
る。ステップ１３の判定がｎｏのときは、ステップ１５
へ進み、目尻の傾きαを求める。ステップ１６では、α
が閾値（閉じ目を判定するための基準値であり、居眠り
検出部７のメモリに予め設定される）未満かどうかを判
定する。ｙｅｓのときは、ステップ１７で閉じ目フラグ
ｆ1を１にする。ｎｏのときは、ステップ１８で閉じ目
フラグｆ1を０にする。
【００２８】ステップ１９では、閉じ目フラグｆ1＝１
かどうかを判定し、ｙｅｓのときはステップ２０に進
み、ｎｏのときはステップ２１へ飛ぶ。ステップ２０で
は、閉じ目時間の積算値Ｓ-ｆ1＝Ｓ-ｆ1＋ｆ1を求め
る。ステップ２１，ステップ２２において、一定時間が
経過すると、閉じ目の積算時間Ｓ-ｆ1が覚醒度の閾値を
越えるかどうかを判定する。ｙｅｓのときは、ステップ
２３で覚醒度低下フラグｆ2を１にする。ｎｏのとき
は、ステップ２４で覚醒度低下フラグｆ2を０にする。
かどうかを判定し、ｙｅｓのときはステップ２０に進
み、ｎｏのときはステップ２１へ飛ぶ。ステップ２０で
は、閉じ目時間の積算値Ｓ-ｆ1＝Ｓ-ｆ1＋ｆ1を求め
る。ステップ２１，ステップ２２において、一定時間が
経過すると、閉じ目の積算時間Ｓ-ｆ1が覚醒度の閾値を
越えるかどうかを判定する。ｙｅｓのときは、ステップ
２３で覚醒度低下フラグｆ2を１にする。ｎｏのとき
は、ステップ２４で覚醒度低下フラグｆ2を０にする。
【００２９】ステップ２５では、閉じ目の積算時間Ｓ-
ｆ1を０にすると同時に一定時間のカウントを開始す
る。そして、ステップ２６，ステップ２７において、覚
醒度低下フラグｆ2＝１のときは、警報器３（および車
両の停車制御）を作動させる。
ｆ1を０にすると同時に一定時間のカウントを開始す
る。そして、ステップ２６，ステップ２７において、覚
醒度低下フラグｆ2＝１のときは、警報器３（および車
両の停車制御）を作動させる。
【００３０】このような構成により、運転者の顔はＣＣ
Ｄカメラ２で撮影され、その画像処理で目が抽出され
る。その目をもとに運転者の覚醒度が推定され、覚醒度
の推定値と閾値との偏差から覚醒度の低下が判定され
る。そして、覚醒度の低下時に運転室の警報器４が作動
するため、居眠り運転に対する安全性を高めることがで
きる。
Ｄカメラ２で撮影され、その画像処理で目が抽出され
る。その目をもとに運転者の覚醒度が推定され、覚醒度
の推定値と閾値との偏差から覚醒度の低下が判定され
る。そして、覚醒度の低下時に運転室の警報器４が作動
するため、居眠り運転に対する安全性を高めることがで
きる。
【００３１】運転者が交替したり、シートの前後位置な
どを変えたりすると、ＣＣＤカメラ２の撮影位置や焦点
距離の調整が必要になる。ＣＣＤカメラ２の撮影位置お
よび焦点距離の調整を行う駆動部２ａ，２ｂと、これら
駆動部２ａ，２ｂを遠隔操作するためのＡスイッチを備
えるため、運転者はモニタの画像を見ながら、Ａスイッ
チの操作によりＣＣＤカメラ２の撮影位置および焦点距
離を調整することが可能になる。
どを変えたりすると、ＣＣＤカメラ２の撮影位置や焦点
距離の調整が必要になる。ＣＣＤカメラ２の撮影位置お
よび焦点距離の調整を行う駆動部２ａ，２ｂと、これら
駆動部２ａ，２ｂを遠隔操作するためのＡスイッチを備
えるため、運転者はモニタの画像を見ながら、Ａスイッ
チの操作によりＣＣＤカメラ２の撮影位置および焦点距
離を調整することが可能になる。
【００３２】顔撮影の位置は、両目を結ぶ中心が画像の
中心にくるよう調整する。顔撮影の焦点距離は、画像上
の両目を目標範囲の中で最大に捕らえるよう調整する。
このような手動調整により、顔撮影の画像は両目を中心
として適確にズームアップされるため、覚醒度の推定精
度を大幅に高めることができる。
中心にくるよう調整する。顔撮影の焦点距離は、画像上
の両目を目標範囲の中で最大に捕らえるよう調整する。
このような手動調整により、顔撮影の画像は両目を中心
として適確にズームアップされるため、覚醒度の推定精
度を大幅に高めることができる。
【００３３】調整後にＣスイッチで登録の識別番号を選
び、Ｂスイッチでデータの登録を指示すると、メモリへ
の登録処理が行われ、調整データは識別番号とともに格
納される。運転者がＣスイッチで登録データの使用およ
び使用データの選択を指示すると、顔撮影の撮影位置お
よび焦点距離は、これらの計測値を登録データと一致さ
せるよう自動的に調整される。
び、Ｂスイッチでデータの登録を指示すると、メモリへ
の登録処理が行われ、調整データは識別番号とともに格
納される。運転者がＣスイッチで登録データの使用およ
び使用データの選択を指示すると、顔撮影の撮影位置お
よび焦点距離は、これらの計測値を登録データと一致さ
せるよう自動的に調整される。
【００３４】そのため、運転者が交替するような場合、
新たな運転者は、自己の登録データがあるときは、Ｃス
イッチによりＣＣＤカメラの撮影位置および焦点距離の
調整を自動的に行うことができる。運転者の登録データ
がないか、あるいはシートの前後位置などを変えたりし
たときは、ＡスイッチによりＣＣＤカメラの撮影位置お
よび焦点距離の調整を遠隔操作することができる。そし
て、調整後に登録処理を行えば、次回から登録データに
基づく自動調整が可能になる。
新たな運転者は、自己の登録データがあるときは、Ｃス
イッチによりＣＣＤカメラの撮影位置および焦点距離の
調整を自動的に行うことができる。運転者の登録データ
がないか、あるいはシートの前後位置などを変えたりし
たときは、ＡスイッチによりＣＣＤカメラの撮影位置お
よび焦点距離の調整を遠隔操作することができる。そし
て、調整後に登録処理を行えば、次回から登録データに
基づく自動調整が可能になる。
【００３５】夜間など暗い状態では、顔撮影の明瞭な画
像が得にくい。そのため、ＣＣＤカメラ２のズームレン
ズ回りに近赤外ＬＥＤを配設し、運転者の顔に近赤外線
を照射することにより、ＣＣＤカメラ２で目の網膜反射
像を撮影するようにしてもよい。ＣＣＤカメラ２の撮影
位置および焦点距離の調整は、この網膜反射像をもとに
前記と同じ要領で行われる。居眠り検出は、網膜反射の
中断から閉じ目を捕らえ、閉じ時間の積算値と閾値との
偏差から居眠り状態を判定するようになる。
像が得にくい。そのため、ＣＣＤカメラ２のズームレン
ズ回りに近赤外ＬＥＤを配設し、運転者の顔に近赤外線
を照射することにより、ＣＣＤカメラ２で目の網膜反射
像を撮影するようにしてもよい。ＣＣＤカメラ２の撮影
位置および焦点距離の調整は、この網膜反射像をもとに
前記と同じ要領で行われる。居眠り検出は、網膜反射の
中断から閉じ目を捕らえ、閉じ時間の積算値と閾値との
偏差から居眠り状態を判定するようになる。
【図１】この発明の実施形態を説明する概要図である。
【図２】同じくコントローラの制御内容を説明するフロ
ーチャートである。
ーチャートである。
【図３】この発明のクレーム対応図である。
２ ＣＣＤカメラ ２ａ，２ｂ 駆動部 ３ 警報器 ４ 操作盤 ５ カメラ制御部 ６ 画像処理部 ７ 居眠り検出部 ８ 警報部 １０ コントローラ
Claims (4)
- 【請求項１】運転者の顔を撮影する手段と、その画像処
理を行う手段と、画像の目をもとに運転者の覚醒度を推
定する手段と、覚醒度の低下を判定するための閾値を設
定する手段と、覚醒度の推定値と閾値との偏差から覚醒
度の低下を判定する手段と、その覚醒度の低下判定時に
運転室の警報器を作動させるよう制御する手段と、顔撮
影の画像を表示する手段と、顔撮影の位置および焦点距
離の調整を行う手段と、これら調整を遠隔操作で制御す
る手段と、を備えたことを特徴とする居眠り警報装置。 - 【請求項２】運転者の顔を撮影する手段と、その画像処
理を行う手段と、画像の目をもとに運転者の覚醒度を推
定する手段と、覚醒度の低下を判定するための閾値を設
定する手段と、覚醒度の推定値と閾値との偏差から覚醒
度の低下を判定する手段と、その覚醒度の低下判定時に
運転室の警報器を作動させるよう制御する手段と、顔撮
影の位置および焦点距離の調整を行う手段と、顔撮影の
位置および焦点距離の登録データを識別番号とともに格
納する手段と、顔撮影の位置および焦点距離を計測する
手段と、登録データの使用および使用データの選択を指
示するための手段と、その指示を受けると顔撮影の位置
および焦点距離の計測値を使用データと一致させるよう
これらの調整を制御する手段と、を備えたことを特徴と
する居眠り警報装置。 - 【請求項３】運転者の顔を撮影する手段と、その画像処
理を行う手段と、画像の目をもとに運転者の覚醒度を推
定する手段と、覚醒度の低下を判定するための閾値を設
定する手段と、覚醒度の推定値と閾値との偏差から覚醒
度の低下を判定する手段と、その覚醒度の低下判定時に
運転室の警報器を作動させるよう制御する手段と、顔撮
影の画像を表示する手段と、顔撮影の位置および焦点距
離の調整を行う手段と、これら調整を遠隔操作で制御す
る手段と、顔撮影の位置および焦点距離の登録データを
識別番号とともに格納する手段と、顔撮影の位置および
焦点距離を計測する手段と、登録データの使用および使
用データの選択を指示するための手段と、その指示を受
けると顔撮影の位置および焦点距離の計測値を使用デー
タと一致させるようこれらの調整を制御する手段と、を
備えたことを特徴とする居眠り警報装置。 - 【請求項４】識別番号とともにデータの登録を指示する
ための手段と、その指示を受けると顔撮影の位置および
焦点距離の計測値を識別番号とともに格納する登録処理
を行う手段と、を設けたことを特徴とする請求項３に記
載の居眠り警報装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP21324797A JPH1148820A (ja) | 1997-08-07 | 1997-08-07 | 居眠り警報装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP21324797A JPH1148820A (ja) | 1997-08-07 | 1997-08-07 | 居眠り警報装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH1148820A true JPH1148820A (ja) | 1999-02-23 |
Family
ID=16635954
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP21324797A Pending JPH1148820A (ja) | 1997-08-07 | 1997-08-07 | 居眠り警報装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH1148820A (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8055016B2 (en) | 2005-01-20 | 2011-11-08 | Samsung Electronics Co., Ltd | Apparatus and method for normalizing face image used for detecting drowsy driving |
| US8144002B2 (en) | 2008-03-31 | 2012-03-27 | Hyundai Motor Company | Alarm system for alerting driver to presence of objects |
| JP2012129699A (ja) * | 2010-12-14 | 2012-07-05 | Denso Corp | 顔撮影システム |
-
1997
- 1997-08-07 JP JP21324797A patent/JPH1148820A/ja active Pending
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8055016B2 (en) | 2005-01-20 | 2011-11-08 | Samsung Electronics Co., Ltd | Apparatus and method for normalizing face image used for detecting drowsy driving |
| KR101159847B1 (ko) * | 2005-01-20 | 2012-06-25 | 삼성전자주식회사 | 졸음운전 감지용 얼굴 검출 정규화 장치 및 방법 |
| US8144002B2 (en) | 2008-03-31 | 2012-03-27 | Hyundai Motor Company | Alarm system for alerting driver to presence of objects |
| JP2012129699A (ja) * | 2010-12-14 | 2012-07-05 | Denso Corp | 顔撮影システム |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5549721B2 (ja) | ドライバモニタ装置 | |
| US7202792B2 (en) | Drowsiness detection system and method | |
| KR101386823B1 (ko) | 동작, 안면, 눈, 입모양 인지를 통한 2단계 졸음운전 방지 장치 | |
| EP1801730B1 (en) | Method of detecting vehicle-operator state | |
| CN111699680B (zh) | 行车记录仪、显示控制方法以及存储介质 | |
| JP4899059B2 (ja) | 眠気検知装置 | |
| EP2549751A1 (en) | Device for monitoring surroundings of vehicle and method for monitoring surroundings of vehicle | |
| JP2002063668A (ja) | 車内の人検出通報装置及び危険状態回避装置 | |
| JP2008199515A (ja) | 同乗者着座姿勢検出・判定装置及び方法 | |
| JPH0468500A (ja) | 車両運転者監視装置 | |
| JP2002254956A (ja) | 覚醒状態低下検知装置 | |
| KR20120074820A (ko) | 얼굴 인식 기능을 이용한 차량 제어 시스템 | |
| JP2018128974A (ja) | ドライバ状態監視装置 | |
| JP2020157938A (ja) | 車載監視制御装置 | |
| JP2006096316A (ja) | 監視装置 | |
| JP2010100088A (ja) | 運転支援システム | |
| JP4888382B2 (ja) | 異常検出装置および方法、並びに、プログラム | |
| US11881054B2 (en) | Device and method for determining image data of the eyes, eye positions and/or a viewing direction of a vehicle user in a vehicle | |
| JPH1148820A (ja) | 居眠り警報装置 | |
| JP3815842B2 (ja) | 居眠り警報装置 | |
| JPH08290726A (ja) | 居眠り警報装置 | |
| US11772563B2 (en) | In-vehicle multi-monitoring device for vehicle | |
| US20220272302A1 (en) | In-vehicle monitoring device for vehicle | |
| KR102010407B1 (ko) | 스마트 리어뷰 시스템 | |
| WO2003071788A1 (en) | Automatically switched camera system with indicator for notifying the next subject of the camera system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040803 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20041207 |