JP2010006362A - 乗員撮像装置及び居眠り防止装置 - Google Patents

Abstract

【課題】乗員に撮像による不快を感じさせず、かつ必要十分な情報を表示する。
【解決手段】乗員２４の運転を妨げないよう、乗員２４を監視する赤外線カメラ２８を突出カバー部２６へ収容し、さらに突出カバー部２６の乗員２４との対向面に表示面を設けることで、必要な情報を表示することができる。また、表示に可視光、撮像に赤外光を用いることでハーフミラー３０に映るＬＣＤディスプレイ６０からの可視光のディスプレイ表示は、赤外線カメラ２８には映らないこととなる。
【選択図】図２

Description

本発明は、乗員撮像装置及び乗員を監視して居眠りを防止する居眠り防止装置に関するものである。

従来、車両の事故防止技術の一つとして、運転中の乗員を撮像して運転状態を監視する乗員監視システムがある。このとき、カメラは定点位置で乗員を撮像することができる最適な位置に設ける必要がある。乗員を撮像するカメラを設置する場所は複数考えられる。例えば、ステアリングホイールとインストルメントパネルとの間に設けられたコラム上（厳密にはコラムカバー上）にカメラを設置し、乗員の顔を撮像し監視する技術が提案されている（特許文献１〜特許文献４参照）。

特に、特許文献２では、コラム上から乗員の顔を撮像して解析し、乗員のまばたき動作や眼球動作を監視する。また、乗員の目の位置動作を解析して乗員が居眠りをしていないか、脇見をしていないか等、乗員の状態を監視する。

さらに、特許文献３、特許文献４には、併せて車両の状態（例えば、ステアリングホイールやブレーキの状態）を判断し、乗員が居眠りや脇見をしていてもよいときには監視をしない技術が開示されている。

特開２００７−１５６６３公報 特開平７−９３７００号公報 特開平６−２４３３６７号公報 特開平８−２９０７２６号公報

しかしながら、乗員を撮像できる最適な位置にカメラを設置するということは、言い換えれば、乗員からカメラがよく見える位置に設けられることになる。このため乗員に、「撮像されている」という印象を与える。これを解消するためには、カメラを隠すことが好ましい。

一方で、インストルメントパネル上に表示する情報量は増える傾向にある（新たな表示部の設置）。

ここで、乗員を監視するカメラは、例えばステアリングホイールとインストルメントパネルとの間に設けられたコラム上に設置されることが好ましく、また、新たな表示部は運転に支障を来たさないよう乗員の目につきやすい場所（例えば、コラム上）に設置することが好ましい。

本発明は上記事実を考慮し、乗員に撮像による不快を感じさせず、かつ必要十分な情報を表示することができる乗員撮像装置及び居眠り防止装置を得ることが目的である。

請求項１に記載の発明は、少なくとも顔を含む乗員画像を撮像する撮像手段と、前記乗員を撮像する撮像手段の光軸から外れた位置に配置され、所定の情報を表示する表示手段と、前記乗員と前記撮像手段との間に設けられ、前記表示手段に表示された情報を乗員の視野に入るように反射させると共に、前記乗員画像を透過させて前記撮像手段へ案内するハーフミラーと、を有している。

請求項１記載の発明によれば、撮像手段の光軸を遮ることなく、表示手段の表示情報を乗員の視野の範囲入れることができ、また乗員と撮像手段との間にハーフミラーを設けているので、乗員は撮像されているという意識がなく、このため不快に感じることもない。

請求項２に記載の発明は、運転席に着座して運転している乗員の少なくとも顔を含む画像である乗員画像を撮像する撮像手段と、前記撮像手段で撮像した乗員画像情報に基づく乗員の運転状態から運転の適否を判定する運転状態適否判定手段と、前記運転状態適否判定手段の判定結果を報知する報知手段と、を備えた運転状態判定装置と、前記乗員を撮像する撮像手段の光軸外に配置され、所定の情報を表示する表示手段と、前記乗員と前記撮像手段との間に設けられ、前記表示手段に表示された情報を乗員の視野に入るように反射させ、前記画像情報を透過させるハーフミラーと、を有している。

請求項２記載の発明によれば、撮像手段の光軸を遮ることなく表示手段の表示内容を乗員の視野の範囲に入れることができ、また撮像手段で撮像した乗員画像情報に基づく運転状態から運転の適否を判定することができる。さらに、乗員と撮像手段との間にハーフミラーを設けているので、乗員は撮像されているという意識がなく、このため不快に感じることもない。

請求項３に記載の発明は、前記請求項２記載の発明において、前記撮像手段は、赤外線カメラであり、前記ハーフミラーと前記撮像手段との間に可視光波長をカットするカットフィルムが配置されている。

請求項３記載の発明によれば、撮像手段は赤外線カメラであって可視光波長をカットするカットフィルムを用いているので、撮像に余計な可視光をカットすることができる。なお、このカットフィルム或いはカットフィルムと同様の機能を持つ手段が、赤外線カメラに内蔵している場合は、当該赤外線カメラを配置するのみで、「前記ハーフミラーと前記撮像手段との間に可視光波長をカットするカットフィルムが配置されている。」ということができる。

請求項４に記載の発明は、前記請求項２又は請求項３記載の発明において、前記撮像手段は、それぞれ車両構成部材であるステアリングホイールとインストルメントパネルとの間に設けられたコラムの上部に突出するように設けられたカバー内に配置され、前記カバーにおける前記乗員との対向面に前記ハーフミラーが取り付けられている。

請求項４記載の発明によれば、撮像手段はコラムの上部に設けられたカバーの内方空間に配置されており、カバー内にハーフミラーが取り付けられているので、乗員の視野に入らないようにできる。その一方で、撮像手段は障害物なく乗員を撮像することができる。

請求項５記載の発明は、前記請求項２〜請求項４のいずれか１項記載の発明において、前記報知手段は、シートベルトを乗員拘束方向へ緊張させることによる報知、警告音を発することによる報知、座席シートを振動させることによる報知、前記表示手段を点灯させることによる報知のいずれか又は組み合わせを含む。

請求５記載の発明によれば、報知手段は、シートベルトを乗員拘束方向へ緊張させて乗員に報知する、警告音を発して乗員へ報知する、乗員が着座している座席シートを振動させて乗員に報知する、前記表示手段を点灯させて乗員に報知することが含まれる。

以上説明した如く本発明では、乗員に撮像による不快を感じさせず、かつ必要十分な情報を表示することができるという優れた効果を有する。

第１の実施の形態に係る居眠り防止装置を備えた車両の側面図である。 第１の実施の形態に係る居眠り防止装置を示す全体構成図である。 第１の実施の形態に係る居眠り防止装置の状態判別装置を示す図である。 第１の実施の形態に係る運転者用シートから見た居眠り防止装置の正面図である。 第１の実施の形態に係る居眠り防止装置の内方の斜視図である。 第１の実施の形態乗員の居眠りを検知するフローチャートである。 （Ａ）は乗員が居眠り防止装置を見たときの好ましい表示状態の模式図、（Ｂ）は表示面が下にずれて見える状態の模式図、（Ｃ）は乗員の顔を中心とした周辺領域を撮像した画像データの模式図、（Ｄ）は取得した顔画像データから検出した特徴点を表す図、（Ｅ）は検出位置と標準位置とを表す図である。 （Ａ）は第２の実施形態に係るハーフミラーの傾きを調整可能にした模式図、（Ｂ）は第２の実施形態に係るＬＣＤディスプレイを移動可能にした模式図、（Ｃ）は第２の実施の形態に係るＬＣＤディスプレイの傾きを調整可能にした模式図、（Ｄ）は第２の実施の形態に係るハーフミラー及びＬＣＤディスプレイの双方の傾きを調整可能にした模式図である。 第２の実施の形態に係るハーフミラーに表示される情報の表示位置を調整するフローチャートである。

（第１の実施の形態）
図１は、第１の実施の形態に係る居眠り防止装置１０を備えた車両１２の側面図が示されている。

車両１２は、乗員が着座するシート１４と、車両１２を操舵するステアリングホイール１６と、コラムカバー１８に覆われたコラム２０と、必要な計器類を表示するインストルメントパネル２２と、を有している。乗員２４は、シート１４に着座しステアリングホイール１６を把持して、車両１２を操舵する。

コラム２０は、車両前方側端部がインストルメントパネル２２の運転席側に形成された開口部（図示省略）内へ前傾した状態で挿入されることで車体に取り付けられている。コラム２０の残りの部分は車室内へ突出しており、コラム２０の車両後方側端部にはステアリングホイール１６が配置されている。

また、前記車室内に突出しているコラム２０の残り部分はコラムカバー１８に覆われている。

ここで、居眠り防止装置１０はコラムカバー１８上に設置されている。居眠り防止装置１０は、コラムカバー１８の上部に設けられた突出カバー部２６によって覆われている。突出カバー部２６は、横長で後端部に開口部２６Ａが設けられている。

また、突出カバー部２６内には赤外線カメラ２８が収容されている。赤外線カメラ２８の撮像面（レンズ）は、シート１４に着座している乗員２４に向けられている。赤外線カメラ２８と乗員２４との間にはステアリングホイール１６が配置されているが、赤外線カメラ２８の光軸は、ステアリングホイール１６のボス部やスポーク部等を除いた隙間を通って乗員２４の顔へ向けられている。すなわち、赤外線カメラ２８は、乗員２４を正面から撮像可能になっている。

図２は、第１の実施の形態に係る居眠り防止装置１０を示す全体構成図である。

居眠り防止装置１０は、突出カバー部２６の内方空間に、赤外線カメラ２８を収容しており、突出カバー部２６の開口部２６Ａには板状のハーフミラー３０が嵌め込まれている。赤外線カメラ２８とハーフミラー３０との間には、可視光カットフィルム３４が配置されている。すなわち、第１の実施の形態の赤外線カメラ２８は、赤外線と共に可視光の一部又は全部の波長を撮像する機能を有している。このため、ハーフミラー３０に映る画像を同時に撮像する場合がある。そこで、赤外線カメラ２８とハーフミラー３０との間に可視光カットフィルム３４を配置することで、赤外線カメラ２８には、赤外光の波長のみが届くようにしている。なお、ハーフミラー３０は、前記赤外線カメラ２８と対向する面が反射／透過面３０Ａとなっている。

この反射／透過面３０Ａは、乗員２４を被写体とした画像（光）を透過して赤外線カメラ２８へ案内する役目を有すると共に、ハーフミラー３０の下部からの光を反射して乗員方向へ案内する役目を有している。

赤外線カメラ２８は、コラムカバー１８の上部から乗員２４を撮像する。赤外線カメラ２８は、状態判別装置３６に接続されている。赤外線カメラ２８は、取り込まれた乗員の顔画像データを状態判別装置３６に出力する。状態判別装置３６では、入力された顔画像データの画像処理を行い、画像情報から乗員２４の運転状態を判断して運転の適否を判定する。

また、状態判別装置３６はＥＣＵ（エレクトロニック・コントロール・ユニット）３８に接続されている。状態判別装置３６では、顔画像データに基づいた乗員２４の運転の適否をＥＣＵ３８に出力する。なお、ＥＣＵ３８は、車両１２の全体について、統括して制御するメインの制御部である。

ＥＣＵ３８は警告装置４０に接続している。ＥＣＵ３８は、状態判別装置３６から受け取った乗員２４の運転の適否に基づいて、各警報装置４０へ警告指示を出力する。

ところで、第１の実施の形態では赤外線カメラ２８は突出カバー部２６に収容しているため、乗員２４に撮像されることの不快感を与えない構成となっている。

その一方で、運転中に乗員２４が知るべき情報は増える傾向にある。インストルメントパネル２２上に必要な情報をすべて表示するのには限界があるため、新たな表示装置を設ける必要がある。

このとき、赤外線カメラ２８の設置場所と表示装置の設置場所とは、ほぼ同じ場所がそれぞれ最適場所となる。そこで、第１の実施の形態では、両者を最適位置にするべくハーフミラー３０を設けている。

図２に示される如く、居眠り防止装置１０は、さらに情報を表示するＬＣＤディスプレイ６０と、ＬＣＤディスプレイ６０に接続されているＬＣＤドライバ６２と、ＬＣＤドライバ６２を制御する表示制御装置６４とを備えている。

ＥＣＵ３８は表示制御装置６４に接続されている。ＥＣＵ３８には各車両走行関連センサ５０が接続されている。ＥＣＵ３８は、各車両走行関連センサ５０からの入力に基づいて表示制御装置６４へ指示命令を出力する。

ＬＣＤディスプレイ６０の表示内容は、ハーフミラー３０の反射／透過面３０Ａで反射して乗員２４の視界に入る。すなわち、ハーフミラー３０の反射／透過面３０Ａは見かけ上、ＬＣＤディスプレイ６０の表示面となる。

図４は、運転者用シート１４から見た居眠り防止装置１０の正面図である。

ステアリングホイール１６の奥に、表示面としてのハーフミラー３０を見ることができる。表示内容が遮られることなく視界に入り、運転に差し支えない。

図４に示される如く、ハーフミラー３０には、左から左方向指示画像、パーキングブレーキ画像、シフト位置指標画像、シートベルト未装着画像、右方向指示画像が表示されている。第１の実施の形態では上記５つの画像が表示されているが、これに限られるものではない。

一方、乗員２４の顔画像データは、ハーフミラー３０の反射／透過面３０Ａを透過する。また、可視光カットフィルム３４でＬＣＤディスプレイ６０の表示画像はカットされ、可視光以外の光（赤外光）が、赤外線カメラ２８へ案内される。

図３には、居眠り防止装置１０の状態判別装置３６が示されている。

赤外線カメラ２８は、画像入力部４２に接続されている。赤外線カメラ２８は、乗員２４の顔を撮像し、顔画像データを取得する。

赤外線カメラ２８は、取得した顔画像データを画像入力部４２へ出力する。画像入力部４２は画像処理部４４に接続されている。画像入力部４２は、取得した顔画像データを画像処理部４４へ出力する。

画像処理部４４では、入力された顔画像データに基づいて画像処理が行われる。

画像処理部４４は取得部４６に接続している。取得部４６は実行指示部４８に接続しており、実行指示部４８はＥＣＵ３８に接続されている。ＥＣＵ３８には、各車両走行関連センサ５０が接続されている。

ＥＣＵ３８は、各車両走行関連センサ５０からの入力に基づき、所定の条件が満たされたか否かを判断する。所定の条件が満たされたと判断されたときに、ＥＣＵ３８は実行指示部４８へ指示命令を出力する。

所定の条件とは、例えば、タイマからの入力に基づき所定時間（例えば５分）経過したこと、スピードメータの入力に基づいて所定の車速（例えば時速６０ｋｍ）を超えたこと、所定時間（例えば５分）以上ハンドル操作がないこと、アクセルペダルを継続して強く踏み続けること等があるが、これらに限られるものではない。また、所定の条件がなく「随時」でもよい。

実行指示部４８は、上記所定条件のいずれか一つ又は複数の組み合わせの成立によりＥＣＵ３８からの指示命令が入力されると、取得部４６へ指示命令を出力する。

取得部４６は画像処理部４４へ取得した指示命令を出力する。画像処理部４４は、指示命令に基づき、処理を行った画像データを取得部４６へ出力する。取得部４６は取得した画像データを比較部５２へ出力する。

比較部５２は居眠りパターンデータメモリ５４に接続されている。比較部５２は、取得部４６から画像データが入力されると、居眠りパターンデータメモリ５４から居眠りパターンデータを読み出す。

居眠りパターンデータには、例えば、完全に居眠りをしている状態や運転を継続するのは困難な状態等の異常な状態のパターンが複数ある。

比較部５２は、取得した画像データが、居眠りパターンデータのいずれに当てはまるか両データを比較する。なお、単純に瞬きの回数を比較してもよい。比較部５２は判定部５６に接続している。比較部５２は比較結果を判定部５６へ出力する。

判定部５６は取得した比較結果に基づいて、乗員２４の運転継続の適否を判定する。判定部５６は結果出力部５８に接続されている。判定部５６は判定結果を結果出力部に出力する。結果出力部５８はＥＣＵ３８に接続されている。結果出力部５８は、取得した判定結果をＥＣＵ３８へ出力する。

ＥＣＵ３８には各種警告装置４０が接続されている。ＥＣＵ３８では、取得した判定結果に基づいて、各警告装置４０へ警告指示を出力する。このとき、判定結果に応じて、警告方法に段階を設けることが可能である。

なお、本居眠り防止装置１０では、異常状態と判定された場合だけでなく、正常状態と判定された場合でも居眠り予防を報知するようにしてもよい。

警告としては、シートベルトを乗員拘束方向へ複数回に渡って緊張させること、ブザー等から警告音を発すること、シート内包に設けられた振動装置を振動させること等がある。また、後述するＬＣＤディスプレイ６０（図２参照）を警告装置として用い、表示面を点灯させることも可能である。なお、警告装置として上記４種類を例に挙げたが、これらに限られるものではない。

以下に、第１の実施の形態に係る作用を説明する。

図５に示される如く、赤外線カメラ２８は乗員２４に対向して設置されている。乗員２４と赤外線カメラ２８の間には、表示面としてのハーフミラー３０と、可視光カットフィルム３４とが各々間隔を開けて配置される。

撮像が開始されると、乗員２４の顔画像データは、ハーフミラー３０に入射される。ハーフミラーは、その特性上、一部の光を透過するので、顔画像データはハーフミラー３０を透過する。

ハーフミラー３０を透過した顔画像データは、可視光カットフィルム３４へと至る。可視光カットフィルム３４では、赤外光のみが可視光カットフィルム３４を透過することができる。

これにより、赤外線カメラ２８は撮像の妨害となる可視光を除いた赤外光のみを撮像することができる。

一方、ＬＣＤディスプレイ６０の表示内容は、ハーフミラー３０にぶつかり反射する。このとき、ハーフミラー３０はＬＣＤディスプレイ６０の光を反射して乗員２４方向へ案内する。これにより、ＬＣＤディスプレイ６０の表示内容が乗員２４の視覚に捉えられる。なお、ハーフミラー３０の反射／透過面３０Ａでは、ＬＣＤディスプレイ６０の表示の一部が赤外線カメラ２８方向へ反射しているが、可視光カットフィルム３４により可視光はカットされるので、余計な可視光が赤外線カメラ２８の映像に映らない。

図６は、乗員２４の居眠りを検知するフローチャートである。

ステップ１００では、乗員２４の状態を判別する時期か否かが判断される。否定されると乗員２４の状態判断時期ではないので、判断時期になるまで待機する（ステップ１００）。一方、肯定判定されると、ステップ１０２へ移行する。

なお、判別する時期としては、例えば、運転を開始して所定時間経過後（例えば３０分）、一定時間（５分）経過毎に乗員２４の状態を判別するよう予め判別時期の条件を定めておくことができる。

また、一定時間毎に継続して乗員２４の状態を判別する以外にも、時速６０ｋｍを超えたとき、所定時間（５分）ハンドル操作がされないとき、必要以上に継続して強くアクセルペダルが踏まれたとき等のように、乗員２４が居眠りをしている可能性があるときにも個別に乗員２４の状態を判別してもよい。なお、所定条件はなくてもよい。

ステップ１０２では、乗員２４の顔画像データを取得する。第１の実施の形態では、乗員２４の顔を中心とした周辺領域の画像を撮像している。ステップ１０４へ移行する。

ステップ１０４では、居眠りパターンデータメモリ５４から居眠りパターンを読み出す。居眠りパターンデータメモリ５４には、居眠りの深度によって分けられた複数段階の居眠りパターンと正常パターンが記憶されている。ステップ１０６へ移行する。

ステップ１０６では、取得した顔画像データと読み出した居眠りパターンデータを比較する。乗員２４の顔画像データのパターンが、複数の居眠りパターンデータ又は正常パターンのいずれに該当するかを比較する。ステップ１０８へ移行する。

ステップ１０８では、乗員２４に対して警告が必要か否かを判断する。否定判定されると（警告不要）、このルーチンは終了する。なお、この場合、乗員２４は正常状態であるが、居眠り予防を報知するようにしてもよい。一方、ステップ１０８で肯定判定されるとステップ１１０へ移行する。

ステップ１１０では、乗員２４の運転状態に応じた警告処理が為される。例えば、乗員２４の居眠りの軽重度に応じて警告の度合いを変えることが考えられる。

また、警告方法として、ブザーを断続的に鳴らす、シートベルトを拘束方向に緊張させる、シート１４に内蔵されている振動装置を振動させる等がある。軽度の居眠りであれば上記いずれか単独で警告を行い、重度の居眠りの場合には上記全て又はいずれかの組み合わせにより警告を行う等、組み合わせによって警告の度合いを変えてもよい。

以上説明したように、第１の実施の形態では、乗員２４の運転を妨げないよう、乗員２４を監視する赤外線カメラ２８を突部２６へ収容し、さらに突部２６の乗員２４との対向面に表示面を設けることで、必要な情報を表示することができる。また、表示に可視光、撮像に赤外光を用いることでハーフミラー３０に映るＬＣＤディスプレイ６０からの可視光のディスプレイ表示は、赤外線カメラ２８には映らないこととなる。

なお、赤外線カメラには可視光をカットするフィルムを内蔵しているものと内蔵していないものがあるが、第１の実施の形態に係る赤外線カメラ２８は当該フィルムを内蔵していないものを用いた。フィルムを内蔵した赤外線カメラを用いる場合には、可視光カットフィルム３４は不要となる。また、第１の実施の形態では赤外線カメラ２８を用いたが、撮像手段としてはこれに限るものではない。

また、ＬＣＤディスプレイ６０の表示内容は、オイル交換時期等の運転中に関する情報の他にメンテナンスに関する情報でもよい。さらに、例えばＶＩＣＳ（Ｖｅｈｉｃｌｅ Ｉｎｆｏｒｍａｔｉｏｎ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｓｙｓｔｅｍ）（登録商標）情報等から取得した渋滞情報を表示したり、単純に宣伝広告を表示したりしてもよい。

（第２の実施の形態）
以下、本発明の第２の実施の形態について説明する。なお、第２の実施の形態において、前記第１の実施の形態と同一構成部分については、同一の符号を付してその構成の説明を省略する。

第２の実施の形態の特徴は、第１の実施の形態の居眠り防止装置１０に係るハーフミラー３０の反射／透過面３０ＡとＬＣＤディスプレイ６０の表示面との位置が固定されているのに対し、居眠り防止装置１０に係るハーフミラー６６（後述するハーフミラー６６Ａ〜６６Ｃを総称してハーフミラー６６という）とＬＣＤディスプレイ６８（後述するＬＣＤディスプレイ６８Ａ〜６８Ｃを総称してＬＣＤディスプレイ６８という）の表示面との位置関係を可変にする点にある。

ここで、図７（Ａ）には、乗員２４が居眠り防止装置１０を見たときの好ましい表示状態（以下「標準状態」という）が示されている。しかしながら、乗員２４の背丈、シート１４の高さや位置等の様々な要因により、例えば、図７（Ｂ）に示される如く、表示面が下にずれて見えることがある。なお、図７（Ｂ）では、標準状態から下にずれた例を示したが、逆に標準状態から上にずれる場合もある。

そこで、第２の実施の形態では、撮像された画像データに基づいて、ハーフミラー６６に表示される情報の表示位置が乗員２４に応じた最適位置となるように調整可能な構成となっている。図８に示される如く、ハーフミラー６６及びＬＣＤディスプレイ６８の何れか一方又は双方が移動可能に構成されている。

調整の要否は、赤外線カメラ２８で撮像した結果に基づいて判定されるようになっている。例えば、乗員２４が着座したことを着座センサ等で検知した時点やエンジンがかかった時点等において、居眠り検知とは別に、赤外線カメラ２８で乗員２４を撮像し、当該乗員２４の特徴点、例えば目の位置を検知して、予め設定した基準位置とのずれ量を演算し、このずれ量に基づいて、調整の要否、並びに調整量を設定する。

図８（Ａ）には、板状のハーフミラー６６Ａの傾きを調整可能にした模式図が示されている。例えば、ハーフミラー６６Ａの左右の両端部中央に軸を取り付け、この軸で支持すると共に、不図示のモータにより当該軸を回転させることにより、ＬＣＤディスプレイ６８Ａの表示面に対するハーフミラー６６Ａの傾きを調整することができる（図８（Ａ）の矢印Ｘ方向）。これにより、乗員２４の目線が低い場合にはハーフミラー６６ＡとＬＣＤディスプレイ６８Ａの表示面との角度を鋭角にすることで（水平方向へ回転）、乗員２４に最適な表示位置となる。一方、乗員２４の目線が高い場合には、前記角度を鈍角にすることで（垂直方向へ回転）、乗員２４に最適な表示位置となる。

図８（Ｂ）には、ＬＣＤディスプレイ６８Ｂが、不図示のモータにより、車両の前後方向に移動可能にした模式図が示されている（図８（Ｂ）の矢印Ｙ方向）。これにより、乗員２４の目線が低い場合にはＬＣＤディスプレイ６８Ｂを車両前方（乗員２４から遠ざける方向）に移動することで、乗員２４に最適な表示位置となる。一方、乗員２４の目線が高い場合には、ＬＣＤディスプレイ６８Ｂを車両後方（乗員２４に近づける方向）へ移動することで、乗員２４に最適な表示位置となる。

図８（Ｃ）には、ＬＣＤディスプレイ６８Ｃの傾きを調整可能にした模式図が示されている。例えば、ＬＣＤディスプレイ６８Ｃの左右の両端部中央に軸を取り付け、この軸で支持すると共に、不図示のモータにより当該軸を回転させることで、ハーフミラー６６Ｃに対するＬＣＤディスプレイ６８Ｃの傾きを調整することができる（図８（Ｃ）の矢印Ｚ方向）。これにより、乗員２４の目線が低い場合にはＬＣＤディスプレイ６８Ｃを、軸を中心に反時計回り方向へ回転させることで、乗員２４に最適な表示位置となる。一方、乗員２４の目線が高い場合にはＬＣＤディスプレイ６８Ｃを、軸を中心に時計回り方向へ回転させることで、乗員２４に最適な表示位置となる。

なお、図８（Ｄ）に示す如く、上記図８（Ａ）及び（Ｃ）を組み合わせ、ハーフミラー６６Ａ及びＬＣＤディスプレイ６８Ｃの双方の傾きを調整可能に構成してもよい。例えば、ハーフミラー６６又はＬＣＤディスプレイ６８の何れか一方だけでは調整できないとき等に両者を組み合わせることで表示位置を大きく移動させることができる。なお、ハーフミラー６６とＬＣＤディスプレイ６８との組み合わせは、上記図８（Ａ）及び（Ｃ）に限られない。また、図８において可視光カットフィルム３４は省略されている。

なお、ハーフミラー６６Ａ及び／又はＬＣＤディスプレイ６８Ｃの調整により、画像に歪みがでる場合もあるが、必要に応じて表示制御装置６４による表示状態を補正すればよい。

以下、第２の実施の形態の作用を図９のフローチャート従い説明する。

ステップ２００では、ハーフミラー６６に表示される情報の表示位置の調整時期か否かが判断される。第２の実施の形態では、調整時期として、例えば、乗員２４が着座したことを着座センサ等で検知した時、エンジン投入時や所定時間毎等が挙げられる。ステップ２００で否定判定されると、判断時期になるまで待機する。一方、肯定判定されると、ステップ２０２へ移行する。

ステップ２０２では、乗員２４の顔画像データを取得する。ここでは、図７（Ｃ）に示される如く、乗員２４の顔を中心とした周辺領域の画像データであればよく、前記図６に係る居眠り検知処理の際に用いられる画像データと同じものを用いる。

ステップ２０４では、図７（Ｄ）に示される如く、取得した顔画像データから特徴点となる、乗員２４の目の位置を検出する。

次のステップ２０６では、前記ステップ２０４で検出した検出位置（目の位置）と、予め定められた標準位置とのずれを算出する（図７（Ｅ）参照）。

次のステップ２０８では、表示位置の調整が必要か否かが判定される。このとき、標準位置にある程度の幅を持たせてもよく、この幅の上下何れかに検出位置がずれたときに、表示位置の調整が必要と判断すればよい。ステップ２０８で肯定判定されるとステップ２１０へ移行する。一方、否定判定されると、表示位置を調整する必要がないため本ルーチンは終了する。

ステップ２１０では、再表示処理がなされる。このとき、ハーフミラー６６やＬＣＤディスプレイ６８の位置を変える。これにより本ルーチンは終了する。

１０ 居眠り防止装置
１２ 車両
１４ シート
１６ ステアリングホイール
１８ コラムカバー
２０ コラム
２２ インストルメントパネル
２４ 乗員
２６ 突部
２８ 赤外線カメラ（撮像手段）
３０ ハーフミラー
３０Ａ 反射／透過面
３４ 可視光カットフィルム
３６ 状態判別装置（状態判別装置）
３８ ＥＣＵ
４０ 警告装置（報知手段）
４２ 画像入力部
４４ 画像処理部
４６ 取得部
４８ 実行指示部
５０ 車両走行関連センサ
５２ 比較部
５４ 居眠りパターンデータメモリ
５６ 判定部
５８ 結果出力部
６０ ＬＣＤディスプレイ（表示手段）
６２ ＬＣＤドライバ
６４ 表示制御装置

Claims (5)

1. 少なくとも顔を含む乗員画像を撮像する撮像手段と、
   前記乗員を撮像する撮像手段の光軸から外れた位置に配置され、所定の情報を表示する表示手段と、
   前記乗員と前記撮像手段との間に設けられ、前記表示手段に表示された情報を乗員の視野に入るように反射させると共に、前記乗員画像を透過させて前記撮像手段へ案内するハーフミラーと、
   を有する乗員撮像装置。
2. 運転席に着座して運転している乗員の少なくとも顔を含む画像である乗員画像を撮像する撮像手段と、前記撮像手段で撮像した乗員画像情報に基づく乗員の運転状態から運転の適否を判定する運転状態適否判定手段と、前記運転状態適否判定手段の判定結果を報知する報知手段と、を備えた運転状態判定装置と、
   前記乗員を撮像する撮像手段の光軸外に配置され、所定の情報を表示する表示手段と、
   前記乗員と前記撮像手段との間に設けられ、前記表示手段に表示された情報を乗員の視野に入るように反射させ、前記画像情報を透過させるハーフミラーと、
   を有する居眠り防止装置。
3. 前記撮像手段は、赤外線カメラであり、前記ハーフミラーと前記撮像手段との間に可視光波長をカットするカットフィルムが配置されている請求項２記載の居眠り防止装置。
4. 前記撮像手段は、それぞれ車両構成部材であるステアリングホイールとインストルメントパネルとの間に設けられたコラムの上部に突出するように設けられたカバー内に配置され、前記カバーにおける前記乗員との対向面に前記ハーフミラーが取り付けられている請求項２又は請求項３記載の居眠り防止装置。
5. 前記報知手段は、シートベルトを乗員拘束方向へ緊張させることによる報知、警告音を発することによる報知、座席シートを振動させることによる報知、前記表示手段を点灯させることによる報知のいずれか又は組み合わせを含む請求項２〜請求項４のいずれか１項記載の居眠り防止装置。

Images