JP4706362B2 - Vehicle navigation system - Google Patents

Vehicle navigation system Download PDF

Info

Publication number
JP4706362B2
JP4706362B2 JP2005202112A JP2005202112A JP4706362B2 JP 4706362 B2 JP4706362 B2 JP 4706362B2 JP 2005202112 A JP2005202112 A JP 2005202112A JP 2005202112 A JP2005202112 A JP 2005202112A JP 4706362 B2 JP4706362 B2 JP 4706362B2
Authority
JP
Japan
Prior art keywords
face
driver
vehicle
input
navigation system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2005202112A
Other languages
Japanese (ja)
Other versions
JP2007017409A (en
Inventor
健一 大上
朋喜 長尾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2005202112A priority Critical patent/JP4706362B2/en
Publication of JP2007017409A publication Critical patent/JP2007017409A/en
Application granted granted Critical
Publication of JP4706362B2 publication Critical patent/JP4706362B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)
  • Navigation (AREA)
  • Image Processing (AREA)

Description

本発明は車両用ナビゲーションシステムに係り、特に車両走行時に運転者による入力操作を禁止するよう構成された車両用ナビゲーションシステムに関する。   The present invention relates to a vehicle navigation system, and more particularly to a vehicle navigation system configured to prohibit an input operation by a driver when the vehicle is traveling.

近年、自動車等の車両には、GPS(Global Positioning System)により得られた位置情報とハードディスク装置やDVD(Digital Video Disk)装置等の記憶装置に格納された地図情報とをディスプレイに表示する車両用ナビゲーションシステムが登載されている。   In recent years, for vehicles such as automobiles, the position information obtained by GPS (Global Positioning System) and map information stored in a storage device such as a hard disk device or a DVD (Digital Video Disk) device are displayed on a display. A navigation system is listed.

この種の車両用ナビゲーションシステムでは、車両走行中の安全性を確保するため、運転操作中に行き先の変更や検索条件の入力などの操作を禁止しており、車両が停止している状態のときにだけ入力操作が可能となるように設定されている(例えば、特許文献1参照)。   In this type of vehicle navigation system, operations such as changing destinations and entering search conditions are prohibited during driving to ensure safety while the vehicle is running, and when the vehicle is stopped It is set so that the input operation can be performed only in (see, for example, Patent Document 1).

この特許文献1に記載された車両用ナビゲーションシステムでは、ステアリングホイールに圧力センサを設け、運転者がステアリングホイールを把持していることが圧力センサにより検出されると、運転者以外の搭乗者による入力操作を許可するようになっている。
特開2004−271488号公報
In the vehicle navigation system described in Patent Document 1, when a pressure sensor is provided on a steering wheel and the pressure sensor detects that the driver is holding the steering wheel, input by a passenger other than the driver is performed. The operation is allowed.
JP 2004-271488 A

しかしながら、上記引用文献に記載された車両用ナビゲーションシステムでは、例えば、運転者が圧力センサ以外の箇所でステアリングホイールを把持している場合には、運転操作中であることが検出されないので、運転者がステアリングホイールを把持していても他の搭乗者が行き先変更などの入力操作を行なえない場合がある。   However, in the vehicle navigation system described in the above cited document, for example, when the driver is holding the steering wheel at a place other than the pressure sensor, it is not detected that the driver is operating. Even if the person holds the steering wheel, other passengers may not be able to perform input operations such as changing the destination.

また、車両用ナビゲーションシステムにおいては、助手席の搭乗者が行き先変更などの入力操作を行なっているときに運転者がステアリングホイールを持ち替えて把持する箇所をずらしてしまうと、入力途中で入力操作が禁止されてしまうため、利便性の向上が要望されている。   In addition, in a vehicle navigation system, if a passenger in the front passenger seat is performing an input operation such as changing the destination, the driver may change the gripping position by holding the steering wheel. Since it is prohibited, improvement of convenience is demanded.

また、ステアリングホイールを把持していることが検出されている状態で他の搭乗者による入力操作を行なうと、運転者が他の搭乗者による入力操作に気を取られて脇見運転してしまうおそれがあった。   In addition, if an input operation is performed by another occupant while it is detected that the steering wheel is being gripped, the driver may be distracted by the input operation by the other occupant and drive aside. was there.

そこで、本発明は運転者の顔の向きを検出することにより上記課題を解決した車両用ナビゲーションシステムを提供することを目的とする。   Therefore, an object of the present invention is to provide a vehicle navigation system that solves the above-described problems by detecting the direction of the driver's face.

上記課題を解決するため、本発明は以下のような手段を有する。   In order to solve the above problems, the present invention has the following means.

請求項1記載の発明は、車両の位置を測定する位置測定手段と、該位置測定手段により測定された位置情報及び当該検出位置周辺の地図情報を表示する表示手段と、任意の検索条件を手動操作により入力する入力手段と、前記車両の走行中に前記入力手段による入力操作を禁止する入力禁止手段と、を備えた車両用ナビゲーションシステムにおいて、当該車両の運転者の顔を検出する顔検出手段と、該顔検出手段により検出された前記運転者の顔が前記車両の正面を向いているか否かを判定する顔向き判定手段と、該顔向き判定手段により判定された前記運転者の顔が前記車両の正面を向いている場合に前記入力禁止手段による入力禁止を解除し、前記入力手段による入力操作を許可する入力許可手段を有することを特徴とする。   According to the first aspect of the present invention, position measuring means for measuring the position of the vehicle, display means for displaying the position information measured by the position measuring means and map information around the detected position, and any search condition manually A face detection means for detecting a face of a driver of a vehicle in a vehicle navigation system comprising: input means for input by operation; and input prohibition means for prohibiting an input operation by the input means during travel of the vehicle. A face direction determining means for determining whether or not the driver's face detected by the face detecting means is facing the front of the vehicle, and the driver's face determined by the face direction determining means is It has an input permission means for canceling the input prohibition by the input prohibition means and permitting an input operation by the input means when facing the front of the vehicle.

請求項2記載の発明は、前記顔検出手段が、前記運転者の顔を正面から撮像するカメラであり、前記顔向き判定手段が、前記カメラに撮像された前記運転者の顔画像に基づいて前記運転者の顔が正面を向いているか否かを判定することを特徴とする。   According to a second aspect of the present invention, the face detection unit is a camera that images the driver's face from the front, and the face orientation determination unit is based on the driver's face image captured by the camera. It is determined whether or not the driver's face is facing the front.

請求項3記載の発明は、前記入力許可手段が、前記車両の走行中に前記表示手段に入力操作が許可されたことを表示することを特徴とする。   The invention according to claim 3 is characterized in that the input permission means displays that the input operation is permitted on the display means while the vehicle is traveling.

請求項4記載の発明は、前記顔向き判定手段が、前記カメラに撮像された前記運転者の顔の輪郭及び顔中心線の位置に基づいて前記運転者の顔が正面を向いているか否かを判定することを特徴とする。   According to a fourth aspect of the present invention, the face orientation determination means determines whether the driver's face is facing the front based on the contour of the driver's face imaged by the camera and the position of the face centerline. It is characterized by determining.

本発明によれば、当該車両の運転者の顔を検出し、運転者の顔が車両の正面を向いている場合に入力禁止を解除し、入力手段による入力操作を許可するため、例えば、車両が走行中であっても運転者が車両の正面を見ている場合には、他の搭乗者による入力操作が可能になり、一旦車両を停止して行き先変更などの入力操作を行なわずに済み、利便性の向上が図られている。   According to the present invention, in order to detect the driver's face of the vehicle, cancel the input prohibition when the driver's face is facing the front of the vehicle, and permit the input operation by the input means. When the driver is looking at the front of the vehicle even while the vehicle is traveling, input operations by other passengers are possible, and it is not necessary to stop the vehicle and perform input operations such as changing the destination. Improvements in convenience are being made.

また、車両走行中に運転者の顔が正面以外に向いている場合には、入力操作が禁止されるため、他の搭乗者が入力操作するのに気を取られて運転者の顔の向きが変わると、その時点で入力操作が禁止され、運転者の脇見運転を抑制することができる。   In addition, when the driver's face is facing away from the front while the vehicle is running, input operations are prohibited, and the driver's face is distracted by other passengers performing input operations. When is changed, the input operation is prohibited at that time, and the driver's aside driving can be suppressed.

以下、図面を参照して本発明を実施するための最良の形態について説明する。   The best mode for carrying out the present invention will be described below with reference to the drawings.

図1は本発明になる車両用ナビゲーションシステムの一実施例を示す構成図である。図2は車両を上から見た平面図である。図1及び図2に示されるように、車両用ナビゲーションシステム10は、自動車等の車両12に搭載されたナビゲーション用ECU(electronic control unit)14により制御されており、ナビゲーション用ECU14はGPSアンテナ(位置測定手段)16により複数の人口衛星(図示せず)からの電波を受信すると、受信した信号に基づいて現在位置を演算し、液晶ディスプレイ(表示手段)18に測定位置及びその周辺の地図を表示する。   FIG. 1 is a block diagram showing an embodiment of a vehicle navigation system according to the present invention. FIG. 2 is a plan view of the vehicle as viewed from above. As shown in FIGS. 1 and 2, the vehicle navigation system 10 is controlled by a navigation ECU (electronic control unit) 14 mounted on a vehicle 12 such as an automobile, and the navigation ECU 14 has a GPS antenna (position). When radio waves from a plurality of artificial satellites (not shown) are received by the measuring means 16, the current position is calculated based on the received signals, and the measurement position and its surrounding map are displayed on the liquid crystal display (display means) 18. To do.

また、車両用ナビゲーションシステム10は、GPS位置情報や地図情報及びその他の検索情報などが格納された記憶装置20と、車両走行時に運転者38の顔を撮像する運転者用カメラ(顔検出手段)22とを有する。運転者用カメラ22は、運転者38の顔を正面から撮像する位置に設けられている。   The vehicle navigation system 10 includes a storage device 20 that stores GPS position information, map information, and other search information, and a driver camera (face detection means) that captures the face of the driver 38 when the vehicle travels. 22. The driver camera 22 is provided at a position where the face of the driver 38 is imaged from the front.

運転者用カメラ22は、例えば、CCD撮像素子やC-MOS撮像素子を用いた車載用カメラからなり、例えば、運転者38の顔を正面下方から撮像できるステアリングホイール24のコラムカバー26の上部やメータハウジング内、あるいはインナミラー内やフロントガラスの上部などの正面上方に取り付けられている。尚、運転者用カメラ22の取付位置は、運転操作の妨げにならない位置であれば良いが、カメラ位置によって運転者の顔画像が変わるため、顔向き検知の演算処理はカメラ位置に応じた演算方法を用いることになる。また、上記記憶装置20としては、例えば、ハードディスク装置やDVD装置等が用いられる。   The driver camera 22 is, for example, an in-vehicle camera using a CCD image sensor or a C-MOS image sensor. For example, an upper part of the column cover 26 of the steering wheel 24 that can image the face of the driver 38 from the front lower side, It is attached in front of the meter housing, the inner mirror, or the upper part of the windshield. The mounting position of the driver camera 22 may be any position that does not hinder driving operation. However, since the driver's face image changes depending on the camera position, the face orientation detection calculation processing is performed according to the camera position. The method will be used. As the storage device 20, for example, a hard disk device or a DVD device is used.

液晶ディスプレイ18は、運転席28と助手席30との両方からみることができるようにダッシュボード32上のほぼ中間位置に設けられている。そのため、液晶ディスプレイ18の周辺に設けられた各種スイッチ(入力手段)34は、運転席28と助手席29との両方から操作できるように設けられている。また、液晶ディスプレイ18の画面は、タッチパネル式になっており、運転者または搭乗者が触れることにより各種入力操作(例えば、目的地の設定操作等)が行なえる。   The liquid crystal display 18 is provided at a substantially intermediate position on the dashboard 32 so that it can be seen from both the driver's seat 28 and the passenger seat 30. Therefore, various switches (input means) 34 provided around the liquid crystal display 18 are provided so as to be operated from both the driver seat 28 and the passenger seat 29. The screen of the liquid crystal display 18 is a touch panel type, and various input operations (for example, a destination setting operation) can be performed when the driver or the passenger touches the screen.

また、運転者用カメラ22により撮像された運転者の顔画像は、顔向き検知ECU36に供給される。顔向き検知ECU36では、後述するように顔の輪郭形状及び顔中心線の位置に基づいて顔向き検知データを生成し、車両走行中の顔の向きに応じた顔輪郭データをナビゲーション用ECU14に供給する。   Further, the driver's face image captured by the driver camera 22 is supplied to the face orientation detection ECU 36. As will be described later, the face direction detection ECU 36 generates face direction detection data based on the face contour shape and the position of the face center line, and supplies the face contour data corresponding to the face direction while the vehicle is running to the navigation ECU 14. To do.

また、ナビゲーション用ECU14は、車速センサ40により検出された速度検出信号から車両速度を演算する車速演算部42から車両速度情報が入力されており、車速が所定以上になると入力禁止モードになる。また、運転席28には、運転者38が着席していることを検出する運転席センサ50が設けられ、助手席30には搭乗者54が着席していることを検出する助手席センサ52が設けられている。ナビゲーション用ECU14は、車両走行中でも運転席センサ50及び助手席センサ52からの検出信号が入力されると、後述するように運転者38が正面を向いていることを条件に目的地などの入力操作を許可する入力許可モードに切り替わる。尚、運転席センサ50及び助手席センサ52としては、例えば、圧力センサにより体重を検出しても良いし、あるいはシートベルトの金具がバックルに結合されたことをスイッチにより検出するようにしても良い。   The navigation ECU 14 receives vehicle speed information from the vehicle speed calculation unit 42 that calculates the vehicle speed from the speed detection signal detected by the vehicle speed sensor 40, and enters the input prohibit mode when the vehicle speed exceeds a predetermined value. The driver seat 28 is provided with a driver seat sensor 50 for detecting that the driver 38 is seated, and the passenger seat 30 is provided with a passenger seat sensor 52 for detecting that the passenger 54 is seated. Is provided. When the detection signals from the driver seat sensor 50 and the passenger seat sensor 52 are input even when the vehicle is traveling, the navigation ECU 14 performs an input operation such as a destination on the condition that the driver 38 is facing the front as described later. Switch to the input permission mode that permits As the driver seat sensor 50 and the passenger seat sensor 52, for example, the weight may be detected by a pressure sensor, or it may be detected by a switch that the bracket of the seat belt is coupled to the buckle. .

ナビゲーション用ECU14は、車両走行中に入力操作を禁止する入力禁止手段60と、顔向き検知ECU36から供給された顔向き検知データにより運転者38の顔が車両の正面を向いているか否かを判定する顔向き判定手段62と、運転者38の顔が車両の正面を向いている場合に入力禁止を解除し、入力操作を許可する入力許可手段64とを有する。   The navigation ECU 14 determines whether or not the face of the driver 38 faces the front of the vehicle based on the input prohibiting means 60 that prohibits an input operation while the vehicle is traveling and the face direction detection data supplied from the face direction detection ECU 36. And an input permission means 64 for canceling the input prohibition and permitting the input operation when the face of the driver 38 faces the front of the vehicle.

図3は車両用ナビゲーションシステム10の構成を示すブロック図である。図3に示されるように、ナビゲーション用ECU14には、上記GPSアンテナ16、液晶ディスプレイ18、記憶装置20、車速演算部42、運転席センサ50、助手席センサ52の他にタッチパネル(入力手段)18a、TVチューナ56が接続されている。   FIG. 3 is a block diagram showing the configuration of the vehicle navigation system 10. As shown in FIG. 3, the navigation ECU 14 includes a touch panel (input means) 18a in addition to the GPS antenna 16, the liquid crystal display 18, the storage device 20, the vehicle speed calculation unit 42, the driver seat sensor 50, and the passenger seat sensor 52. The TV tuner 56 is connected.

顔向き検知ECU36は、ナビゲーション用ECU14と別体に設けられており、運転者用カメラ22からの映像信号に基づいて顔の向きを検知し、顔の向き(左右方向の角度)に応じた顔向き検知データをナビゲーション用ECU14に出力する。尚、ナビゲーション用ECU14が顔向き検知ECU36を兼ねるように一体な構成とすることも可能である。   The face direction detection ECU 36 is provided separately from the navigation ECU 14, detects the face direction based on the video signal from the driver camera 22, and corresponds to the face direction (angle in the left-right direction). The direction detection data is output to the navigation ECU 14. The navigation ECU 14 may be integrated so that it also serves as the face direction detection ECU 36.

図4は運転者38の顔画像の表示例を示す図であり、(A)は運転者が正面をみている状態の顔画像を示す図、(B)は運転者が液晶ディスプレイ18をみている状態の顔画像を示す図である。   FIG. 4 is a view showing a display example of the face image of the driver 38, (A) is a view showing a face image in a state where the driver is looking in front, and (B) is a view of the liquid crystal display 18 by the driver. It is a figure which shows the face image of a state.

図4(A)に示されるように、運転者38が正面を向いた状態で運転者用カメラ22により撮像された運転者38の顔画像は、縦寸法に対する横寸法の比が大きくなる。また、図4(B)に示されるように、運転者38が側方(斜め横方向)を向いた状態で運転者用カメラ22により撮像された運転者38の顔画像は、縦寸法に対する横寸法の比が小さくなる。   As shown in FIG. 4A, in the face image of the driver 38 captured by the driver camera 22 with the driver 38 facing the front, the ratio of the horizontal dimension to the vertical dimension is large. Further, as shown in FIG. 4B, the face image of the driver 38 captured by the driver camera 22 with the driver 38 facing sideways (obliquely lateral direction) is a horizontal image with respect to the vertical dimension. The ratio of dimensions is reduced.

そのため、顔向き検知ECU36では、運転者用カメラ22により撮像された運転者38の顔画像から顔向きを検知することができる。本実施例の顔向きを検知方法としては、例えば、(1)顔輪郭を求め、顔輪郭に基づき顔横幅の変化を検出して顔向きを検知する方法、(2)運転者の顔を構成する顔パーツ(耳、目、鼻など)の左右対称性から顔中心の位置を検出して顔向きを求める方法、(3)顔輪郭と顔中心線の移動位置との横方向の比率から顔向き角度を演算する方法などがある。また、これ以外の顔向きを検知方法としては、顔輪郭及び顔パーツ(目、耳、鼻など)のパターンマッチングで顔向きを検知することも可能である。   Therefore, the face direction detection ECU 36 can detect the face direction from the face image of the driver 38 captured by the driver camera 22. As a method for detecting the face orientation of the present embodiment, for example, (1) a method for obtaining a face contour and detecting a change in face width based on the face contour to detect the face orientation, and (2) configuring a driver's face To find the face orientation by detecting the position of the center of the face from the symmetry of the face parts (ears, eyes, nose, etc.), and (3) the face from the horizontal ratio of the face contour and the movement position of the face centerline There are methods for calculating the orientation angle. As other face orientation detection methods, it is also possible to detect the face orientation by pattern matching of face contours and face parts (eyes, ears, nose, etc.).

以下、顔輪郭と顔中心線の移動位置との横方向の比率から顔向き角度を演算する方法により顔向き検知方法について具体例を挙げて説明する。   Hereinafter, a specific example of the face orientation detection method will be described using a method of calculating the face orientation angle from the ratio of the lateral direction between the face contour and the movement position of the face centerline.

図5は運転者38の顔画像の輪郭を画像処理した表示例を示す図であり、(A)は運転者が正面をみている状態の顔輪郭画像を示す図、(B)は運転者が液晶ディスプレイ18をみている状態の顔輪郭画像を示す図である。   FIG. 5 is a view showing a display example in which the contour of the face image of the driver 38 is image-processed. (A) is a view showing a face contour image when the driver is looking in front. It is a figure which shows the face outline image of the state which is looking at the liquid crystal display.

図5(A)に示されるように、運転者38が車両12の正面を向いた状態の顔輪郭38Aをエッジ処理により抽出し、顔輪郭38Aから顔の仮想中心線Oを求め、この仮想中心線Oの左右領域となる左顔半分の横幅aと右顔半分の横幅bとの顔向き比率a/bを求める。例えば、運転者が正面を向いている場合は、左右対称であるので顔向き比率がa/b≒1となる。   As shown in FIG. 5A, a face contour 38A in a state where the driver 38 faces the front of the vehicle 12 is extracted by edge processing, a virtual centerline O of the face is obtained from the face contour 38A, and this virtual center is obtained. The face orientation ratio a / b between the width a of the left face half and the width b of the right face half, which are the left and right regions of the line O, is obtained. For example, when the driver is facing the front, the face direction ratio is a / b≈1 because the left and right are symmetrical.

また、図5(B)に示されるように、運転者38が側方(斜め横方向)を向いた状態の顔輪郭38Bをエッジ処理により抽出し、顔輪郭38Aから顔の仮想中心線O’を求め、この仮想中心線Oの左右領域となる左顔半分の横幅a’と右顔半分の横幅b’との顔向き比率a/bを求める。例えば、運転者が側方を向いている場合は、左顔半分の横幅a’が大きくなり、右顔半分の横幅b’が小さくなるので顔向き比率がa’/b’≒0.3〜0.5となる。   Further, as shown in FIG. 5B, a face contour 38B in a state where the driver 38 faces sideways (obliquely lateral direction) is extracted by edge processing, and the virtual center line O ′ of the face is extracted from the face contour 38A. And a face orientation ratio a / b between the width a ′ of the left face half and the width b ′ of the right face half, which are the left and right regions of the virtual center line O, is obtained. For example, when the driver is facing sideways, the width a ′ of the left face half is large and the width b ′ of the right face half is small, so the face direction ratio is a ′ / b′≈0.3 to 0.5. Become.

従って、顔向き比率がa/bを演算することにより運転者の顔向き方向を検知することが可能になる。   Therefore, it is possible to detect the face direction of the driver by calculating the face direction ratio a / b.

ここで、ナビゲーション用ECU14が実行する制御処理について図6及び図7を参照して説明する。   Here, control processing executed by the navigation ECU 14 will be described with reference to FIGS. 6 and 7.

ナビゲーション用ECU14は、図6に示すS11において、当該車両12のアクセサリスイッチがオンに操作された場合、S12に進み、顔向き検知ECU36から供給された顔向きデータ(例えば、顔輪郭データ及び顔向き比率などを含む)を運転者38が正面を向いたときの判定基準データとして記憶装置20に登録する。通常、運転者38が車両12に乗車してアクセサリスイッチがオンに操作してエンジン始動操作する際、運転席28の正面に配置されたメータを見て車両状態を確認している。このとき、運転者用カメラ22により撮像された運転者38の顔画像は、正面を向いた状態であるので、当該運転者の判定基準データとして登録される。   When the accessory switch of the vehicle 12 is turned on in S11 shown in FIG. 6, the navigation ECU 14 proceeds to S12 and the face orientation data (for example, face contour data and face orientation supplied from the face orientation detection ECU 36). (Including the ratio and the like) is registered in the storage device 20 as determination reference data when the driver 38 faces the front. Normally, when the driver 38 gets on the vehicle 12 and the accessory switch is turned on to start the engine, the vehicle state is confirmed by looking at a meter arranged in front of the driver's seat 28. At this time, the face image of the driver 38 captured by the driver camera 22 is in a state of facing the front, and thus is registered as determination criterion data of the driver.

続いて、S13では、GPSアンテナ16から得られた位置情報に基づいて現在位置を求め、地図情報と共に、現在位置を液晶ディスプレイ18に表示する。次のS14では、目的地が入力されたか否かをチェックする。S14において、各スイッチ34またはタッチパネル18aの入力操作により目的地が入力された場合には、S15に進み、入力された目的地が確定されたか否かをチェックする。   Subsequently, in S13, the current position is obtained based on the position information obtained from the GPS antenna 16, and the current position is displayed on the liquid crystal display 18 together with the map information. In the next S14, it is checked whether or not a destination has been input. In S14, when the destination is input by the input operation of each switch 34 or the touch panel 18a, the process proceeds to S15 to check whether or not the input destination is confirmed.

S15において、目的地が確定されると、S16に進み、現在位置から確定された目的地までのルート(経路)を探索し、優先条件(例えば、最短距離、高速道路、一般道など)に基づく複数のルートを液晶ディスプレイ18に表示する。そして、S17では、各スイッチ34またはタッチパネル18aの入力操作により複数のルートの中から1ルートが選択されたか否かをチェックする。   When the destination is determined in S15, the process proceeds to S16, where a route (route) from the current position to the determined destination is searched and based on priority conditions (for example, shortest distance, expressway, general road, etc.) A plurality of routes are displayed on the liquid crystal display 18. In S17, it is checked whether one route is selected from a plurality of routes by an input operation of each switch 34 or the touch panel 18a.

S17において、1ルートが選択されると、S18に進み、案内開始の入力操作が行なわれたか否かをチェックする。S18において、案内開始が入力されると、S19に進み、選択されたルートに沿って当該車両12が走行するように道順を案内表示する案内表示モードに移行する。また、S18において、案内開始が入力されない場合は、S14に戻り、目的地の再設定を行なう。   When one route is selected in S17, the process proceeds to S18, in which it is checked whether or not a guidance start input operation has been performed. When the guidance start is input in S18, the process proceeds to S19, and the process shifts to a guidance display mode for guiding and displaying the route so that the vehicle 12 travels along the selected route. If the guidance start is not input in S18, the process returns to S14 and the destination is reset.

また、上記S14において、目的地が入力されない場合には、S20に進み、現在位置のみを表示する現在位置表示モード(案内無し)に移行する。そして、S21で、当該車両12のアクセサリスイッチがオフに操作されたか否かをチェックする。このS21において、アクセサリスイッチがオンのままである場合は、上記S20に戻り、現在位置表示モードを継続する。また、S21において、アクセサリスイッチがオフに操作された場合は、今回の処理を終了する。   If the destination is not input in S14, the process proceeds to S20, and shifts to a current position display mode (no guidance) for displaying only the current position. In S21, it is checked whether or not the accessory switch of the vehicle 12 is turned off. In S21, when the accessory switch remains on, the process returns to S20 and the current position display mode is continued. If the accessory switch is turned off in S21, the current process is terminated.

上記S19で案内表示モードに移行すると、図7に示すS22に進み、車速演算部42で演算された車両速度データを読み込み、現在の車両12が停止(V=0km/h)か否かをチェックする。このS22において、現在の走行速度がゼロ以上で停止していない場合は、S23に進み、入力操作を禁止する入力禁止モードに移行し(入力禁止手段60)、各スイッチ34またはタッチパネル18aによる入力操作が行なえないことを液晶ディスプレイ18に表示する。   When the mode is shifted to the guidance display mode in S19, the process proceeds to S22 shown in FIG. 7, and the vehicle speed data calculated by the vehicle speed calculation unit 42 is read to check whether or not the current vehicle 12 is stopped (V = 0 km / h). To do. In S22, when the current traveling speed is zero or more and the vehicle is not stopped, the process proceeds to S23, and the mode is shifted to the input prohibit mode for prohibiting the input operation (input prohibition means 60), and the input operation by each switch 34 or the touch panel 18a. Is displayed on the liquid crystal display 18.

次のS24では、運転席センサ50により運転席28に運転者38が着席していることを検出しているか否かをチェックする。そして、S24において、運転席センサ50が運転者38の存在を検出した場合には、S25に進み、顔向き検知ECU36から顔向きデータを取得する。   In next S24, it is checked whether or not the driver's seat sensor 50 detects that the driver 38 is seated in the driver's seat 28. In S24, when the driver's seat sensor 50 detects the presence of the driver 38, the process proceeds to S25, and the face orientation data is acquired from the face orientation detection ECU 36.

続いて、S26では、現在の顔向き検知ECU36から取得した顔向きデータと前述したS12で取得した顔向きデータとを比較し、現在の運転者38が正面を向いているか否かを判定する(顔向き判定手段62)。例えば、現在の顔向きデータと判定基準データとしての顔向きデータがほぼ一致した場合(顔向き比率がa/b≒1)は、運転者38の顔が正面をみているものと判定し、現在の顔向きデータと判定基準データとしての顔向きデータが一致しない場合(顔向き比率がa/b≒0.3〜0.5)は、運転者38の顔が側方(液晶ディスプレイ18方向)を向いていると判定する。   Subsequently, in S26, the face orientation data acquired from the current face orientation detection ECU 36 is compared with the face orientation data acquired in S12 described above, and it is determined whether or not the current driver 38 is facing the front ( Face orientation determining means 62). For example, when the current face direction data and the face direction data as the determination reference data substantially match (the face direction ratio is a / b≈1), it is determined that the face of the driver 38 is looking front, If the face orientation data as the determination reference data does not match (the face orientation ratio is a / b≈0.3 to 0.5), the face of the driver 38 faces sideways (direction of the liquid crystal display 18). Is determined.

次のS27では、上記S26の顔向き判定処理の結果が正面向きか否かをチェックする。S27において、例えば、S26の顔向き判定結果が正面を向いているものと判定した場合には、S28に進む。次のS28では、助手席センサ52により助手席30に搭乗者54が着席していることを検出しているか否かをチェックする。そして、S28において、助手席センサ52が搭乗者54の存在を検出した場合には、S29に進み、入力禁止モードを解除して当該車両12が入力操作を許可し(入力許可手段64)、各スイッチ34またはタッチパネル18aによる入力操作が可能であることを液晶ディスプレイ18に表示する。   In the next S27, it is checked whether or not the result of the face orientation determination process in S26 is the front orientation. In S27, for example, if it is determined that the face orientation determination result in S26 is facing the front, the process proceeds to S28. In next S28, it is checked whether or not the passenger seat sensor 52 detects that the passenger 54 is seated in the passenger seat 30. If the passenger seat sensor 52 detects the presence of the passenger 54 in S28, the process proceeds to S29, the input prohibit mode is canceled, and the vehicle 12 permits the input operation (input permission means 64). It is displayed on the liquid crystal display 18 that the input operation by the switch 34 or the touch panel 18a is possible.

次のS30では、目的地変更あるいはルート変更などの入力操作が有るか否かをチェックする。S30において、助手席30の搭乗者54が目的地変更あるいはルート変更などの入力操作が有った場合は、S31に進み、入力された目的地変更あるいはルート変更を設定する。また、S30において、入力操作が無い場合は、上記S31の処理を省略する。尚、運転者38が入力操作しようとした場合には、顔の向きが正面でなくなるため、その時点で入力許可モードが解除されて入力禁止モードが設定される。   In next S30, it is checked whether or not there is an input operation such as destination change or route change. In S30, when the passenger 54 in the passenger seat 30 performs an input operation such as a destination change or a route change, the process proceeds to S31, and the input destination change or route change is set. In S30, when there is no input operation, the process of S31 is omitted. Note that when the driver 38 tries to perform an input operation, the face direction is not the front, so the input permission mode is canceled and the input prohibition mode is set at that time.

次のS32では、GPSアンテナ16から得られた位置情報に基づいて現在位置を求め、目的地に到着したか否かをチェックする。S32において、目的地に到着していない場合は、上記S22に戻り、S22以降の処理を再度実行する。   In the next S32, the current position is obtained based on the position information obtained from the GPS antenna 16, and it is checked whether or not the destination has been reached. If the destination has not arrived at S32, the process returns to S22, and the processes after S22 are executed again.

また、上記S22において、車両12が停止している場合は、前述したS13に戻り、入力操作を可能とする。また、上記S24において、運転席センサ50がオフの場合、或いはS27において、S26の顔向き判定結果が正面を向いていないと判定された場合、あるいはS28において、助手席センサ52がオフの場合には、通常走行の入力禁止モードが継続されており、S33において、当該車両12が停止しているか否かをチェックする。また、S33において、車両12が停止している場合は、前述したS13に戻り、入力操作を可能とする。   In S22, when the vehicle 12 is stopped, the process returns to S13 described above to enable an input operation. In S24, when the driver's seat sensor 50 is off, in S27, when it is determined that the face orientation determination result in S26 is not facing the front, or in S28, when the passenger seat sensor 52 is off. The normal travel input prohibition mode is continued, and in S33, it is checked whether or not the vehicle 12 is stopped. In S33, if the vehicle 12 is stopped, the process returns to S13 described above to enable input operation.

また、上記S32において、目的地に到着した場合は、S34に進み、目的地への案内を終了し、S35で現在位置のみを表示する現在位置表示モード(案内無し)に移行する。そして、S36では、当該車両12のアクセサリスイッチがオフか否かをチェックし、アクセサリスイッチがオンの場合には、前述したS13に戻り、S13以降の処理を繰り返す。また、アクセサリスイッチがオフに操作された場合は、今回の処理を終了する。   If the destination arrives at S32, the process proceeds to S34, the guidance to the destination is terminated, and the current position display mode (no guidance) is displayed at S35 where only the current position is displayed. In S36, it is checked whether or not the accessory switch of the vehicle 12 is off. If the accessory switch is on, the process returns to S13 described above, and the processes in and after S13 are repeated. If the accessory switch is turned off, the current process is terminated.

このように、車両用ナビゲーションシステム10では、車両12が走行中でも運転者38の顔が正面を向いた状態で、且つ助手席30に搭乗者54が着席していることを条件に入力操作を可能にして目的地の変更操作が行なえるので、車両12を停止させなくても安全に入力操作が行なえるため、利便性が高められている。   As described above, in the vehicle navigation system 10, an input operation is possible on the condition that the driver 38 is seated in the front passenger seat 30 and the driver 38 is seated while the vehicle 12 is traveling. Thus, since the destination changing operation can be performed, the input operation can be performed safely without stopping the vehicle 12, so that convenience is enhanced.

上記実施例では、車両12が走行中でも運転者38の顔が正面を向いた状態で、且つ助手席30に搭乗者54が着席していることを条件に車両用ナビゲーションシステム10の入力操作を可能にしたが、例えば、目的地やルート変更以外の入力操作を可能としても良いのは勿論である。   In the above-described embodiment, the input operation of the vehicle navigation system 10 can be performed on the condition that the face of the driver 38 is facing forward and the passenger 54 is seated on the passenger seat 30 even when the vehicle 12 is traveling. However, for example, it is of course possible to allow input operations other than changing the destination and route.

また、上記実施例では、液晶ディスプレイ18にルート案内を表示する場合を一例として挙げたが、これに限らず、例えば、運転者38の顔が正面を向いた状態で、且つ助手席30に搭乗者54が着席していることを条件にTVチューナ56のスイッチの入力操作が許可されてTVチューナ56からのTV画像を液晶ディスプレイ18に表示することも可能である。   In the above embodiment, the route guidance is displayed on the liquid crystal display 18 as an example. However, the present invention is not limited to this. For example, the driver 38 gets on the passenger seat 30 with the face of the driver 38 facing front. It is also possible to display the TV image from the TV tuner 56 on the liquid crystal display 18 by permitting the input operation of the switch of the TV tuner 56 on the condition that the person 54 is seated.

また、上記実施例では、運転者38の顔が正面を向いた状態で、且つ助手席センサ52がオンであることを条件に入力操作を可能にしたが、これに限らず、助手席センサ52以外のスイッチ(例えば、運転席から操作できないような助手席側に設けられたスイッチ等)を用いても良いのは勿論である。   Further, in the above-described embodiment, the input operation is made possible on condition that the face of the driver 38 is facing front and the passenger seat sensor 52 is on. However, the present invention is not limited to this, and the passenger seat sensor 52 is not limited thereto. Of course, other switches (for example, a switch provided on the passenger seat side that cannot be operated from the driver's seat) may be used.

本発明になる車両用ナビゲーションシステムの一実施例を示す構成図である。It is a block diagram which shows one Example of the navigation system for vehicles which becomes this invention. 車両を上から見た平面図である。It is the top view which looked at the vehicle from the top. 車両用ナビゲーションシステム10の構成を示すブロック図である。1 is a block diagram showing a configuration of a vehicle navigation system 10. FIG. 運転者38の顔画像の表示例を示す図であり、(A)は運転者が正面をみている状態の顔画像を示す図、(B)は運転者が液晶ディスプレイ18をみている状態の顔画像を示す図である。FIG. 7 is a diagram showing a display example of a face image of the driver 38, (A) is a diagram showing a face image when the driver is looking at the front, and (B) is a face when the driver is looking at the liquid crystal display 18. It is a figure which shows an image. 運転者38の顔画像の輪郭を画像処理した表示例を示す図であり、(A)は運転者が正面をみている状態の顔輪郭画像を示す図、(B)は運転者が液晶ディスプレイ18をみている状態の顔輪郭画像を示す図である。It is a figure which shows the example of a display which image-processed the outline of the face image of the driver | operator 38, (A) is a figure which shows the face outline image in the state which the driver | operator looks at the front, (B) is a driver | operator's liquid crystal display 18 It is a figure which shows the face outline image of the state which is watching. ナビゲーション用ECU14が実行する制御処理を説明するためのフローチャートである。It is a flowchart for demonstrating the control processing which ECU14 for navigation performs. 図6に示す処理に続いてナビゲーション用ECU14が実行する制御処理を説明するためのフローチャートである。7 is a flowchart for explaining a control process executed by the navigation ECU 14 following the process shown in FIG. 6.

符号の説明Explanation of symbols

10 車両用ナビゲーションシステム
12 車両
14 ナビゲーション用ECU
16 GPSアンテナ
18 液晶ディスプレイ
20 記憶装置
22 運転者用カメラ
28 運転席
30 助手席
36 顔向き検知ECU
42 車速演算部
50 運転席センサ
52 助手席センサ
60 入力禁止手段
64 入力許可手段
62 顔向き判定手段
10 Vehicle Navigation System 12 Vehicle 14 Navigation ECU
16 GPS antenna 18 Liquid crystal display 20 Storage device 22 Driver camera 28 Driver seat 30 Passenger seat 36 Face orientation detection ECU
42 Vehicle speed calculation unit 50 Driver's seat sensor 52 Passenger's seat sensor 60 Input prohibition means 64 Input permission means 62 Face orientation determination means

Claims (4)

車両の位置を測定する位置測定手段と、
該位置測定手段により測定された位置情報及び当該検出位置周辺の地図情報を表示する表示手段と、
任意の検索条件を手動操作により入力する入力手段と、
前記車両の走行中に前記入力手段による入力操作を禁止する入力禁止手段と、を備えた車両用ナビゲーションシステムにおいて、
当該車両の運転者の顔を検出する顔検出手段と、
該顔検出手段により検出された前記運転者の顔が前記車両の正面を向いているか否かを判定する顔向き判定手段と、
該顔向き判定手段により判定された前記運転者の顔が前記車両の正面を向いている場合に前記入力禁止手段による入力禁止を解除し、前記入力手段による入力操作を許可する入力許可手段を有することを特徴とする車両用ナビゲーションシステム。
Position measuring means for measuring the position of the vehicle;
Display means for displaying position information measured by the position measuring means and map information around the detected position;
An input means for manually inputting an arbitrary search condition;
In a vehicle navigation system comprising: an input prohibition unit that prohibits an input operation by the input unit during travel of the vehicle;
Face detection means for detecting the face of the driver of the vehicle;
Face orientation determination means for determining whether or not the driver's face detected by the face detection means faces the front of the vehicle;
An input permission means for canceling the input prohibition by the input prohibition means and permitting the input operation by the input means when the driver's face determined by the face orientation determination means faces the front of the vehicle; A vehicle navigation system characterized by that.
前記顔検出手段は、前記運転者の顔を正面から撮像する撮像カメラであり、
前記顔向き判定手段は、前記カメラに撮像された前記運転者の顔画像に基づいて前記運転者の顔が正面を向いているか否かを判定することを特徴とする請求項1に記載の車両用ナビゲーションシステム。
The face detection means is an imaging camera that images the driver's face from the front,
The vehicle according to claim 1, wherein the face orientation determination unit determines whether or not the driver's face is facing the front based on the driver's face image captured by the camera. For navigation system.
前記入力許可手段は、
前記車両の助手席に搭乗者が着席していることが検出され、且つ前記運転者の顔が前記車両の正面を向いている場合に前記入力操作を許可することを特徴とする請求項1に記載の車両用ナビゲーションシステム。
The input permission means includes
The input operation is permitted when it is detected that a passenger is seated in a passenger seat of the vehicle and the driver's face is facing the front of the vehicle. The vehicle navigation system described.
前記顔向き判定手段は、前記撮像カメラに撮像された前記運転者の顔の輪郭及び顔中心線の位置に基づいて前記運転者の顔が正面を向いているか否かを判定することを特徴とする請求項1に記載の車両用ナビゲーションシステム。   The face orientation determining means determines whether or not the driver's face is facing the front based on a contour of the driver's face imaged by the imaging camera and a position of a face center line. The vehicle navigation system according to claim 1.
JP2005202112A 2005-07-11 2005-07-11 Vehicle navigation system Active JP4706362B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005202112A JP4706362B2 (en) 2005-07-11 2005-07-11 Vehicle navigation system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005202112A JP4706362B2 (en) 2005-07-11 2005-07-11 Vehicle navigation system

Publications (2)

Publication Number Publication Date
JP2007017409A JP2007017409A (en) 2007-01-25
JP4706362B2 true JP4706362B2 (en) 2011-06-22

Family

ID=37754683

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005202112A Active JP4706362B2 (en) 2005-07-11 2005-07-11 Vehicle navigation system

Country Status (1)

Country Link
JP (1) JP4706362B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4895876B2 (en) * 2007-03-15 2012-03-14 アイシン精機株式会社 Eye detection apparatus and program
JP5181998B2 (en) * 2008-10-10 2013-04-10 三菱自動車工業株式会社 Automotive electronics
JP6003367B2 (en) * 2012-08-06 2016-10-05 日本電気株式会社 Image recognition apparatus, image recognition method, and image recognition program
JP7227106B2 (en) * 2019-08-22 2023-02-21 本田技研工業株式会社 Operation control device, operation control method, and program

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003158643A (en) * 2001-11-20 2003-05-30 Shibasoku:Kk Signal processing method and signal processing apparatus
JP2004177315A (en) * 2002-11-28 2004-06-24 Alpine Electronics Inc Apparatus for detecting direction of line of vision, dialog system using it, and driving support system
JP2005156257A (en) * 2003-11-21 2005-06-16 Calsonic Kansei Corp Input device for vehicle

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003158643A (en) * 2001-11-20 2003-05-30 Shibasoku:Kk Signal processing method and signal processing apparatus
JP2004177315A (en) * 2002-11-28 2004-06-24 Alpine Electronics Inc Apparatus for detecting direction of line of vision, dialog system using it, and driving support system
JP2005156257A (en) * 2003-11-21 2005-06-16 Calsonic Kansei Corp Input device for vehicle

Also Published As

Publication number Publication date
JP2007017409A (en) 2007-01-25

Similar Documents

Publication Publication Date Title
JP4342146B2 (en) Parking assistance device
JP4510019B2 (en) VEHICLE DISPLAY DEVICE, VEHICLE, DISPLAY METHOD, IMAGE DISPLAY PROGRAM, AND RECORDING MEDIUM
JP4134939B2 (en) Vehicle periphery display control device
JP6380002B2 (en) Perimeter monitoring device
US10131276B2 (en) Vehicle sightline guidance apparatus
KR101433837B1 (en) Method of operating a night-view system in a vehicle and corresponding night-view system
US20160001704A1 (en) Surroundings-monitoring device and computer program product
WO2013051306A1 (en) Visually-distracted-driving detection device
JP6260166B2 (en) Vehicle display processing device
JP2008280026A (en) Driving assistance device
JP5327025B2 (en) Vehicle travel guidance device, vehicle travel guidance method, and computer program
JP2006205938A (en) On-vehicle display device
JP2007069756A (en) Vehicle input operation restricting device
JP4706362B2 (en) Vehicle navigation system
JP4952429B2 (en) Driving support system
JP4930716B2 (en) Remote control device for vehicle
JP2010134640A (en) Information acquisition apparatus
JP2004061259A (en) System, method, and program for providing information
JP2004217188A (en) On-vehicle display device and display method
EP1555159B1 (en) Vehicle situation monitoring apparatus and vehicle situation monitoring method
JP4375153B2 (en) Vehicle display device
JP5073703B2 (en) Vehicle display device
JP2006273190A (en) On-vehicle navigation device
JP7227106B2 (en) Operation control device, operation control method, and program
JP2016071666A (en) Visual guidance device for vehicle

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080424

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100826

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100914

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110215

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110228

R151 Written notification of patent or utility model registration

Ref document number: 4706362

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151