JP2016063339A - Communication controller and communication control method - Google Patents
Communication controller and communication control method Download PDFInfo
- Publication number
- JP2016063339A JP2016063339A JP2014188650A JP2014188650A JP2016063339A JP 2016063339 A JP2016063339 A JP 2016063339A JP 2014188650 A JP2014188650 A JP 2014188650A JP 2014188650 A JP2014188650 A JP 2014188650A JP 2016063339 A JP2016063339 A JP 2016063339A
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- driver
- communication
- wireless communication
- radio communication
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Telephonic Communication Services (AREA)
- Traffic Control Systems (AREA)
- Mobile Radio Communication Systems (AREA)
- Telephone Function (AREA)
Abstract
Description
本発明は、通信制御装置および通信制御方法に関するものである。 The present invention relates to a communication control device and a communication control method.
従来より、車載通信装置で取得された車両の情報(たとえば車載カメラで撮像された画像データ)を、無線通信により、ユーザが車内に持ち込んだスマートフォンや携帯電話機などの携帯通信端末に送信する技術が知られている。また、このような携帯通信端末として、電話回線網を利用してサーバーと無線通信を行う第1無線通信と、WiFi(登録商標)規格の無線LANなどを利用して車載通信装置と無線通信を行う第2無線通信とを切り替えて行うものが知られている(たとえば、特許文献1)。 2. Description of the Related Art Conventionally, there is a technique for transmitting vehicle information acquired by an in-vehicle communication device (for example, image data captured by an in-vehicle camera) to a mobile communication terminal such as a smartphone or a mobile phone that the user has brought into the vehicle by wireless communication. Are known. In addition, as such a portable communication terminal, the first wireless communication that performs wireless communication with the server using a telephone line network, and the wireless communication with the vehicle-mounted communication device using a WiFi (registered trademark) wireless LAN or the like. There is known one that switches the second wireless communication to be performed (for example, Patent Document 1).
しかしながら、このような携帯通信端末では、第1無線通信と第2無線通信とを同時に行うことができず、従来技術では、第2無線通信により、車載通信装置から車両の情報を取得する必要がある場面においても、第1無線通信が行われてしまい、車載通信装置から車両の情報を適切に取得できない場合があった。 However, in such a portable communication terminal, the first wireless communication and the second wireless communication cannot be performed at the same time. In the related art, it is necessary to acquire vehicle information from the in-vehicle communication device by the second wireless communication. Even in a certain scene, the first wireless communication is performed, and vehicle information may not be appropriately acquired from the in-vehicle communication device.
本発明が解決しようとする課題は、無線通信の切り替えを適切に行うことができる通信制御装置を提供することである。 The problem to be solved by the present invention is to provide a communication control device capable of appropriately switching wireless communication.
本発明は、運転者が居眠り状態に変化したか否かを判断し、運転者が居眠り状態に変化した場合に、第1無線通信から第2無線通信へと切り替ることで、上記課題を解決する。 The present invention solves the above problem by determining whether or not the driver has changed to a doze state, and when the driver has changed to a doze state, the first wireless communication is switched to the second wireless communication. To do.
本発明によれば、運転者が居眠り状態に変化した場合に、第1無線通信から第2無線通信に切り替えることで、運転者が居眠りしている場面における車両の情報を、車載通信装置から適切に取得することができる。 According to the present invention, when the driver changes to the dozing state, the vehicle information in the scene where the driver is dozing is appropriately obtained from the in-vehicle communication device by switching from the first wireless communication to the second wireless communication. Can be obtained.
以下、本発明の実施形態を図面に基づいて説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.
図1は、本実施形態に係る通信制御システムを示す構成図である。図1に示すように、本実施形態に係る通信制御システムは、車両1に搭載された車載装置100および車載カメラ装置200と、車両1のユーザにより車両1の車室内に持ち込まれた携帯通信端末300と、自車両1の外部に設置されたサーバー400とから構成される。なお、図1においては、説明の便宜のため、車載装置100、車載カメラ装置200、および携帯通信端末300をそれぞれ1つずつ例示しているが、複数の車両1に、車載装置100、車載カメラ装置200、および携帯通信端末300がそれぞれ搭載されており、サーバー400は、複数の車両1の車室内に持ち込まれた複数の携帯通信端末300とそれぞれ情報の授受を行うことができる。
FIG. 1 is a configuration diagram illustrating a communication control system according to the present embodiment. As shown in FIG. 1, the communication control system according to the present embodiment includes an in-vehicle device 100 and an in-vehicle camera device 200 mounted on a vehicle 1, and a portable communication terminal brought into the vehicle interior of the vehicle 1 by a user of the vehicle 1. 300 and a
まず、本実施形態に係る車載装置100について説明する。車載装置100は、車両1に搭載されており、車両1の各種情報を検出する。また、本実施形態では、車載装置100と車載カメラ装置200とが有線または無線により接続されており、車載装置100は、車載カメラ装置200で撮像された画像を、車載カメラ装置200から取得することができる。 First, the in-vehicle device 100 according to the present embodiment will be described. The in-vehicle device 100 is mounted on the vehicle 1 and detects various information of the vehicle 1. In the present embodiment, the in-vehicle device 100 and the in-vehicle camera device 200 are connected by wire or wireless, and the in-vehicle device 100 acquires an image captured by the in-vehicle camera device 200 from the in-vehicle camera device 200. Can do.
図1に示すように、車載装置100は、自車位置検出装置110、覚醒状態検出装置160、車載制御装置120、および車両側BT通信装置130を備えている。これらの構成は、CAN(Controller Area Network)その他の車載LANによって接続され、相互に情報の授受を行うことができる。また、図示していないが、車載装置100には、CANを介して、ナビゲーション装置や操舵センサなどの他の車載機器とも接続している。
As shown in FIG. 1, the in-vehicle device 100 includes a host vehicle position detection device 110, an arousal state detection device 160, an in-
自車位置検出装置110は、GPSユニット、ジャイロセンサ、および車速センサなどから構成されており、GPSユニットにより複数の衛星通信から送信される電波を検出して、自車両1の位置情報を、周期的に取得するとともに、取得した自車両1の位置情報と、ジャイロセンサから取得した角度変化情報と、車速センサから取得した車速とに基づいて、自車両の現在位置を検出する。自車位置検出装置110により検出された自車両の位置情報は、車載制御装置120に送信される。
The own vehicle position detection device 110 includes a GPS unit, a gyro sensor, a vehicle speed sensor, and the like, detects radio waves transmitted from a plurality of satellite communications by the GPS unit, and determines the position information of the own vehicle 1 as a period. And the current position of the host vehicle is detected based on the acquired position information of the host vehicle 1, the angle change information acquired from the gyro sensor, and the vehicle speed acquired from the vehicle speed sensor. The position information of the own vehicle detected by the own vehicle position detection device 110 is transmitted to the in-
覚醒状態検出装置160は、運転者の覚醒状態を検出する。たとえば、覚醒状態検出装置160は、車載カメラ装置200から取得した運転者の顔画像データに基づいて、運転者の眼の開閉判定を行い、所定時間内に発生した閉眼数の積算値を算出することで、運転者の覚醒状態を検出することができる。また、覚醒状態検出装置160は、車載カメラ装置200から取得した運転者の顔画像データに基づいて、運転者の表情変化の判定することで、運転者の覚醒状態を検出することもできる。この他、覚醒状態検出装置160は、たとえば、図示しない舵角センサにより検出されたステアリングの操舵角の時系列データについて周波数分析を行い、操舵角の時系列データの周波数成分のうち特定周波数の積分値を算出することで、運転者の覚醒状態を検出することもできる。さらに、覚醒状態検出装置160は、たとえば、図示しないアクセル開度センサにより検出されたストローク量の情報を取得し、取得したストローク量の情報に基づいて、運転者の覚醒状態を検出することもできる。 The arousal state detection device 160 detects a driver's arousal state. For example, the arousal state detection device 160 performs the eye open / close determination of the driver based on the driver's face image data acquired from the in-vehicle camera device 200, and calculates an integrated value of the number of eyes closed within a predetermined time. Thus, the driver's arousal state can be detected. The arousal state detection device 160 can also detect the driver's arousal state by determining a change in the driver's facial expression based on the driver's facial image data acquired from the in-vehicle camera device 200. In addition, for example, the arousal state detection device 160 performs frequency analysis on the time series data of the steering angle of the steering detected by a steering angle sensor (not shown), and integrates a specific frequency among the frequency components of the time series data of the steering angle. The driver's arousal state can also be detected by calculating the value. Furthermore, the arousal state detection device 160 can also acquire, for example, information on the stroke amount detected by an accelerator opening sensor (not shown), and can detect the driver's arousal state based on the acquired information on the stroke amount. .
車載制御装置120は、自車両1の位置情報を含むプローブ情報や、運転者の覚醒状態を示す覚醒情報を携帯通信端末300に送信するためのプログラムを格納したROM(Read Only Memory)と、このROMに格納されたプログラムを実行するCPU(Central Processing Unit)と、アクセス可能な記憶装置として機能するRAM(Random Access Memory)とから構成される。車載制御装置120は、ROMに格納されたプログラムをCPUにより実行することにより、プローブ情報および運転者の覚醒状態を各種機器から取得する取得機能と、プローブ情報および運転者の覚醒情報を携帯通信端末300に送信する送信機能と、を有する。
The in-
車載制御装置120の取得機能は、自車両1の位置情報を含むプローブ情報および運転者の覚醒状態を示す覚醒情報を各種機器から取得する。具体的には、取得機能は、自車両1の位置情報を自車位置検出装置110から取得し、また、自車両1の車速情報を車速センサ140から取得する。また、取得機能は、図示しない舵角センサなどから自車両1の舵角情報などのプローブ情報も取得する。加えて、取得機能は、運転者の覚醒状態を示す覚醒情報を覚醒状態検出装置160から取得する。
The acquisition function of the in-
車載制御装置120の送信機能は、車両側BT通信装置130を介して、取得機能により取得されたプローブ情報および運転者の覚醒情報を携帯通信端末300に送信する。車両側BT通信装置130は、Bluetooth(登録商標)などの通信方式により、携帯通信端末300と無線接続を行うことで、プローブ情報を携帯通信端末300に送信する。なお、車載装置100と携帯通信端末300との接続は、Bluetoothなどの無線接続に限定されず、車載装置100と携帯通信端末300とを有線接続してもよい。
The transmission function of the in-
続いて、車載カメラ装置200について説明する。車載カメラ装置200は、自車両1を運転する運転者の顔画像を撮像する車内カメラ210と自車両1の周囲の画像データを撮像する車外カメラ240とを有しており、撮像した運転者の顔画像と自車1の周囲の画像とを携帯通信端末300へと送信する。具体的には、車載カメラ装置200は、WiFi規格の無線LANにより、携帯通信端末300との間で無線通信を行うことで、撮像した画像の画像データを携帯通信端末300に送信する。また、本実施形態においては、車載カメラ装置200と車載装置100とが有線または無線により接続されており、車載カメラ装置200により撮像された画像データが、車載装置100にも送信される。 Next, the in-vehicle camera device 200 will be described. The in-vehicle camera device 200 includes an in-vehicle camera 210 that captures a face image of a driver driving the host vehicle 1 and an out-of-vehicle camera 240 that captures image data around the host vehicle 1. The face image and the surrounding image of the vehicle 1 are transmitted to the mobile communication terminal 300. Specifically, the in-vehicle camera device 200 transmits image data of a captured image to the mobile communication terminal 300 by performing wireless communication with the mobile communication terminal 300 using a WiFi standard wireless LAN. In the present embodiment, the in-vehicle camera device 200 and the in-vehicle device 100 are connected by wire or wirelessly, and the image data captured by the in-vehicle camera device 200 is also transmitted to the in-vehicle device 100.
図1に示すように、車載カメラ装置200は、車内カメラ210と、車外カメラ240と、カメラ制御装置220と、カメラ側WLAN通信装置230と、を備えている。以下に、車載カメラ装置200の各構成について説明する。 As shown in FIG. 1, the in-vehicle camera device 200 includes an in-vehicle camera 210, an out-of-vehicle camera 240, a camera control device 220, and a camera side WLAN communication device 230. Below, each structure of the vehicle-mounted camera apparatus 200 is demonstrated.
車内カメラ210は、自車両1のシートに着座した運転者の顔画像を撮像するように設置されており、一定の時間間隔で、運転者の顔画像を撮像する。車内カメラ210により撮像された運転者の顔画像データは、カメラ制御装置220に送信される。 The in-vehicle camera 210 is installed so as to capture the face image of the driver seated on the seat of the host vehicle 1, and captures the driver's face image at regular time intervals. The driver's face image data captured by the in-vehicle camera 210 is transmitted to the camera control device 220.
車外カメラ240は、自車両1の周囲の画像を撮像するように設置されており、一定の時間間隔で、自車両1の周囲の画像を撮像する。車外カメラ240により撮像された自車両1の周囲の画像データは、カメラ制御装置220に送信される。 The vehicle exterior camera 240 is installed so as to capture an image around the host vehicle 1 and captures an image around the host vehicle 1 at regular time intervals. Image data around the host vehicle 1 captured by the outside camera 240 is transmitted to the camera control device 220.
カメラ制御装置220は、ROMと、CPUと、RAMとから構成される。カメラ制御装置220は、ROMに格納されたプログラムをCPUにより実行することにより、車内カメラ210により撮像された運転者の顔画像データおよび車外カメラ240により撮像された自車両1の周囲の画像データを、カメラ側WLAN通信装置230を介して、携帯通信端末300に送信する。 The camera control device 220 includes a ROM, a CPU, and a RAM. The camera control device 220 executes the program stored in the ROM by the CPU, thereby obtaining the driver's face image data captured by the in-vehicle camera 210 and the surrounding image data of the host vehicle 1 captured by the outside camera 240. And transmitted to the mobile communication terminal 300 via the camera-side WLAN communication device 230.
カメラ側WLAN通信装置230は、カメラ制御装置220の指示により、WiFi規格の無線LANにより携帯通信端末300との間で無線通信を行うことで、車内カメラ210により撮像された運転者の顔画像データおよび車外カメラ240により撮像された自車両1の周囲の画像データを、携帯通信端末300に送信する。 The camera-side WLAN communication device 230 performs wireless communication with the mobile communication terminal 300 via the WiFi standard wireless LAN in accordance with an instruction from the camera control device 220, so that the driver's face image data captured by the in-vehicle camera 210. And the image data of the surroundings of the own vehicle 1 imaged with the camera 240 outside the vehicle are transmitted to the portable communication terminal 300.
次に、携帯通信端末300について説明する。携帯通信端末300は、スマートフォン、携帯電話機、タブレットなどのユーザが携帯可能な通信機器であり、図1に示すように、ユーザが車両1を運転する際に、ユーザにより車内まで持ち込まれるものである。携帯通信端末300は、自車両1の車内において、車載装置100、車載カメラ装置200、およびサーバー400とそれぞれ情報の授受が可能となっており、車載装置100から自車両1のプローブ情報を受信して、受信したプローブ情報をサーバー400に送信するとともに、車載カメラ装置200から運転者の顔画像データおよび自車両1の周囲の画像データを受信して、受信した画像データを記憶し、あるいは、携帯通信端末300のディスプレイ画面に表示する。
Next, the mobile communication terminal 300 will be described. The mobile communication terminal 300 is a communication device that can be carried by a user, such as a smartphone, a mobile phone, and a tablet. As shown in FIG. 1, when the user drives the vehicle 1, the mobile communication terminal 300 is brought into the vehicle by the user. . The mobile communication terminal 300 can exchange information with the in-vehicle device 100, the in-vehicle camera device 200, and the
図1に示すように、携帯通信端末300は、端末側BT通信装置310と、端末側WLAN通信装置320と、端末側電話通信装置330と、端末制御装置340と、ディスプレイ350と、メモリ360とを備えている。以下に、携帯通信端末300の各構成について説明する。
As shown in FIG. 1, the mobile communication terminal 300 includes a terminal-side BT communication device 310, a terminal-side WLAN communication device 320, a terminal-side telephone communication device 330, a
端末側BT通信装置310は、Bluetoothなどの通信方式により、車載装置100と無線接続を行い、自車両1の位置情報を含むプローブ情報および運転者の覚醒状態を示す覚醒情報を車載装置100から受信する。なお、端末側BT通信装置310により受信されたプローブ情報および運転者の覚醒情報は、端末制御装置340に送信される。
The terminal-side BT communication device 310 wirelessly connects to the in-vehicle device 100 using a communication method such as Bluetooth, and receives probe information including the position information of the host vehicle 1 and awakening information indicating the driver's arousal state from the in-vehicle device 100. To do. The probe information and the driver's awakening information received by the terminal-side BT communication device 310 are transmitted to the
端末側WLAN通信装置320は、WiFi規格の無線LANを利用して、車載カメラ装置200と無線通信を行うことで、運転者の顔画像データおよび自車両1の周囲の画像データを車載カメラ装置200から受信する。なお、端末側WLAN通信装置320により受信された画像データは、端末制御装置340に送信される。
The terminal-side WLAN communication device 320 wirelessly communicates with the in-vehicle camera device 200 using a WiFi standard wireless LAN, thereby obtaining the driver's face image data and surrounding image data of the host vehicle 1. Receive from. Note that the image data received by the terminal-side WLAN communication device 320 is transmitted to the
端末側電話通信装置330は、電話回線網を利用して、サーバー400と無線通信を行うことで、車載装置100から取得したプローブ情報をサーバー400に送信する。
The terminal-side telephone communication device 330 transmits the probe information acquired from the in-vehicle device 100 to the
ディスプレイ350は、たとえば、携帯通信端末300が備える液晶ディスプレイなどである。本実施形態において、ディスプレイ350は、端末制御装置340の制御に基づいて、車載カメラ装置200により撮像された運転者の顔画像を、ディスプレイ350が備えるディスプレイ画面に表示する。これにより、自車両1の運転者に、車載カメラ装置200により撮像された運転者の顔画像を提示することができる。
The display 350 is, for example, a liquid crystal display included in the mobile communication terminal 300. In the present embodiment, the display 350 displays a driver's face image captured by the in-vehicle camera device 200 on a display screen included in the display 350 based on the control of the
端末制御装置340は、携帯通信端末300の通信を制御するためのプログラムを格納したROMと、CPUと、RAMとから構成される。端末制御装置340は、ROMに格納されたプログラムをCPUにより実行することにより、プローブ情報および運転者の覚醒情報を車載装置100から取得する車両情報取得機能と、車載装置100から取得したプローブ情報および車載カメラ装置200から受信した自車両1の周囲の画像データをサーバー400に送信する第1通信機能と、運転者の顔画像データおよび自車両1の周囲の画像データを車載カメラ装置200から受信する第2通信機能と、無線通信の切り替えを制御する制御機能と、車載カメラ装置200から取得した運転者の顔画像をディスプレイ350に表示させる表示機能と、車載カメラ装置200から受信した自車両1の周囲の画像データをメモリ360に記憶する記憶機能と、運転者に警報を報知する報知機能と、を有する。
The
端末制御装置340の車両情報取得機能は、自車両1の位置情報を含むプローブ情報と、運転者の覚醒状態を示す覚醒情報とを車載装置100から取得する。具体的には、車両情報取得機能は、端末側BT通信装置310を介して、Bluetoothなどの通信方式により車載装置100と無線接続することで、プローブ情報および運転者の覚醒情報を車載装置100から取得する。
The vehicle information acquisition function of the
端末制御装置340の第1通信機能は、車載装置100から取得したプローブ情報をサーバー400に送信する。具体的には、第1通信機能は、端末側電話通信装置330を介して、電話回線網を利用してサーバー400と無線通信を行うことで、車載装置100により検出されたプローブ情報および車載カメラ装置200により撮像された自車両1の周囲の画像データを、サーバー400に送信する。なお、以下においては、電話回線網を利用した、携帯通信端末300とサーバー400との間の無線通信を、第1無線通信として説明する。
The first communication function of the
端末制御装置340の第2通信機能は、運転者の顔画像データおよび自車両1の周囲の画像データを車載カメラ装置200から受信する。具体的には、第2通信機能は、端末側WLAN通信装置320を介して、WiFi規格の無線LANを利用して車載カメラ装置200と無線通信を行うことで、車載カメラ装置200により撮像された運転者の顔画像データおよび自車両1の周囲の画像データを車載カメラ装置200から受信する。なお、以下においては、WiFi規格の無線LANを利用した、携帯通信端末300と車載カメラ装置200との間の無線通信を、第2無線通信として説明する。
The second communication function of the
端末制御装置340の制御機能は、携帯通信端末300において第1無線通信を行うか、第2無線通信を行うかを制御する。具体的には、制御機能は、車載装置100から取得した運転者の覚醒情報に基づいて、運転者が居眠り状態に変化したか否かを判断する。そして、制御機能は、運転者が居眠り状態に変化したと判断した場合には、運転者の顔画像および自車両1の周囲の画像データを取得するために、サーバー400と無線通信を行う第1無線通信から、車載カメラ装置200から運転者の顔画像データおよび自車両1の周囲の画像データを受信する第2無線通信へと切り替える。一方、運転者が居眠り状態に変化していない場合には、自車両1のプローブ情報をサーバー400に送信するために、電話回線網を利用してサーバー400にプローブ情報を送信する第1無線通信を実行する。
The control function of the
なお、制御機能は、運転者が居眠り状態に変化したと判断し、第1無線通信から第2無線通信へと切り替えた後に、運転者が居眠り状態から回復した場合には、第2無線通信から第1無線通信へと切り替える。これにより、運転者が居眠り状態である場面以外では、第1無線通信によりサーバー400にプローブ情報を送信することができる。
In addition, the control function determines that the driver has changed to the dozing state, and after switching from the first wireless communication to the second wireless communication, when the driver recovers from the dozing state, the control function starts from the second wireless communication. Switch to the first wireless communication. Thereby, probe information can be transmitted to the
端末制御装置340の表示機能は、車載カメラ装置200から受信した運転者の顔画像データをディスプレイ350に表示させる。具体的には、表示機能は、運転者が居眠り状態となった場合に、車載カメラ装置200から受信した運転者の顔画像データをディスプレイ350に出力し、ディスプレイ350に、運転者の顔画像を表示させる。これにより、運転者に運転者の居眠り状態を把握させ、運転者の注意を喚起することができる。
The display function of the
端末制御装置340の記憶機能は、車載カメラ装置200から受信した自車両1の周囲の画像データをメモリ360に記憶する。すなわち、記憶機能は、第2無線通信により、車載カメラ装置200から自車両1の周囲の画像データが受信された場合に、受信した自車両1の周囲の画像データを、メモリ360に記憶する。これにより、運転者が居眠りしている際の自車両1の周囲の画像を、携帯通信端末300に記憶することができる。
The storage function of the
端末制御装置340の報知機能は、運転者の居眠りに対する警告を報知する。たとえば、報知機能は、携帯通信端末300のディスプレイ350に、居眠りを防止するための警告を表示し、また、携帯通信端末300が備えるスピーカー(不図示)から、居眠りを防止するための音声を出力することで、運転者の居眠りに対する警告を報知する。
The notification function of the
次に、サーバー400について説明する。サーバー400は、自車両1の外部に設置され、電話回線網を介して携帯通信端末300と無線通信を行うことで、携帯通信端末300を介して、自車両1の位置情報を含むプローブ情報を取得する。そして、サーバー400は、このように複数の車両から受信したプローブ情報を収集することで、自車両1を含む複数の車両に、各種交通情報を適切に提供することができる。
Next, the
続いて、図2を参照して、本実施形態に係る通信制御処理について説明する。図2は、本実施形態に係る通信制御処理を示すフローチャートである。なお、以下に説明する通信制御処理は、携帯通信端末300の端末制御装置340により実行される。
Subsequently, a communication control process according to the present embodiment will be described with reference to FIG. FIG. 2 is a flowchart showing communication control processing according to the present embodiment. Note that the communication control process described below is executed by the
まず、ステップS101では、車両情報取得機能により、プローブ情報および運転者の覚醒情報の取得が行われる。具体的には、車両情報取得機能は、Bluetoothなどの通信方式により車載装置100と無線接続することで、自車両1の位置情報を含むプローブ情報と運転者の覚醒状態を示す覚醒情報を車載装置100から取得する。 First, in step S101, acquisition of probe information and driver awakening information is performed by the vehicle information acquisition function. Specifically, the vehicle information acquisition function wirelessly connects to the in-vehicle device 100 by a communication method such as Bluetooth, so that the in-vehicle device transmits the probe information including the position information of the own vehicle 1 and the awakening information indicating the driver's arousal state. Get from 100.
ステップS102では、第1通信機能により、電話通信網を利用してサーバー400と無線通信を行う第1無線通信により、ステップS101で取得されたプローブ情報がサーバー400に送信される。これにより、サーバー400は、自車両1の位置情報を含むプローブ情報を、携帯通信端末300から受信することができる。
In step S <b> 102, the probe information acquired in step S <b> 101 is transmitted to the
ステップS103では、制御機能により、ステップS101で取得された運転者の覚醒情報に基づいて、運転者が居眠り状態に変化したか否かの判断が行われる。運転者が居眠り状態に変化していない場合には、ステップS101に戻り、携帯通信端末300からサーバー400に対してプローブ情報を送信する処理が繰り返される。一方、運転者が居眠り状態に変化した場合には、ステップS104に進む。
In step S103, the control function determines whether or not the driver has changed to a doze state based on the driver's awakening information acquired in step S101. If the driver has not changed to the dozing state, the process returns to step S101, and the process of transmitting probe information from the mobile communication terminal 300 to the
ステップS104では、制御機能により、電話回線網を利用してサーバー400と無線通信を行う第1無線通信から、WiFi規格の無線LANを利用して車載カメラ装置200と無線通信を行う第2無線通信への切り替えが行われる。これにより、ステップS105では、第2通信機能により、運転者の顔画像データおよび自車両1の周囲の画像データが、WiFiなどの無線LANを利用した第2無線通信により、周期的に車載カメラ装置200から受信される。
In step S104, by the control function, from the first wireless communication that performs wireless communication with the
そして、ステップS106では、記憶機能により、ステップS105で受信した自車両1の周囲の画像データが、携帯通信端末300のメモリ360に記憶される。また、ステップS107では、表示機能により、ステップS105で受信した運転者の顔画像が、ディスプレイ350のディスプレイ画面に表示される。これにより、運転者の注意を喚起することができる。さらに、ステップ107においては、報知機能より、運転者の居眠りを防止するための警告が報知される。
In step S106, the image data around the host vehicle 1 received in step S105 is stored in the
そして、ステップS108では、制御機能により、運転者が居眠り状態から回復したか否かの判断が行われる。本実施形態において、携帯通信端末300は、ステップS101以降においても、車載装置100から運転者の覚醒情報を繰り返し取得しており、制御機能は、最新の覚醒情報に基づいて、運転者が居眠り状態であるか否かを判断する。そして、運転者が居眠り状態ではなく、運転者が居眠り状態から回復していると判断できた場合には、ステップS109に進む。一方、運転者が居眠り状態のままである場合には、ステップS105に戻り、運転者の顔画像データおよび自車両1の周囲の画像データの受信、受信した画像データに基づく画像の表示および記憶を繰り返し実行する。なお、ステップS108においては、運転者の居眠り状態が検出されてから一定時時間が経過している場合に、ステップS109に進む構成としてもよい。 In step S108, the control function determines whether the driver has recovered from the dozing state. In the present embodiment, the mobile communication terminal 300 repeatedly acquires the driver's awakening information from the in-vehicle device 100 even after step S101, and the control function is based on the latest awakening information. It is determined whether or not. If it is determined that the driver is not in a dozing state and the driver is recovering from the dozing state, the process proceeds to step S109. On the other hand, if the driver remains dormant, the process returns to step S105 to receive the driver's face image data and image data around the host vehicle 1, and display and store an image based on the received image data. Run repeatedly. In step S108, it may be configured to proceed to step S109 when a predetermined time has elapsed since the driver's drowsiness was detected.
ステップS109では、運転者が居眠り状態から回復しているため、制御機能により、車載カメラ装置200と無線通信を行う第2無線通信から、サーバー400と無線通信を行う第1無線通信への切り替えが行われる。これにより、ステップS110では、第1通信機能により、運転者が居眠り状態であった際に撮像された自車両1の周囲の画像データと、自車両1の位置情報を含むプローブ情報とが、電話回線網を介して、サーバー400に送信される。
In step S109, since the driver has recovered from the dozing state, the control function switches from the second wireless communication that wirelessly communicates with the in-vehicle camera device 200 to the first wireless communication that wirelessly communicates with the
以上のように、本実施形態では、運転者の居眠り状態を検出した場合に、携帯通信端末300の無線通信を、電話回線網を利用してサーバー400と無線通信を行う第1無線通信から、WiFi規格の無線LANを利用して車載カメラ装置200と無線通信を行う第2無線通信へと切り替える。これにより、運転者が居眠りをしている場合に、居眠りをしている運転者の顔画像データおよび自車両1の周囲の画像データを、車載カメラ装置200から適切に受信することができる。また、車載カメラ装置200から受信した運転者の顔画像データを、ディスプレイ350に表示することで、運転者の注意を喚起することができる。
As described above, in the present embodiment, when the driver's sleep state is detected, the wireless communication of the mobile communication terminal 300 is performed from the first wireless communication that performs wireless communication with the
また、本実施形態では、運転者が居眠り状態から回復した場合に、車載カメラ装置200と無線通信を行う第2無線通信から、サーバー400と無線通信を行う第1無線通信に切り替えて、運転者が居眠り状態であった際に撮像された自車両1の周囲の画像データをサーバー400に送信する。これにより、サーバー400は、転者が居眠り状態であった際に撮像された自車両1の周囲の画像データを携帯通信端末300から適切に受信することができる。その結果、サーバー400のオペレーターは、運転者が居眠り状態であった際に撮像された自車両1の周囲の画像データに基づいて、運転者が居眠り状態であって際の状況をより正確に把握することができる。
In the present embodiment, when the driver recovers from the sleep state, the driver switches from the second wireless communication that performs wireless communication with the in-vehicle camera device 200 to the first wireless communication that performs wireless communication with the
また、本実施形態では、運転者が居眠り状態でない間は、電話回線網を利用する第1無線通信が実行される。ここで、第1無線通信は、第2無線通信と比べて、携帯通信端末300のバッテリ消費量が少ないため、運転者が居眠り状態である場面を除いて、電話回線網を利用する第1無線通信を行うことで、携帯通信端末300のバッテリ消費量の低減を防止することができる。また、携帯通信端末300は、運転者が居眠り状態である場面を除いて、電話回線網を利用する第1無線通信を行うことで、電話やメールなどの電話回線網を利用するサービスの使用機会を確保することもできる。 In the present embodiment, the first wireless communication using the telephone line network is executed while the driver is not asleep. Here, since the first wireless communication consumes less battery of the mobile communication terminal 300 than the second wireless communication, the first wireless communication uses the telephone line network except when the driver is asleep. By performing communication, it is possible to prevent the battery consumption of the mobile communication terminal 300 from being reduced. In addition, the mobile communication terminal 300 performs the first wireless communication using the telephone line network except in a situation where the driver is asleep, so that the service use opportunity using the telephone line network such as a telephone or e-mail can be used. Can also be secured.
以上説明した実施形態は、本発明の理解を容易にするために記載されたものであって、本発明を限定するために記載されたものではない。したがって、上記の実施形態に開示された各要素は、本発明の技術的範囲に属する全ての設計変更や均等物をも含む趣旨である。 The embodiment described above is described for facilitating understanding of the present invention, and is not described for limiting the present invention. Therefore, each element disclosed in the above embodiment is intended to include all design changes and equivalents belonging to the technical scope of the present invention.
たとえば、上述した実施形態では、車載装置100において、運転者の覚醒状態を検出する構成を例示したが、この構成に限定されず、たとえば、携帯通信端末300において、運転者の覚醒状態を検出する構成とすることができる。この場合、携帯通信端末300は、たとえば、車載カメラ装置200から運転者の顔画像を取得することで、運転者の覚醒状態を検出することができる。 For example, in the above-described embodiment, the configuration for detecting the driver's arousal state in the in-vehicle device 100 is illustrated, but the configuration is not limited to this configuration. For example, the mobile communication terminal 300 detects the driver's arousal state. It can be configured. In this case, for example, the mobile communication terminal 300 can detect the driver's arousal state by acquiring the driver's face image from the in-vehicle camera device 200.
また、上述した実施形態では、携帯通信端末300を、車載カメラ装置200およびサーバー400と無線通信を行う通信装置として例示して本発明を説明したが、この構成に限定されず、たとえば、車両1に搭載された車載装置100を、車載カメラ装置200およびサーバー400と無線通信を行う通信装置として用いる構成としてもよい。すなわち、この場合、車載装置100は、電話回線網を利用してサーバー400と第1無線通信を行う電話通信装置と、WiFi規格の無線LANを利用して車載カメラ装置200と第2無線通信を行うWLAN通信装置とを備え、運転者が居眠り状態に変化した場合に、第1無線通信から第2無線通信に切り替える構成とすることができる。
In the above-described embodiment, the present invention has been described by exemplifying the mobile communication terminal 300 as a communication device that performs wireless communication with the in-vehicle camera device 200 and the
さらに、上述した実施形態では、運転者の覚醒状態に基づいて、運転者が居眠り状態であるか否かを判断し、運転者が居眠り状態である場合に、第1無線通信から第2無線通信へと切り替える構成を例示したが、この構成に限定されず、たとえば、運転者が発作や意識喪失などを生じたか否かを判断し、運転者が発作や意識喪失などを生じている場合に、第1無線通信から第2無線通信へと切り替える構成としてもよい。 Furthermore, in the above-described embodiment, it is determined whether or not the driver is dozing based on the driver's awakening state, and when the driver is dozing, the first wireless communication to the second wireless communication are performed. However, the present invention is not limited to this configuration. For example, when the driver determines whether a seizure or loss of consciousness has occurred and the driver has a seizure or loss of consciousness, It may be configured to switch from the first wireless communication to the second wireless communication.
さらに、上述した実施形態では、携帯通信端末300が、運転者の顔画像データおよび自車両1の周囲の画像データを車載カメラ装置200から受信する構成を例示したが、この構成に限定されず、たとえば、運転者の顔画像データおよび自車両1の周囲の画像データのうち一方を車載カメラ装置200から受信する構成としてもよい。また、運転者が居眠り状態であった場合に、自車両1の周囲の画像をディスプレイ350に表示させる構成としてもよいし、あるいは、運転者が居眠り状態であった場合に、運転者の顔画像をサーバー400に送信させる構成としてもよい。この場合、たとえば、第1無線通信を介して、サーバー400のオペレーターにより、運転者を居眠り状態から回復するように声をかけることができる。
Furthermore, in embodiment mentioned above, although the mobile communication terminal 300 illustrated the structure which receives a driver | operator's face image data and the image data around the own vehicle 1 from the vehicle-mounted camera apparatus 200, it is not limited to this structure, For example, one of the driver's face image data and the image data around the host vehicle 1 may be received from the in-vehicle camera device 200. Further, when the driver is in a dozing state, an image around the host vehicle 1 may be displayed on the display 350. Alternatively, when the driver is in a dozing state, the driver's face image is displayed. May be transmitted to the
なお、上述した端末制御装置340は本発明の取得手段、制御手段、および提示手段に、車載カメラ装置200は本発明の車載通信機器に、車載装置100は本発明の車載機器に、それぞれ相当する。
The
100…車載装置
110…自車位置検出装置
120…車載制御装置
130…車両側BT通信装置
160…覚醒状態検出装置
200…車載カメラ装置
210…カメラ
220…カメラ制御装置
230…カメラ側WiFi通信装置
300…携帯通信端末
310…端末側BT通信装置
320…端末側WiFi通信装置
330…端末側電話通信装置
340…端末制御装置
350…ディスプレイ
360…メモリ
400…サーバー
DESCRIPTION OF SYMBOLS 100 ... In-vehicle apparatus 110 ... Own vehicle
Claims (5)
運転者の覚醒状態を示す覚醒情報を取得する取得手段と、
前記第1無線通信と前記第2無線通信との切り替えを制御する制御手段と、を備え、
前記制御手段は、前記運転者の覚醒情報に基づいて、前記運転者が居眠り状態に変化したか否かを判断し、前記運転者が居眠り状態に変化した判断した場合に、前記通信装置の無線通信を、前記第1無線通信から前記第2無線通信へと切り替えることを特徴とする通信制御装置。 Wireless communication is performed with an in-vehicle communication device mounted on the vehicle by a first wireless communication that performs wireless communication with the server using the first wireless communication method and a second wireless communication method that is different from the first wireless communication method. A communication control device of a communication device that performs wireless communication by switching to the second wireless communication,
Acquisition means for acquiring awakening information indicating a driver's awakening state;
Control means for controlling switching between the first wireless communication and the second wireless communication,
The control means determines whether or not the driver has changed to a doze state based on the driver's awakening information, and determines that the driver has changed to a doze state. A communication control device that switches communication from the first wireless communication to the second wireless communication.
前記車載通信機器は、前記運転者の顔画像を撮像する撮像機器であることを特徴とする通信制御装置。 The communication control device according to claim 1,
The in-vehicle communication device is an image pickup device that picks up an image of the driver's face.
前記車載通信機器は、前記車両の周囲の画像を撮像する撮像機器であることを特徴とする通信制御装置。 The communication control device according to claim 1,
The communication control apparatus, wherein the in-vehicle communication device is an imaging device that captures an image around the vehicle.
前記運転者の顔画像を前記運転者に提示する提示手段をさらに備えることを特徴とする通信制御装置。 In the communication control device according to claim 2 or 3,
The communication control apparatus further comprising a presentation unit that presents the driver's face image to the driver.
前記車両の運転者の覚醒状態に基づいて、前記運転者が居眠り状態であるか否かを判断し、前記運転者が居眠り状態に変化した場合に、前記通信装置の無線通信を、前記第1無線通信から前記第2無線通信に切り替えることを特徴とする通信制御方法。 Wireless communication is performed with an in-vehicle communication device mounted on a vehicle by a first wireless communication that performs wireless communication with a server using the first wireless communication method and a second wireless communication method that is different from the first wireless communication method. A communication control method for a communication device capable of second wireless communication,
Based on the awakening state of the driver of the vehicle, it is determined whether or not the driver is dozing. When the driver changes to the dozing state, wireless communication of the communication device is performed using the first communication device. A communication control method comprising switching from wireless communication to the second wireless communication.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014188650A JP6337710B2 (en) | 2014-09-17 | 2014-09-17 | Communication control device and communication control method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014188650A JP6337710B2 (en) | 2014-09-17 | 2014-09-17 | Communication control device and communication control method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016063339A true JP2016063339A (en) | 2016-04-25 |
JP6337710B2 JP6337710B2 (en) | 2018-06-06 |
Family
ID=55798350
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014188650A Active JP6337710B2 (en) | 2014-09-17 | 2014-09-17 | Communication control device and communication control method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6337710B2 (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018059834A (en) * | 2016-10-06 | 2018-04-12 | 三菱電機株式会社 | Navigation system, occupant monitoring device, information terminal device, server, and navigation program |
KR102119898B1 (en) * | 2018-12-03 | 2020-07-06 | 김영천 | Camera device for monitoring driver's cellular phone |
WO2023170846A1 (en) * | 2022-03-10 | 2023-09-14 | 日本電気株式会社 | Communication terminal, network control device, communication configuration change method, service level change method, and recording medium |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11175895A (en) * | 1997-12-05 | 1999-07-02 | Nippon Telegr & Teleph Corp <Ntt> | Communication device and method depending upon driver's state |
US20070222617A1 (en) * | 2006-03-24 | 2007-09-27 | Motorola, Inc. | Vision based alert system using portable device with camera |
JP2012186666A (en) * | 2011-03-07 | 2012-09-27 | Mitsubishi Electric Corp | Wireless communication system, on-board wireless communication apparatus, portable terminal and wireless communication method |
-
2014
- 2014-09-17 JP JP2014188650A patent/JP6337710B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11175895A (en) * | 1997-12-05 | 1999-07-02 | Nippon Telegr & Teleph Corp <Ntt> | Communication device and method depending upon driver's state |
US20070222617A1 (en) * | 2006-03-24 | 2007-09-27 | Motorola, Inc. | Vision based alert system using portable device with camera |
JP2012186666A (en) * | 2011-03-07 | 2012-09-27 | Mitsubishi Electric Corp | Wireless communication system, on-board wireless communication apparatus, portable terminal and wireless communication method |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018059834A (en) * | 2016-10-06 | 2018-04-12 | 三菱電機株式会社 | Navigation system, occupant monitoring device, information terminal device, server, and navigation program |
KR102119898B1 (en) * | 2018-12-03 | 2020-07-06 | 김영천 | Camera device for monitoring driver's cellular phone |
WO2023170846A1 (en) * | 2022-03-10 | 2023-09-14 | 日本電気株式会社 | Communication terminal, network control device, communication configuration change method, service level change method, and recording medium |
Also Published As
Publication number | Publication date |
---|---|
JP6337710B2 (en) | 2018-06-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10647252B2 (en) | Portable electronic device and operating method therefor | |
US9815333B2 (en) | Method and device for managing a self-balancing vehicle based on providing a warning message to a smart wearable device | |
US20170088072A1 (en) | System and method for sensor module power management | |
AU2014377550B2 (en) | Vehicle control system | |
JP2020102252A (en) | Driver monitoring system | |
JP2016128320A (en) | Mobile device wireless camera integration with vehicle | |
CN108174044B (en) | Alarm clock setting method and mobile terminal | |
WO2014137711A4 (en) | Method and mobile device for preventing driver distraction | |
US9775094B2 (en) | System, information terminal, and information notification method | |
CN104134371A (en) | Method and device for early warning of vehicle collision | |
US11443605B2 (en) | Monitoring apparatus, vehicle, monitoring method and information processing apparatus | |
WO2016160596A2 (en) | Connected vehicle system | |
JP2018156283A (en) | Notification system and notification method | |
JP2015007873A (en) | Vehicle cabin monitoring device | |
JP6337710B2 (en) | Communication control device and communication control method | |
JP2022070939A (en) | Imaging apparatus, control method, program, and storage medium | |
JP2013120409A (en) | In-service vehicle monitoring system | |
CN109104689B (en) | Safety warning method and terminal | |
US20120127983A1 (en) | Electronic device and method for transmitting warning information, and security monitoring system | |
CN108769427B (en) | Safe driving method and device, storage medium and vehicle-mounted equipment | |
CN108639056B (en) | Driving state detection method and device and mobile terminal | |
WO2019044456A1 (en) | Information processing device, vehicle, and roadside unit | |
JP6330597B2 (en) | Communication control system, server, and communication control method | |
US10045300B2 (en) | Mobile device, program and method for controlling the same | |
CN109345871A (en) | Safety method for early warning, device, unmanned plane and computer readable storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170330 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180327 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180410 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180423 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6337710 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |