CN1937763A - 移动通讯终端机的困倦感知装置及其困倦驾驶感知方法 - Google Patents

移动通讯终端机的困倦感知装置及其困倦驾驶感知方法 Download PDF

Info

Publication number
CN1937763A
CN1937763A CN 200510094471 CN200510094471A CN1937763A CN 1937763 A CN1937763 A CN 1937763A CN 200510094471 CN200510094471 CN 200510094471 CN 200510094471 A CN200510094471 A CN 200510094471A CN 1937763 A CN1937763 A CN 1937763A
Authority
CN
China
Prior art keywords
driver
sleepy
mentioned
stage
mobile communication
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN 200510094471
Other languages
English (en)
Inventor
白源光
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Kunshan Computer Co Ltd
Original Assignee
LG Electronics Kunshan Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Kunshan Computer Co Ltd filed Critical LG Electronics Kunshan Computer Co Ltd
Priority to CN 200510094471 priority Critical patent/CN1937763A/zh
Publication of CN1937763A publication Critical patent/CN1937763A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Emergency Alarm Devices (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明涉及移动通讯终端机的困倦感知装置及其困倦驾驶感知方法。移动通讯终端机的困倦感知装置，包括：监视驾驶员的身体或头部及眼睛等特定部位，对其活动进行检测的摄像机部；连接在上述摄像机的信号输出端，接收将上述摄像机输出的驾驶员正常状态及现在状态数据的信号处理部；与上述信号处理部的输出端连接，存储上述驾驶员的正常状态数据及现在状态数据的数据存储部；利用上述正常状态数据及现在状态数据，检测驾驶员的困倦状态，控制警告信号的控制部；当上述控制部判断驾驶员困倦驾驶时，通过音响警告驾驶员的警告信号输出部。

Description

移动通讯终端机的困倦感知装置及其困倦驾驶感知方法
技术领域
本发明涉及移动通讯终端机的困倦感知装置及其困倦驾驶感知方法，尤其是关于输入影像，使用姿势、脸部、眼睛等认知技术的移动通讯终端机的困倦感知装置及其困倦驾驶感知方法。
背景技术
最近，在移动通讯终端机中，出现了采用彩色显示器、大容量存储器、多和弦声、数字摄像机、无线网络平台等尖端功能的产品。即，随着移动通讯服务的发展，支持移动通讯终端机的多媒体功能呈现不断增强的趋势。
追加了多媒体功能像摄像机功能的无线移动通讯终端机，其用途变得更加广泛，而且越来越受到人们的关注与瞩目。
最近出现的车辆困倦驾驶防止装置(专利号码：20-1997-0036862)该***是关于车辆的困倦驾驶防止装置，如果打开自动开关，处理机通过传声筒一边控制CCD(Charge Coupled Device：电荷耦合器件)控制部，一边驱动CCD摄像机，或为了确保接收CCD摄像机拍摄的画像数据将最初的画像数据作为标准型号存储到存储器中，并与下一个拍摄、通过线路存储器传送的画像数据在比较部中进行比较，当驾驶员的姿势由最初的安定状态转变为不安状态，或由于困倦出现严重的动作变化时，发出警告，以确保安全行驶。
但是，利用上述服务***，用户通过在车辆上另外安装具有警报装置的传声筒，设置由处理机和CCD摄像机模块构成的***，其费用昂贵，而且安装困难。具有在处理单一功能中，需要构筑复杂***的缺点。在驱动上述***时，需要一种更加高效而且简便的方法。通过这种方法，可以在车辆上简便地设置具有摄像机功能的无线移动通讯终端机，通过警报信号和内置于终端机的基本输出装置如扬声器进行输出，不需要追加其它装置。而且，如果是可以运行摄像机功能和游戏等应用程序的无线移动通讯终端机，可以下载本程序，运行简便。
发明内容
本发明为了解决上述问题，其目的是提供一种车辆用困倦驾驶防止***，利用内置了摄像机功能的无线移动通讯终端机。
为了实现上述目的，本发明移动通讯终端机的困倦感知装置由以下几个部分构成：监视驾驶员的身体或头部及眼睛等特定部位，对其活动进行检测的摄像机部；连接在上述摄像机的信号输出端，接收将上述摄像机输出的驾驶员正常状态及现在状态数据的信号处理部；与上述信号处理部的输出端连接，存储上述驾驶员的正常状态数据及现在状态数据的数据存储部；利用上述正常状态数据及现在状态数据，检测驾驶员的困倦状态，控制警告信号的控制部；当上述控制部判断驾驶员困倦驾驶时，通过音响警告驾驶员的警告信号输出部。
使用移动通讯终端机的困倦驾驶感知方法包括以下几个阶段：a)存储驾驶员的正常状态图像的阶段；b)存储现在驾驶员的状态图像的阶段；c)利用上述存储的驾驶员正常状态图像和现在驾驶员状态图像信息，判断驾驶员是否困倦驾驶的阶段；及d)当上述阶段c)中判断结果是驾驶员正在困倦驾驶时，发出警报，并重复上述阶段b)的阶段。
使用移动通讯终端机的困倦驾驶感知方法的特征是：上述阶段c)中判断驾驶员是否是困倦驾驶的方法还包括：判断眨眼次数的方法；判断脸部与方向盘位置的方法；判断上半身活动的方法。
通过使用本发明移动通讯终端机的困倦感知装置及使用移动通讯终端机的困倦驾驶感知方法，具有无线移动通讯终端机的驾驶员在任何时候、任何地方都可以非常方便地设置车辆困倦警报***，因此，可以减少由于困倦驾驶导致的众多交通事故发生的危险。
附图说明
图1是本发明移动通讯终端机的困倦感知装置的一个实施例的构成方框图。
图2是本发明使用移动通讯终端机的困倦驾驶感知方法的一个实施例的顺序图。
图3是本发明使用移动通讯终端机的困倦驾驶感知方法的另一个
实施例的顺序图。
图4是将本发明中适用的移动通讯终端机悬挂在车辆上的样子的示意图。
附图主要部分符号说明
101：摄像机部         102：信号处理部
103：数据存储部       104：控制部
105：警告信号输出部       105a：声音输出部
105b：警报输出部
具体实施方式
下面将参照附图对本发明移动通讯终端机的困倦感知装置及其困倦驾驶感知方法进行详细说明。在下面的说明中，将详细说明具体的构成元素等特定事项。对于为了便于理解整个发明提供的事项及这种特定事项，在本发明的范围内，可以进行特定的变形或者变更，这是相关技术领域中掌握相关知识者不言自明的事实。
图1是本发明移动通讯终端机的困倦感知装置的一个实施例的构成方框图。
在上述实施例中，移动通讯终端机的困倦感知装置由以下几个部分构成：摄像机部101、信号处理部102、数据存储部103、控制部104及警告信号输出部105。
上述实施例概略地显示了比较观察驾驶员的状态、判断驾驶员是否困倦驾驶的装置。
参照图1，上述摄像机部101优选使用安装在移动通讯终端机上的CCD摄像机或CMOS(互补金属氧化物半导体)摄像机。上述摄像机最好按照不同的困倦驾驶感知方法，分别对驾驶员的眼睛、脸部和方向盘的距离、上半身的活动状态进行摄像。
上述信号处理部102接收上述摄像机部输出的驾驶员的图像数据后，生成驾驶员的正常状态图像和现在状态图像的数据。
上述数据存储部103存储正常状态图像数据和现在状态图像数据。上述正常状态图像数据是初期驾驶员行驶后，直到困倦之前的图像，直到结束驾驶，在上述数据存储部中存储；上述现在状态图像数据是现在输入的驾驶员的图像数据，在一定的时间期间，不断更新现在状态图像数据并存储。接收的影像至少存储2个帧的完整影像，最好每秒可以接收30帧以上。
上述控制部104将存储的正常状态图像与现在状态图像进行比较，感知用户是否困倦驾驶。用户的困倦驾驶感知方法有多种。举例来说，其中一个就是第96-44152号专利，其显示了利用摄像机拍摄驾驶员，在拍摄的影像中，感知驾驶员的眨眼状态，当眼皮不动时，判断驾驶员处于困倦状态的技术。而且，检测用户的头部和驾驶台的距离，当距离越来越近时，如果持续一定的时间，判断驾驶员处于困倦驾驶状态。即，利用上述接收的影像、脸部、上半身等的活动感知驾驶员是否困倦驾驶。判断要素是通过驾驶员的上半身姿势、脸部的姿势、眼睛的眨眼等驾驶员的上半身向一侧持续倾斜，或者整个面部向方向盘方向靠近、常常上下动弹，眼睛不眨长时间闭上时，可以判断驾驶员处于困倦驾驶状态。
上述警告信号输出部105包括声音输出部105a和警报输出部105b。如果在上述控制部中判断驾驶员处于困倦驾驶，通过音响输出警告信号，使驾驶员打起精神。上述警告信号最好输出声音或者输出警报信号，使用移动通讯终端机的基本输出装置扬声器，确保驾驶员能够确实听到鸣响警报。
为了实现上述目的，本发明最好还包括充电兼用移动通讯终端机车辆悬挂用具。参照图4，由于在车辆移动时，应该将具备摄像机的移动通讯终端机固定起来，在可以监视到驾驶员上半身的位置，设置充电兼用移动通讯终端机车辆悬挂用具，由于在***动作时，需要大量的电力消耗，所以，最好使用可以同时充电的。
图2是本发明使用移动通讯终端机的困倦驾驶感知方法的一个实施例的顺序图。
阶段S201是存储驾驶员的正常状态图像的过程。
存储驾驶员在起动车辆或经过特定时间后，困倦之前的正常状态图像。上述正常状态图像最好使用普通的存储器进行存储。
阶段S202是存储驾驶员的现在状态图像的过程。存储驾驶员的正常状态图像后，经过一定的时间，存储驾驶员的现在状态图像。上述现在状态图像最好使用普通的存储器进行存储。在上述阶段S201中存储的正常状态图像与本阶段中存储的现在状态图像在下个阶段中成为感知驾驶员是否困倦的比较对象。
阶段S203到S205是感知驾驶员是否困倦的过程。
阶段S203是利用驾驶员的眨眼状态感知是否困倦的过程。上述利用眨眼状态，判断是否困倦的方法有很多种，如果是一种根据相关工作人员的水准都可能完成的方法，可以采取任意一种。
阶段S204是比较脸部和方向盘的位置，感知是否困倦的过程。
如果驾驶员的脸部和方向盘保持特定的距离，在一定时间期间持续这种状态，可以判断驾驶员处于困倦状态。
上述阶段S205是比较上半身的活动，感知是否困倦的过程。
如果驾驶员的上半身向一侧倾斜，并在一定时间期间持续这种状态，可以判断驾驶员处于困倦状态。
上述阶段S206是发出警报的过程。
从上述阶段S203到阶段S205的任意一个阶段，如果感知驾驶员处于困倦状态，***会发出警报或者声音，叫醒驾驶员。
图3是本发明使用移动通讯终端机的困倦驾驶感知方法的另一个
实施例的顺序图。
其它过程全部相同，不同的是，当判断驾驶员处于困倦驾驶状态，发出警报时，对次数进行计数。利用控制部感知上述计数的次数，计数的次数越多，警报的声音就越大。
通过上述的说明内容，相关工作人员完全可以在不偏离本发明技术思想的范围内，进行多样的变更以及修改。
因此，本发明的技术性范围并不局限于说明书上的内容，必须要根据权利范围来确定其技术性范围。

Claims (3)

1、一种移动通讯终端机的困倦感知装置，其特征在于，包括：
监视驾驶员的身体或头部及眼睛等特定部位，对其活动进行检测的摄像机部；
连接在上述摄像机的信号输出端，接收将上述摄像机输出的驾驶员正常状态及现在状态的数据的信号处理部；
与上述信号处理部的输出端连接，存储上述驾驶员的正常状态数据及现在状态数据的数据存储部；
利用上述正常状态数据及现在状态数据，检测驾驶员的困倦状态，控制警告信号的控制部；
当上述控制部判断驾驶员困倦驾驶时，通过音响警告驾驶员的警告信号输出部。
2、一种使用移动通讯终端机的困倦驾驶感知方法，其特征在于，包括：
a)存储驾驶员的正常状态图像的阶段；
b)存储现在驾驶员的状态图像的阶段；
c)利用上述存储的驾驶员的正常状态图像和现在驾驶员的状态图像信息，判断驾驶员是否困倦驾驶的阶段；及
d)当上述阶段c)中判断结果是驾驶员正在困倦驾驶时，发出警报，并重复上述阶段b)的阶段。
3、如权利要求2所述的使用移动通讯终端机的困倦驾驶感知方法，其特征是：
上述阶段c)中判断驾驶员是否是困倦驾驶的方法还包括：判断眨眼次数的方法；判断脸部与方向盘的位置的方法；判断上半身活动的方法。
CN 200510094471 2005-09-19 2005-09-19 移动通讯终端机的困倦感知装置及其困倦驾驶感知方法 Pending CN1937763A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 200510094471 CN1937763A (zh) 2005-09-19 2005-09-19 移动通讯终端机的困倦感知装置及其困倦驾驶感知方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 200510094471 CN1937763A (zh) 2005-09-19 2005-09-19 移动通讯终端机的困倦感知装置及其困倦驾驶感知方法

Publications (1)

Publication Number Publication Date
CN1937763A true CN1937763A (zh) 2007-03-28

Family

ID=37954984

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 200510094471 Pending CN1937763A (zh) 2005-09-19 2005-09-19 移动通讯终端机的困倦感知装置及其困倦驾驶感知方法

Country Status (1)

Country Link
CN (1) CN1937763A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102874259A (zh) * 2012-06-15 2013-01-16 浙江吉利汽车研究院有限公司杭州分公司 一种汽车驾驶员情绪监视及车辆控制***
CN102069710B (zh) * 2009-11-24 2014-03-26 鸿富锦精密工业（深圳）有限公司 驾驶监控装置及方法
CN103863187A (zh) * 2012-12-12 2014-06-18 通用汽车环球科技运作有限责任公司 驾驶员警示器
TWI478836B (zh) * 2009-12-02 2015-04-01 Hon Hai Prec Ind Co Ltd 駕駛監控裝置及方法
CN103863187B (zh) * 2012-12-12 2016-11-30 通用汽车环球科技运作有限责任公司 驾驶员警示器
CN110199318A (zh) * 2017-03-14 2019-09-03 欧姆龙株式会社 驾驶员状态推定装置以及驾驶员状态推定方法

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102069710B (zh) * 2009-11-24 2014-03-26 鸿富锦精密工业（深圳）有限公司 驾驶监控装置及方法
TWI478836B (zh) * 2009-12-02 2015-04-01 Hon Hai Prec Ind Co Ltd 駕駛監控裝置及方法
CN102874259A (zh) * 2012-06-15 2013-01-16 浙江吉利汽车研究院有限公司杭州分公司 一种汽车驾驶员情绪监视及车辆控制***
CN102874259B (zh) * 2012-06-15 2015-12-09 浙江吉利汽车研究院有限公司杭州分公司 一种汽车驾驶员情绪监视及车辆控制***
CN103863187A (zh) * 2012-12-12 2014-06-18 通用汽车环球科技运作有限责任公司 驾驶员警示器
CN103863187B (zh) * 2012-12-12 2016-11-30 通用汽车环球科技运作有限责任公司 驾驶员警示器
CN110199318A (zh) * 2017-03-14 2019-09-03 欧姆龙株式会社 驾驶员状态推定装置以及驾驶员状态推定方法
CN110199318B (zh) * 2017-03-14 2023-03-07 欧姆龙株式会社 驾驶员状态推定装置以及驾驶员状态推定方法

Similar Documents

Publication Publication Date Title
CN105488957B (zh) 疲劳驾驶检测方法及装置
CN109792577B (zh) 信息处理设备、信息处理方法和计算机可读存储介质
CN104008664B (zh) 路况信息获取方法及相关装置
CN109710080A (zh) 一种屏幕控制和语音控制方法及电子设备
CN106168854A (zh) 视力保护的提醒方法及装置
CN104799641B (zh) 安全智能头枕
US10345854B2 (en) Head mounted display
CN105974918B (zh) 平衡车控制方法、装置及平衡车
CN107818694A (zh) 报警处理方法、装置及终端
CN105882528A (zh) 平衡车的路况共享方法、装置及平衡车
CN106097650A (zh) 终端的报警方法、装置及终端
CN110001566A (zh) 车内生命体保护方法、装置及计算机可读存储介质
CN106385488B (zh) 恢复正常工作模式的方法及装置
CN1937763A (zh) 移动通讯终端机的困倦感知装置及其困倦驾驶感知方法
CN106412227A (zh) 防丢报警方法、装置和用于防丢报警的装置
CN108769369A (zh) 一种预警方法及移动终端
KR102051136B1 (ko) 클라우드서버를 기반을 하는 인공지능 대쉬보드로봇을 이용한 사용자 상태인식시스템
KR102111755B1 (ko) 차량용 영상 처리 장치 및 그 제어 방법
CN108920047A (zh) 一种应用程序的控制方法、终端和计算机可读存储介质
CN115590516A (zh) 一种情绪提醒方法、具有情绪提醒功能的手环及相关装置
CN105931313A (zh) 行车记录仪的录制方法及装置
CN106408682A (zh) 提示方法和装置
CN106325575A (zh) 触控响应方法及装置
CN105430567B (zh) 汽车鸣笛音量调节方法及装置
CN114521878B (zh) 睡眠评估方法、电子设备及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication