CN102069710A - 驾驶监控装置及方法 - Google Patents

驾驶监控装置及方法 Download PDF

Info

Publication number
CN102069710A
CN102069710A CN2009103103263A CN200910310326A CN102069710A CN 102069710 A CN102069710 A CN 102069710A CN 2009103103263 A CN2009103103263 A CN 2009103103263A CN 200910310326 A CN200910310326 A CN 200910310326A CN 102069710 A CN102069710 A CN 102069710A
Authority
CN
China
Prior art keywords
bearing circle
chaufeur
circle zone
driving
hand
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2009103103263A
Other languages
English (en)
Other versions
CN102069710B (zh
Inventor
蔡英川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hongfujin Precision Industry Shenzhen Co Ltd
Hon Hai Precision Industry Co Ltd
Original Assignee
Hongfujin Precision Industry Shenzhen Co Ltd
Hon Hai Precision Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hongfujin Precision Industry Shenzhen Co Ltd, Hon Hai Precision Industry Co Ltd filed Critical Hongfujin Precision Industry Shenzhen Co Ltd
Priority to CN200910310326.3A priority Critical patent/CN102069710B/zh
Priority to US12/730,236 priority patent/US8253551B2/en
Publication of CN102069710A publication Critical patent/CN102069710A/zh
Application granted granted Critical
Publication of CN102069710B publication Critical patent/CN102069710B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W40/09Driving style or behaviour
    • B60K2360/21
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00Conjoint control of vehicle sub-units of different type or different function
    • B60W10/04Conjoint control of vehicle sub-units of different type or different function including control of propulsion units
    • B60W10/06Conjoint control of vehicle sub-units of different type or different function including control of propulsion units including control of combustion engines
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2710/00Output or target parameters relating to a particular sub-units
    • B60W2710/06Combustion engines, Gas turbines
    • B60W2710/0605Throttle position

Abstract

一种驾驶监控装置,该驾驶监控装置安装于汽车内,所述驾驶监控装置包括:摄像头、设置模块、启动按钮、控制模块、识别模块、判断模块以及控制模块。利用上述元件和模块可识别驾驶员是否合理驾驶,并在确定驾驶员非合理驾驶时发出预警以提示驾驶员注意安全。本发明还提供一种驾驶监控方法。利用本发明可避免因驾驶员的不当驾驶造成安全事故。

Description

驾驶监控装置及方法
技术领域
本发明涉及一种监控装置及方法,尤其涉及一种驾驶监控装置及方法。
背景技术
由于驾驶员的不当操作所导致的交通安全事故时有发生,而导致驾驶员发生不当操作通常包括疲劳驾驶、酒后驾车等。如何识别驾驶员在开车时是否处于清醒状态并做出相应的预警对减少交通安全事故有重要的意义。
发明内容
鉴于以上内容,有必要提供一种驾驶监控装置,可识别驾驶员在开车时是否处于清醒状态且是否合理驾驶以便做出相应的预警。
此外,还有必要提供一种驾驶监控方法,可识别驾驶员在开车时是否处于清醒状态且是否合理驾驶以便做出相应的预警。
一种驾驶监控装置,该驾驶监控装置安装于汽车内,所述驾驶监控装置包括:摄像头,用于拍摄影像;设置模块,用于设置所述摄像头的第一角度以拍摄驾驶员脸部,设置第一阀值以判断驾驶员是否处于清醒状态,设置所述摄像头的第二角度以拍摄方向盘,设置划分依据将方向盘区域划分成多个部分,并设置驾驶员左右手分别在方向盘区域的标准位置以判断是否合理驾驶;启动按钮,用于在被按压后发送第一指令;控制模块,用于接收该第一指令并控制所述摄像头移至第一角度并开启对驾驶人的脸部进行拍摄;识别模块,用于获取所拍摄的脸部影像,识别该脸部影像中的脸部区域,从识别的脸部区域中计算出眼睛区域,并计算所述眼睛区域的高度和长度之间的比值;判断模块,用于在所述比值小于或等于第一阀值时确定驾驶员处于非清醒状态,并发送第二指令至所述控制模块;所述控制模块,还用于根据该第二指令控制所述摄像头移至第二角度拍摄方向盘位置的第一影像;所述识别模块,还用于获取第一影像,识别该第一影像中的方向盘区域及手部区域,依据划分依据对所识别的方向盘区域进行划分,并确定该手部区域所在的方向盘区域的位置;所述判断模块,还用于判断所确定的手部区域所占的方向盘区域的位置是否符合设置的标准位置,从而判断该驾驶员当前是否合理驾驶;及预警模块,用于在确定驾驶员并非合理驾驶时发出预警以提示驾驶员注意。
一种驾驶监控方法,应用于汽车的驾驶监控装置中,该驾驶监控装置包括摄像头以及启动按钮,该方法包括:设置所述摄像头的第一角度以拍摄驾驶员脸部,设置第一阀值以判断驾驶员是否处于清醒状态,设置所述摄像头的第二角度以拍摄方向盘,设置划分依据将方向盘区域划分成多个部分,并设置驾驶员左右手分别在方向盘区域的标准位置以判断是否合理驾驶;在所述启动按钮被按压后发送第一指令;根据该第一指令控制所述摄像头移至第一角度并开启对驾驶员的脸部进行拍摄;获取所拍摄的脸部影像,识别该影像中的脸部区域,并从识别的脸部区域中计算出眼睛区域;计算所述眼睛区域的高度和长度之间的比值,在所述比值小于或等于第一阀值时确定该驾驶员处于非清醒状态,并发送第二指令;根据该第二指令控制所述摄像头移至第二角度拍摄方向盘位置的第一影像;获取该第一影像,识别该第一影像中的方向盘区域及手部区域,依据划分依据对所识别的方向盘区域进行划分,并确定该手部区域所在的方向盘区域的位置;判断所确定的手部区域所占的方向盘区域的位置是否符合设置的标准位置,从而判断该驾驶员当前是否合理驾驶;及在确定驾驶员并非合理驾驶时发出预警以提示驾驶员注意。
相较于现有技术,所述的驾驶监控装置及驾驶监控方法,可识别驾驶员在开车时是否处于清醒状态且是否合理驾驶,以便做出相应的预警,从而减少交通安全事故。
附图说明
图1是本发明驾驶监控装置的较佳实施方式的运行环境图。
图2是本发明驾驶监控装置的较佳实施方式的功能模块图。
图3是本发明驾驶监控装置的较佳实施方式的方向盘区域切分示意图。
图4是本发明驾驶监控方法的参数设置流程图。
图5是本发明驾驶监控方法的第一实施方式的流程图。
图6是本发明驾驶监控方法的第二实施方式的流程图。
图7是本发明驾驶监控方法的第三实施方式的流程图。
主要元件符号说明
汽车1
驾驶监控装置2
处理器22
摄像头24
启动按钮26
扬声器28
存储装置29
设置模块200
控制模块202
识别模块204
判断模块206
预警模块208
计时器209
方向盘3
油门4
具体实施方式
如图1所示,是本发明驾驶监控装置的较佳实施方式的运行环境图。所述驾驶监控装置2安装于汽车1中,所述汽车1还包括方向盘3、油门4以及其他未示于图1中的装置,例如:刹车、喇叭等。所述驾驶监控装置2用于监控驾驶员当前是否合理驾驶,并在确定驾驶员并非合理驾驶时(例如,驾驶员处于瞌睡状态),发出预警信号,若在设置时间内驾驶员并未调整为合理驾驶则直接切断油门4以保障行车安全。
如图2所示,是本发明驾驶监控装置的较佳实施方式的功能模块图。在本较佳实施方式中,所述的驾驶监控装置2包括处理器22、摄像头24、启动按钮26、扬声器28以及存储装置29。所述处理器22用于执行所述驾驶监控装置2中安装或嵌入的各类软件。
所述摄像头24用于根据指令拍摄影像以便进行分析。
所述启动按钮26用于启动所述驾驶监控装置2,该启动按钮在被驾驶员按压后即发出第一指令以开启所述摄像头24进行拍摄。
所述扬声器28可播放预先录制的语音以预警驾驶员注意安全。
所述的存储装置29用于存储各类数据,例如,用户所设置的各项数据、预先录制的语音(可参照下文的详细介绍)等。
在本较佳实施方式中,所述的驾驶监控装置2还包括设置模块200、控制模块202、识别模块204、判断模块206以及预警模块208。
所述的设置模块200,用于设置多个参数,包括:所述摄像头24的第一角度以拍摄驾驶员脸部、所述摄像头24的第二角度以拍摄方向盘3、第一阀值以判断驾驶员是否处于清醒状态、划分依据以将方向盘区域划分成多个部分、以及驾驶员左右手分别在方向盘区域的标准位置以判断是否合理驾驶等。上述设置的参数可存入所述的存储装置29。
在本较佳实施方式中,所述的划分依据是根据经过方向盘3的圆心的互相垂直的两条轴线将该方向盘区域划分为左上、左下、右上以及右下四个部分(参考图3所示的方向盘3示意图)。
在本较佳实施方式中,所述的驾驶员左右手分别在方向盘区域的标准位置是左手位于左上位置且右手位于右下位置,或者左手位于左下位置且右手位于右上位置。
在其它实施方式中,方向盘区域的划分以及双手在方向盘区域的标准位置可根据用户需求或个人习惯进行调整,例如方向盘区域可分成九部分等。
所述的启动按钮26在被按压后发送第一指令。
所述的控制模块202,用于接收该第一指令并控制所述摄像头24移至第一角度并开启对驾驶人的脸部进行拍摄。
所述的识别模块204,用于获取所拍摄的脸部影像,并识别该脸部影像中的脸部区域。首先,识别模块204利用肤色理论,根据脸部肤色范围,将脸部定位出来。所述脸部肤色范围的判断公式如下:
Skin color ( x , y ) = 1 , if [ Cr ( x , y ) ∈ Skin Cr ] ∩ [ Cb ( x , y ) ∈ Skin Cb ] 0 , otherwise
如果Skincolor(x,y)为1,则表示其被分类为脸部肤色部分并设定为白色,否则,则被分类为非脸部肤色部分并设定为黑色。将脸部定位出来后,所述的识别模块204计算所述脸部的最大包围集,确定所述脸部区域,即将所述脸部区域限定在一个矩形中,所述脸部区域的范围将作为脸部特征点取样的依据。
所述的识别模块204还用于从识别的脸部区域中计算出眼睛区域。首先,定位出眼睛的区域,利用Sobel算法对所述眼睛区域的边缘进行增强、加黑处理,获得增强处理后的眼睛影像;对所述增强处理后的眼睛影像进行二值化处理;对经过二值化处理后的眼睛影像的边缘进行像素点的取样,获取所述眼睛的取样点;利用Snake算法,对所述眼睛的取样点进行处理,获取所述眼睛的轮廓;计算所述眼睛轮廓的最大包围集,以确定所述眼睛区域,即将所述眼睛区域限定在一个矩形中;确定该眼睛区域的高度(H)与长度(W)。
所述的识别模块204进一步用于计算所述眼睛区域的高度和长度之间的比值(H/W)。
所述的判断模块206,用于比较所述比值和第一阀值,并根据比较结果判断驾驶员是否处于清醒状态。若所述比值大于第一阀值,则所述判断模块206确定驾驶员处于清醒状态,否则,若所述比值小于或等于第一阀值,则确定驾驶员处于非清醒状态。
在第一实施方式中,所述的预警模块208在确定驾驶员处于非清醒状态后即发出预警以提示驾驶员注意,该预警包括利用所述扬声器28播放预先录制的语音,例如“请小心开车、注意安全”等语音提示。所述的预警模块208,还可进一步切断油门4使得该汽车1减速并停下来。用户可根据个人要求对预警模块208的功能进行设置,例如仅选择语音提示、仅切断油门4、或者上述两种的组合。例如,可通过控制一个与油门4相连的制动闸实现对油门4的切断。
在第二实施方式中,所述的判断模块206还用于在确定驾驶员处于非清醒状态后发送第二指令至所述控制模块202。
所述控制模块202,还用于根据该第二指令控制所述摄像头24移至第二角度拍摄方向盘3的位置的第一影像。
所述识别模块204,还用于获取该第一影像,识别该第一影像中的方向盘区域及手部区域,依据划分依据对所识别的方向盘区域进行划分,并确定该手部区域所在的方向盘区域的位置。
所述的识别模块204可用样板匹配的方式,用已知的样板和经过处理的影像作交错关联,相似程度高的会被显示出来,例如,预先存储多个方向盘3的影像以及驾驶员双手放在该方向盘3的不同位置的影像于所述存储装置29中,以便与所获取的方向盘3的影像进行比对,从而确认驾驶员双手在方向盘区域的不同位置。
所述设置模块200还可预先设置一个比例,所述的识别模块204通过识别驾驶员的左手或右手在方向盘区域的一个位置所占的比例是否超过该设置的比例,从而确定该位置是否为该左手或右手所在的方向盘区域的位置。
所述判断模块206,还用于判断所确定的手部区域所占的方向盘区域的位置是否符合设置的标准位置,从而判断该驾驶员当前是否合理驾驶。
若所确定的手部区域所占的方向盘区域的位置符合设置的标准位置,则确定该驾驶员当前为合理驾驶,否则,即为不合理驾驶。
所述的预警模块208,还用于在确定驾驶员并非合理驾驶时发出预警以提示驾驶员注意。如上所述,所述的预警模块208,还可进一步切断油门4使得该汽车1减速并停下来。用户可根据个人要求对预警模块208的功能进行设置。
在第三实施方式中,所述的驾驶监控装置2还包括计时器209。
所述设置模块200,还用于预先设置一个时间间隔。
上述确定驾驶员并非合理驾驶时,所述计时器209启动进行计时。同时,该预警模块208也发出语音预警。
所述控制模块202,还用于在计时达到所设置的时间间隔后在第二角度拍摄方向盘3的位置的第二影像。
所述识别模块204,还用于获取该第二影像,识别该第二影像中的方向盘区域及手部区域,依据划分依据对所识别的方向盘区域进行划分,并确定该手部区域所在的方向盘区域的位置。
所述判断模块206,还用于判断所确定的手部区域所占的方向盘区域的位置是否符合设置的标准位置,从而判断该驾驶员是否在预警后且经过设置的时间间隔后调整为合理驾驶。
若所确定的手部区域所占的方向盘区域的位置不符合设置的标准位置,则所述判断模块206确定该驾驶员在预警后且经过设置的时间间隔后仍然没有调整为合理驾驶,则所述预警模块208,还用于在确定驾驶员仍然非合理驾驶时切断油门4,从而使得该汽车1减速并停下来。
如图4所示,是本发明驾驶监控方法的参数设置流程图。
步骤S2,所述的设置模块200设置所述摄像头24的第一角度以拍摄驾驶员脸部,以及设置所述摄像头24的第二角度以拍摄方向盘3。
步骤S4,所述的设置模块200设置第一阀值以判断驾驶员是否处于清醒状态。
步骤S6,所述的设置模块200设置划分依据以将方向盘区域划分成多个部分。在本较佳实施方式中,所述的划分依据是根据经过方向盘3的圆心的互相垂直的两条轴线将该方向盘区域划分为左上、左下、右上以及右下四个部分(参考图3所示的方向盘3示意图)。
步骤S8,所述的设置模块200设置驾驶员左右手分别在方向盘区域的标准位置以判断是否合理驾驶等。在本较佳实施方式中,所述的驾驶员左右手分别在方向盘区域的标准位置是左手位于左上位置且右手位于右下位置,或者左手位于左下位置且右手位于右上位置。
步骤S10,所述的设置模块200设置时间间隔以查看驾驶员是否调整成合理驾驶。
在其它实施方式中,方向盘区域的划分以及双手在方向盘区域的标准位置可根据用户需求或个人习惯进行调整,例如方向盘区域可分成九部分等。
如图5所示,是本发明驾驶监控方法的第一实施方式的流程图。首先,步骤S12,所述的启动按钮26在被按压后发送第一指令至所述控制模块202。
步骤S14,所述控制模块202接收该第一指令并控制所述摄像头24移至第一角度并开启对驾驶员的脸部进行拍摄。
步骤S16,所述识别模块204获取所拍摄的脸部影像,并识别该脸部影像中的脸部区域。
步骤S18,所述识别模块204从识别的脸部区域中计算出眼睛区域,并计算所述眼睛区域的高度和长度之间的比值。
步骤S20,所述判断模块206判断所述比值是否大于第一阀值。若所述比值大于第一阀值,表示该驾驶员处于清醒状态,流程返回至步骤S14。
若所述比值小于或等于第一阀值,于步骤S22,所述判断模块206确定驾驶员处于非清醒状态。
步骤S24,所述预警模块208发出预警以提示驾驶员注意,该预警包括利用所述扬声器28播放预先录制的语音,例如“请小心开车、注意安全”等语音提示。所述的预警模块208还可进一步切断油门4使得该汽车1减速并停下来。用户可根据个人要求对预警模块208的功能进行设置,例如仅选择语音提示、仅切断油门4、或者上述两种的组合。
如图6所示,是本发明驾驶监控方法的第二实施方式的流程图。此第二实施方式的流程图是基于如图5所示的第一实施方式的流程图中的步骤S12至S22。
首先,步骤S30,所述的判断模块206在确定驾驶员处于非清醒状态后发送第二指令至所述控制模块202。
步骤S32,所述控制模块202根据该第二指令控制所述摄像头24移至第二角度拍摄方向盘3的位置的第一影像。
步骤S34,所述识别模块204获取该第一影像,识别该第一影像中的方向盘区域及手部区域。
步骤S36,所述识别模块204依据划分依据对所识别的方向盘区域进行划分,并确定该手部区域所在的方向盘区域的位置。
步骤S38,所述判断模块206判断所确定的手部区域所占的方向盘区域的位置是否符合设置的标准位置,从而判断该驾驶员当前是否合理驾驶。
若所确定的手部区域所占的方向盘区域的位置符合设置的标准位置,则可确定该驾驶员当前为合理驾驶,流程结束。
若所确定的手部区域所占的方向盘区域的位置符合设置的标准位置,于步骤S40,所述的判断模块206确定驾驶员并非合理驾驶。
步骤S42,所述的预警模块208发出预警以提示驾驶员注意,该预警包括利用所述扬声器28播放预先录制的语音所述的预警模块208,还可进一步切断油门4使得该汽车1减速并停下来。用户可根据个人要求对预警模块208的功能进行设置。
如图7所示,是本发明驾驶监控方法的第三实施方式的流程图。此第三实施方式的流程图是基于如图6所示的第二实施方式的流程图中的步骤S30至S40。
步骤S50,在确定驾驶员并非合理驾驶时,所述计时器209启动进行计时,该预警模块208也发出语音预警。
步骤S52,所述控制模块202在计时达到所设置的时间间隔后在第二角度拍摄方向盘3的位置的第二影像。
步骤S54,所述识别模块204获取该第二影像,识别该第二影像中的方向盘区域及手部区域。
步骤S56,所述识别模块204依据划分依据对所识别的方向盘区域进行划分,并确定该手部区域所在的方向盘区域的位置。
步骤S58,所述判断模块206判断所确定的手部区域所占的方向盘区域的位置是否符合设置的标准位置,从而判断该驾驶员是否在预警后且经过设置的时间间隔后调整为合理驾驶。
若所确定的手部区域所占的方向盘区域的位置符合设置的标准位置,则确定该驾驶员在预警后且经过设置的时间间隔后调整为合理驾驶,流程结束。
若所确定的手部区域所占的方向盘区域的位置不符合设置的标准位置,于步骤S60,所述判断模块206确定该驾驶员在预警后且经过设置的时间间隔后仍然没有调整为合理驾驶,所述预警模块208切断油门4,从而使得该汽车1减速并停下来,然后,流程结束。
以上实施方式仅用以说明本发明的技术方案而非限制,尽管参照以上较佳实施方式对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或等同替换都不应脱离本发明技术方案的精神和范围。

Claims (10)

1.一种驾驶监控装置,该驾驶监控装置安装于汽车内,其特征在于,所述驾驶监控装置包括:
摄像头,用于拍摄影像;
设置模块,用于设置所述摄像头的第一角度以拍摄驾驶员脸部,设置第一阀值以判断驾驶员是否处于清醒状态,设置所述摄像头的第二角度以拍摄方向盘,设置划分依据将方向盘区域划分成多个部分,并设置驾驶员左右手分别在方向盘区域的标准位置以判断是否合理驾驶;
启动按钮,用于在被按压后发送第一指令;
控制模块,用于接收该第一指令并控制所述摄像头移至第一角度并开启对驾驶人的脸部进行拍摄;
识别模块,用于获取所拍摄的脸部影像,识别该脸部影像中的脸部区域,从识别的脸部区域中计算出眼睛区域,并计算所述眼睛区域的高度和长度之间的比值;
判断模块,用于在所述比值小于或等于第一阀值时确定驾驶员处于非清醒状态,并发送第二指令至所述控制模块;
所述控制模块,还用于根据该第二指令控制所述摄像头移至第二角度拍摄方向盘位置的第一影像;
所述识别模块,还用于获取第一影像,识别该第一影像中的方向盘区域及手部区域,依据划分依据对所识别的方向盘区域进行划分,并确定该手部区域所在的方向盘区域的位置;
所述判断模块,还用于判断所确定的手部区域所占的方向盘区域的位置是否符合设置的标准位置,从而判断该驾驶员当前是否合理驾驶;及
预警模块,用于在确定驾驶员并非合理驾驶时发出预警以提示驾驶员注意。
2.如权利要求1所述的驾驶监控装置,其特征在于,所述的划分依据是根据经过方向盘圆心的互相垂直的两条轴线将该方向盘区域划分为左上、左下、右上以及右下四个部分,并且所述的驾驶员左右手分别在方向盘区域的标准位置是左手位于左上位置且右手位于右下位置,或者左手位于左下位置且右手位于右上位置。
3.如权利要求1所述的驾驶监控装置,其特征在于,所述设置模块还用于设置一个比例,所述的识别模块还用于在驾驶员的左手或右手在方向盘区域的一个位置所占的比例超过该设置的比例时,确定该位置即为该左手或右手所在的方向盘区域的位置。
4.如权利要求1所述的驾驶监控装置,其特征在于,所述驾驶监控装置还包括扬声器,所述预警模块用于令该扬声器发出预警信号或播放预先录制的语音以提示驾驶员注意。
5.如权利要求1所述的驾驶监控装置,其特征在于,所述驾驶监控装置还包括计时器:
所述设置模块,还用于设置一个时间间隔;
所述计时器,用于在确定驾驶员并非合理驾驶时启动进行计时;
所述控制模块,还用于在计时达到所设置的时间间隔后在第二角度拍摄方向盘位置的第二影像;
所述识别模块,还用于获取该第二影像,识别该第二影像中的方向盘区域及手部区域,依据划分依据对所识别的方向盘区域进行划分,并确定该手部区域所在的方向盘区域的位置;
所述判断模块,还用于判断所确定的手部区域所占的方向盘区域的位置是否符合设置的标准位置,从而判断该驾驶员当前是否合理驾驶;及
所述预警模块,还用于在确定驾驶员并非合理驾驶时切断油门。
6.一种驾驶监控方法,应用于汽车的驾驶监控装置中,该驾驶监控装置包括摄像头以及启动按钮,其特征在于,该方法包括:
设置所述摄像头的第一角度以拍摄驾驶员脸部,设置第一阀值以判断驾驶员是否处于清醒状态,设置所述摄像头的第二角度以拍摄方向盘,设置划分依据将方向盘区域划分成多个部分,并设置驾驶员左右手分别在方向盘区域的标准位置以判断是否合理驾驶;
在所述启动按钮被按压后发送第一指令;
根据该第一指令控制所述摄像头移至第一角度并开启对驾驶员的脸部进行拍摄;
获取所拍摄的脸部影像,识别该影像中的脸部区域,并从识别的脸部区域中计算出眼睛区域;
计算所述眼睛区域的高度和长度之间的比值,在所述比值小于或等于第一阀值时确定该驾驶员处于非清醒状态,并发送第二指令;
根据该第二指令控制所述摄像头移至第二角度拍摄方向盘位置的第一影像;
获取该第一影像,识别该第一影像中的方向盘区域及手部区域,依据划分依据对所识别的方向盘区域进行划分,并确定该手部区域所在的方向盘区域的位置;
判断所确定的手部区域所占的方向盘区域的位置是否符合设置的标准位置,从而判断该驾驶员当前是否合理驾驶;及
在确定驾驶员并非合理驾驶时发出预警以提示驾驶员注意。
7.如权利要求6所述的驾驶监控方法,其特征在于,所述的划分依据是根据经过方向盘圆心的互相垂直的两条轴线将该方向盘区域划分为左上、左下、右上以及右下四个部分,并且所述的驾驶员左右手分别在方向盘区域的标准位置是左手位于左上位置且右手位于右下位置,或者左手位于左下位置且右手位于右上位置。
8.如权利要求6所述的驾驶监控方法,其特征在于,该方法还包括:
设置一个比例;及
在驾驶员的左手或右手在方向盘区域的一个位置所占的比例超过该设置的比例时,确定该位置即为该左手或右手所在的方向盘区域的位置。
9.如权利要求6所述的驾驶监控方法,其特征在于,所述发出的预警包括通过驾驶监控装置的扬声器发出预警信号或播放预先录制的语音以提示驾驶员注意。
10.如权利要求6所述的驾驶监控方法,其特征在于,该方法还包括:
设置一个时间间隔;
在确定驾驶员并非合理驾驶时启动进行计时;
在计时达到所设置的时间间隔后在第二角度拍摄方向盘位置的第二影像;
获取该第二影像,识别该第二影像中的方向盘区域及手部区域,依据划分依据对所识别的方向盘区域进行划分,并确定该手部区域所在的方向盘区域的位置;
判断所确定的手部区域所占的方向盘区域的位置是否符合设置的标准位置,从而判断该驾驶员当前是否合理驾驶;及
在确定驾驶员并非合理驾驶时切断油门。
CN200910310326.3A 2009-11-24 2009-11-24 驾驶监控装置及方法 Expired - Fee Related CN102069710B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN200910310326.3A CN102069710B (zh) 2009-11-24 2009-11-24 驾驶监控装置及方法
US12/730,236 US8253551B2 (en) 2009-11-24 2010-03-24 Driving monitoring device and method utilizing the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN200910310326.3A CN102069710B (zh) 2009-11-24 2009-11-24 驾驶监控装置及方法

Publications (2)

Publication Number Publication Date
CN102069710A true CN102069710A (zh) 2011-05-25
CN102069710B CN102069710B (zh) 2014-03-26

Family

ID=44028538

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200910310326.3A Expired - Fee Related CN102069710B (zh) 2009-11-24 2009-11-24 驾驶监控装置及方法

Country Status (2)

Country Link
US (1) US8253551B2 (zh)
CN (1) CN102069710B (zh)

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102263937A (zh) * 2011-07-26 2011-11-30 华南理工大学 基于视频检测的驾驶员驾驶行为监控装置及监控方法
CN102390321A (zh) * 2011-10-09 2012-03-28 江苏大学 预防驾驶员长时间单手操纵转向盘的方法及其装置
CN102501764A (zh) * 2011-12-29 2012-06-20 华南理工大学 一种带强制减速装置的防止高速公路疲劳驾驶系统
CN102849108A (zh) * 2012-09-06 2013-01-02 浙江吉利汽车研究院有限公司杭州分公司 一种方向盘正确操控的指示装置和方法
CN102874113A (zh) * 2012-06-18 2013-01-16 浙江吉利汽车研究院有限公司杭州分公司 驾驶员突发疾病后的安全保护系统
CN103253275A (zh) * 2012-02-17 2013-08-21 由田新技股份有限公司 交互式语音提问的驾驶注意力侦测装置及其方法
US8699870B2 (en) 2012-03-29 2014-04-15 Utechzone Co., Ltd. Vehicular eye-controlled device having illumination light source
CN103895652A (zh) * 2012-12-26 2014-07-02 现代自动车株式会社 检测瞌睡驾驶的系统和方法
CN103895512A (zh) * 2012-12-26 2014-07-02 比亚迪股份有限公司 一种行车安全警示方法及其系统
CN105389948A (zh) * 2015-11-11 2016-03-09 上海斐讯数据通信技术有限公司 一种预防司机疲劳驾驶的系统及方法
CN105763739A (zh) * 2016-04-12 2016-07-13 广东欧珀移动通信有限公司 移动终端的使用方法及移动终端
CN106564448A (zh) * 2016-10-28 2017-04-19 芜湖市吉安汽车电子销售有限公司 一种基于Linux系统的驾车习惯检测系统
CN106874831A (zh) * 2016-12-14 2017-06-20 财团法人车辆研究测试中心 驾驶行为侦测方法及其系统
CN107031501A (zh) * 2015-11-05 2017-08-11 大陆汽车系统公司 用于安静车辆的增强声音生成
CN107862296A (zh) * 2017-11-20 2018-03-30 深圳市深视创新科技有限公司 驾驶员行为的监控方法及系统、计算机可读存储介质
CN108200422A (zh) * 2018-02-11 2018-06-22 潍坊歌尔电子有限公司 生成3d图像的方法、设备、单镜头摄像装置及电子设备
CN108215794A (zh) * 2018-01-04 2018-06-29 项卢杨 一种防疲劳驾驶系统及方法
CN108924481A (zh) * 2018-06-21 2018-11-30 殷创科技(上海)有限公司 监控系统及包含监控系统的汽车
CN112706710A (zh) * 2021-01-27 2021-04-27 南京工程学院 一种机动车安全驾驶智能识别及警示系统和方法
CN113119982A (zh) * 2021-04-23 2021-07-16 昆山宝创新能源科技有限公司 操作状态识别与处理方法、装置、设备、介质及程序产品

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10878646B2 (en) 2005-12-08 2020-12-29 Smartdrive Systems, Inc. Vehicle event recorder systems
US20070150138A1 (en) 2005-12-08 2007-06-28 James Plante Memory management in event recording systems
US9201842B2 (en) 2006-03-16 2015-12-01 Smartdrive Systems, Inc. Vehicle event recorder systems and networks having integrated cellular wireless communications systems
US8996240B2 (en) 2006-03-16 2015-03-31 Smartdrive Systems, Inc. Vehicle event recorders with integrated web server
US8649933B2 (en) 2006-11-07 2014-02-11 Smartdrive Systems Inc. Power management systems for automotive video event recorders
US8989959B2 (en) 2006-11-07 2015-03-24 Smartdrive Systems, Inc. Vehicle operator performance history recording, scoring and reporting systems
US8868288B2 (en) 2006-11-09 2014-10-21 Smartdrive Systems, Inc. Vehicle exception event management systems
US8239092B2 (en) 2007-05-08 2012-08-07 Smartdrive Systems Inc. Distributed vehicle event recorder systems having a portable memory data transfer system
US8744642B2 (en) * 2011-09-16 2014-06-03 Lytx, Inc. Driver identification based on face data
CN103019554A (zh) * 2011-09-20 2013-04-03 联想(北京)有限公司 命令识别方法及使用该方法的电子设备
US9728228B2 (en) 2012-08-10 2017-08-08 Smartdrive Systems, Inc. Vehicle event playback apparatus and methods
WO2014057308A2 (en) * 2012-10-10 2014-04-17 Freescale Semiconductor, Inc. Method and apparatus for maintaining alertness of an operator of a manually-operated system
US9103688B2 (en) * 2013-08-21 2015-08-11 Continental Automotive Systems, Inc. Adapting vehicle personality using analyzed driver performance metrics
US9501878B2 (en) 2013-10-16 2016-11-22 Smartdrive Systems, Inc. Vehicle event playback apparatus and methods
US9610955B2 (en) 2013-11-11 2017-04-04 Smartdrive Systems, Inc. Vehicle fuel consumption monitor and feedback systems
JP6213282B2 (ja) * 2014-02-12 2017-10-18 株式会社デンソー 運転支援装置
US8892310B1 (en) 2014-02-21 2014-11-18 Smartdrive Systems, Inc. System and method to detect execution of driving maneuvers
US9663127B2 (en) 2014-10-28 2017-05-30 Smartdrive Systems, Inc. Rail vehicle event detection and recording system
US11069257B2 (en) 2014-11-13 2021-07-20 Smartdrive Systems, Inc. System and method for detecting a vehicle event and generating review criteria
US9679420B2 (en) 2015-04-01 2017-06-13 Smartdrive Systems, Inc. Vehicle event recording system and method
CN108242181A (zh) * 2016-12-27 2018-07-03 中国移动通信有限公司研究院 一种信息预警处理方法及服务器
KR101994439B1 (ko) * 2017-09-12 2019-06-28 엘지전자 주식회사 차량에 구비된 차량 제어 장치 및 차량의 제어방법
CN112339764A (zh) * 2020-11-04 2021-02-09 杨华勇 一种基于大数据的新能源汽车驾驶姿态分析系统

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6553130B1 (en) * 1993-08-11 2003-04-22 Jerome H. Lemelson Motor vehicle warning and control system and method
KR960032262A (ko) * 1995-02-09 1996-09-17 배순훈 차량의 주행 안전 시스템
AU767533B2 (en) * 1999-01-27 2003-11-13 Compumedics Limited Vigilance monitoring system
US6724920B1 (en) * 2000-07-21 2004-04-20 Trw Inc. Application of human facial features recognition to automobile safety
US7027621B1 (en) * 2001-03-15 2006-04-11 Mikos, Ltd. Method and apparatus for operator condition monitoring and assessment
EP1383098B1 (en) * 2002-07-09 2006-05-17 Accenture Global Services GmbH System for automatic traffic sign recognition
US7202793B2 (en) * 2002-10-11 2007-04-10 Attention Technologies, Inc. Apparatus and method of monitoring a subject and providing feedback thereto
US7639148B2 (en) * 2003-06-06 2009-12-29 Volvo Technology Corporation Method and arrangement for controlling vehicular subsystems based on interpreted driver activity
US7510038B2 (en) * 2003-06-11 2009-03-31 Delphi Technologies, Inc. Steering system with lane keeping integration
CN1937763A (zh) * 2005-09-19 2007-03-28 乐金电子(昆山)电脑有限公司 移动通讯终端机的困倦感知装置及其困倦驾驶感知方法
JP4887980B2 (ja) * 2005-11-09 2012-02-29 日産自動車株式会社 車両用運転操作補助装置および車両用運転操作補助装置を備えた車両
JP4930315B2 (ja) * 2007-01-19 2012-05-16 株式会社デンソー 車内情報表示装置およびそれに用いられる光照射装置
JP4332813B2 (ja) * 2007-07-23 2009-09-16 株式会社デンソー 自動車用ユーザーもてなしシステム
US7719431B2 (en) * 2007-10-05 2010-05-18 Gm Global Technology Operations, Inc. Systems, methods and computer products for drowsy driver detection and response
CN101458762A (zh) * 2007-12-10 2009-06-17 鸿富锦精密工业(深圳)有限公司 警示系统及警示方法
CN101574962A (zh) * 2008-05-06 2009-11-11 鸿富锦精密工业(深圳)有限公司 车辆安全系统

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102263937B (zh) * 2011-07-26 2013-07-24 华南理工大学 基于视频检测的驾驶员驾驶行为监控装置及监控方法
CN102263937A (zh) * 2011-07-26 2011-11-30 华南理工大学 基于视频检测的驾驶员驾驶行为监控装置及监控方法
CN102390321A (zh) * 2011-10-09 2012-03-28 江苏大学 预防驾驶员长时间单手操纵转向盘的方法及其装置
CN102501764A (zh) * 2011-12-29 2012-06-20 华南理工大学 一种带强制减速装置的防止高速公路疲劳驾驶系统
CN103253275A (zh) * 2012-02-17 2013-08-21 由田新技股份有限公司 交互式语音提问的驾驶注意力侦测装置及其方法
US8699870B2 (en) 2012-03-29 2014-04-15 Utechzone Co., Ltd. Vehicular eye-controlled device having illumination light source
CN102874113B (zh) * 2012-06-18 2016-12-21 浙江吉利汽车研究院有限公司 驾驶员突发疾病后的安全保护系统
CN102874113A (zh) * 2012-06-18 2013-01-16 浙江吉利汽车研究院有限公司杭州分公司 驾驶员突发疾病后的安全保护系统
CN102849108A (zh) * 2012-09-06 2013-01-02 浙江吉利汽车研究院有限公司杭州分公司 一种方向盘正确操控的指示装置和方法
CN103895652A (zh) * 2012-12-26 2014-07-02 现代自动车株式会社 检测瞌睡驾驶的系统和方法
CN103895512A (zh) * 2012-12-26 2014-07-02 比亚迪股份有限公司 一种行车安全警示方法及其系统
CN107031501A (zh) * 2015-11-05 2017-08-11 大陆汽车系统公司 用于安静车辆的增强声音生成
CN105389948A (zh) * 2015-11-11 2016-03-09 上海斐讯数据通信技术有限公司 一种预防司机疲劳驾驶的系统及方法
CN105763739A (zh) * 2016-04-12 2016-07-13 广东欧珀移动通信有限公司 移动终端的使用方法及移动终端
CN106564448A (zh) * 2016-10-28 2017-04-19 芜湖市吉安汽车电子销售有限公司 一种基于Linux系统的驾车习惯检测系统
CN106874831A (zh) * 2016-12-14 2017-06-20 财团法人车辆研究测试中心 驾驶行为侦测方法及其系统
CN107862296A (zh) * 2017-11-20 2018-03-30 深圳市深视创新科技有限公司 驾驶员行为的监控方法及系统、计算机可读存储介质
CN108215794A (zh) * 2018-01-04 2018-06-29 项卢杨 一种防疲劳驾驶系统及方法
CN108200422A (zh) * 2018-02-11 2018-06-22 潍坊歌尔电子有限公司 生成3d图像的方法、设备、单镜头摄像装置及电子设备
CN108924481A (zh) * 2018-06-21 2018-11-30 殷创科技(上海)有限公司 监控系统及包含监控系统的汽车
CN112706710A (zh) * 2021-01-27 2021-04-27 南京工程学院 一种机动车安全驾驶智能识别及警示系统和方法
CN112706710B (zh) * 2021-01-27 2022-07-22 南京工程学院 一种机动车安全驾驶智能识别及警示系统和方法
CN113119982A (zh) * 2021-04-23 2021-07-16 昆山宝创新能源科技有限公司 操作状态识别与处理方法、装置、设备、介质及程序产品

Also Published As

Publication number Publication date
US8253551B2 (en) 2012-08-28
US20110121960A1 (en) 2011-05-26
CN102069710B (zh) 2014-03-26

Similar Documents

Publication Publication Date Title
CN102069710B (zh) 驾驶监控装置及方法
CN107640152B (zh) 一种车道保持辅助系统的可靠性控制装置及方法
CN113345204B (zh) 一种车载远程疲劳唤醒方法及其唤醒系统
CN106133806B (zh) 信息提示装置及信息提示方法
US6262657B1 (en) Driver alerting system
CN105160913B (zh) 一种规范驾驶人驾驶行为的方法及装置
CN106740862A (zh) 驾驶员状态监控方法及驾驶员状态监控装置
CN106080194A (zh) 防疲劳驾驶的预警方法和系统
CN107635845A (zh) 车辆行驶控制的方法及装置
CN109472253B (zh) 行车安全智能提醒方法、装置、智能方向盘和智能手环
CN209795467U (zh) 一种疲劳驾驶检测系统和车辆
CN108937923A (zh) 一种基于脑电信号、眼电信号和肌电信号的疲劳驾驶监测系统
CN112918489A (zh) 驾车防瞌睡方法、装置、设备及存储介质
CN106781281A (zh) 一种车辆的提示信息生成方法及车载终端
CN108215794A (zh) 一种防疲劳驾驶系统及方法
CN106157537A (zh) 防疲劳驾驶系统
CN109190600A (zh) 一种基于视觉传感器的驾驶员监控系统
CN107585026A (zh) 一种防疲劳驾驶系统
CN109801475A (zh) 疲劳驾驶检测方法、装置及计算机可读存储介质
CN105599607A (zh) 一种基于驾驶员状态的车辆启动装置和方法
CN104376685A (zh) 一种防疲劳驾驶的车辆控制方法
CN110254229A (zh) 一种防酒驾和疲劳驾驶的安全驾驶方法及装置
CN105989328A (zh) 检测人员使用手持装置的方法及装置
CN110077417A (zh) 一种汽车路牌信息获取提示的方法及系统
JPH0793700A (ja) 運転者状態監視装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20140326

Termination date: 20151124