您现在的位置: 通信界 >> 工业自动化 >> 技术正文  
 
基于3G视频的驾驶员疲劳状态检测方法
[ 通信界 / 佚名 / www.cntxj.net / 2012/3/25 10:58:29 ]
 

摘要:疲劳驾驶已成为交通事故发生的主要原因之一。文中提出了一种基于3G视频的人眼疲劳检测方法。通过DirectShow技术对视频流抓取视频帧,采用肤色聚性特征进行人脸定位,基于灰度信息进行人眼定位与追踪,并采用Perclos方法进行疲劳判断。通过此方法,可以及时了解驾驶者的疲劳状态,有效预防疲劳驾驶。

疲劳驾驶是司机在驾车过程中介于意识清醒和进人睡眠的一种非正常状态,是导致交通事故的主要原因之一。由于车辆流动性强、任务区域广、安全隐患多、风险责任大,并缺乏科学有效的监管手段,近年来疲劳驾驶所造成的车辆事故时有发生。通过3G视频监控系统对驾驶员面部状态的实时监控,一旦发现驾驶员眼睛疲劳状态立即进行报警,能有效减少驾驶员疲劳所造成的交通事故,解决车辆管理中“看不见、听不着、控不了”的难题。

基于3C视频的疲劳检测主要包括视频流解压抓帧、人脸定位、人眼定位追踪和疲劳判断4个部分。文中提出一种基于肤色检测及灰度信息的疲劳检测算法,能有效用于3G车辆视频监控系统。

1 视频采集及预处理

文中使用车辆内部的3G视频监控装置来进行视频采集,位于驾驶员头顶正面上方,拍摄在驾驶过程中多种光照环境下、不同姿势和精神状态的驾驶员视频。

视频预处理主要采用DirectShow技术进行视频流解压抓帧。利用DirectShow的媒体监测器对象(Media Detector Object),将拍摄到的驾驶员视频文件进行视频流解压缩,实时在线地从视频流中提取指定的帧视频图像,并为后续的驾驶员眼睛状态检测提供位图数据。

媒体监测器不仅能获取媒体源文件的格式信息,也可以通过捕获过滤器从一个媒体文件的视频流中捕获一幅位图图像,通常获得的位图是24位RGB格式。通过搜索媒体文件,媒体监测器可以获得这个文件中任意点的图像。应用程序通过调用IMediaDet接口与Media Detector进行交互。接口包含了一些方法能够从媒体源文件中提取重要信息,比如媒体类型、帧速率甚至是视频流的单个帧。媒体监测器将过滤器视图封装到对象中,从而使应用程序屏蔽掉与视图相关的一些细节。

在疲劳检测中,用得到的第一幅图像检测人脸和眼睛,如若失败则从下一幅图像检测直至成功,并将得到的眼睛图像作为动态模板对以后的序列进行眼睛追踪,若失败则重新定位人眼。

2 基于肤色检测的人脸定位

肤色是人脸最为显著特征之一,对于彩色图像,肤色是图像中相对集中、稳定区域。肤色信息可将人脸和背景区域分开。研究表明,在除去亮度的色度空间中,不同人脸肤色分布具有聚类性。所以肤色的差异主要取决于色彩信息,而非亮度信息。基于肤色检测方法利用人的肤色中Cr和Cb的聚类特性,在YCbCr色彩空间中检测图像中是否存在人脸。这种算法检测速度快,并且受人脸旋转或侧转的影响较小。

肤色分割可以采用的色彩空间有很多种。其中YCbCr色彩空间具有与人类视觉感知过程类似的构成机理,能很好地反映肤色分布,并反映出肤色聚类特性。YCbCr模型与RGB模型的变换公式如下

通过对人脸数据库中和人脸视频图像中黄种人人脸肤色点的采样进行分析,可得到实验环境下肤色在YCbCr空间中的聚类,用数学表达式确定肤色范围的方法进行肤色建模。可根据Chai采用YCbCr颜色空间的CbCr平面,如果某像素点的颜色落入Cr=[133:173]和Cb=[77:127]范围内,就认为是属于肤色像素,否则就认为是非肤色像素。确定为肤色区域后,将其认定的肤色区域的R、G、B值均设定为255,在图像中显示为白色;非肤色区域设y=R=G=B=0,即在图像中显示为黑色。随后对得到的图像采用自适应阈值二值化。

式中,g(t)为灰度值为t的像素个数;G为非零像素个数。最后利用投影技术及头部的特点确定人脸上下和左右边界。由于眼部处于人脸上半部分,故只需保留图像的3/5。

3 基于灰度信息的人眼定位

眼睛区域与周围区域相比,具有灰度值较低且灰度变化率较大的特点。因此可基于眼睛图像的灰度信息进行定位。

3.1 眼睛粗略定位

准确定位人脸后,根据面部器官分布,人眼在脸部的上半部,可以很简单的确定一个大概区域。观察人脸图片,发现眼部在水平方向经过皮肤、左眼眼白、左眼瞳孔、左眼眼白、皮肤、右眼眼白、右眼瞳孔、右眼眼白、皮肤、灰度变化较大。在灰度变化突变处进行微分,将产生高值,将其绝对值累加,则灰度变化越大的那一行,累积值越大。计算公式如下

f(x,y)为得到的人脸区域的灰度图像,通过实验发现,在眼睛处导数变化值之和的绝对值最大,通过此方法可粗略判断人眼所在线的位置。

3.2 人眼精确定位

通过观察发现眼睛周围Cb值较高,而Cr值较低,因此由式(5)计算得到特征图,以突出眼部特征。

其中,EyeMap是眼睛特征图,都归一化到[0,255]之间,是由Cr求反得到(255,Cr)。在得到EyeMap图后,设定阀值T,将EyeMap小于T的值设为0,这一步可视为一个简单的滤波以去掉非眼部特征的干扰。

得到EyeMap滤波图后,结合人眼粗定位结果,从左到右搜索,按比例定义相对于人脸区域一定大小的框,当框进EyeMap滤波图值的和最大时,即为人眼。

3.3 眼睛的追踪

对人眼完成定位后,还要利用动态模板匹配的方法跟踪眼睛。设眼睛模板左上角的位置为(x,y),下一帧的搜索范围是原位置上沿上、下、左、右4个方向各扩展10个像素。其公式为

式中,N是模板中像索的个数;M为模板;I为图像中待匹配的部分。

可得所有大于阈值p的最大值所对应的坐标为最匹配的位置。以此得到的眼睛图像作为下一帧图像的模板。在追踪的过程中,若得到的p均小于阈值或两眼的行距过大则重新回到眼睛的检测过程。

4 基于Perclos的疲劳识别

文中的疲劳识别基于Perclos的P80模型,即将闭合程度大于80%的眼睛状态判断为闭合状态。以初始时刻司机清醒时的上下眼睑最大距离为标准,若以后得到的距离小于此距离的80%则判断为闭合。假设实验视频帧率10f·s-1分辨率为640×480,时长60s。

则以每6s视频作为1个检测单元,间隔0.33s取1帧作眼睛状态检测。统计每个检测单元内18帧图像的状态,得到眼睛闭合帧数CloseFr ame_Num和处理的总帧数SumFrame_Num,依据式(7)计算相应的Perclos值。

如果所得Perclos值大于实验确定的阈值20%,则判断此时驾驶员可能已处于疲劳状态,通过报警系统进行警告。

5 结束语

视频监控能对驾驶者进行监督提醒,有效预防疲劳驾驶,减少疲劳驾驶所引起的车辆事故。3G视频监控是车辆监控发展的新趋势。算法在3G监控视频帧的基础上,进行了人脸定位、人眼定位与追踪及疲劳状态判断。实验表明,该算法有较高的鲁棒性及准确性,并能有效应用于实际。

 

作者:佚名 合作媒体:不详 编辑:顾北

 

 

 
 热点技术
普通技术 “5G”,真的来了!牛在哪里?
普通技术 5G,是伪命题吗?
普通技术 云视频会议关键技术浅析
普通技术 运营商语音能力开放集中管理方案分析
普通技术 5G网络商用需要“无忧”心
普通技术 面向5G应运而生的边缘计算
普通技术 简析5G时代四大关键趋势
普通技术 国家网信办就《数据安全管理办法》公开征求意见
普通技术 《车联网(智能网联汽车)直连通信使用5905-5925MHz频段管理规定(
普通技术 中兴通讯混合云解决方案,满足5G多元业务需求
普通技术 大规模MIMO将带来更多无线信道,但也使无线信道易受攻击
普通技术 蜂窝车联网的标准及关键技术及网络架构的研究
普通技术 4G与5G融合组网及互操作技术研究
普通技术 5G中CU-DU架构、设备实现及应用探讨
普通技术 无源光网络承载5G前传信号可行性的研究概述
普通技术 面向5G中传和回传网络承载解决方案
普通技术 数据中心布线系统可靠性探讨
普通技术 家庭互联网终端价值研究
普通技术 鎏信科技CEO刘舟:从连接层构建IoT云生态,聚焦CMP是关键
普通技术 SCEF引入需求分析及部署应用
  版权与免责声明: ① 凡本网注明“合作媒体:通信界”的所有作品,版权均属于通信界,未经本网授权不得转载、摘编或利用其它方式使用。已经本网授权使用作品的,应在授权范围内使用,并注明“来源:通信界”。违反上述声明者,本网将追究其相关法律责任。 ② 凡本网注明“合作媒体:XXX(非通信界)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责。 ③ 如因作品内容、版权和其它问题需要同本网联系的,请在一月内进行。
通信视界
华为余承东:Mate30总体销量将会超过两千万部
赵随意:媒体融合需积极求变
普通对话 苗圩:建设新一代信息基础设施 加快制造业数字
普通对话 华为余承东:Mate30总体销量将会超过两千万部
普通对话 赵随意:媒体融合需积极求变
普通对话 韦乐平:5G给光纤、光模块、WDM光器件带来新机
普通对话 安筱鹏:工业互联网——通向知识分工2.0之路
普通对话 库克:苹果不是垄断者
普通对话 华为何刚:挑战越大,成就越大
普通对话 华为董事长梁华:尽管遇到外部压力,5G在商业
普通对话 网易董事局主席丁磊:中国正在引领全球消费趋
普通对话 李彦宏:无人乘用车时代即将到来 智能交通前景
普通对话 中国联通研究院院长张云勇:双轮驱动下,工业
普通对话 “段子手”杨元庆:人工智能金句频出,他能否
普通对话 高通任命克里斯蒂安诺·阿蒙为公司总裁
普通对话 保利威视谢晓昉:深耕视频技术 助力在线教育
普通对话 九州云副总裁李开:帮助客户构建自己的云平台
通信前瞻
杨元庆:中国制造高质量发展的未来是智能制造
对话亚信科技CTO欧阳晔博士:甘为桥梁,携"电
普通对话 杨元庆:中国制造高质量发展的未来是智能制造
普通对话 对话亚信科技CTO欧阳晔博士:甘为桥梁,携"电
普通对话 对话倪光南:“中国芯”突围要发挥综合优势
普通对话 黄宇红:5G给运营商带来新价值
普通对话 雷军:小米所有OLED屏幕手机均已支持息屏显示
普通对话 马云:我挑战失败心服口服,他们才是双11背后
普通对话 2018年大数据产业发展试点示范项目名单出炉 2
普通对话 陈志刚:提速又降费,中国移动的两面精彩
普通对话 专访华为终端何刚:第三代nova已成为争夺全球
普通对话 中国普天陶雄强:物联网等新经济是最大机遇
普通对话 人人车李健:今年发力金融 拓展汽车后市场
普通对话 华为万飚:三代出贵族,PC产品已走在正确道路
普通对话 共享退潮单车入冬 智享单车却走向盈利
普通对话 Achronix发布新品单元块 推动eFPGA升级
普通对话 金柚网COO邱燕:天吴系统2.0真正形成了社保管