作者:王世孚 罗惠铎 黄婷 徐飞儿
来源:《现代信息科技》2020年第18期
摘 要:基于汽車辅助驾驶技术,文章旨在设计出一款能在一定程度上辅助驾驶者“观察”道路情况以及道路发生险情时及时预警的车载汽车辅助驾驶系统。系统采用OpenCV、Y
OLOv3算法以及语义分割模型,依赖开源学习库、程序库通过YOLOv3算法监测模型和语义分割算法完成车道线检测以及人物、车辆等障碍物的检测与识别,通过识别内容作为判断路况依据并做出相应的提示,达到辅助驾驶的目的。
关键词:汽车辅助驾驶;目标检测;YOLOv3;语义分割;车道线检测
中图分类号:TP391.41;U463.6 文献标识码:A 文章编号:2096-4706(2020)18-0013-04
Abstract:Based on the vehicle assisted driving technology,this paper aims to design an on-board vehicle auxiliary driving system which can help the driver to “observe” the road situation and give early warning when the road is in danger. The system uses OpenCV,YOLOv3 algorithm and semantic segmentation model,relies on open source learning library and program library,completes lane line detection and identification of people,vehicles and other obstacles through the monitoring model and semantic segmentation algorithm of YOLOv3 algorithm. The recognition content is used as the basis for judging road conditions and making corresponding prompts to achieve the purpose of a
ssisting driving.
Keywords:automobile assisted driving;target detection;YOLOv3;semantic segmentation;lane line detection
0 引 言
汽车辅助驾驶系统旨在结合传感器技术、视觉识别技术、定位导航技术等多种先进的科学技术,构建一个庞大的汽车驾驶应用,设计出一款能够辅助驾驶者避免发生交通事故的车载汽车辅助驾驶系统。通过摄像头设备采集获取汽车行驶环境图像数据,经过计算机视觉算法与技术对于行车道路的车道线位置和可能出现的障碍物(包括汽车、行人等)做出识别并判断,快速收集图像中的对象信息,判断车辆的位置是否偏离车道以及障碍物的存在并及时地对驾驶者做出预警提醒。
纵观汽车安全配置发展历程,汽车由此前搭配的简单样式配置时代逐渐发展到了复杂的车载辅助系统的时代,驾驶场景也由此前完全靠人为的观察、预判、行为反应到现在汽车能够自动预警甚至自主控制汽车,保护了驾驶者自身乃至其他道路使用者的安全。要实现这一
能力,视觉系统是关键部分。从导航协助到自主化驾驶,必须采用可靠和安全的技术,而视觉处理技术提供了视觉系统应用所需的性能和功能。
汽车视频 基于全球汽车电子市场在未来几年内都将保持着高速增长的预测,桂林电子科技大学组织了由导师教授指导、学生自主研发的创新创业团队,提出并研发汽车辅助驾驶系统。通过整合硬件、软件和算法,结合计算机视觉与主流的检测识别算法YOLOv3,在智能手机上实现辅助驾驶。根据软件工程原型设计的理念,目前已经初步完成了PC端的系统开发,能够做到路况信息的实时采集和分析,现已进入PC端测试阶段。
1 系统技术路线
系统技术路线如图1所示。
先由摄像头组采集信息,接着由摄像头组中的EPS8266模块通过Wi-Fi传输云平台。同时将BOF算法和计算机图像处理构架在云平台中。云平台接收到了摄像头组采集的信息后,使用OpenCV模块读取视频文件,使用YOLOv3算法完成行人、汽车检测模型以获取车辆、行人等坐标框和类别以及置信度,使用语义分割模型来完成车道线检测获取分割掩码图。检测识别的数据发回到用户的手机端APP,由APP为驾驶人进行提醒。
2 汽车辅助驾驶系统设计
系统有四个部分功能构成,具体功能要实现的功能有如下四点:
(1)道路信息采集功能:外置的微型摄像头组合的高清摄像头实时采集车辆附近道路信息,并将信息由ESP8266模块通过Wi-Fi传输云平台。
(2)图像检测识别功能:使用YOLO算法、语义分割等方法,对车道线和障碍物等道路信息进行图像检测识别。由YOLOv3算法的检测模型得到图像中车辆、行人等障碍物的坐标框、类别、置信度;利用语义分割模型得到语义分割掩码图。然后完成在原图像文件上的标注操作,作为可视化结果的复现。
(3)结果可视化功能:PC端使用PyQt5编写的UI界面是用于模拟测试的展示平台,主要由文件、摄像头、检测、控制台输出四个部分组成。文件功能是系统输入环节的操作,可以将本地图像或者视频文件作为道路信息的输入,模拟代替通过现实中摄像头直接获取的图像信息;通过摄像头选项可以对摄像头进行打开关闭操作;检测是对系统输入的图像视频文件进行检测识别操作;控制台输出是展示图像、视频的检测识别结果,并且进行原图像和结果图像进行对比展示,包括同时在图像、视频播放界面显示识别出的车道线、行人等。
(4)预警提示功能:对由图像检测识别算法模块得到的图像信息检测识别结果进行解析判断处理,完成后根据道路情况数据做出相应的提示,主要是常规的汇报道路情况以及特殊情况下的险情规避提示。比如,当检测到前方出车辆行人,系统提醒驾驶员注意车速等。
功能模块设计功能结构图如图2所示。
2.1 道路信息采集模塊设计
道路信息采集模块是通过不同角度的外置微型摄像头组合(模拟测试时选择成品STM32智能小车搭载的高清摄像头)实时采集车辆附近道路信息;存储传送方式方面选择由摄像头中的ESP8266模块通过Wi-Fi传输云平台存储。具体的实现流程如图3所示。
发布评论