实际环境下汽车牌照识别方法的研究与实现
1 设计要求与准备
本次设计是研究生一年级上学期的模式识别课程的课程设计,设计内容是实际环境下汽车牌照识别方法的研究与实现。设计有两个主要要求:完成对实际环境下的汽车牌照部分图像的抽取;对抽取出来的牌照经过相关处理之后,对其上的字符内容进行识别。
基于课程设计的要求,需要进行实际环境下的汽车牌照识别,由于条件限制,不能用类似于学校门口的牌照硬件获取实际环境下的汽车照片,因此自行采集了一些汽车照片,用它们作为设计时的调试材料。
2概述
2.1汽车牌照识别现状
车牌识别技术在实际生产生活中十分常见。在学校或者单位的门口,在停车场门口,经常可以看到摄像头,汽车驶来,系统会自动拍摄汽车的照片,然后将照片中属于汽车牌照的部分
提取出来,然后通过相应的处理手段,识别出车牌,然后送到后台处理系统,或与后台数据库进行比对,以查看该车是否属于合法进入,或者记录下该车的入场时间,等离场时进行计费统计等工作。
此外,在交通中车牌识别的应用也有非常重要的意义,例如电子警察,对于违规车辆自动识别记录,或者在罪犯抓捕时,通过车牌识别锁定相关车辆,然后调集警力等。
通过平时在学校门口或者超市停车场的观察,发现现在的车牌识别系统已经达到了非常成熟的程度,几乎可以在无人值守的情况下保持正常、准确的运转。其中牵扯到一系列的硬件、软件的配合,据观察,有些系统是有后台计算机,整个汽车门禁系统相当于一个终端,连接到后台计算机上,但是大多数应该都是基于单片机的系统,也就是在系统中有单片机,运行着车牌识别程序。
2.2汽车牌照识别用到的技术与准备
在海马m8本次设计中,整个程序都是用Matlab完成,北京现代跑车报价因为之前对Matlab不是很熟悉,因此再设计前学习了Matlab的相关内容。
车牌识别可以使用很多Matlab提供的函数,从而大大减轻对于图像处理等操作所耗费的时间和精力。
在本次设计的条件下,很大一部分工作都是对自行拍摄的照片进行处理,因此用到了很多图形图像处理的技术,由于此前图像方面的基础不足,因此也了解了一些图形图像学方面的知识。
除了图像图像学方面的技术,另一个主要的技术就是字符切割与识别技术。这其中需要用到模式识别课程上的分类思想和知识。我们参考了相关文献,虽然没有将一些比较好的想法全部实现,但是开阔了思路,在以后的工作和学习中遇到相关问题的时候,对问题的处理有一定的帮助。
3 基本原理与设计思路
汽车牌照识别主要可以分为4个步骤:首先是汽车图像获取,然后是汽车牌照区域的确定,
然后锦州二手车网是对车牌区域的处理与字符分割,最后是对分割出来的字符进行识别。大致流程图如图1所示。
否
是
否
是
图1 汽车牌照识别的流程概要
从图1中可以看出,在本次试验要求下,系统的关键组成部分有:(1)汽车牌照区域的确定;(2)汽车牌照字符的切割;(3)切割后字符的识别这三部分。下面是我们对每一重要组成部分的理解。
首先是汽车牌照区域的确定。
我们自行拍摄的照片如图2所示。
图2 自行拍摄的用于试验设计的照片
从这个图片上,很容易想到车牌区域的确定可以按照颜进行。因此一开始我们想到的方法是,获取一张图片之后,从上往下进行扫描,当某一行的蓝像素点的个数大于某个阈值之后,那么这部分就可能是车牌区域。扫描过程中,出蓝像素数量最大的一行,然后从这一行分别向上、向下扫描,不管向上还是向下扫描,如果蓝像素的数量小于某一阈值就停止扫描,这就分别确定了车牌区域的上下边界。然后用同样的方法左右扫描,这样就可以到左右边界,左右边界确定以后,就可以圈定车牌所属的区域了。
但是这种方法对于光照条件较好、没有发生偏,并且少有蓝背景干扰的情况下比较有效,如果有蓝干扰背景,或者车牌区域有偏的情况下,就不是很理想。例如,对于老师给的如图3所示的照片,这种简单的统计像素点就没有效果。
图3 老师提供的汽车图片
因此,我们继续观察图片,在颜统计的方法上提出了两种改进方式:第一种方式是统计蓝像素点之后,再统计同一行(列)上的白像素点个数,如果这一行(列)上的白像素点也达到一个阈值,那么说明这个区域可能是车牌区域。第二种方式是,发现照片中
汽车会有周围的环境有将强的差别,而蓝的干扰区域一般是出现在图片的上、左、右三个方位,因此在扫描的时候,可以不从照片最上面和最左边开始扫描,而是选定某一个地方,这个地方的背景干扰不多,而且不至于把汽车的牌照截出去。我们认为这里其实可以广汽传祺gs5用某些边缘提取或者是物体形态学的相关方法来实现,但是最终没有实现好。
其次是汽车牌照字符的切割。
在设计初期,我们先手动截取了车牌区域的图片进行分析。如图4所示。
图4 汽车牌照的区域
我们分析了这张图片的特点,发现汽车牌照区域的图片结构相对简单,颜构成高速免费时间不复杂,因此可以按照图5所示的步骤进行操作。
图5 汽车牌照字符分割的主要步骤
灰度化利用matlab提供的函数rgb2gray(图片)即可,灰度化之后,图像就变成了一个二维矩阵,这样信息量大大减少,不必要的信息变少,留下的都是车牌识别中需要关心的主要信息。
像图4中所示的图片,灰度化之后也很难进行处理,因此需要进行倾斜校正。倾斜校正的时候利用matlab提供的radon(图片,range);进行,先求一个倾斜角,然后按照倾斜角进行旋转。
然后为了进一步压缩图像的不必要信息,需要对车牌照片进行二值化,也就是将照片中灰度级大于某个阈值的的所有点都置成255,小于某个阈值的所有点都置成1,这样,图片中就只有两种点:纯白和纯黑,这样就可以抓住主要特征进行分析了。
但是在进行二值化处理的时候,遇到了一个问题,就是老师给的照片提出出车牌区域之后,二值化的结果是全黑的。因为我们当时设置的阈值是125,而老师提供的照片光照强度比较暗,因此就导致车牌字符所在的区域的像素值也较低,因此将这一部分也变成了黑。这个问题可以通过matlab提供的函数
level = graythresh(tempLicence);
tempLicence=im2bw(tempLicence,level);
进行处理,第一个函数graythresh的含义是,matlab会通过对图片进行分析,一个合适的阈值,这个阈值能将图片灰度值相对较高和相对较低的点区分开来,避免了全黑或者全白的情况。
得到了如图6所示的二值化图片之后,我们对其进行了分析。
图6 经过处理后的车牌图像
拿到这幅图像之后的下一个要解决的问题就是将其分割成七个小部分,每个小部分对应的是一个汉字、字母或者数字。
在这么做之前,首先要对图片进行分析,发现图片的中央区域是有用的信息,而周围的点都是干扰,应该将它们截取掉。我们将这个图片向Y方向和X方向进行投影,得到了图7、图8所示的两幅图像。
图7 二值图Y轴方向的投影
通过对图7进行分析,我们发现,图片上、下两部分的干扰与车牌之间在投影之后有很大的差别,很明显,它们之间有着明显的断层。我们可以利用它们之间的断层,对车牌的上下干扰部分进行裁剪。我们采用的方法是:首先到图像的中央,然后从中央向两端分别扫描,每一个方向如果遇到第一个值小于阈值,并且下一个值也小于阈值的时候,就认定到了字符与边框干扰的边界,记下这个值,进行切割就可以去除上下边框。
a)切除上下边框之前的投影 b)切除上下边框之后的投影
图9 二值图向X轴方向的投影
然后对图9进行分析,我们发现向X轴方向的投影特征不如Y轴那么明显,干扰部分也出现了与车牌区域很相似的波峰,而且字符与字符之间也存在着间隔,因此不能像切除上下边框那样切除左右边框。
后来我们想,索性不切除左右边框,反正只要我能把字符切割出来就行,左右边框可以丢弃,只要不切到它们,它们就不会像上下边框那样对识别造成影响。我们发现,车牌的圆点是一个可利用的特征。它出现在第三或者第四个位置,而且它的值明显小于左右两个字符的值,因此只要到圆点的位置,就可以以它为参照,向前、向后分别到其他的字符了。
发布评论