matlab车牌识别课程设计报告模板

Mat lab程序设计任务书分院（系）信息科学与工程专业学生姓名学号设计题目车牌识别系统设计内容及要求：车牌定位系统的目的在于正确获取整个图像中车牌的区域， 并识别出车牌号。通过设计实现车牌识别系统，能够提高学生 分析问题和解决问题的能力，还能培养一定的科研能力。1. 牌照识别系统应包括车辆检测、图像采集、牌照识别等几 部分。2. 当车辆检测部分检测到车辆到达时，触发图像采集单元，采 集当前的视频图像。3. 牌照识别单元对图像进行处理，定位出牌照位置，再将牌 照中的字符分割出来进行识别，然后组成牌照号码输出。进度安排：19周：Matlab环境熟悉与基础知识学习19周：课程设计选题与题目分析20周：程序设计编程实现20周：课程设计验收与答辩指导教师（签字）：年 月 日学院院长（签字）：年 月 日一. 课程设计目的3二. 设计原理3三. 详细设计步骤3四. 设计结果及分析18五. 总结19六. 设计体会20七. 参考文献21目录一、课程设计目的4二、设计原理：4三、详细设计步骤：41.提出总体设计方案:5(1) 牌照定位：5(2) 牌照字符分割：6(3) 牌照字符识别：62.1输入待处理的原始图像:6%Step1获取图像 装入待处理彩色图像并显示原始图像62.2图像的灰度化:72.3对原始图像进行开操作得到图像背景图像:82.4灰度图像与背景图像作减法，对图像进行增强处理:82.5取得最佳阈值，将图像二值化:92.6边缘检测：92.7对得到图像作开操作进行滤波:102.8对二值图像进行区域提取，并计算区域特征参数。进行区域特征参数比较，提取车牌区域:112.9对水平投影进行峰谷分析:132.10计算车牌旋转角度:142.11去水平(上下)边框，获取字符高度:162.12将计算计算获取的字符图像与样本库进行匹配，自动识别出字符代码:19五、总结:21六、设计体会21七、参考文献：22一、课程设计目的车牌定位系统的目的在于正确获取整个图像中车牌的区域，并识别出车牌号。通过 设计实现车牌识别系统，能够提高学生分析问题和解决问题的能力，还能培养一定的科 研能力。二、设计原理：牌照自动识别是一项利用车辆的动态视频或静态图像进行牌照号码、牌照颜色自动 识别的模式识别技术。其硬件基础一般包括触发设备、摄像设备、照明设备、图像采集 设备、识别车牌号码的处理机等，其软件核心包括车牌定位算法、车牌字符分割算法和 光学字符识别算法等。某些牌照识别系统还具有通过视频图像判断车辆驶入视野的功能 称之为视频车辆检测。一个完整的牌照识别系统应包括车辆检测、图像采集、牌照识别 等几部分。当车辆检测部分检测到车辆到达时触发图像采集单元，采集当前的视频图像。 牌照识别单元对图像进行处理，定位出牌照位置，再将牌照中的字符分割出来进行识别， 然后组成牌照号码输出。三、详细设计步骤:京 EG6572 字符识别(OCR)V一665|7-结果输出牌照号码京EG6572 牌照底鱼蓝色图牌照识别系统示意图1.提出总体设计方案:牌照号码、颜色识别为了进行牌照识别，需要以下几个基本的步骤：a. 牌照定位，定位图片中的牌照位置；b. 牌照字符分割，把牌照中的字符分割出来；c. 牌照字符识别，把分割好的字符进行识别，最终组成牌照号码。牌照识别过程中，牌照颜色的识别依据算法不同，可能在上述不同步骤实现，通常 与牌照识别互相配合、互相验证。(1) 牌照定位：自然环境下，汽车图像背景复杂、光照不均匀，如何在自然背景中准确地确定牌照 区域是整个识别过程的关键。首先对采集到的视频图像进行大范围相关搜索，找到符合 汽车牌照特征的若干区域作为候选区，然后对这些侯选区域做进一步分析、评判，最后 选定一个最佳的区域作为牌照区域，并将其从图象中分割出来。流程图：导入原图像预处理增边缘提取对图像开车牌定位始图像强效果图像闭运算(2) 牌照字符分割:完成牌照区域的定位后，再将牌照区域分割成单个字符，然后进行识别。字符分割 一般采用垂直投影法。由于字符在垂直方向上的投影必然在字符间或字符内的间隙处取 得局部最小值的附近，并且这个位置应满足牌照的字符书写格式、字符、尺寸限制和一 些其他条件。利用垂直投影法对复杂环境下的汽车图像中的字符分割有较好的效果。(3) 牌照字符识别：字符识别方法目前主要有基于模板匹配算法和基于人工神经网络算法。基于模板匹配 算法首先将分割后的字符二值化，并将其尺寸大小缩放为字符数据库中模板的大小，然后 与所有的模板进行匹配，最后选最佳匹配作为结果。基于人工神经元网络的算法有两种： 一种是先对待识别字符进行特征提取，然后用所获得特征来训练神经网络分配器；另一 种方法是直接把待处理图像输入网络，由网络自动实现特征提取直至识别出结果。实际 应用中，牌照识别系统的识别率与牌照质量和拍摄质量密切相关。牌照质量会受到各种 因素的影响，如生锈、污损、油漆剥落、字体褪色、牌照被遮挡、牌照倾斜、高亮反光、 多牌照、假牌照等等；实际拍摄过程也会受到环境亮度、拍摄亮度、车辆速度等等因素 的影响。这些影响因素不同程度上降低了牌照识别的识别率，也正是牌照识别系统的困 难和挑战所在。为了提高识别率，除了不断的完善识别算法，还应该想办法克服各种光 照条件，使采集到的图像最利于识别。与数据库的 图片相减分析之差最小的图片是哪张字符依次分析显示误差最小的图片名字2.1输入待处理的原始图像: clear ;close all;%Step1获取图像装入待处理彩色图像并显示原始图像Scolor = imread(3.jpg);%imread 函数读取图像文件图2.1原始图像2.2图像的灰度化:彩色图像包含着大量的颜色信息，不但在存储上开销很大，而且在处理上也会降低 系统的执行速度，因此在对图像进行识别等处理中经常将彩色图像转变为灰度图像，以 加快处理速度。由彩色转换为灰度的过程叫做灰度化处理。选择的标准是经过灰度变换 后，像素的动态范围增加，图像的对比度扩展，使图像变得更加清晰、细腻、容易识别。%将彩色图像转换为黑白并显示Sgray = rgb2gray(Scolor);%rgb2gray 转换成灰度图figure,imshow(Sgray),title(原始黑白图像);图2.2原始黑白图像2.3对原始图像进行开操作得到图像背景图像：s=strel(disk,13);%strei 函数Bgray二imopen(Sgray,s);%打开 sgray s 图像figure,imshow(Bgray);title(背景图像)；输出背景图像穹箫图像图2.3背景图像2.4灰度图像与背景图像作减法，对图像进行增强处理：Egray=imsubtract(Sgray,Bgray);% 两幅图相减figure,imshow(Egray);title(增强黑白图像)；输出黑白图像图2.4黑白图像2.5取得最佳阈值，将图像二值化：二值图像是指整幅图像画面内仅黑、白二值的图像。在实际的车牌处理系统中，进 行图像二值变换的关键是要确定合适的阀值，使得字符与背景能够分割开来，二值变换 的结果图像必须要具备良好的保形性，不丢掉有用的形状信息，不会产生额外的空缺等 等。车牌识别系统要求处理的速度高、成本低、信息量大，采用二值图像进行处理，能 大大地提高处理效率。阈值处理的操作过程是先由用户指定或通过算法生成一个阈值， 如果图像中某中像素的灰度值小于该阈值，则将该像素的灰度值设置为0或255,否则灰 度值设置为255或0。fmax1=double(max(max(Egray);%egray 的最大值并输出双精度型 fmin1=double(min(min(Egray);%egray 的最小值并输出双精度型 level=(fmax1-(fmax1-fmin1)/3)/255;% 获得最佳阈值 bw22=im2bw(Egray,level);%转换图像为二进制图像 bw2=double(bw22);figure,imshow(bw2);title(图像二值化)；得到二值图像图2.5二值图像2.6边缘检测：两个具有不同灰度值的相邻区域之间总存在边缘，边缘就是灰度值不连续的结果， 是图像分割、纹理特征提取和形状特征提取等图像分析的基础。为了对有意义的边缘点 进行分类，与这个点相联系的灰度级必须比在这一点的背景上变换更有效，我们通过门 限方法来决定一个值是否有效。所以，如果一个点的二维一阶导数比指定的门限大，我 们就定义图像中的次点是一个边缘点，一组这样的依据事先定好的连接准则相连的边缘 点就定义为一条边缘。经过一阶的导数的边缘检测，所求的一阶导数高于某个阈值，则 确定该点为边缘点，这样会导致检测的边缘点太多。可以通过求梯度局部最大值对应的 点，并认定为边缘点，去除非局部最大值，可以检测出精确的边缘。一阶导数的局部最 大值对应二阶导数的零交叉点，这样通过找图像强度的二阶导数的零交叉点就能找到精 确边缘点。grd二edge(bw2,canny)%用canny算子识别强度图像中的边界 figure,imshow(grd);title(图像边缘提取)；输出图像边缘图偶注提职图2.6像边缘提取2.7对得到图像作开操作进行滤波:数学形态非线性滤波，可以用于抑制噪声，进行特征提取、边缘检测、图像分割等 图像处理问题。腐蚀是一种消除边界点的过程，结果是使目标缩小，孔洞增大，因而可 有效的消除孤立噪声点；膨胀是将与目标物体接触的所有背景点合并到物体中的过程， 结果是使目标增大，孔洞缩小，可填补目标物体中的空洞，形成连通域。先腐蚀后膨胀 的过程称为开运算，它具有消除细小物体，并在纤细处分离物体和平滑较大物体边界的 作用；先膨胀后腐蚀的过程称为闭运算，具有填充物体内细小空洞，连接邻近物体和平 滑边界的作用。对图像做了开运算和闭运算，闭运算可以使图像的轮廓线更为光滑，它 通常用来消掉狭窄的间断和长细的鸿沟，消除小的孔洞，并弥补轮廓线中的断裂。 bg1二imclose(grd,strel(rectangle,5,19);% 取矩形框的闭运算 figure,imshow(bg1);title(图像闭运算5,19);%输出闭运算的图像bg3二imopen(bg1,strel(rectangle,5,19);% 取矩形框的开运算 figure,imshow(bg3);title(图像开运算5,19);%输出开运算的图像 bg2二imopen(bg3,strel(rectangle,19,1);% 取矩形框的开运算 figure,imshow(bg2);title(图像开运算19,1);%输出开运算的图像图2.7.1闭运算的图像图2.7.2开运算的图像图2.7.3开运算的图像2.8对二值图像进行区域提取，并计算区域特征参数。进行区域特征参数比较，提取车 牌区域：a.对图像每个区域进行标记，然后计算每个区域的图像特征参数：区域中心位置、最小 包含矩形、面积。L,num = bwlabel(bg2,8);%标注二进制图像中已连接的部分Feastats = imfeature(L,basic);%计算图像区域的特征尺寸Area=Feastats.Area;% 区域面积BoundingBox=Feastats.BoundingBox;%x y width height车牌的框架大小RGB = label2rgb(L, spring, k, shuffle); %标志图像向 RGB 图像转换 figure,imshow(RGB);title(图像彩色标记)；输出框架的彩色图像程序流程图军曲在借手圈车牌二值于国raw图2.8. 1彩色图像b.计算出包含所标记的区域的最小宽和高，并根据先验知识，比较谁的宽高比更接近实 际车牌宽高比，将更接近的提取并显示出来。图2.8.2灰度子图和二值子图2.9对水平投影进行峰谷分析:对水平投影进行峰谷分析，计算出车牌上边框、车牌字符投影、车牌下边框的波形峰 上升点、峰下降点、峰宽、谷宽、峰间距离、峰中心位置参数。histcol1=sum(sbw1);%计算垂直投影histrow二sum(sbw1);%计算水平投影figure,subplot(2,1,1),bar(histcol1);title(垂直投影(含边框)；输出垂直投影 subplot(2,1,2),bar(histrow);title(水平投影(含边框)； 输出水平投影图2.9.1垂直投影和水平投影figure,subplot(2,1,1),bar(histrow); title(水平投影(含边框)； 输出水平投影subplot(2,1,2),imshow(sbw1);title(车牌二值子图)；输出二值图对水平投影进行峰谷分析：车牌二值于图图2.9.2水平投影和二值图求水平投影的平均值程序流程图2.10计算车牌旋转角度：a. 车牌倾斜的原因导致投影效果峰股谷不明显，在这里需要做车牌矫正处理。这里采取 的线性拟合的方法，计算出车牌上边或下边图像值为1的点拟合直线与水平乂轴的夹角。标示出图像大小程序流程图(2) 线性拟合，计算与x夹角fresult = fit(xdata,ydata,poly1); %poly1 表示一介拟合Y = p1*x+p2p1=fresult.p1;angle二atan(fresult.p1)*180/pi; %孤度换为度，360/2pi, pi=3.14(3) 旋转车牌图象subcol = imrotate(subcol1,angle,bilinear,crop); %旋转车牌图象sbw = imrotate(sbw1,angle,bilinear,crop);% 旋转图像figure,subplot(2,1,1),imshow(subcol);title(车牌灰度子图)；输出车牌旋转后的 灰度图像标题显示车牌灰度子图subplot(2,1,2),imshow(sbw);title();% 输出车牌旋转后的灰度图像title(车牌旋转角：，num2str(angle),度,Color,r);%显示车牌的旋转角度图2.10.1旋转后的灰度图像和旋转角度b. 旋转车牌后重新计算车牌水平投影，去掉车牌水平边框，获取字符高度: histcoll二sum(sbw); %计算垂直投影 histrow二sum(sbw); %计算水平投影 figure,subplot(2,1,1),bar(histcol1);title(垂直投影(旋转后)； subplot(2,1,2),bar(histrow);title(水平投影(旋转后)；0510152035303540 as图2.10.2垂直投影(旋转后)和水平投影(旋转后)figure,subplot(2,1,1),bar(histrow); title(水平投影(旋转后);subplot(2,1,2),imshow(sbw);title(车牌二值子图(旋转后)；图2.10.3水平投影(旋转后)和车牌二值子图(旋转后)2.11去水平(上下)边框，获取字符高度：a.通过以上水平投影、垂直投影分析计算，获得了车牌字符高度、字符顶行与尾行、字 符宽度、每个字符的中心位置，为提取分割字符具备了条件。maxhight二max(markrow2);findc=find(markrow2=maxhight);rowtop=markrow(findc);rowbot=markrow(findc+1)-markrow1(findc+1);sbw2=sbw(rowtop:rowbot,:); %子图为(rowbot-rowtop+1)彳亍maxhight二rowbot-rowtop+1;%字符高度(rowbot-rowtop+1)b.计算车牌垂直投影，去掉车牌垂直边框，获取车牌及字符平均宽度histcol=sum(sbw2); %计算垂直投影figure,subplot(2,1,1),bar(histcol);title(垂直投影(去水平边框后)；输出车 牌的垂直投影图像subplot(2,1,2),imshow(sbw2); %输出垂直投影图像title(车牌字符高度：,int2str(maxhight),Color,r);%输出车牌字符高度%对垂直投影进行峰谷分析车牌字蓿高度：22!8325图2.11垂直投影图像和车牌字符高度程序流程图c. 计算车牌上每个字符中心位置，计算最大字符宽度maxwidthl=0;for k=1:n1markcol3(k)=markcol(k+1)-markcol1(k+1);% 字符下降点markcol4(k)=markcol3(k)-markcol(k); %字符宽度(上升点至下降点)markcol5(k)=markcol3(k)-double(uint16(markcol4(k)/2);% 字符中心位置endmarkcol6=diff(markcol5); %字符中心距离(字符中心点至下一个字符中心点) maxs=max(markcol6); %查找最大值，即为第二字符与第三字符中心距离 findmax二find(markcol6=maxs);markcol6(findmax)=0;maxwidth二max(markcol6);%查找最大值，即为最大字符宽度d. 提取分割字符，并变换为22行*14列标准子图l=1;m2,n2=size(subcol);figure;for k=findmax-1:findmax+5cleft二markcol5(k)-maxwidth/2;cright二markcol5(k)+maxwidth/2-2;if cleftn2cright=n2;cleft=n2-maxwidth;endSegGray二sbw(rowtop:rowbot,cleft:cright);SegBw1=sbw(rowtop:rowbot,cleft:cright);SegBw2 = imresize(SegBw1,22 14); %变换为 22 行*14 列标准子图 subplot(2,n1,l),imshow(SegGray);if l=7title(车牌字符宽度：，int2str(maxwidth),Color,r);endsubplot(2,n1,n1+l),imshow(SegBw2);fname=strcat(F:MATLABworksamimage,int2str(k),.jpg);% 保存 子 图备选入样本库，并建立样本库imwrite(SegBw2,fname,jpg)l=l+1;end2.12将计算计算获取的字符图像与样本库进行匹配，自动识别出字符代码:进行车牌识别前需要使用样本对神经网络进行训练，然后使用训练好的网络对车牌 进行识别。其具体流程为:使用汉字、字母、字母数字、数字四个样本分别对四个子网络 进行训练，得到相应的节点数和权值。对已经定位好的车牌进行图像预处理，逐个的特 征提取，然后从相应的文件中读取相应的节点数和权值，把车牌字符分别送入相应的网 络进行识别，输出识别结果。程序流程图革牌字符宽度：甘日口 B 屈氐识别苇牌号码A9B325日M旧甚国盾恩图2.12识别的车牌号码原始图像:预处理后:车牌定位和提取:字符的分割和识别:四、设计结果及分析可以看出对于这个车牌，可以准确的识别。预处理:原始图像:车牌字符宽度；14识别车牌号码A93325匣煽二值化-部:F g。 !；F6K9808i字符的分割和识别:车牌的定位和提取:车牌字待宽度：19国5K9808!诅册车牌号码.铲E A9&冏 III SI从上面结果可以看出，这张车牌的识别失败了，将G误识别为B 了，K误识为A，0 识别为8,这在识别中是非常容易出错的地方，因此需要在其他方面做些弥补，最后达到 识别效果。在车牌识别的过程中数字库的建立很重要，只有数字库的准确才能保证检测出来的 数据正确。切割出来的数据要与数据库的数据作比较，所以数据库的数据尤为重要。五、总结：实验对车牌识别系统的软件部分进行了研究，分别从图像预处理、车牌定位、字符 分割以及字符识别等方面进行了系统的分析。整理和总结了国内外在车牌定位、分割、 字符识别方面的研究成果和发展方向，系统介绍了我国车牌的固有特征，以及车牌识别 的特点。在车牌定位我们采用基于灰度跳变的定位方法，采用先对图像进行预处理，再 进行二值化操作的方法。实验表明本方法既保留了车牌区域的信息，又减少了噪声的十 扰，从而简化了二值化处理过程，提高了后续处理的速度。基于彩色分量的定位方法， 运用基于蓝色象素点统计特性的方法对车牌是蓝色的车牌进行定位，实验表明，用该方 法实现的车牌定位准确率较高。本设计用MATLAB编程运行结果可以得出，本设计采用的 图像预处理、CANNY边缘检测、开闭运算子5, 19、车牌长宽比特征识别等对车牌的定 位都是非常有效的，而本设计提出的二次水平投影分析和阈值技术有效检测了车牌图像 的上下左右边框、旋转角度，准确实现的车牌字符的分割，对多个车牌进行实验，均有 很高的正确率。本设计虽然只对蓝底白字车牌进行分割识别，对黑底白字车牌原则上整 个算法可直接适用，对白底黑字车牌、黄底黑字车牌，需要对车牌定位算法进行调整， 并将图像反转（0变1、1变0），而车牌字符的分割算法仍然行之有效。六、设计体会经过几周的奋战我的课程设计终于完成了。课程设计不仅是对前面所学知识的一种 检验，而且也是对自己能力的一种提高。以前老是觉得自己什么东西都不会，什么东西 都不懂，而且又急于求成，结果造成什么都没学好，还是什么都不会。通过这次课程设 计，我才明白学习是一个长期积累的过程，在以后的工作、生活中都应该不断的学习， 努力提高自己知识和综合素质，特别是对于我，基础比较差，一定不能太过于心急，要 静下心来慢慢的研究。在这次课程设计中也使我们的同学关系更进一步了，同学之间互 相帮助，有什么不懂的大家在一起商量，听听不同的看法对我们更好的理解知识，所以 在这里非常感谢帮助我的同学，我也明白学习不是埋头苦读书，而是合理的利用资源， 从同学那里，老师那里得到的有用的想法和信息，特别是网上有很多很好的资料，对自 己的自学能力也是很好的提高。我的心得也就这么多了，总之，不管学会的还是学不会 的的确觉得困难比较多，真是万事开头难，不知道如何入手。最后终于做完了有种如释 重负的感觉。此外，还得出一个结论：知识必须通过应用才能实现其价值！有些东西以 为学会了，但真正到用的时候才发现是两回事，所以我认为只有到真正会用的时候才是 真的学会了。也不能因为做出来就以为自己什么都懂了，在很多的地方还需要进一步的 去学习和研究，就想这个课程设计虽然能实现车牌识别的功能，但是识别率还是还是非 常低的，只是在理论上能行得通，根本不可能运用到商业上，因此在接下来的工作中， 应该去找更好的方法来提高识别率。以前对MATLAB也是仅局限在数学实验上学的那些知 识，但是通过此次的课程设计，才了解到MATLAB在图形图像处理方面的强大功能，这些 事C/C+不能所及的。在此要感谢我们的指导老师叶老师对我们悉心的指导，感谢老师给 我们的帮助，以前我是不相信我能做出来的，是您的鼓励让我重新找到自信。在设计过 程中，我通过查阅大量有关资料，与同学交流经验和自学，并向老师请教等方式，使自 己学到了不少知识，也经历了不少艰辛，但收获同样巨大。在整个设计中我懂得了许多 东西，也培养了我独立工作的能力，树立了对自己工作能力的信心，相信会对今后的学 习工作生活有非常重要的影响。而且大大提高了动手的能力，使我充分体会到了在创造 过程中探索的艰难和成功时的喜悦。虽然这个设计做的也不太好，但是在设计过程中所 学到的东西是这次课程设计的最大收获和财富，使我终身受益。七、参考文献:1 陈桂明、张明照、戚红雨.应用MATLAB语言处理数字信号与数字图像。科学出版社， 20002 霍宏涛.数字图像处理.机械工业出版社，2003.53 郁梅等，基于视觉的车辆牌照检测，计算机应用研究，1999(5),P65674 叶晨洲，廖金周，一种基于纹理的牌照图象二值化方法，微型电脑应用，1999(6)， P28295 周妮娜、王敏、黄心汉、吕雪峰、万国红.车牌字符识别的预处理算法.计算机工程 与应用，2003(15)6 杨万山等，基于BP神经网络的工程图纸图形符号的识别，微型电脑应用，Vol.16, No.2，20007 王年、李婕、任彬、汪炳权.多层次汽车车牌照定位分割方法.安徽大学学报，1999(6)Vol.23.No.28 崔 江、王友仁.车牌自动识别方法中的关键技术研究.计算机测量与控制， 2003.11(4)9 许志影、李晋平.MATLAB极其在图像处理中的应用.计算机与现代化，2004(4)