汽车车牌识别系统实现(三)

您所在的位置:网站首页 matlab垂直投影法 汽车车牌识别系统实现(三)

汽车车牌识别系统实现(三)

2024-07-09 10:50| 来源: 网络整理| 查看: 265

车牌矫正 一、前言

汽车车牌识别设备往往都是固定于红绿灯的支架或者是小区、学校入口的一侧来采集获取车牌图像,由于采集图像设备的安装位置不固定以及不同车辆车牌悬挂的高度也不确定等因素,这些外部因素都有可能导致车牌在一定程度上发生倾斜。发生倾斜的车牌如果不进行矫正,将会影响后续的字符划分处理。所以,对车牌进行倾斜矫正处理是字符划分算法得以成功的前提。车牌倾斜主要存在三种情形,分别是水平、垂直和包括水平、垂直倾斜两种情况的混合倾斜。本文所研究的算法中只对水平方向倾斜情况进行校正。本文采用基于透视变换的倾斜校正算法来判断车牌是否需要倾斜校正以及对车牌进行校正操作,整个矫正车牌及划分字符的流程如图3-1所示。 车牌矫正算法步骤

二、基于透视变换的倾斜矫正算法

透视变换的本质是将图像投影到一个新的视平面,也被称为投影映射[4]。透视变换的通用变换公式为式 (3-1): 在这里插入图片描述

其中,(u,v)代表原始图像的坐标,在这里插入图片描述 代表变换矩阵,透视变化后的图像横、纵坐标分别如式 (3-2)和式 (3-3)所示: 在这里插入图片描述

给定原始图像的四个顶点坐标和变换后图像的四个顶点坐标,即可求得变换矩阵。求得变换矩阵后,需要求出倾斜状态下车牌的四个顶点坐标,具体步骤如下:首先定位出车牌位置,判断车牌是否倾斜。车牌倾斜主要有逆时针倾斜和顺时针倾斜的两种情况。本文只说明逆时针倾斜情况。逆、顺时针情况可以简化成如图3-2和图3-3的模型。 在这里插入图片描述 如图3-1所示,根据求得A、E、F、G的坐标(Top_Point、Right_Point、Bottom_Point、Left_Point),在图3-2中,则是根据▲ABC~▲ADE来计算出A、E、F、G点的坐标。本文只说明图3-1中G点的求解步骤如下: 求解G点的横坐标,如式(3-4)所示: 在这里插入图片描述 依据三角形相似原理,写出相似等式,如式(3-5)所示: 在这里插入图片描述 求解得到G的纵坐标值,如式(3-6)所示: 在这里插入图片描述 求解后,原始图像中车牌的4个顶点均已知。根据上文车牌特征分析可知,车牌尺寸为440×140,故变换后的车牌4个顶点依次为(0,140)、(440,0)、(0,0)、 (440,140)。根据变换矩阵与变换前后对应顶点关系,利用透视变换倾斜纠正算法对车牌进行矫正,矫正前后实验结果分别如图3-4和图3-5所示。 在这里插入图片描述

三、跳变次数法去除车牌边框和铆钉

在这里插入图片描述 车牌倾斜矫正之后,车牌边框和用于固定车牌的铆钉会影响字符分割操作的结果,因此,去除车牌边框和铆钉是车牌字符分割算法能否取得成功的关键步骤。本文采用跳变次数法[5][6]去除边框和铆钉。跳变次数法去除边框及铆钉的原理及流程如图3-6。 在这里插入图片描述 由于字符颜色与车牌底色不同,因此车牌区域中存在大量的颜色突变信息,这就为跳变次数法的实施创造了条件。所谓的跳变是指由字符区域过渡到非字符区域或者由非字符区域过渡到字符区域。具体做法是从上至下扫描出二值化后的车牌图像,找到跳变次数超过预先设定阈值的第一行,且之后连续3行跳变次数均超过阈值,则认定该行为车牌字符上边界;同理,从下至上扫描车牌图像,找到突变次数超过预先设定阈值的一行,且之后连续3行突变次数均超过阈值,则该行为车牌字符下边界。在确定车牌上下边界的前提下,接着确定车牌字符的左边界、右边界。因为车牌中可能存在数字1,数字1的跳变次数为2,为了防止滤除掉阿拉伯数字1,设定跳变次数的阈值为2。具体做法是从左至右扫描车牌图像,依次统计每列的跳变次数。找到跳变次数超过阈值的第一行,且之后连续3列跳变次数均超过阈值,则该行为车牌字符左边界;同理,找到车牌字符右边界。去除前后效果分别如图3-8和图3-9所示。 在这里插入图片描述

四、字符细化操作

去除边框及铆钉后,图像上仍有一些残留的噪声点,这些残留的噪声点会对垂直投影法划分字符操作产生不良影响。因此,对去除边框和铆钉后的图像进行形态学腐蚀处理是非常有必要而且是至关重要的,腐蚀处理在去掉车牌字符区域残留噪声的同时,也可以对字符进行细化,形态学腐蚀处理效果如图3-10所示。 在这里插入图片描述

五、垂直投影法分割字符

在这里插入图片描述 去除边框、铆钉,以及对字符进行细化处理后,接下来需要将车牌字符区域划分为单个字符。本文采取基于垂直投影法的字符划分方法[7][8]来划分车牌字符区域,依据车牌特点可知,每个字符之间都存在一定的纯黑区域。二值化后,字符区域为白色,车牌中的非字符区域为黑色。 划分单个字符的原理及具体流程如图3-11所示。首先计算每列中白色像素点个数,垂直投影后得到直方图,如图3-12所示,并以此来判断各个字符的起始位置。然后从左至右扫描投影直方图,找到存在白色像素点的第一列,则认定为该列是车牌第一个字符的左边界。若上一列存在白色像素点,而下一列是不存在白色像素点的黑色区域,则认定该列为第一个字符的右边界,同理,便可分割出其余6个车牌字符左右边界。投影得到的图像如图3-12所示,划分出的单个字符如图3-13所示。 在这里插入图片描述

六、字符图像归一化处理

由于从采集图像中提取出的车牌大小不完全相同,这就导致了划分出来的单个字符的尺寸可能不同,为了能够适应已经训练好的车牌字符识别网络,需要对划分出的单个车牌字符进行归一化处理,使得从采集图像中定位出的车牌在字符分割操作完成后,所获取的车牌单个字符图像大小都为2020像素[2],如图3-11所示。这里至于为什么都归一化为2020像素,是因为我的神经网络的输入都是20*20像素的。 在这里插入图片描述

七、代码实现 ```python for rect in car_contours: rect = (rect[0], (rect[1][0]+20, rect[1][1]+5), rect[2]) box = cv2.boxPoints(rect) #图像矫正 cv2.getAffineTransform(pos1,pos2),其中两个位置就是变换前后的对应位置关系。输出的就是仿射矩阵M,最后这个矩阵会被传给函数 cv2.warpAffine() 来实现仿射变换 if rect[2] > ANGLE: #正角度 new_right_point_x = vertices[0, 0] new_right_point_y = int(vertices[1, 1] - (vertices[0, 0] - vertices[1, 0]) / (vertices[3, 0] - vertices[1, 0]) * (vertices[1, 1] - vertices[3, 1])) new_left_point_x = vertices[1, 0] new_left_point_y = int(vertices[0, 1] + (vertices[0, 0] - vertices[1, 0]) / (vertices[0, 0] - vertices[2, 0]) * (vertices[2, 1] - vertices[0, 1])) point_set_1 = np.float32([[440, 0], [0, 0], [0, 140], [440, 140]]) elif rect[2]


【本文地址】


今日新闻


推荐新闻


CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3