python做神经网络识别车牌_OpenCV进阶之路：神经网络识别车牌字符

1. 关于OpenCV进阶之路

前段时间写过一些关于OpenCV基础知识方面的系列文章，主要内容是面向OpenCV初学者，介绍OpenCV中一些常用的函数的接口和调用方法，相关的内容在OpenCV的手册里都有更详细的解释，当时自己也是边学边写，权当为一种笔记的形式，所以难免有浅尝辄止的感觉，现在回头看来，很多地方描述上都存在不足，以后有时间，我会重新考虑每一篇文章，让成长系列对基础操作的介绍更加详细一些。

OpenCV进阶之路相比于成长系列，不会有太多的基础函数的介绍，相对来说会更偏向于工程实践，通过解决实际问题来说明某些较高级函数的用法和注意事项，主要内容会集中在特征提取、机器学习和目标跟踪几个方向。所以这个系列文章知识点没有先后顺序之分，根据个人平时工作学习中遇到的问题而定。

这篇文章主要介绍OpenCV中神经网络的用法，并通过车牌字符的识别来说明一些参数设置，函数调用顺序等，而关于神经网络的原理在博客机器学习分类里已经详细的讲解与实现了，所以本文中就不多加说明。

2. 车牌字符识别

车牌识别是计算机视觉在实际工程中一个非常成功的应用，虽然现在技术相对来说已经成熟，但是围绕着车牌定位、车牌二值化、车牌字符识别等方向，还是不时的有新的算法出现。通过学习车牌识别来提升自己在图像识别方面的工程经验是非常好的，因为它非常好的说明了计算机视觉的一般过程：

图像$\to$预处理$\to$图像分析$\to$目标提取$\to$目标识别

而整个车牌识别过程实际上相当于包含了两个上述过程：1，是车牌的识别；2，车牌字符的识别。

这篇文章其实主要是想介绍OpenCV中神经网络的用法，而不是介绍车牌识别技术。所以我们主要讨论的内容集中在车牌字符的识别上，关于定位、分割等不多加叙述叙述。

3. 字符特征提取

在深度学习(将特征提取作为训练的一部分)这个概念引入之前，一般在准备分类器进行识别之前都需要进行特征提取。因为一幅图像包含的内容太多，有些信息能区分差异性，而有些信息却代表了共性。所以我们要进行适当的特征提取把它们之间的差异性特征提取出来。

这里面我们计算二种简单的字符特征：梯度分布特征、灰度统计特征。这两个特征只是配合本篇文章来说明神经网络的普遍用法，实际中进行字符识别需要考虑的字符特征远远要比这复杂，还包括相似字特征的选取等，也由于工作上的原因，这一部分并不深入的介绍。

1，首先是梯度分布特征，该特征计算图像水平方向和竖直方向的梯度图像，然后通过给梯度图像分划不同的区域，进行梯度图像每个区域亮度值的统计，以下是算法步骤：

<1>将字符由RGB转化为灰度，然后将图像归一化到16*8。

<2>定义soble水平检测算子：$x\_mask = [-1,0,1;-2,0,2; –1,0,1]$和竖直方向梯度检测算子$y\_mask=x\_mask^T$。

<3>对图像分别用$mask\_x$和$mask\_y$进行图像滤波得到$SobelX$和$SobelY$，下图分别代表原图像、$SobelX$和$SobelY$。

<4>对滤波后的图像，计算图像总的像素和，然后划分4*2的网络，计算每个网格内的像素值的总和。

<5>将每个网络内总灰度值占整个图像的百分比统计在一起写入一个向量，将两个方向各自得到的向量并在一起，组成特征向量。