车牌字符识别LPRNet：License Plate Recognition via Deep Neural Networks

主要内容来源于：https://blog.csdn.net/qq_37053885/article/details/82598916
其后包含实践和理解

参考文献： Zherzdev S , Gruzdev A . LPRNet: License Plate Recognition via Deep Neural Networks[J]. 2018.
pytorch实现：https://github.com/sirius-ai/LPRNet_Pytorch

LPRNet：License Plate Recognition via Deep Neural Networks

SergeyZherzdev
ex−Intel∗
IOTGComputerVisionGroup
sergeyzherzdev@gmail.com

AlexeyGruzdev
Intel
IOTGComputerVisionGroup
alexey.gruzdev@intel.com

摘要

本文提出了基于卷积神经网络的端到端的车牌识别LPRNet，其无需对字符提前进行切割。我们的方法受到了最近取得突破的深度神经网络的启发，该方法在中文车牌上的实时识别准确率可以高达95%，在NVIDIA GeForce GTX1080上的识别速度达每张3ms，Core i7-6700k CPU上的识别速度为每张1.3ms。

LPRNet由轻量级的卷积神经网络组成，所以它可以采用端到端的方法来进行训练。据我们所知，LPRNet是第一个没有采用RNNs的实时车牌识别系统。因此，LPRNet算法可以为LPR创建嵌入式部署的解决方案，即便是在具有较高挑战性的中文车牌识别上。

1 Introduction

车牌自动识别是应用在交通管理、数字安全监控、车辆识别以及大城市的停车管理领域的兼具挑战性以及重要性的任务。由于图片的模糊，光线条件差以及车牌数字的多变性，物理影响（变形），天气条件等因素使得车牌识别的任务变得较为复杂。一个强大的车牌识别系统应该要能够克服环境的多变性并且保证识别的准确率。也就是说，该系统应该要能够使用到自然环境中。

本文解决了车牌识别问题并且介绍了LPRNet算法，采用该方法无需进行字符的预切割以及后续的单个字符的识别工作。在本文中，我们没有考虑车牌检测定位问题，如果有必要定位的话其可以通过LBP级联来完成该部分的任务。

LRPNet基于深度卷积神经网络。最近的研究表明了卷积神经网络在机器视觉领域的有效性以及优越性，包括在图像分类、物体检测以及语义分割领域。然而，将其运行在一个嵌入式的设备上仍然是一个具有挑战性的任务。

LPRNet是有一个极其高校的神经网络，它的每一个单一的前向传播只需要0.34GFLops。而且，我们的模型部署在Core i7-6700k SkyLake CPU上可以进行端到端的训练，且识别具有较高的准确率。此外，LPRNet可以部分的移植到FPGA上，其可是释放CPU在其他部分的流水线上的计算能力。我们的主要贡献可以总结为以下几点：

·LPRNet是一个用于高质量的车牌识别的实时框架，其支持模板以及可变长的独立车牌LPR采用端到端的识别方法，无需进行字符的预切割。

·LPRNet是第一个没有使用RNN的车牌实时识别方法，其可以部署在各种不同的平台上，包括嵌入式设备。

·LPRNet在实际交通监控视频中的应用显示我们的方法具有足够强大的能力去处理疑难问题，例如视角以及相机的扭曲，较差的