MTCNN+CRNN解决车牌识别问题-2

这次到CRNN部分了,CRNN网络很简单,就是CNN+RNN,因为RNN适用于时间序列类型的数据,车牌呢,其实也是有规律的,比如第一位是汉字,后面是字母+汉字;

前一部分通过MTCNN将车牌区域已经定位了,那这部分就需要拿CRNN来对其进行训练,使其能作为一个pipeline处理MTCNN输出的车牌图像;

首先是CNN+RNN的网络,这里使用的网络比较简单,CNN部分使用了浅层网络和BN层,最终输出sequence_length*512维的输出;输出正好可以输入后续的RNN网络,其中RNN网络的序列长度是可变的,根据输入特征的长度而定;

RNN的网络结构中,深度为2层,序列长度根据输入待定,隐层单元数是256,车牌的类别数量是69,所以可以认为是每个时间点的输出为一个69维的向量,对向量做softmax,获得预测的结果;当然,此时预测的结果还是不准确的,也就是CTC中B变换之前的一个序列预测,若要得到最终预测,还需要进行B变换;

序列长度的值和输入图像的宽度是有关联的,所以在使用时候,将MTCNN输入图像的宽度除以4,得到了序列的长度,当然,这个序列长度要考虑B变换前的预测长度,不能太短,太短的话,在进行CTC计算的时候,可能得到的结果还不够车牌号的规定位数。

在训练中,很简单,使用自带函数tf.nn.ctc_loss即可,使用ctcc损失函数进行计算;

通过这样的训练,我们就可以使用模型预测了;

最后,MTCNN+CRNN仅仅是一次小的尝试,目前的结果由于样本的关系,还没做大量的训练,也没做优化,流程整个跑通;后面有时间的话,可以按这个方案,用更多数据训练一下,另外,各个环节再优化一下。

 

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
目标识别是计算机视觉一个重要的研究领域,由此延伸出的车辆型号识别具有重 要的实际应用价值,特别是在当今交通状况复杂的大城市,智能交通系统成为发展趋 势,这离不开对车辆型号进行识别和分类的工作,本文围绕如何利用计算机视觉的方 法进行车辆型号的识别和分类展开了一系列研究: 本文对当前的目标识别和分类的特征和算法做了总结和归纳。分析比较了作为图 像特征描述常见的特征算子,总结归纳了他们的提取方法、特征性能以及相互之间的 关联。另外,介绍了在目标识别工作中常用的分类方法,阐述了他们各自的原理和工作 方法。研究了深度神经网络的理论依据,分析比较了深度神经网络不同的特征学习方 法,以及卷积神经网络的训练方法。分析比较不同特征学习方法的特点选取 k-means 作为本文使用的特征学习方法,利用卷积神经网络结构搭建深度学习模型,进行车辆 车型识别工作。 本文为了测试基于深度学习的车辆型号分类算法的性能在 30 个不同型号共 7158 张图片上进行实验;并在相同数据上利用改进了的 SIFT 特征匹配的算法进行对比实验; 进过实验测试,深度学习方法在进行车型分类的实验中取得 94%的正确率,并在与 SIFT 匹配实验结果对比后进一步证实:深度学习的方法能够应用在车辆型号识别领域
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值