CTC介绍

这篇博客介绍了CTC(Connectionist Temporal Classification)在OCR文字识别中的作用,特别是如何解决输入序列与输出序列不对齐的问题。CTC常用于文本行识别和语音识别,通过LSTM等模型输出序列,并采用特定的B变换处理连续相同字符和空白符。文章还探讨了CTC的条件独立性、单调对齐和多对一映射等性质,以及其局限性。
摘要由CSDN通过智能技术生成

OCR文字识别主要包括2个步骤:
文字检测:解决的问题是哪里有文字,大致的文本行区域
文字识别:对定位好的文字区域进行识别,主要解决的问题是每个文字是什么

文字检测可以使用我之前博客介绍的CTPN模型。

现有的常见的端到端文字识别框架有以下两种:
1.CNN+RNN+CTC
2.CNN+Seq2Seq+Attension机制

CTC

CTC的全称为Connectionist Temporal Classification。CTC主要解决一个问题——输入序列和输出序列对应的问题。比如在OCR识别中,字符数量、大小不同,输出不能和每个字符很好的一一对应。这时CTC的作用就体现出来了。CTC提出一种对不需要对齐的Loss计算方法,用于训练网络,被广泛应用于文本行识别和语音识别中。

CTC简述

以LSTM为例输出为例

定义输入x的时间步为T,每个时间步上的特征维度记作m,表示m维特征。

输出时间步也为T,和输入可以一一对应,每个时间步的输出维度作为n,表示n维输出,实际上是n个概率

假设要对26个英文字符进行识别,考虑到有些位置没有字符,定义一个-作为空白符加入到字符集合L′={a,b,c,…,x,y,z}∪{−}=L∪{−}={a,b,c,…,x,y,z,−},那么对于LSTM而言每个时间步的输出维度n就是27,表示27个字符在这个时间步上输出的概率。

如果根据这些概率进行选取,每个时间步选取一个元素,就可以得到输出序列,其输出空间可以记为L′^T。

定义一个B变换,对LSTM的

  • 0
    点赞
  • 17
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值