CTC loss-初步理解1

CTC(Connectionist Temporal Classification)主要用于解决语音识别和OCR中的序列对齐问题,避免人工严格对齐文本与语音。CTC通过解决不同长度序列匹配的难题,简化了模型训练过程。在CRNN模型中,输出是(T*C)的矩阵,经过解码过程,如遇到重复字符或空格则按规则处理,最终得到预测序列。
摘要由CSDN通过智能技术生成

参考:
https://blog.csdn.net/Left_Think/article/details/76370453
深度实践OCR author:刘树春
先说一下CTC有什么用,先从应用场景下说:CTC最早被设计来解决编解码对不齐的问题。
在传统的语音识别的模型中,我们对语音模型进行训练之前,往往都要将文本与语音进行严格的对齐操作。
在这里插入图片描述
比方说上图这周情况预测得到一个(T,C)的矩阵,但是结果却可能是一个长度为(T1)的序列,T1和T不一定等,这个时候如何对其就很麻烦,全部人工标注就太费事了,而且标的还不一定对,比如下图,要把图像分割开,太费事了,这个时候CTC就上场了
在这里插入图片描述
先说一下CRNN模型输出是什么样的呢;
一般的全连接层输出为1*C的向量,而CRNN输出的是一个(T*C)的矩阵
在这里插入图片描述
该1*C的tensor输出为d,即模型预测结果为d
在这里插入图片描述
该模型输出为daeb

 def decode(self, encode_texts, encode_probs=None
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值