on-the-fly 动态解码

最新推荐文章于 2023-10-23 20:05:15 发布
最新推荐文章于 2023-10-23 20:05:15 发布
阅读量1.3k 收藏 2
点赞数 1
分类专栏： ASR
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/libeicuo8108/article/details/90315915
版权

1.静态解码：

composition

determinization

minimization

2. 语言模型重评估：

文章《电话交谈语音识别中基于LSTM-DNN语言模型的重评估方法研究》

声学模型只能识别语音信号中音素、音节、或者词的相似程度，但不能捕捉到词与词之间的相关性。

语言模型则可以利用不同的上下文关系，或者其他语言学信息来预测每一个词可能发生的概率。可以解决声学模型混淆度的问题。

     语言模型 重评估通过用复杂的模型对一遍解码的N候选lattice进行重新打分，然后根据新的分数进行排序，选取最优输出识别结果。

复杂的语言模型可以使用LSTM-DNN模型训练，对历史信息具有良好的记忆能力。

3. 动态解码：

        Look-Ahead Composition，On-the-fly Rescoring

论文《Efficient WFST-Based One-Pass Decoding With On-The-Fly Hypothesis Rescoring in Extremely Large Vocabulary Continuous Speech Recognition》解读

 

on-the-fly composition 使用 sub-WFST避免

 

 

翁卓
关注
  • 1
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Dynamic Decoders with On-the-fly WFST Operations（动态解码器与动态WFST操作）
weixin_43587572的博客
02-02 412
前言 导师让搞语音识别的后端处理技术，就是关于解码方面的，但是现在很迷茫，就打算从最基本的动态解码处理开始，由于静态解码好多博主都已经写过了，由自己开始读关于动态解码部分，所以开始自己记录自己学习的过程，希望能够坚持下来。 首先来说明WFST静态解码相比于传统的方法有哪些问题， 一是识别网络内存消耗大，识别网络通常是WFST形式的大型静态网络。 另一个是组合和优化的WFST的在线操作的计算成本。换句话说，当我们修改一个知识源时，即使是一个小的修改，例如在词汇表中增加一个新单词，我们也必须重构整个识别网
Kaldi的简单介绍和基本使用说明
热门推荐
DL_62532的专栏
12-03 1万+
Kaldi作为目前最流行的ASR开源项目之一，已被广泛研究和使用。 自从2019年Daniel Povey加入小米，小米和Kaldi相互成就，大大推动了Kaldi的发展，使Kaldi保持了持续、强劲的生命力。 Kaldi使用了最自由的授权协议，任何人都可以自由修改和使用（包括商用），大家不妨也来用用。 本文大概讲了语音识别的原理和过程，对kaldi的安装、训练和部署在线语音识别服务的一整套使用过程作了大概说明， 可以作为初学者的入门资料来参考。非常欢迎大家来共同交流，不足之处还望批评指正。
[filemgmt 56-199] Attempt to get parsing info during refresh. "On-the-fly" syntax checking informati
wallent55555的博客
07-12 8397
关于vivado On-the-fly问题 注意端口的声明格式应当为 module test（ input [3:0] signal1, input signal3, output [3:0] signal2 ）； 而不能是 module test（ signal1, signal3, signal2 ）； input [3:0] signal1; ...
语音识别系列之高阶解码器技术
weixin_51072772的博客
11-06 1426
来源 | 极链AI云（性价比最高的共享GPU算力平台，双十一活动新人注册可领取268元大礼包，价值150+小时的GPU免费使用时长，领取地址：https://cloud.videojj.com/） 本文取名高阶解码器技术，一是文章假定读者已有语音识别、WFST(Weighted Finite State Transducer)和解码器的基础知识，二是文章关注解码器在实际应用中的问题和实际需求，当然也略有博人眼球的嫌疑。本文写作过程中，得到吕航博士的指正和支持，特此感谢。 文章中重点关注如下三类高阶解码器技术
20、vivado编译报错合集
最新发布
m0_52197400的博客
10-23 3116
1、普通IO引脚约束为时钟时报错，可在XDC引脚约束中添加一条语句。
On-the-Fly Garbage Collection - An Exercise in Cooperation - Dijkstra (1978)-计算机科学
04-22
8. HoIn, B.K.P. Determining lightness from an image. Comptr. Graphics and Image Processing 3, 4(Dec. 1974), 277-299....9. Huffman, D.A. Impossible objects as nonsense sentences....Machine Intelligence 6, B...
react-redux-on-the-fly:打包以延迟加载并动态创建动态reducer
05-06
您可以在我的博客文章中了解有关此库的更多信息： : : 安装npm install --save react-redux-on-the-fly用法共有两种基本用法：高级和低级高水平使用创建包含redux存储和react-redux提供程序的Root元素import { ...
DCT.rar_compress on-the-fly_dct_dct compress_dct transform
09-14
Discrete cosine transform to compress data.
藏经阁-DYNAMIC ON-THE-FLY MODIFICATIO.pdf
09-04
Spark 动态修改技术在大数据处理中的应用 在大数据处理中，Apache Spark 是一个非常流行的开源数据处理引擎。然而，在实际应用中，我们经常需要对 Spark 应用程序进行动态修改，以满足不断变化的业务需求。动态修改...
藏经阁-DYNAMIC ON-THE-FLY MODIFICATIONS OF SPARK APPLICATIONS.pdf
09-04
这个PDF文件讲解了Spark应用程序的动态修改技术，具体来说是Dynamic On-the-Fly Modifications of Spark Applications。Spark是一种基于内存的分布式计算框架，广泛应用于大数据处理和机器学习等领域。随着Spark应用...
语音识别WFST-based dynamic decoders
fengzhou_的博客
06-27 4571
目前语音识别主流是基于WFST解码器，WFST中的优化操作如Determinization，Minimization，Weight Pushing 使得Veterbi解码速度大大加快。 然而实际语音识别的问题还有很多，第一，往往基于静态的HCLG.fst 可能非常大，需要消耗大量内存；第二，静态的HCLG.fst 非常大，一旦语言模型G.fst或者 HMM模型H.fst, Context phon...
20190702
libeicuo8108的博客
07-02 112
fst文档： SPEECH RECOGNITIONWITHWEIGHTED FINITE-STATE TRANSDUCERS Efficient WFST-Based One-Pass Decoding With On-The-Fly Hypothesis Rescoring in Extremely Large Vocabulary Continuous Speech Recognition...
java代码覆盖率 jacoco 原理解析
04-16
       有人了解些jacoco的原理，也能够进行些实操，但不能将原理与实操联系起来。为了解决这一问题特为大家输出本课程，以便更好地理解jacoco且在实战中能够得心应手，遇到问题后也能举一反三。同时也希望能够给大家提供一份比较全面的原理文档，尽量方便学者能够快速地入门，以防止花费不必要的时间在网上到处进行搜索、筛选。。。       本课程主要针对jacoco的报告、字节码、On-the-fly / Offline 进行重点解析，并通过实操进行演示。能够很好地讲原理与实战联系起来。
on the fly 到底几个意思
AHAU10的专栏
03-12 9571
几乎每篇文档都给你来一个on the fly。知乎搜了几次也没记住，干脆把维基百科的解释翻译了一下：On the fly is a phrase used to describe something that is being changed while the process that the change affects is ongoing. On the fly 是一个短语用于表示一种现
IntelliJ IDEA 4 新特性 之 On-the-Fly Code Analysis(动态代码分析)
能不忆江南？
04-19 9235
Intelligent error highlighting(智能突出显示错误)All common syntax errors, as well as all other errors that would be detected during compilation, are highlighted in the source code so you do not need to co
在线多分支融合——Knowledge Distillation by On-the-Fly Native Ensemble
AI Flash
10-02 3575
"Knowledge Distillation by On-the-Fly Native Ensemble"这篇文章基于给定的基础网络（如Resnet等），通过在网络深层次构造多分支结构，且每个分支作为学生网络，能够融合生成推理性能更强的教师网络。进而，通过教师/学生网络的共同在线学习、教师知识的反馈蒸馏，能够训练得到性能优越的单分支模型或多分支融合模型。 基于ONE（On-the-Fly ...
Baseline: On-the-fly stylization
05-03
On-the-fly stylization is a technique for applying artistic styles to images in real time. It involves using a pre-trained deep learning model to transfer the style of one image onto another image, creating a new image that combines the content of the original image with the style of the reference image. The baseline approach for on-the-fly stylization involves using a pre-trained neural network, such as the VGG-19 network, to extract the content and style features from the input and reference images. These features are then used to compute the Gram matrix, which captures the correlations between the different feature maps and is used to represent the style of the reference image. The content and style features are then combined to generate a new image that preserves the content of the input image while incorporating the style of the reference image. This is achieved by optimizing a loss function that balances the content and style losses. The baseline approach has been extended in various ways, such as incorporating perceptual loss functions and using attention mechanisms to selectively transfer style to specific regions of the input image. Overall, on-the-fly stylization is a powerful technique for generating artistic images in real time and has applications in fields such as entertainment, advertising, and education.

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值