自然语言处理
文章平均质量分 78
Wilson-Huang
这个作者很懒,什么都没留下…
展开
-
标签平滑Label Smoothing
标签平滑Label Smoothing原创 2023-02-15 20:27:25 · 539 阅读 · 0 评论 -
学习率调整策略之Warmup以及代码实现
学习率调整策略之Warmup以及代码实现原创 2023-02-15 17:31:38 · 2712 阅读 · 8 评论 -
关于Teacher Forcing、自回归和内部协变量偏移等概念梳理
关于Teacher Forcing、自回归和内部协变量偏移等概念梳理原创 2023-02-14 17:32:19 · 1702 阅读 · 0 评论 -
自然语言处理之文本预处理
文本预处理原创 2022-11-08 09:50:32 · 4105 阅读 · 0 评论 -
自然语言处理之词嵌入(Word Embedding)
对于计算机来说,要想理解自然语言,需要把自然语言以一定的形式转化为数值,,是人工智能非常关键的一步。具体就是把一个维数为所有词的数量的高维空间嵌入到一个维数低得多的连续向量空间中,每个单词或词组被映射为实数域上的向量。而这种向量里面往往可以描述单词或者词组附近的上下文单词信息,捕获各种语义关系,从而使真真正正从中理解到这些自然语言。笔者认为,这种嵌入到低维度的方法,本质上是在做特征提取,并且通过降维的方式既可以提取到主要信息,也可以减少训练过程的计算量。原创 2022-10-31 16:20:46 · 896 阅读 · 1 评论 -
自然语言处理(NLP)概论
自然语言处理概论转载 2022-10-31 10:20:48 · 2029 阅读 · 0 评论