- 博客(7)
- 收藏
- 关注
原创 PaddleNlp-TaskFlow安装及使用
以下是taskflow的较为全面的情况介绍:https://github.com/PaddlePaddle/PaddleNLP/blob/develop/docs/model_zoo/taskflow.md#%E4%BF%A1%E6%81%AF%E6%8A%BD%E5%8F%96简单方法:直接安装对应的版本,然后对于一个联网的进行Taskflow("text_summarization"),再把下载的文件直接全部download并转移。复杂方法:离线使用Taskflow的issue: 如何离线使用Taskf
2024-02-22 09:45:07 627
原创 Bert论文综述
把每一个训练样例输入到BERT中可以相应获得两个任务对应的loss,再把这两个loss加在一起就是整体的预训练loss。(也就是两个任务同时进行训练)BERT采用Masked LM + Next Sentence Prediction作为pre-training tasks, 完成了真正的Bidirectional LMBERT模型能够很容易地Fine-tune,并且效果很好,并且BERT as additional feature效果也很好模型足够泛化,覆盖了足够多的NLP tasks。
2024-02-22 09:42:06 805
原创 学习整理-1. 机器学习参考书籍
xgboost 论文及review。1. 建模要素及线性回归,逻辑回归。统计学习基础 决策权章节。李宏毅线上教程 1-4。周志华机器学习 2-3。周志华机器学习 4,8。2. 树模型及xgboost。
2023-06-25 10:38:17 69
原创 Transformer-02 MASK、FFN、残差连接+层归一化及Embedding
Transformer-02 MASK、FFN、残差连接+层归一化及Embedding
2022-11-16 10:41:22 4436
原创 深度学习基础理论 - 1)batch_sizes和epoch参数差异及关系
深度学习基础理论 - 1)batch_sizes和epoch参数差异及关系
2022-10-26 17:18:08 891
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人