![](https://img-blog.csdnimg.cn/20190918140129601.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
自然语言处理
文章平均质量分 90
NLP相关知识的工作总结、学习、经验、项目以及debug
算法驯化师
1. 多年面试官经验、欢迎咨询各类简历修改、面试经验、求职准备;
2. 混迹多个大厂搜索、推荐、广告、内容、数据挖掘、数据分析等多个岗位工作,目前大模型算法驯化师;
展开
-
【大模型驯化-gradio】成功解决gradio出现httpcore.ReadTimeout: timed out问题
【大模型驯化-gradio】成功解决gradio出现httpcore.ReadTimeout: timed out问题 本次修炼方法请往下查看 在实际的工作中,我们经常会启用一个docker来管理自己的环境隔离问题,在使用对大模型进行可视化接口调用时,我们使用如下命令安装gradio: 从上述的结果可以看出我们已经在一个conda环境中安装成功了gradio,我们通过gra原创 2024-06-21 11:05:25 · 855 阅读 · 0 评论 -
【NLP基础知识-bert向量化】BERT模型输出pooler_output和last_hidden_state详解和用法
是一种预训练语言表示模型,由Google在2018年提出。它通过使用Transformer架构的编码器部分,能够捕捉到文本的双向上下文信息。BERT模型在自然语言处理(NLP)领域取得了革命性的进展,为各种下游任务提供了强大的基础。# 加载BertTokenizer和BertModel# 定义输入文本text = '这是一个测试句子'# 对输入文本进行分词和填充# 获取Bert模型的embedding结果# 输出结果。原创 2023-10-09 10:56:11 · 3679 阅读 · 0 评论 -
使用SRILM 工具对n-gram建模实战
n-gram模型是一种统计语言模型,用于预测给定一个文本序列中下一个词或单词序列的概率。本文通过srilm工具对n-gram模型进行建模实战原创 2023-09-26 13:35:10 · 157 阅读 · 0 评论