- 博客(12)
- 收藏
- 关注
原创 Hugging Face 的 Transformers 库快速入门 (三)必要的 Pytorch 知识
在上一篇《模型与分词器》中,我们介绍了Model类和Tokenizers类,尤其是如何运用分词器对文本进行预处理。Transformers 库建立在 Pytorch 框架之上(Tensorflow 的版本功能并不完善),虽然官方宣称使用 Transformers 库并不需要掌握 Pytorch 知识,但是实际上我们还是需要通过 Pytorch 的DataLoader类来加载数据、使用 Pytorch 的优化器对模型参数进行调整等等。
2022-10-22 21:36:21 2084 1
原创 Hugging Face 的 Transformers 库快速入门 (二)模型与分词器
在上一篇文章《开箱即用的 pipelines》中,我们通过 Transformers 库提供的 pipeline 函数展示了 Transformers 库能够完成哪些 NLP 任务,以及这些 pipelines 背后的工作原理。本文将深入介绍 Transformers 库中的两个重要组件:模型(Models类)和分词器(Tokenizers类)。
2022-10-20 13:04:40 4457 2
原创 Hugging Face 的 Transformers 库快速入门 (一)开箱即用的 pipelines
Transformers是由Hugging Face开发的一个 NLP 包,支持加载目前绝大部分的预训练模型。随着 BERT、GPT 等大规模语言模型的兴起,越来越多的公司和研究者采用 Transformers 库来构建 NLP 应用,因此熟悉 Transformers 库的使用方法很有必要。
2022-10-19 17:40:25 5950
原创 论文阅读笔记3 A CO-INTERACTIVE TRANSFORMER FOR JOINT SLOT FILLING AND INTENT DETECTION
A CO-INTERACTIVE TRANSFORMER FOR JOINT SLOT FILLING AND INTENT DETECTIONSummarylocal and global contexts are jointly modeled(局部和全局的上下文被联合建模).。global view: Calculate the similarity between a certain phrase and the whole document in the vector space as tr
2022-07-07 10:58:43 278
原创 论文阅读笔记2—《Document-level Event Extraction via Heterogeneous Graph-based Interaction...》
Document-level Event Extraction via Heterogeneous Graph-based Interaction Model with a TrackerSummarylocal and global contexts are jointly modeled(局部和全局的上下文被联合建模).。global view: Calculate the similarity between a certain phrase and the whole document in
2022-03-24 14:44:36 404
原创 Python 标准库 xml.etree.ElementTree
注意:本文为 xml.etree.ElementTree 学习笔记,仅供自己学习使用,文中会把引用的链接附上。文章目录前言一、ElementTree 和 Element二、XML解析1.我们将使用以下XML文档作为示例数据:2.加载数据2.读取数据总结前言一、ElementTree 和 ElementXML是一种固定的分层数据格式,它最自然的表示方式是树。XML有两个类——ElementTree将整个XML文档表示为树,而Element表示树中的单个节点。一般这样调用:import xml.e
2022-01-14 19:05:43 10380
原创 LINUX服务器配置
Nvidia-RTX3090-Linux 服务器安装配置仅供个人学习使用,参考总结了一些文档,在下面内容中会注释。文章目录Nvidia-RTX3090-Linux 服务器安装配置前言一· 安装Ubutu:20.04.3二· Nvidia显卡驱动安装三. 安装Openssh-server,以及adduser前言本文是实验室服务器安装与配置(驱动下载:https://www.nvidia.cn/Download/driverResults.aspx/47576/cn/),(Ubuntu20.04
2021-12-01 17:22:31 858
原创 Pytorch学习-TORCH.NN
Pytorch学习:TORCH.NN文档翻译仅供个人学习使用,参考总结了一些文档,在下面内容中会注释。文章目录Pytorch学习:TORCH.NN文档翻译前言WHAT IS TORCH.NN REALLY?一· MNIST数据下载二. 神经网络从无到有 (no torch.nn)三. 使用torch.nn.functional2.torchtext.vocab.Vectors2.torchtext.vocab.GloVe三、torchtext.datasets四、举个栗子torchtext预处理流程F
2021-04-11 20:00:25 1013 2
原创 Pytorch学习-torchtext
torchtext学习供个人学习使用,参考总结了一些文档,在下面内容中会引出来。文章目录torchtext学习前言一、pandas是什么?二、使用步骤1.引入库2.读入数据总结前言提示:这里可以添加本文要记录的大概内容:例如:随着人工智能的不断发展,机器学习这门技术也越来越重要,很多人都开启了学习机器学习,本文就介绍了机器学习的基础内容。提示:以下是本篇文章正文内容,下面案例可供参考一、pandas是什么?示例:pandas 是基于NumPy 的一种工具,该工具是为了解决数据分析任务
2021-03-31 00:04:32 2087 8
原创 torchtext 文档翻译
我的NLP入门之路大半年的摸爬滚打新的改变功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入大半年的摸爬滚打2019年的9月。新的改变我们对Markdown编辑器进行了一些功能拓展与语法支持,除了标准的Markdown编辑器功
2021-03-29 13:53:49 1712 3
原创 linux系统下配置anaconda环境
linux系统下配置anaconda环境非管理员权限配置:vim ./bashrc 进入个人配置文件然后 按下i键,在最后写入:#Anacondaexport PATH=/home/cwliu/anaconda3/bin:$PATH/home/cwliu/anaconda3/bin 换成你自己的路径
2020-11-27 12:29:01 917
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人