自然语言处理
AI-CTY
这个作者很懒,什么都没留下…
展开
-
Torchtext处理Fasttext实例
链接:https://pan.baidu.com/s/17IhfiYTfo0UeLoir1h3kjA提取码:px2zimport torchimport torch.nn as nnimport torch.optim as optimfrom tqdm import tqdmfrom torchtext import datafrom torchtext.vocab import...原创 2020-03-22 13:48:11 · 714 阅读 · 0 评论 -
Attention is all you need
法大师傅原创 2020-03-22 13:50:18 · 181 阅读 · 1 评论 -
Torchtext基础知识
一、Torchtext组建的基本构造Field: 主要包含以下数据预处理的配置信息,比如指定的分词方法,是否转成小写,起始与结束字符,补全字符以及词典等等LabelField: 用于指定标签类别的种类以及标签的表示方式Dateset: 它是继承了Pytorch的Dataset,用于加载数据,提供了TabularDataset可以指定路径,格式,Field信息就可以方便的完成数据加载。同时to...原创 2020-03-22 13:48:36 · 1205 阅读 · 0 评论 -
搜狐新闻文本分类之CNN(tensorflow版Version1)
注:数据提取码代码所需训练数据一、环境配置python3.6tensorflow-gpu1.12二、代码背景**1、**结合Character-level Convolutional Networks for Text Classification这篇论文,参考了github上的代码进行学习,github地址**2、**本篇代码尚未使用词向量模型处理,通过简单的统计出所有文本中高频出...原创 2019-12-27 19:02:21 · 1925 阅读 · 0 评论