PART👇1.自然语言处理常用操作 NLP :
一、文本预处理包含:
1.过滤非中文字符
2.文本分词并进行词性标注
3.去除常见中文停用词,并存储分词后结果
二、 文本特征词向量化表示:
1.词袋模型 Coutvictorizer
2.TF-IDF特征提取
三、调用sklearn 分类器建模,GridsearchCV调参
1.逻辑回归分类 LogisticRegression
2.超参数C设定,正则化 防止过拟合
全文点击👇以下:
文本分类NLP豆瓣电影短评中文文本分类实战代码Jieba+sklearn
PART👇2.关于BERT模型解析与应用实战
Bert模型全称Bidirectional Encoder Representations from Transformers,主要分为两个部分:1训练语言模型(language model)的预训练(pretrain&#