第一步:收集数据(已有的数据,互联网已有的公开数据,数据状态,是否是标准化数据,是否是可以直接使用的数据,是否是有label的数据)
第二步:清洗数据(清理特殊符号,无意义字符,无用数据,质量差的数据)(导入数据,观察数据,数据清洗,数据汇总,文本清洗,数据预处理,数据提取,数据筛选,数据统计,数据输出)
第三步:做特征(one-hot, tf-idf, word2vec, doc2vec,数据是否有内在规律)
第四步:选模型(根据数据的规模,数据的质量,选择模型,模型融合,post processing)
第五步:评估模型,(precision,recall,f1,roc,R2)
第六步:迭代优化(查看相关领域的最新研究进展和技术,是否可以借鉴)
nlp 处理流程
最新推荐文章于 2024-07-19 23:51:04 发布