CQDA中针对bert的数据读取与处理
序其实本质上是对squad数据针对bert的变形处理,本文不深究细节,过于琐碎,相信会调用bert的人也不会被一个数据读入难住,这里是想形象的展示记录一下cqda里面数据处理的流程。小知识skearn 自定义转换器 [TransformerMixin, BaseEstimator, fit_transform, fit, transform]如果使用TransformerMix...
原创
2019-11-26 21:43:14 ·
533 阅读 ·
0 评论