由这个比赛:https://god.yanxishe.com/5 中的亚军代码https://god.yanxishe.com/codeplan/detail/41,发现了
roeberta_zh_L-24_H-1024_A-16(貌似就是下文中的chinese_roberta_wwm_large_ext_L-24_H-1024_A-16.zip)
这个模型,下载方法:https://github.com/brightmart/roberta_zh
tensorflow 1.14.0 keras 2.2.4 keras_radam keras_bert 全部PIP安装即可
除上述模型外,还有哈工大讯飞联合实验室的一系列模型:https://github.com/ymcui/Chinese-BERT-wwm#%E6%A8%A1%E5%9E%8B%E5%AF%B9%E6%AF%94
chinese_roberta_wwm_ext_L-12_H-768_A-12.zip等