最近尝试了bert来处理中文的NLP任务,发现效果很好。本人应用的主要方式是调用腾讯AILab 实验室开源的bert-as-service代码,bert-as-service 的git地址 该项目的api和demo 非常详细。按照过程能很快完成bert的调用。下面说一下我的使用流程。
环境配置
- 安装tensorflow
- 安装package
pip install bert-serving-server pip install bert-serving-client
- 下载中文bert预训练的模型预训练模型下载地址
- 启动 bert-server 启动代码为
-
bert-serving-start -model_dir dict/chinese_L-12_H-768_A-12 -num_worker=1 -max_seq_len=100 &
其中具体参数根据自己需要来配置,可以直接取句子向量,也可以取字向量和词向量,默认是句子向量
-