bert-base-uncased使用

最新推荐文章于 2025-02-27 10:21:45 发布

Kalika0-0

最新推荐文章于 2025-02-27 10:21:45 发布

阅读量1.1k

点赞数 7

分类专栏：小白摆烂学习BERT 文章标签： bert 人工智能深度学习自然语言处理学习

本文链接：https://blog.csdn.net/m0_56065966/article/details/143643040

版权

小白摆烂学习BERT 专栏收录该内容

2 篇文章

订阅专栏

1.下载模型

https://github.com/google-research/bert?tab=readme-ov-file

2.下载config.json和pytorch_model.bin

https://huggingface.co/google-bert/bert-base-uncased/tree/main

3.解压缩到同一文件夹

4.代码测试

from transformers import BertModel,BertTokenizer

BERT_PATH = 'D:/bert/241109'

tokenizer = BertTokenizer.from_pretrained(BERT_PATH)

print(tokenizer.tokenize('I have an apple, thank you.'))

bert = BertModel.from_pretrained(BERT_PATH)

print('load bert model over')