- 博客(8)
- 资源 (1)
- 收藏
- 关注
RSS订阅翻译 【自己创建分词器tokenizer】（3）——Unigram tokenizer
我们完成了这个分词器！我们可以像之前一样保存分词器，并且如果想要在Transformers中使用它，可以将其包装在PreTrainedTokenizerFast或XLNetTokenizerFast中。其他部分，比如保存与加载等，和之前WordPiece tokenizer是一样的，本文没有赘述。end。
2023-08-12 14:06:31
627
1
翻译 【自己创建分词器tokenizer】（2）——BPE tokenizer
其他部分，比如保存与加载等，和之前WordPiece tokenizer是一样的，本文没有赘述。
2023-08-12 14:05:15
877
1
翻译 【自己创建分词器tokenizer】（1）——WordPiece tokenizer
【自己创建分词器】WordPiece tokenizer
2023-08-12 10:55:43
1023
2
原创 BERT实战——使用IMDB影评数据集实现电影评论情感分类
之前学习了如何使用BERT实现文本分类，本次想融会贯通一下实现电影评论情感分类任务。完成之后感觉对整个过程有了更深的认识。本次相较于之前，主要工作是，a）对于新的任务，对原始数据进行预处理，以期满足特定任务；b）编写应用程序，对用户在控制台的输入电影评论进行情感判断。最终，由于训练时间太长了，就训练了一个epoch，在测试集上的测试精度为86.64%，在实际应用中可以较好地对电影评论情感进行分类。
2023-07-30 21:21:10
4503
88
翻译 BERT实战 - 文本分类（Pre-training + Fine-tuning）
Huggingface.co通过其Transformers API使使用基于transformers的模型变得方便。但是，很多时候仅进行微调并不能达到预期的效果。对未标记的数据进行预训练，然后再进行微调，可以帮助模型实现期望的结果。Huggingface API也提供了预训练功能。在这篇博文中，我将解释如何对基于transformers的模型进行预训练，然后再进行微调。为此，将以BERT作为参考模型。
2023-07-29 20:15:37
720
原创 Java实现Trie（前缀树、单词查找树），适合任何字符和单词，无局限性
前缀树（Trie）：又叫字典树或单词查找树，主要应用场景为给定一个字符串集合构建一棵前缀树，然后给一个字符串，判断前缀树中是否存在该字符串或者该字符串的前缀。- 匹配：只要在遍历的过程有中，下属节点存在，即可继续遍历，否则不存在。- 查找：必须遍历到目标字符串的末尾，然后再判断路径是否有效。- 匹配：判断前缀树中是否存在与目标字符串匹配的前缀字符串。- 首先看看某一节点的下属节点是否存在路径。- 插入：向前缀树中插入单词，构建前缀树。- 查找：判断前缀树中是否存在目标字符串。- 节点的值，即单个字符。
2023-01-06 12:12:58
918
原创 删除表格一行数据并更新后表格数据无变化的解决方法
最近在一个小项目中遇到这样一个问题，我在前端页面中删除表格中的一行数据，数据库中已经删除，且重新更新了数据并显示，但是表格重新显示的还是之前的数据。查阅网上的资料后，尝试网友的方法，使用v-showCard命令来控制，当数据没有更新结束之前不显示，当数据重新更新后再显示，但是我这样还是失败了。后来，我发现，可能是删除数据后，前端立刻发送更新数据请求，但此时删除操作还没有结束，原来的数据还在，因此重新请求的数据没有变化。一种方法是可以判断删除是否成功，获得成功后再更新。不过还是推荐第一种方法，那样更加规范。
2022-11-29 21:28:23
1543
原创 vue3中使用ant-design-vue的layout组件实现动态导航栏功能(1~2级)
最近在自己搞一个前后端小项目，前端想使用ant-design-vue的layout组件实现动态导航栏和面包屑，但是网上的资料较少，所以我就自己整合实现了一下，在此记录分享。
2022-11-26 23:46:19
8396
3
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人