- 博客(3)
- 收藏
- 关注
原创 使用Bert语义向量处理下游任务:分类/实体识别/阅读理解等等
在工程应用中使用Bert来进行对下游任务的处理过程中,一开始采用bert-as-service这个服务,但是在实际应用中发现即使采用这个开源的服务资源,仍然对机器的性能有一定的要求,在没有GPU显卡的机器上运行经常会出现并发问题。在1080ti的机器上运行调用一次服务大概花费的时候一秒左右。这样对于在线需要实时率的应用来说仍然达不到使用标准,当然离线应用的话可以当我没说过。对于上面...
2020-04-14 11:40:38
2257
2
原创 使用Bert模型的run_classifier进行Fine-Tuning
废话不多说直接说怎么做首先我们需要下载中文模型文件,直接给出链接下载即可https://pan.baidu.com/s/1-c068UOgfhrMyIIhR5fHXg,提取码是: 2z2r,解压完成后会出现五个文件,其中一个词汇表文件vocab.txt,还有三个Bert tensorflow的模型文件,这里就不一一列举了,还有一个参数设置文件bert_config.json。接下来再去githu...
2018-12-20 13:57:39
6455
19
原创 对于tf.nn.embedding_lookup()的使用
def embedding_lookup( params, ids, partition_strategy="mod", name=None, validate_indices=True, max_norm=None):主要的两个参数的理解:params:一个tensor形式,一般为embedding后的shape,在进行分类中是[voc...
2018-09-12 18:05:09
550
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人