bert模型对输入的句子有一个最大长度,对于中文模型,我看到的是512个字节。
因此需要对输入的文本做一个裁剪。
df[‘comment’]=df[‘comment’].apply(lambda x:x[:127])
keras_bert出现Incompatible shapes: [32,663,768] vs. [32,512,768]问题
最新推荐文章于 2022-09-01 14:15:05 发布
bert模型对输入的句子有一个最大长度,对于中文模型,我看到的是512个字节。
因此需要对输入的文本做一个裁剪。
df[‘comment’]=df[‘comment’].apply(lambda x:x[:127])