layoutlmV3使用步骤

1、layoutlm系列的预训练权重全都是放在huggingface上面,安装官方教程如果下载失败,可以在linux系统下载,然后将下载的缓存文件保存。或者在官网上下载并保存。需要下载的文件如下图。

2、将官方提供的xfun数据集下载,结果如下:

│── data
│   ├── zh.train.json
│   ├── zh.val.json
│   └── images
│      ├── zh_train_*.jpg
│      └── zh_val_*.jpg

 

3、按照官方教程安装,但是layoutlmv3的requirements里面的安装包版本过低,会报错‘No huggingface_hub attribute hf_api’,需要改为一下版本后安装:

datasets==2.3.2
evaluate==0.1.2
huggingface-hub==0.8.1
response==0.5.0
tokenizers==0.10.1
transformers==4.12.5
seqeval==1.2.2
deepspeed==0.5.7(有GPU才需要安装,没有GPU不需要安装)
tensorboard==2.7.0
seqeval==1.2.2
sentencepiece
timm==0.4.12
Pillow
einops
textdistance
shapely

4、Detectron2 如果最后set up失败,需要按照官网提供的一下方式安装Detectron2 :

python -m pip install 'git+https://github.com/facebookresearch/detectron2.git'
# (add --user if you don't have permission)

# Or, to install it from a local clone:(本人用此方法解决)
git clone https://github.com/facebookresearch/detectron2.git
python -m pip install -e detectron2

# On macOS, you may need to prepend the above commands with a few environment variables:
CC=clang CXX=clang++ ARCHFLAGS="-arch x86_64" python -m pip install ...

5、报错出现 'gbk' codec can't decode byte

找到对应的位置xfun.py加上   encoding='utf-8'  即可。

  • 5
    点赞
  • 13
    收藏
    觉得还不错? 一键收藏
  • 7
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 7
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值