BERT TensorFlow 训练和调试 (shell)

内存60G,20核

max_seq_length 和 train_batch_size 再大会OOM

 

训练和验证shell

export DATA_DIR='/xx/xx/bert'
export BERT_BASE_DIR='/xx/xx/chinese_L-12_H-768_A-12'
python run_classifier.py \
    --task_name=organ_grid \
    --do_train=true \
    --do_eval=true \
    --data_dir=$DATA_DIR/ \
    --vocab_file=$BERT_BASE_DIR/vocab.txt \
    --bert_config_file=$BERT_BASE_DIR/bert_config.json \
    --init_checkpoint=$BERT_BASE_DIR/bert_model.ckpt \
    --max_seq_length=200 \
    --train_batch_size=100 \
    --learning_rate=2e-5 \
    --num_train_epochs=1.0 \
    --output_dir='/xx/xx/xx/organizer_bert'

 

预测 shell  注意预测路径和训练路径的关系

export

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值