1 Star 2 Fork 1

何长鸿/duie

加入 Gitee
与超过 1200万 开发者一起发现、参与优秀开源项目,私有仓库也完全免费 :)
免费加入
文件
克隆/下载
train.sh 1.62 KB
一键复制 编辑 原始数据 按行查看 历史
88153 提交于 5年前 . first commit
set -eux
export BATCH_SIZE=16
export LR=2e-5
export EPOCH=7
export SAVE_STEPS=5000
export SAVE_PATH=./
export TASK_DATA_PATH=./data/
export MODEL_PATH=./pretrained_model/
export TRAIN_FILE=train.json
export DEV_FILE=dev.json
export FLAGS_sync_nccl_allreduce=1
export PYTHONPATH=./ernie:${PYTHONPATH:-}
python -u ./ernie/run_duie.py \
--use_cuda true \
--do_train true \
--do_val true \
--do_test false \
--verbose false \
--batch_size ${BATCH_SIZE} \
--init_checkpoint ./checkpoints/step_100000 \
--num_labels 112 \
--chunk_scheme "IOB" \
--label_map_config ${TASK_DATA_PATH}relation2label.json \
--spo_label_map_config ${TASK_DATA_PATH}label2relation.json \
--train_set ${TASK_DATA_PATH}${TRAIN_FILE} \
--dev_set ${TASK_DATA_PATH}${DEV_FILE} \
--vocab_path ${MODEL_PATH}vocab.txt \
--ernie_config_path ${MODEL_PATH}ernie_config.json \
--checkpoints ${SAVE_PATH}checkpoints \
--save_steps ${SAVE_STEPS} \
--validation_steps ${SAVE_STEPS} \
--weight_decay 0.01 \
--warmup_proportion 0.0 \
--use_fp16 false \
--epoch ${EPOCH} \
--max_seq_len 256 \
--learning_rate ${LR} \
--skip_steps 50 \
--num_iteration_per_drop_scope 1 \
--random_seed 1
Loading...
马建仓 AI 助手
尝试更多
代码解读
代码找茬
代码优化
1
https://gitee.com/geekhch/duie.git
git@gitee.com:geekhch/duie.git
geekhch
duie
duie
master

搜索帮助