Graph-Tokenization-for-Bridging-Graphs-and-Transformers/gen.sh at release · BUPT-GAMMA/Graph-Tokenization-for-Bridging-Graphs-and-Transformers · GitHub

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
python batch_pretrain_simple.py \
  --experiment_group 815_base \
  --exp_prefix aqsol \
  --datasets aqsol \
  --epochs 100 \
  --batch_size 1024 \
  --learning_rate 5e-4 \
  --gpus 0 \
  --bpe_scenarios raw \
  --use_augmentation true \
  --config_json '{"bert": {"architecture": {"max_len_policy": "sigma", "max_len_sigma_k": 3}}}' \
  --log_dir log/subproc/815_base \
  --commands_only \
  --plain_logs \
  --log_style offline

python batch_pretrain_simple.py \
  --experiment_group 815_base \
  --exp_prefix zinc \
  --datasets zinc \
  --gpus 0 \
  --bpe_scenarios raw \
  --use_augmentation true \
  --log_dir log/subproc/815_base \
  --commands_only \
  --plain_logs \
  --log_style offline

python batch_pretrain_simple.py \
  --experiment_group 815_base \
  --exp_prefix qm9 \
  --datasets qm9 \
  --epochs 50 \
  --batch_size 1024 \
  --learning_rate 5e-5 \
  --gpus 0 \
  --bpe_scenarios all,random \
  --use_augmentation true \
  --log_dir log/subproc/815_base \
  --commands_only \
  --plain_logs \
  --log_style offline


python batch_finetune_simple.py \
  --experiment_group 815_base \
  --exp_prefix aqsol \
  --datasets aqsol \
  --epochs 60 \
  --batch_size 1024 \
  --learning_rate 5e-5 \
  --gpus 0 \
  --bpe_scenarios raw \
  --use_augmentation true \
  --config_json '{"bert": {"architecture": {"max_len_policy": "sigma", "max_len_sigma_k": 3}}}' \
  --log_dir log/subproc/815_base \
  --commands_only \
  --plain_logs \
  --log_style offline

python batch_finetune_simple.py \
  --experiment_group 815_base \
  --exp_prefix zinc \
  --datasets zinc \
  --gpus 0 \
  --bpe_scenarios raw \
  --use_augmentation true \
  --log_dir log/subproc/815_base \
  --commands_only \
  --plain_logs \
  --log_style offline

python batch_finetune_simple.py \
  --experiment_group 815_base \
  --exp_prefix qm9 \
  --datasets qm9 \
  --epochs 30 \
  --batch_size 1024 \
  --learning_rate 5e-5 \
  --gpus 0 \
  --bpe_scenarios all,random \
  --use_augmentation true \
  --log_dir log/subproc/815_base \
  --commands_only \
  --plain_logs \
  --log_style offline