瀏覽代碼

update weight decay

Lengyue 2 年之前
父節點
當前提交
11b6900dc2
共有 1 個文件被更改,包括 1 次插入1 次删除
  1. 1 1
      fish_speech/configs/text2semantic_pretrain.yaml

+ 1 - 1
fish_speech/configs/text2semantic_pretrain.yaml

@@ -59,7 +59,7 @@ model:
     _target_: torch.optim.AdamW
     _partial_: true
     lr: 3e-4
-    weight_decay: 0.1
+    weight_decay: 0.01
     betas: [0.9, 0.95]
     eps: 1e-5