Bläddra i källkod

update weight decay

Lengyue 2 år sedan
förälder
incheckning
11b6900dc2
1 ändrade filer med 1 tillägg och 1 borttagningar
  1. 1 1
      fish_speech/configs/text2semantic_pretrain.yaml

+ 1 - 1
fish_speech/configs/text2semantic_pretrain.yaml

@@ -59,7 +59,7 @@ model:
     _target_: torch.optim.AdamW
     _partial_: true
     lr: 3e-4
-    weight_decay: 0.1
+    weight_decay: 0.01
     betas: [0.9, 0.95]
     eps: 1e-5