Quellcode durchsuchen

update weight decay

Lengyue vor 2 Jahren
Ursprung
Commit
11b6900dc2
1 geänderte Dateien mit 1 neuen und 1 gelöschten Zeilen
  1. 1 1
      fish_speech/configs/text2semantic_pretrain.yaml

+ 1 - 1
fish_speech/configs/text2semantic_pretrain.yaml

@@ -59,7 +59,7 @@ model:
     _target_: torch.optim.AdamW
     _partial_: true
     lr: 3e-4
-    weight_decay: 0.1
+    weight_decay: 0.01
     betas: [0.9, 0.95]
     eps: 1e-5