 Lengyue
|
b6b478701a
Rename dataloader to add support for valid loader
|
před 2 roky |
|
Lengyue
|
fb23d5df2d
Better train loop tracking
|
před 2 roky |
|
Lengyue
|
3fc0a688ca
Update Readme
|
před 2 roky |
|
Lengyue
|
9beb5981ec
Remove unused ds config
|
před 2 roky |
|
Lengyue
|
d211a7eac7
Better ETA
|
před 2 roky |
|
Lengyue
|
2733ed600f
Accelerate training with fsdp
|
před 2 roky |
|
Lengyue
|
01cf9bbafd
Fix dataset and training loop
|
před 2 roky |
|
Lengyue
|
712908e673
Support stream reading
|
před 2 roky |
|
Lengyue
|
e01dd330a1
optimize InterleaveDataset
|
před 2 roky |
|
Lengyue
|
0282451dff
fix scheduler
|
před 2 roky |
|
Lengyue
|
7650b2ac43
Update much robust dataloader
|
před 2 roky |
|
Lengyue
|
60ac11d7fe
Update deps
|
před 2 roky |
|
Lengyue
|
bce1f85209
Faster schedule
|
před 2 roky |
|
Lengyue
|
d28ba743d3
Fix quantizer norm
|
před 2 roky |
|
Lengyue
|
0dae48d2dc
Fix model training mode
|
před 2 roky |
|
Lengyue
|
0b5216ef0e
Fix hubert config
|
před 2 roky |
|
Lengyue
|
3297b2dc2c
Add hubert vq training
|
před 2 roky |
|
Lengyue
|
311a8b64ea
Add hubert dataset and hubert model
|
před 2 roky |
|
Lengyue
|
c88bf969b1
Update gitignore
|
před 2 roky |
|
Lengyue
|
70797ef7d5
Add dockerignore
|
před 2 roky |
|
Lengyue
|
900fc9dec9
Optimize data loading & gradient accumulate
|
před 2 roky |
|
Lengyue
|
026d419e9a
Fix logger in config
|
před 2 roky |
|
Lengyue
|
a0a5c3e95c
Update training script
|
před 2 roky |
|
Lengyue
|
db347ca973
Add llm exp code
|
před 2 roky |
|
Lengyue
|
9adf687fb1
Update base training code
|
před 2 roky |
|
Lengyue
|
e4ce816175
Update deps
|
před 2 roky |
|
Lengyue
|
aa0a6be778
init training code
|
před 2 roky |
|
Lengyue
|
f56a287593
Init pdm & dataset
|
před 2 roky |
|
Lengyue
|
e7e92afb5b
Close buffer safely
|
před 2 roky |
|
Lengyue
|
38d57129f0
Add compress tool
|
před 2 roky |
