Commit Verlauf

Autor SHA1 Nachricht Datum
  Lengyue b530faccc9 Lint & fix attention mask & support whisper input features vor 2 Jahren
  Lengyue 254e93e632 Fix inference without attention mask vor 2 Jahren
  Lengyue 0c084ec779 Apply gradient accumulate to save memory vor 2 Jahren
  Lengyue 4cfb62a08a Fix gradient accumulate logging vor 2 Jahren
  Lengyue 086c82d789 Fix vq whisper training & remove ema in tb logger vor 2 Jahren
  Lengyue 23109ecb94 Optimize training loop & upgrade transformers vor 2 Jahren
  Lengyue 7704bb7d09 Fix filename vor 2 Jahren
  Lengyue 938eca21a6 Rename config & smaller schedule vor 2 Jahren
  Lengyue a003e5a390 Add utilities & whisper vq model vor 2 Jahren
  Lengyue a114dfab4f Fix multi lingual whisper vor 2 Jahren
  Lengyue 9153fc8278 Add whisper loss example vor 2 Jahren
  Lengyue 1854897e3c Fix utf-8 encoding vor 2 Jahren
  Lengyue 0687dd1f1a Greatly reduced cpu usage vor 2 Jahren
  Lengyue 18af8a9406 Add whisper with flash attn & use whisper to batch transcribe vor 2 Jahren
  Lengyue 9920873cf2 Optimize schedule vor 2 Jahren
  Lengyue 7031d18b3d Let model fail on non-inf loss vor 2 Jahren
  Lengyue 5f01798ab4 Fix non-inf gradient vor 2 Jahren
  Lengyue 2a19adb045 Fix grad acc loss vor 2 Jahren
  Lengyue 8f75f764ad Fix incorrect batch time vor 2 Jahren
  Lengyue 5f07060c6a Optimize training loop vor 2 Jahren
  Lengyue 5d65ec0bd5 fix typo vor 2 Jahren
  Lengyue b6b478701a Rename dataloader to add support for valid loader vor 2 Jahren
  Lengyue fb23d5df2d Better train loop tracking vor 2 Jahren
  Lengyue 3fc0a688ca Update Readme vor 2 Jahren
  Lengyue 9beb5981ec Remove unused ds config vor 2 Jahren
  Lengyue d211a7eac7 Better ETA vor 2 Jahren
  Lengyue 2733ed600f Accelerate training with fsdp vor 2 Jahren
  Lengyue 01cf9bbafd Fix dataset and training loop vor 2 Jahren
  Lengyue 712908e673 Support stream reading vor 2 Jahren
  Lengyue e01dd330a1 optimize InterleaveDataset vor 2 Jahren