Procházet zdrojové kódy

Fix utf-8 encoding

Lengyue před 2 roky
rodič
revize
1854897e3c
1 změnil soubory, kde provedl 1 přidání a 1 odebrání
  1. 1 1
      preparing_data/whisper_asr.py

+ 1 - 1
preparing_data/whisper_asr.py

@@ -142,7 +142,7 @@ def main(folder: str, rank: int, world_size: int, num_workers: int):
 
         # Write to file
         for file, transcription in zip(batch, trascriptions):
-            Path(file).with_suffix(".whisper.txt").write_text(transcription)
+            Path(file).with_suffix(".whisper.txt").write_text(transcription, encoding="utf-8")
 
     logger.info(
         f"{RANK_STR}Finished processing {len(files)} files, {total_time / 3600:.2f} hours of audio"