@@ -1,6 +1,8 @@
import re
SYMBOLS_MAPPING = {
+ "\n": ".",
+ "…": ".",
"“": "'",
"”": "'",
"‘": "'",
@@ -13,7 +15,19 @@ SYMBOLS_MAPPING = {
")": "",
"(": "",
")": "",
- "・": "·",
+ "・": "",
+ "·": "",
+ "「": "'",
+ "」": "'",
+ "《": "'",
+ "》": "'",
+ "—": "",
+ "~": "",
+ "~": "",
+ ":": ",",
+ ";": ",",
+ ";": ",",
+ ":": ",",
}
REPLACE_SYMBOL_REGEX = re.compile(