edit : alphabet.json changed to uft8.

alphabet.json

@@ -1 +1,45 @@
-{"labels": ["", "<s>", "</s>", "\u2047", " ", "\u0622", "\u0626", "\u0627", "\u0628", "\u062a", "\u062b", "\u062c", "\u062d", "\u062e", "\u062f", "\u0630", "\u0631", "\u0632", "\u0633", "\u0634", "\u0635", "\u0636", "\u0637", "\u0638", "\u0639", "\u063a", "\u0641", "\u0642", "\u0644", "\u0645", "\u0646", "\u0647", "\u0648", "\u067e", "\u0686", "\u0698", "\u06a9", "\u06af", "\u06cc", "\u200c"], "is_bpe": false}
+{
+  "labels": [
+    "",
+    "<s>",
+    "</s>",
+    "⁇",
+    " ",
+    "آ",
+    "ئ",
+    "ا",
+    "ب",
+    "ت",
+    "ث",
+    "ج",
+    "ح",
+    "خ",
+    "د",
+    "ذ",
+    "ر",
+    "ز",
+    "س",
+    "ش",
+    "ص",
+    "ض",
+    "ط",
+    "ظ",
+    "ع",
+    "غ",
+    "ف",
+    "ق",
+    "ل",
+    "م",
+    "ن",
+    "ه",
+    "و",
+    "پ",
+    "چ",
+    "ژ",
+    "ک",
+    "گ",
+    "ی",
+    "‌"
+  ],
+  "is_bpe": false
+}