Moved marks into its own category

diff --git a/Lib/gflanguages/data/languages/ar_Arab.textproto b/Lib/gflanguages/data/languages/ar_Arab.textproto
index 800c6b3f5f161930a0cb5ddc91b7637afe09e7c9..d8dd14dda61d4b87306a27f8f690f061a02e9aa6 100644 (file)
--- a/Lib/gflanguages/data/languages/ar_Arab.textproto
+++ b/Lib/gflanguages/data/languages/ar_Arab.textproto
@@ -41,8 +41,9 @@ region: "TN"
 region: "TR"
 region: "YE"
 exemplar_chars {
-  base: "◌ٰ ء أ ؤ إ ئ ا آ ب ة ت ث ج ح خ د ذ ر ز س ش ص ض ط ظ ع غ ف ق ك ل م ن ه و ى ي ـ ◌ٓ ◌ٔ ◌ٕ ◌ً ◌ٌ ◌ٍ ◌َ ◌ُ ◌ِ ◌ّ ◌ْ"
+  base: "ء أ ؤ إ ئ ا آ ب ة ت ث ج ح خ د ذ ر ز س ش ص ض ط ظ ع غ ف ق ك ل م ن ه و ى ي ـ"
   auxiliary: "ـ ‌ ‍ ‎ ‏ پ چ ژ ڜ ڢ ڤ ڥ ٯ ڧ ڨ ک گ ی"
+  marks: "◌ٰ ◌ٓ ◌ٔ ◌ٕ ◌ً ◌ٌ ◌ٍ ◌َ ◌ُ ◌ِ ◌ّ ◌ْ"
   numerals: "؜ ‎ - , ٫ ٬ . % ٪ ؉ + 0٠ 1 ١ 2 ٢ 3 ٣ 4 ٤ 5 ٥ 6 ٦ 7 ٧ 8 ٨ 9 ٩"
   punctuation: "- – — ۔ ، ؛ : ! ؟ ٭ . … \' \" « » ﴾ ﴿ ( ) [ ] ؍"
   index: "ا ب ت ث ج ح خ د ذ ر ز س ش ص ض ط ظ ع غ ف ق ك ل م ن ه و ي"

diff --git a/Lib/gflanguages/data/languages/fa_Arab.textproto b/Lib/gflanguages/data/languages/fa_Arab.textproto
index 7aa1104ae96f60d0869b55929b9e5c4a1ada3512..c97036690f0d2767eb5cec3b52e12c4359cdf98f 100644 (file)
--- a/Lib/gflanguages/data/languages/fa_Arab.textproto
+++ b/Lib/gflanguages/data/languages/fa_Arab.textproto
@@ -13,8 +13,9 @@ region: "PK"
 region: "QA"
 region: "TJ"
 exemplar_chars {
-  base: "◌ً ◌ٍ ◌ٌ ◌ّ ◌ٔ آ ا ء أ ؤ ئ ب پ ت ث ج چ ح خ د ذ ر ز ژ س ش ص ض ط ظ ع غ ف ق ک گ ل م ن و ه ة ی"
+  base: "آ ا ء أ ؤ ئ ب پ ت ث ج چ ح خ د ذ ر ز ژ س ش ص ض ط ظ ع غ ف ق ک گ ل م ن و ه ة ی"
   auxiliary: "ـ‌‍‎‏ َ ِ ُ ْ ٖ ٰ إ ك ى ي"
+  marks: "◌ً ◌ٍ ◌ٌ ◌ّ ◌ٔ"
   numerals: "‎ , ٫ ٬ . % ٪ ؉ + − 0۰ 1۱ 2۲ 3۳ 4۴ 5۵ 6۶ 7۷ 8۸ 9۹"
   punctuation: "- ، ٫ ٬ ؛ : ! ؟ . … ‹ › « » ( ) [ ] * / \\"
   index: "آ ا ب پ ت ث ج چ ح خ د ذ ر ز ژ س ش ص ض ط ظ ع غ ف ق ک گ ل م ن و ه ی"

diff --git a/Lib/gflanguages/data/languages/lrc_Arab.textproto b/Lib/gflanguages/data/languages/lrc_Arab.textproto
index 9c1226e4342634f7dc9037b9756a6913f1f899ec..c7be01704e852b86f585d6e55bbe4b1081d7507e 100644 (file)
--- a/Lib/gflanguages/data/languages/lrc_Arab.textproto
+++ b/Lib/gflanguages/data/languages/lrc_Arab.textproto
@@ -6,8 +6,9 @@ population: 2020512
 region: "IQ"
 region: "IR"
 exemplar_chars {
-  base: "◌ٙ ◌ٛ آ أ ؤ ئ ا ب پ ت ث ج چ ح خ د ذ ر ز ژ س ش ص ض ط ظ ع غ ف ڤ ق ک گ ل م ن ھ ە و ۉ ۊ ی ؽ"
+  base: "آ أ ؤ ئ ا ب پ ت ث ج چ ح خ د ذ ر ز ژ س ش ص ض ط ظ ع غ ف ڤ ق ک گ ل م ن ھ ە و ۉ ۊ ی ؽ"
   auxiliary: "​‌‍‎‏ ً ٌ ٍ َ ُ ِ ّ ْ ٔ إ ة ك ه ى ي"
+  marks: "◌ٙ ◌ٛ"
   numerals: "- , . % + 0 1 2 3 4 5 6 7 8 9"
   punctuation: "- ، ٫ ٬ ؛ : ! ؟ . … ‹ › « » ( ) [ ] * / \\"
   index: "آ ا ب پ ت ث ج چ ح خ د ذ ر ز ژ س ش ص ض ط ظ ع غ ف ق ک گ ل م ن ھ و ی"

diff --git a/Lib/gflanguages/data/languages/mzn_Arab.textproto b/Lib/gflanguages/data/languages/mzn_Arab.textproto
index e1ed7b3d790e55d0fe2014054f86d3df88f7a6f1..8700cd5587a1da54f7f9bbb9f1ae9cf1b0ed391e 100644 (file)
--- a/Lib/gflanguages/data/languages/mzn_Arab.textproto
+++ b/Lib/gflanguages/data/languages/mzn_Arab.textproto
@@ -5,8 +5,9 @@ name: "Mazanderani"
 population: 4246165
 region: "IR"
 exemplar_chars {
-  base: "◌ً ◌ٌ ◌ٍ ◌ّ ◌ٔ ء آ أ ؤ ئ ا ب پ ة ت ث ج چ ح خ د ذ ر ز ژ س ش ص ض ط ظ ع غ ف ق ک گ ل م ن ه و ی"
+  base: "ء آ أ ؤ ئ ا ب پ ة ت ث ج چ ح خ د ذ ر ز ژ س ش ص ض ط ظ ع غ ف ق ک گ ل م ن ه و ی"
   auxiliary: "‌‍‎‏ َ ُ ِ ْ ٖ ٰ إ ك ى ي"
+  marks: "◌ً ◌ٌ ◌ٍ ◌ّ ◌ٔ"
   punctuation: "- ، ٫ ٬ ؛ : ! ؟ . … ‹ › « » ( ) [ ] * / \\"
   index: "آ ا ب پ ت ث ج چ ح خ د ذ ر ز ژ س ش ص ض ط ظ ع غ ف ق ک گ ل م ن ه و ی"
 }

diff --git a/Lib/gflanguages/data/languages/pa_Arab.textproto b/Lib/gflanguages/data/languages/pa_Arab.textproto
index 0674cb70fd66a4b200a12e4e19428dbf84cc1cd5..6ec1c8c8e5f35ff589c57e5657d5d404a10601e7 100644 (file)
--- a/Lib/gflanguages/data/languages/pa_Arab.textproto
+++ b/Lib/gflanguages/data/languages/pa_Arab.textproto
@@ -5,8 +5,9 @@ name: "Punjabi (Arabic)"
 population: 163450700
 region: "PK"
 exemplar_chars {
-  base: "◌ُ ء آ ؤ ئ ا ب پ ت ث ٹ ج چ ح خ د ذ ڈ ر ز ڑ ژ س ش ص ض ط ظ ع غ ف ق ک گ ل م ن ں ه ھ ہ و ی ے"
+  base: "ء آ ؤ ئ ا ب پ ت ث ٹ ج چ ح خ د ذ ڈ ر ز ڑ ژ س ش ص ض ط ظ ع غ ف ق ک گ ل م ن ں ه ھ ہ و ی ے"
   auxiliary: "‎‏ أ ٻ ة ٺ ټ ٽ"
+  marks: "◌ُ"
   numerals: "‎ - , . % + 0 1 2 3 4 5 6 7 8 9"
   index: "ء آ ؤ ئ ا ب پ ت ث ٹ ج چ ح خ د ذ ڈ ر ز ڑ ژ س ش ص ض ط ظ ع غ ف ق ک گ ل م ن ں ه ھ ہ و ی ے"
 }

diff --git a/Lib/gflanguages/data/languages/ps_Arab.textproto b/Lib/gflanguages/data/languages/ps_Arab.textproto
index 287d11948a3bd4c35e3f50350f0bd9a21f179337..fad062f130db8e6dcb745b34e17d516171748e81 100644 (file)
--- a/Lib/gflanguages/data/languages/ps_Arab.textproto
+++ b/Lib/gflanguages/data/languages/ps_Arab.textproto
@@ -9,8 +9,9 @@ region: "AF"
 region: "IR"
 region: "PK"
 exemplar_chars {
-  base: "◌َ ◌ِ ◌ُ ◌ً ◌ٍ ◌ٌ ◌ّ ◌ْ ◌ٔ ◌ٰ آ ا أ ء ب پ ت ټ ث ج ځ چ څ ح خ د ډ ذ ر ړ ز ژ ږ س ش ښ ص ض ط ظ ع غ ف ق ک ګ گ ل م ن ڼ ه ة و ؤ ی ي ې ۍ ئ"
+  base: "آ ا أ ء ب پ ت ټ ث ج ځ چ څ ح خ د ډ ذ ر ړ ز ژ ږ س ش ښ ص ض ط ظ ع غ ف ق ک ګ گ ل م ن ڼ ه ة و ؤ ی ي ې ۍ ئ"
   auxiliary: "‌ ‍ ‎‏ ے"
+  marks: "◌َ ◌ِ ◌ُ ◌ً ◌ٍ ◌ٌ ◌ّ ◌ْ ◌ٔ ◌ٰ"
   numerals: "‎ - , ٫ ٬ . % ٪ ؉ + − 0۰ 1۱ 2۲ 3۳ 4۴ 5۵ 6۶ 7۷ 8۸ 9۹"
   punctuation: "، ; : ! ۔ \' ‘ ( ) [ ] { } / ۽ ۾"
   index: "آ ا ء ب پ ت ټ ث ج ځ چ څ ح خ د ډ ذ ر ړ ز ژ ږ س ش ښ ص ض ط ظ ع غ ف ق ک ګ ل م ن ڼ ه و ی"

diff --git a/Lib/gflanguages/data/languages/uz_Arab.textproto b/Lib/gflanguages/data/languages/uz_Arab.textproto
index 6f5c20b04f56a604235238c2de45e90ece74edf8..8e48d5e4722cfc4366d1e4157561181615e35735 100644 (file)
--- a/Lib/gflanguages/data/languages/uz_Arab.textproto
+++ b/Lib/gflanguages/data/languages/uz_Arab.textproto
@@ -6,8 +6,9 @@ autonym: "اوزبیک (عربی)"
 population: 1722258
 region: "AF"
 exemplar_chars {
-  base: "◌ً ◌ٌ ◌ٍ ◌َ ◌ُ ◌ِ ◌ّ ◌ْ ◌ٔ ◌ٰ ء آ أ ؤ ئ ا ب پ ة ت ث ج چ ح خ د ذ ر ز ژ س ش ص ض ط ظ ع غ ف ق ک گ ل م ن ه و ۇ ۉ ی"
+  base: "ء آ أ ؤ ئ ا ب پ ة ت ث ج چ ح خ د ذ ر ز ژ س ش ص ض ط ظ ع غ ف ق ک گ ل م ن ه و ۇ ۉ ی"
   auxiliary: "‌‍‎‏ ټ ځ څ ډ ړ ږ ښ ګ ڼ ي ۍ ې"
+  marks: "◌ً ◌ٌ ◌ٍ ◌َ ◌ُ ◌ِ ◌ّ ◌ْ ◌ٔ ◌ٰ"
   numerals: "‎ - , ٫ ٬ . % ٪ ؉ + − 0۰ 1۱ 2۲ 3۳ 4۴ 5۵ 6۶ 7۷ 8۸ 9۹"
   index: "ء آ أ ؤ ئ ا ب پ ة ت ث ټ ج چ ح خ ځ څ د ذ ډ ر ز ړ ږ ژ س ش ښ ص ض ط ظ ع غ ف ق ک ګ گ ل م ن ڼ ه و ۇ ۉ ي ی ۍ ې"
 }