Update words_th.txt : del ชิชิ

Author: wannaphong

pythainlp/corpus/words_th.txt

@@ -15594,7 +15594,6 @@
 ชิงไหวชิงพริบ
 ชิงฮื้อ
 ชิชะ
-ชิชิ
 ชิณณะ
 ชิด
 ชิดขวา

tests/test_tokenize.py

@@ -208,6 +208,13 @@ def test_word_tokenize_newmm(self):
         self.assertIsNotNone(
             word_tokenize(long_danger_text, engine="newmm-safe")
         )
+        text = "ชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิชิ"
+        self.assertIsNotNone(
+            word_tokenize(text, engine="newmm")
+        )
+        self.assertIsNotNone(
+            word_tokenize(text, engine="newmm-safe")
+        )
 
     def test_word_tokenize_attacut(self):
         self.assertEqual(attacut.segment(None), [])