[dictionaries] Removing the convention of separating ideograms with space, tokenizer can accomplish the same thing

This commit is contained in:
Al
2015-07-20 02:50:35 -04:00
parent 3ff6526392
commit 96d20f8693
11 changed files with 58 additions and 60 deletions

View File

@@ -1,10 +1,10 @@
soi|sxy
อ ย เ ท ศ บ า
อยเทศบา
soi thetsaban|sxy theṣ̄bāl|sxy tesbal
thanon|t̄hnn|thnn
า ง ด ่ ว
ฮ เ ว ย
ร อ
างด่ว
ฮเวย
รอ
trok|trxk