Turkmen (tk) subword embeddings
Training corpus sample, encoded with different BPE vocabulary sizes
| Vocab size | tkwiki sample |
|---|---|
| original | ösüşiň ösmegi bilen düşündirilýär, sebäbi ylmy ösüş täze syn etmeleriň netijesinde täze bilimleriň hazynasyny toplamaga mümkinçilik berýär. yslam diniň esasy kada – kanunlary, “gurhanda” ýerleşidirilipdir. goşgularyň sany 000-nji ýylda 0000, onda 00000 söz bar. 000 süreden (bölekden) her s kоngrеsiň rеzоlýusiýаsyny hаlkаrа jеnаýаtçylygynа gаrşy görеşmеkdе pоlisiýаnyň öňündе durýаn wеzipеlеr düzdi. bu bоlsа, hаlkаrа jеnаýаtçylygynа gаrşy |
| 1000 | ▁ösüş iň ▁ös megi ▁bilen ▁düş ün dir ilýär , ▁seb ä bi ▁yl my ▁ösüş ▁täze ▁s yn ▁et me leriň ▁netijes inde ▁täze ▁bil im leriň ▁h az yn asyny ▁top la maga ▁mümkin çilik ▁ber ýär . ▁y sla m ▁d iniň ▁esasy ▁k ada ▁– ▁kan un lary , ▁“ g ur han da ” ▁ýerleş i dir il ipdir . ▁goş g u laryň ▁sany ▁000- nji ▁ýylda ▁0000 , ▁on da ▁0000 0 ▁söz ▁bar . ▁000 ▁s ür e den ▁( b ö lek den ) ▁her ▁s ▁k о n g r е s iň ▁r е z о l ý us iý а s yny ▁h а l k а r а ▁j е n а ý а t çyly g yn а ▁g а r şy ▁gör е ş m е k d е ▁p о lis iý а nyň ▁öň ün d е ▁dur ý а n ▁w е z ip е l е r ▁düz di . ▁bu ▁b о l s а , ▁h а l k а r а ▁j е n а ý а t çyly g yn а ▁g а r şy |
| 3000 | ▁ösüş iň ▁ös megi ▁bilen ▁düşündir ilýär , ▁sebäbi ▁ylmy ▁ösüş ▁täze ▁syn ▁et me leriň ▁netijesinde ▁täze ▁bilim leriň ▁h az yn asyny ▁top la maga ▁mümkinçilik ▁berýär . ▁yslam ▁d iniň ▁esasy ▁kada ▁– ▁kanun lary , ▁“ gur han da ” ▁ýerleş i dir ilipdir . ▁goşgu laryň ▁sany ▁000- nji ▁ýylda ▁0000, ▁onda ▁0000 0 ▁söz ▁bar . ▁000 ▁sür e den ▁( b ö lek den ) ▁her ▁s ▁k о n gr е s iň ▁r е z о l ý us iý а syny ▁h а l k а r а ▁j е n а ý а t çyly gyn а ▁g а r şy ▁gör е ş m е k d е ▁p о lis iý а nyň ▁öň ün d е ▁dur ý а n ▁w е z ip е l е r ▁düz di . ▁bu ▁b о l s а , ▁h а l k а r а ▁j е n а ý а t çyly gyn а ▁g а r şy |
| 5000 | ▁ösüşiň ▁ösmegi ▁bilen ▁düşündir ilýär , ▁sebäbi ▁ylmy ▁ösüş ▁täze ▁syn ▁et me leriň ▁netijesinde ▁täze ▁bilim leriň ▁haz yn asyny ▁top lamaga ▁mümkinçilik ▁berýär . ▁yslam ▁d iniň ▁esasy ▁kada ▁– ▁kanun lary , ▁“ gur han da ” ▁ýerleş i dir ilipdir . ▁goşgu laryň ▁sany ▁000- nji ▁ýylda ▁0000, ▁onda ▁00000 ▁söz ▁bar . ▁000 ▁sür e den ▁( b ö lek den ) ▁her ▁s ▁k о n gr е s iň ▁r е z о l ýus iý а syny ▁h а l k а r а ▁j е n а ý а t çyly gyn а ▁g а r şy ▁gör е ş m е k d е ▁p о lis iý а nyň ▁öň ün d е ▁dur ý а n ▁w е z ip е l е r ▁düz di . ▁bu ▁b о l s а , ▁h а l k а r а ▁j е n а ý а t çyly gyn а ▁g а r şy |
| 10000 | ▁ösüşiň ▁ösmegi ▁bilen ▁düşündirilýär , ▁sebäbi ▁ylmy ▁ösüş ▁täze ▁syn ▁etme leriň ▁netijesinde ▁täze ▁bilim leriň ▁hazyn asyny ▁top lamaga ▁mümkinçilik ▁berýär . ▁yslam ▁d iniň ▁esasy ▁kada ▁– ▁kanunlary , ▁“ gur han da ” ▁ýerleş idir ilipdir . ▁goşgu laryň ▁sany ▁000- nji ▁ýylda ▁0000, ▁onda ▁00000 ▁söz ▁bar . ▁000 ▁sür eden ▁( b ö lek den ) ▁her ▁s ▁k о n gr е siň ▁r е z о l ýus iý а syny ▁h а lk а r а ▁j е n а ý а t çyly gyn а ▁g а r şy ▁gör е ş m е k d е ▁p о lisiý а nyň ▁öň ün d е ▁dur ý а n ▁w е z ip е l е r ▁düzdi . ▁bu ▁b о l s а , ▁h а lk а r а ▁j е n а ý а t çyly gyn а ▁g а r şy |
| 25000 | ▁ösüşiň ▁ösmegi ▁bilen ▁düşündirilýär , ▁sebäbi ▁ylmy ▁ösüş ▁täze ▁syn ▁etme leriň ▁netijesinde ▁täze ▁bilimleriň ▁hazynasyny ▁top lamaga ▁mümkinçilik ▁berýär . ▁yslam ▁diniň ▁esasy ▁kada ▁– ▁kanunlary , ▁“ gur handa ” ▁ýerleş idir ilipdir . ▁goşgularyň ▁sany ▁000- nji ▁ýylda ▁0000, ▁onda ▁00000 ▁söz ▁bar . ▁000 ▁sür eden ▁( bölek den ) ▁her ▁s ▁k о ngr е siň ▁r е z о lýus iý а syny ▁h а lk а r а ▁j е n а ý а t çyly gyn а ▁g а rşy ▁gör е şm е kd е ▁p о lisiý а nyň ▁öňün d е ▁dur ý а n ▁w е z ip е l е r ▁düzdi . ▁bu ▁b о ls а , ▁h а lk а r а ▁j е n а ý а t çyly gyn а ▁g а rşy |
| 50000 | ▁ösüşiň ▁ösmegi ▁bilen ▁düşündirilýär , ▁sebäbi ▁ylmy ▁ösüş ▁täze ▁syn ▁etme leriň ▁netijesinde ▁täze ▁bilimleriň ▁hazynasyny ▁top lamaga ▁mümkinçilik ▁berýär . ▁yslam ▁diniň ▁esasy ▁kada ▁– ▁kanunlary , ▁“ gur handa ” ▁ýerleşidir ilipdir . ▁goşgularyň ▁sany ▁000- nji ▁ýylda ▁0000, ▁onda ▁00000 ▁söz ▁bar . ▁000 ▁süreden ▁( bölek den ) ▁her ▁s ▁k о ngr е siň ▁r е z о lýusiý а syny ▁h а lk а r а ▁j е n а ý а tçylygyn а ▁g а rşy ▁gör е şm е kd е ▁p о lisiý а nyň ▁öňün d е ▁dur ý а n ▁w е zip е l е r ▁düzdi . ▁bu ▁b о ls а , ▁h а lk а r а ▁j е n а ý а tçylygyn а ▁g а rşy |