Erzya (myv) subword embeddings
| Vocab size | vocab | model | 25 dim | 50 dim | 100 dim | 200 dim | 300 dim |
|---|---|---|---|---|---|---|---|
| 1000 | vocab | model |
txt |
bin
bokeh | umap | matrix |
txt |
bin
bokeh | umap | matrix |
txt |
bin
bokeh | umap | matrix |
txt |
bin
bokeh | umap | matrix |
txt |
bin
bokeh | umap | matrix |
| 3000 | vocab | model |
txt |
bin
bokeh | umap | matrix |
txt |
bin
bokeh | umap | matrix |
txt |
bin
bokeh | umap | matrix |
txt |
bin
bokeh | umap | matrix |
txt |
bin
bokeh | umap | matrix |
| 5000 | vocab | model |
txt |
bin
bokeh | umap | matrix |
txt |
bin
bokeh | umap | matrix |
txt |
bin
bokeh | umap | matrix |
txt |
bin
bokeh | umap | matrix |
txt |
bin
bokeh | umap | matrix |
| 10000 | vocab | model |
txt |
bin
bokeh | umap | matrix |
txt |
bin
bokeh | umap | matrix |
txt |
bin
bokeh | umap | matrix |
txt |
bin
bokeh | umap | matrix |
txt |
bin
bokeh | umap | matrix |
Training corpus sample, encoded with different BPE vocabulary sizes
| Vocab size | myvwiki sample |
|---|---|
| original | ожоковонь 00 чи — 000-це чи иенть (000-це високосной иетнесте) григорианонь ковкерьксенть. иенть прядоманьте кадови 00 чить. плантагенетт (, , ) — те кранцузонь юронь инязоронь кансь (династиясь), вейке гатине-анжу кудонь тарадтнестэ. масторст ули васня кранциясо, ансяк цёта «эрзянь мастор» — те эсьмельксэв вейксэнь эрзянь кулялопа, кона лисни сарансо. сёрмадовксонзо лиснить эрзянь ды рузонь кельсэ. |
| 1000 | ▁ожо ковонь ▁00 ▁чи ▁— ▁000- це ▁чи ▁иенть ▁(000- це ▁високосной ▁иетнесте ) ▁григорианонь ▁ковкерьксенть . ▁иенть ▁прядоманьте ▁кадови ▁00 ▁чить . ▁п л ан та ге не т т ▁(, ▁, ▁) ▁— ▁те ▁к ран ц уз онь ▁ю ронь ▁и ня зор онь ▁кан сь ▁( д ина ст ия сь ), ▁вейке ▁г ат ине - ан ж у ▁ку донь ▁тар а д тнестэ . ▁мастор ст ▁ули ▁вас ня ▁к ран ц иясо , ▁ансяк ▁цё та ▁« эрзянь ▁мастор » ▁— ▁те ▁эсь м ель ксэ в ▁вей кс энь ▁эрзянь ▁куля лоп а , ▁кона ▁лис ни ▁саран со . ▁сёрмадов кс онзо ▁лис н ить ▁эрзянь ▁ды ▁рузонь ▁кельсэ . |
| 3000 | ▁ожоковонь ▁00 ▁чи ▁— ▁000- це ▁чи ▁иенть ▁(000- це ▁високосной ▁иетнесте ) ▁григорианонь ▁ковкерьксенть . ▁иенть ▁прядоманьте ▁кадови ▁00 ▁чить . ▁п лан та ге не тт ▁(, ▁, ▁) ▁— ▁те ▁к ран ц уз онь ▁ю ронь ▁инязор онь ▁кан сь ▁( д ина ст иясь ), ▁вейке ▁г ат ине - ан ж у ▁кудонь ▁тарад тнестэ . ▁мастор ст ▁ули ▁васня ▁к ран циясо , ▁ансяк ▁цё та ▁« эрзянь ▁мастор » ▁— ▁те ▁эсь м ель ксэв ▁вей ксэнь ▁эрзянь ▁кулялопа , ▁кона ▁лис ни ▁саран со . ▁сёрмадовксонзо ▁лис нить ▁эрзянь ▁ды ▁рузонь ▁кельсэ . |
| 5000 | ▁ожоковонь ▁00 ▁чи ▁— ▁000- це ▁чи ▁иенть ▁(000- це ▁високосной ▁иетнесте ) ▁григорианонь ▁ковкерьксенть . ▁иенть ▁прядоманьте ▁кадови ▁00 ▁чить . ▁п лан та ге не тт ▁(, ▁, ▁) ▁— ▁те ▁к ран ц узонь ▁ю ронь ▁инязор онь ▁кан сь ▁( д ина ст иясь ), ▁вейке ▁г ат ине - ан ж у ▁кудонь ▁тарад тнестэ . ▁мастор ст ▁ули ▁васня ▁к ран циясо , ▁ансяк ▁цё та ▁« эрзянь ▁мастор » ▁— ▁те ▁эсь мель ксэв ▁вей ксэнь ▁эрзянь ▁кулялопа , ▁кона ▁лисни ▁саран со . ▁сёрмадовксонзо ▁лис нить ▁эрзянь ▁ды ▁рузонь ▁кельсэ . |
| 10000 | ▁ожоковонь ▁00 ▁чи ▁— ▁000- це ▁чи ▁иенть ▁(000- це ▁високосной ▁иетнесте ) ▁григорианонь ▁ковкерьксенть . ▁иенть ▁прядоманьте ▁кадови ▁00 ▁чить . ▁план та ге не тт ▁(, ▁, ▁) ▁— ▁те ▁кран ц узонь ▁юронь ▁инязоронь ▁кан сь ▁( дина ст иясь ), ▁вейке ▁г ат ине - ан жу ▁кудонь ▁тарад тнестэ . ▁мастор ст ▁ули ▁васня ▁кран циясо , ▁ансяк ▁цё та ▁« эрзянь ▁мастор » ▁— ▁те ▁эсь мель ксэв ▁вей ксэнь ▁эрзянь ▁кулялопа , ▁кона ▁лисни ▁сарансо . ▁сёрмадовксонзо ▁лиснить ▁эрзянь ▁ды ▁рузонь ▁кельсэ . |