Walloon (wa) subword embeddings
Training corpus sample, encoded with different BPE vocabulary sizes
| Vocab size | wawiki sample |
|---|---|
| original | on xhorlêye les tchames avou l' xhore (ramexhné pa j. haust). >> aveur li dos come ene tchame: esse vôssé do dos, copurade cwand on dvént vî. d' ene p 0. fyi d' fier. on treyisse di fyi d' årca. louwis a rmetou d' l' ôle didins les deus crassets ki pindént å plafond après troes fyis d' årca (louis pi >> ki l' bon diu vs etinde; u: ki l' bon diu l' voye: dijhêye po sohaitî a ene sakî çou k' i vout, mins sins î croere ditrop. |
| 1000 | ▁on ▁xh or lêye ▁les ▁tcham es ▁avou ▁l ' ▁xh o re ▁( ra mexh né ▁pa ▁j . ▁ha ust ). ▁>> ▁aveur ▁li ▁do s ▁come ▁ene ▁tch a me : ▁esse ▁v ô ss é ▁do ▁do s , ▁co pu rade ▁cwand ▁on ▁dv ént ▁vî . ▁d ' ▁ene ▁p ▁0. ▁f yi ▁d ' ▁fi er . ▁on ▁t re y isse ▁di ▁f yi ▁d ' ▁år ca . ▁l ouw is ▁a ▁r met ou ▁d ' ▁l ' ▁ô le ▁did ins ▁les ▁deus ▁c ra sse ts ▁ki ▁p ind ént ▁å ▁pla fond ▁après ▁troes ▁f yis ▁d ' ▁år ca ▁( lou is ▁pi ▁>> ▁ki ▁l ' ▁bon ▁di u ▁vs ▁et inde ; ▁u : ▁ki ▁l ' ▁bon ▁di u ▁l ' ▁voye : ▁dijh êye ▁po ▁so ha it î ▁a ▁ene ▁sa kî ▁çou ▁k ' ▁i ▁v out , ▁mins ▁sins ▁î ▁cro ere ▁dit ro p . |
| 3000 | ▁on ▁xh or lêye ▁les ▁tcham es ▁avou ▁l ' ▁xh o re ▁( ramexhné ▁pa ▁j . ▁haust ). ▁>> ▁aveur ▁li ▁dos ▁come ▁ene ▁tcha me : ▁esse ▁vô ss é ▁do ▁dos , ▁copurade ▁cwand ▁on ▁dvént ▁vî . ▁d ' ▁ene ▁p ▁0. ▁f yi ▁d ' ▁fier . ▁on ▁tre y isse ▁di ▁f yi ▁d ' ▁år ca . ▁louw is ▁a ▁r metou ▁d ' ▁l ' ▁ô le ▁did ins ▁les ▁deus ▁cra sse ts ▁ki ▁pind ént ▁å ▁pla fond ▁après ▁troes ▁f yis ▁d ' ▁år ca ▁( lou is ▁pi ▁>> ▁ki ▁l ' ▁bon ▁diu ▁vs ▁et inde ; ▁u : ▁ki ▁l ' ▁bon ▁diu ▁l ' ▁voye : ▁dijhêye ▁po ▁so ha it î ▁a ▁ene ▁sakî ▁çou ▁k ' ▁i ▁vout , ▁mins ▁sins ▁î ▁cro ere ▁dit ro p . |
| 5000 | ▁on ▁xh or lêye ▁les ▁tcham es ▁avou ▁l ' ▁xh ore ▁( ramexhné ▁pa ▁j . ▁haust ). ▁>> ▁aveur ▁li ▁dos ▁come ▁ene ▁tcha me : ▁esse ▁vô ss é ▁do ▁dos , ▁copurade ▁cwand ▁on ▁dvént ▁vî . ▁d ' ▁ene ▁p ▁0. ▁f yi ▁d ' ▁fier . ▁on ▁tre yisse ▁di ▁f yi ▁d ' ▁år ca . ▁louwis ▁a ▁r metou ▁d ' ▁l ' ▁ôle ▁did ins ▁les ▁deus ▁cra sse ts ▁ki ▁pind ént ▁å ▁pla fond ▁après ▁troes ▁fyis ▁d ' ▁år ca ▁( lou is ▁pi ▁>> ▁ki ▁l ' ▁bon ▁diu ▁vs ▁et inde ; ▁u : ▁ki ▁l ' ▁bon ▁diu ▁l ' ▁voye : ▁dijhêye ▁po ▁so ha it î ▁a ▁ene ▁sakî ▁çou ▁k ' ▁i ▁vout , ▁mins ▁sins ▁î ▁cro ere ▁dit ro p . |
| 10000 | ▁on ▁xh or lêye ▁les ▁tcham es ▁avou ▁l ' ▁xh ore ▁( ramexhné ▁pa ▁j . ▁haust ). ▁>> ▁aveur ▁li ▁dos ▁come ▁ene ▁tchame : ▁esse ▁vô ss é ▁do ▁dos , ▁copurade ▁cwand ▁on ▁dvént ▁vî . ▁d ' ▁ene ▁p ▁0. ▁fyi ▁d ' ▁fier . ▁on ▁tre yisse ▁di ▁fyi ▁d ' ▁år ca . ▁louwis ▁a ▁rmetou ▁d ' ▁l ' ▁ôle ▁didins ▁les ▁deus ▁cra sse ts ▁ki ▁pind ént ▁å ▁pla fond ▁après ▁troes ▁fyis ▁d ' ▁år ca ▁( louis ▁pi ▁>> ▁ki ▁l ' ▁bon ▁diu ▁vs ▁etinde ; ▁u : ▁ki ▁l ' ▁bon ▁diu ▁l ' ▁voye : ▁dijhêye ▁po ▁so haitî ▁a ▁ene ▁sakî ▁çou ▁k ' ▁i ▁vout , ▁mins ▁sins ▁î ▁croere ▁dit rop . |
| 25000 | ▁on ▁xh or lêye ▁les ▁tchames ▁avou ▁l ' ▁xh ore ▁( ramexhné ▁pa ▁j . ▁haust ). ▁>> ▁aveur ▁li ▁dos ▁come ▁ene ▁tchame : ▁esse ▁vôss é ▁do ▁dos , ▁copurade ▁cwand ▁on ▁dvént ▁vî . ▁d ' ▁ene ▁p ▁0. ▁fyi ▁d ' ▁fier . ▁on ▁treyisse ▁di ▁fyi ▁d ' ▁årca . ▁louwis ▁a ▁rmetou ▁d ' ▁l ' ▁ôle ▁didins ▁les ▁deus ▁crasse ts ▁ki ▁pind ént ▁å ▁plafond ▁après ▁troes ▁fyis ▁d ' ▁årca ▁( louis ▁pi ▁>> ▁ki ▁l ' ▁bon ▁diu ▁vs ▁etinde ; ▁u : ▁ki ▁l ' ▁bon ▁diu ▁l ' ▁voye : ▁dijhêye ▁po ▁sohaitî ▁a ▁ene ▁sakî ▁çou ▁k ' ▁i ▁vout , ▁mins ▁sins ▁î ▁croere ▁ditrop . |
| 50000 | ▁on ▁xhor lêye ▁les ▁tchames ▁avou ▁l ' ▁xh ore ▁( ramexhné ▁pa ▁j . ▁haust ). ▁>> ▁aveur ▁li ▁dos ▁come ▁ene ▁tchame : ▁esse ▁vôss é ▁do ▁dos , ▁copurade ▁cwand ▁on ▁dvént ▁vî . ▁d ' ▁ene ▁p ▁0. ▁fyi ▁d ' ▁fier . ▁on ▁treyisse ▁di ▁fyi ▁d ' ▁årca . ▁louwis ▁a ▁rmetou ▁d ' ▁l ' ▁ôle ▁didins ▁les ▁deus ▁crassets ▁ki ▁pindént ▁å ▁plafond ▁après ▁troes ▁fyis ▁d ' ▁årca ▁( louis ▁pi ▁>> ▁ki ▁l ' ▁bon ▁diu ▁vs ▁etinde ; ▁u : ▁ki ▁l ' ▁bon ▁diu ▁l ' ▁voye : ▁dijhêye ▁po ▁sohaitî ▁a ▁ene ▁sakî ▁çou ▁k ' ▁i ▁vout , ▁mins ▁sins ▁î ▁croere ▁ditrop . |