Tatar (tt) subword embeddings
Training corpus sample, encoded with different BPE vocabulary sizes
| Vocab size | ttwiki sample |
|---|---|
| original | байлар сабасында аграр көллият, гимназия, сәләтле балалар өчен урта мәктәп, сәламәтлеге чикле балалар өчен мәктәп-интернат, балалар иҗаты үзәге, балал * яз көне елга кырыйларында боз калса, ашлык уңмас. * яз көне елгаларда су артмаса, ашлык уңмас. * яз көне тамчы бозлары озын булса, сабан ашлыгы озын • үз-үзеңнән җирәнү – ул бертуктаусыз йөрәкне агулый һәм телгәли торган, аның тере канын суыручы һәм кешеләрне күралмау агуын агыза торган елан. |
| 1000 | ▁б ай лар ▁с а б асында ▁аг р ар ▁кө л л ият , ▁г им н аз ия , ▁сә лә т ле ▁бал алар ▁өчен ▁урта ▁мәктә п , ▁сә ла мәт леге ▁ч ик ле ▁бал алар ▁өчен ▁мәктә п - ин тер н ат , ▁бал алар ▁и җ ат ы ▁үз ә ге , ▁бал ал ▁* ▁яз ▁көне ▁елга ▁кыр ый лар ында ▁боз ▁кал са , ▁а ш лык ▁уң мас . ▁* ▁яз ▁көне ▁елга ларда ▁су ▁арт мас а , ▁а ш лык ▁уң мас . ▁* ▁яз ▁көне ▁та м чы ▁боз лары ▁озын ▁бул са , ▁с а б ан ▁а ш лыгы ▁озын ▁ • ▁үз - үз ең нән ▁җир ән ү ▁– ▁ул ▁бер т у кт а ус ы з ▁й өр әк не ▁аг у лый ▁һәм ▁тел гә ли ▁торган , ▁аның ▁тер е ▁кан ын ▁су ыр учы ▁һәм ▁к еш ел әр не ▁күр ал ма у ▁аг у ын ▁а гы за ▁торган ▁ел ан . |
| 3000 | ▁бай лар ▁са б асында ▁аг р ар ▁кө л л ият , ▁г им н аз ия , ▁сә ләт ле ▁балалар ▁өчен ▁урта ▁мәктәп , ▁сә ла мәт леге ▁чик ле ▁балалар ▁өчен ▁мәктәп - ин тер н ат , ▁балалар ▁иҗ аты ▁үзәге , ▁бал ал ▁* ▁яз ▁көне ▁елга ▁кыр ый ларында ▁боз ▁кал са , ▁аш лык ▁уң мас . ▁* ▁яз ▁көне ▁елга ларда ▁су ▁арт маса , ▁аш лык ▁уң мас . ▁* ▁яз ▁көне ▁там чы ▁боз лары ▁озын ▁булса , ▁са бан ▁аш лыгы ▁озын ▁ • ▁үз - үз ең нән ▁җир ән ү ▁– ▁ул ▁бер ту кта усы з ▁йөр әк не ▁аг у лый ▁һәм ▁тел гә ли ▁торган , ▁аның ▁тер е ▁кан ын ▁су ыр учы ▁һәм ▁кешеләр не ▁күр ал ма у ▁аг у ын ▁а гы за ▁торган ▁ел ан . |
| 5000 | ▁бай лар ▁саб асында ▁аг р ар ▁көл л ият , ▁гимн азия , ▁сәләт ле ▁балалар ▁өчен ▁урта ▁мәктәп , ▁сәламәт леге ▁чик ле ▁балалар ▁өчен ▁мәктәп - ин тер нат , ▁балалар ▁иҗ аты ▁үзәге , ▁бал ал ▁* ▁яз ▁көне ▁елга ▁кыр ый ларында ▁боз ▁кал са , ▁аш лык ▁уң мас . ▁* ▁яз ▁көне ▁елга ларда ▁су ▁арт маса , ▁аш лык ▁уң мас . ▁* ▁яз ▁көне ▁там чы ▁боз лары ▁озын ▁булса , ▁са бан ▁аш лыгы ▁озын ▁ • ▁үз - үз ең нән ▁җир ән ү ▁– ▁ул ▁бер ту кта усы з ▁йөр әк не ▁аг у лый ▁һәм ▁тел гә ли ▁торган , ▁аның ▁тер е ▁кан ын ▁су ыр учы ▁һәм ▁кешеләр не ▁күр ал ма у ▁аг у ын ▁агы за ▁торган ▁ел ан . |
| 10000 | ▁бай лар ▁саб асында ▁аграр ▁көллият , ▁гимназия , ▁сәләтле ▁балалар ▁өчен ▁урта ▁мәктәп , ▁сәламәт леге ▁чик ле ▁балалар ▁өчен ▁мәктәп - интер нат , ▁балалар ▁иҗаты ▁үзәге , ▁бал ал ▁* ▁яз ▁көне ▁елга ▁кырый ларында ▁боз ▁кал са , ▁аш лык ▁уң мас . ▁* ▁яз ▁көне ▁елга ларда ▁су ▁арт маса , ▁аш лык ▁уң мас . ▁* ▁яз ▁көне ▁там чы ▁боз лары ▁озын ▁булса , ▁са бан ▁аш лыгы ▁озын ▁ • ▁үз - үз ең нән ▁җир ән ү ▁– ▁ул ▁бер ту кта усыз ▁йөрәк не ▁аг у лый ▁һәм ▁телгә ли ▁торган , ▁аның ▁тере ▁кан ын ▁су ыр учы ▁һәм ▁кешеләрне ▁күр ал мау ▁аг уын ▁агы за ▁торган ▁елан . |
| 25000 | ▁байлар ▁саб асында ▁аграр ▁көллият , ▁гимназия , ▁сәләтле ▁балалар ▁өчен ▁урта ▁мәктәп , ▁сәламәтлеге ▁чикле ▁балалар ▁өчен ▁мәктәп - интернат , ▁балалар ▁иҗаты ▁үзәге , ▁бал ал ▁* ▁яз ▁көне ▁елга ▁кырый ларында ▁боз ▁кал са , ▁ашлык ▁уң мас . ▁* ▁яз ▁көне ▁елга ларда ▁су ▁арт маса , ▁ашлык ▁уң мас . ▁* ▁яз ▁көне ▁тамчы ▁боз лары ▁озын ▁булса , ▁сабан ▁аш лыгы ▁озын ▁ • ▁үз - үз ең нән ▁җир әнү ▁– ▁ул ▁берту кта усыз ▁йөрәк не ▁агу лый ▁һәм ▁телгә ли ▁торган , ▁аның ▁тере ▁кан ын ▁суыр учы ▁һәм ▁кешеләрне ▁күр ал мау ▁аг уын ▁агы за ▁торган ▁елан . |
| 50000 | ▁байлар ▁саб асында ▁аграр ▁көллият , ▁гимназия , ▁сәләтле ▁балалар ▁өчен ▁урта ▁мәктәп , ▁сәламәтлеге ▁чикле ▁балалар ▁өчен ▁мәктәп - интернат , ▁балалар ▁иҗаты ▁үзәге , ▁бал ал ▁* ▁яз ▁көне ▁елга ▁кырый ларында ▁боз ▁калса , ▁ашлык ▁уң мас . ▁* ▁яз ▁көне ▁елгаларда ▁су ▁арт маса , ▁ашлык ▁уң мас . ▁* ▁яз ▁көне ▁тамчы ▁боз лары ▁озын ▁булса , ▁сабан ▁аш лыгы ▁озын ▁ • ▁үз - үз ең нән ▁җир әнү ▁– ▁ул ▁бертуктаусыз ▁йөрәк не ▁агу лый ▁һәм ▁телгә ли ▁торган , ▁аның ▁тере ▁канын ▁суыр учы ▁һәм ▁кешеләрне ▁күр ал мау ▁аг уын ▁агы за ▁торган ▁елан . |
| 100000 | ▁байлар ▁сабасында ▁аграр ▁көллият , ▁гимназия , ▁сәләтле ▁балалар ▁өчен ▁урта ▁мәктәп , ▁сәламәтлеге ▁чикле ▁балалар ▁өчен ▁мәктәп - интернат , ▁балалар ▁иҗаты ▁үзәге , ▁бал ал ▁* ▁яз ▁көне ▁елга ▁кырыйларында ▁боз ▁калса , ▁ашлык ▁уң мас . ▁* ▁яз ▁көне ▁елгаларда ▁су ▁арт маса , ▁ашлык ▁уң мас . ▁* ▁яз ▁көне ▁тамчы ▁бозлары ▁озын ▁булса , ▁сабан ▁ашлыгы ▁озын ▁ • ▁үз - үзең нән ▁җир әнү ▁– ▁ул ▁бертуктаусыз ▁йөрәкне ▁агулый ▁һәм ▁телгә ли ▁торган , ▁аның ▁тере ▁канын ▁суыручы ▁һәм ▁кешеләрне ▁күрал мау ▁агуын ▁агыза ▁торган ▁елан . |