Malayalam (ml) subword embeddings
Training corpus sample, encoded with different BPE vocabulary sizes
| Vocab size | mlwiki sample |
|---|---|
| original | സാധാരണ രണ്ടുബാൻഡുള്ള റേഡിയോസ്വീകരണി ഉപയോഗിച്ച് ഹാം റേഡിയോ സന്ദേശങ്ങൾ കേൾക്കാൻ സാധിക്കും. അവയിൽ 00 മീറ്ററിൽ ട്യൂൺ ചെയ്താൽ ചെറുതായി സംഭാഷണം കേൾക്കാം. റേ ലോകസഭയിൽ ഭൂരിപക്ഷമുള്ള പാർട്ടിയുടെ നേതാവിനെ രാഷ്ട്രപതി മന്ത്രിസഭയുണ്ടാക്കാൻ ക്ഷണിക്കുന്നു. മന്ത്രിസഭയുടെ തലവനാണ് പ്രധാനമന്ത്രി. പ്രധാനമന്ത്രിയുടെ ഉപദേ വർഗ്ഗം:ഇന്ത്യയുടെ പ്രധാനമന്ത്രിമാർ വർഗ്ഗം:ഭാരതരത്ന പുരസ്കാരം ലഭിച്ചവർ വർഗ്ഗം:ഇന്ത്യൻ നാഷണൽ കോൺഗ്രസിന്റെ പ്രസിഡന്റുമാർ വർഗ്ഗം:മുൻ കേന്ദ്രമന്ത്രിമാർ വർഗ |
| 1000 | ▁സാധ ാരണ ▁ര ണ്ടു ബ ാൻ ഡ ുള്ള ▁റ േ ഡ ിയ ോ സ് വ ീക രണ ി ▁ഉപയോഗ ിച്ച് ▁ഹ ാം ▁റ േ ഡ ിയ ോ ▁സ ന് ദേശ ങ്ങൾ ▁കേ ൾ ക്ക ാൻ ▁സാധ ിക്ക ും . ▁അവ യിൽ ▁00 ▁മ ീറ്റ റ ിൽ ▁ട ്യൂ ൺ ▁ചെയ്ത ാൽ ▁ചെ റു ത ായി ▁സം ഭ ാഷ ണം ▁കേ ൾ ക്ക ാം . ▁റ േ ▁ലോക സഭ യിൽ ▁ഭൂ രി പ ക്ഷ മുള്ള ▁പാർ ട്ട ിയുടെ ▁നേ ത ാവി നെ ▁ര ാഷ്ട്ര പ തി ▁മ ന് ത്രി സഭ യു ണ്ട ാക്ക ാൻ ▁ ക്ഷണ ിക്കുന്നു . ▁മ ന് ത്രി സഭ യുടെ ▁തല വന ാണ് ▁പ്രധാന മ ന് ത്രി . ▁പ്രധാന മ ന് ത്രി യുടെ ▁ഉപ ദേ ▁വർഗ്ഗം : ഇ ന്ത്യ യുടെ ▁പ്രധാന മ ന് ത്രി മാർ ▁വർഗ്ഗം : ഭ ാര ത ര ത് ന ▁പുരസ് കാരം ▁ലഭ ിച്ചവർ ▁വർഗ്ഗം : ഇ ന്ത്യ ൻ ▁ന ാഷ ണ ൽ ▁കോ ൺ ഗ്ര സിന്റെ ▁പ്രസി ഡ ന്റ ു മാർ ▁വർഗ്ഗം : മു ൻ ▁കേ ന്ദ്ര മ ന് ത്രി മാർ ▁വർ ഗ |
| 3000 | ▁സാധാരണ ▁രണ്ടു ബ ാൻ ഡ ുള്ള ▁റേ ഡിയോ സ്വ ീകരണ ി ▁ഉപയോഗിച്ച് ▁ഹ ാം ▁റേ ഡിയോ ▁സ ന് ദേശ ങ്ങൾ ▁കേ ൾ ക്കാൻ ▁സാധ ിക്കും . ▁അവ യിൽ ▁00 ▁മ ീറ്റ റിൽ ▁ട ്യൂ ൺ ▁ചെയ്ത ാൽ ▁ചെറു തായി ▁സംഭ ാഷ ണം ▁കേ ൾ ക്ക ാം . ▁റേ ▁ലോക സഭ യിൽ ▁ഭൂ രി പക്ഷ മുള്ള ▁പാർ ട്ട ിയുടെ ▁നേത ാവി നെ ▁രാഷ്ട്ര പതി ▁മന്ത്രി സഭ യു ണ്ട ാക്ക ാൻ ▁ ക്ഷണ ിക്കുന്നു . ▁മന്ത്രി സഭ യുടെ ▁തല വന ാണ് ▁പ്രധാന മന്ത്രി . ▁പ്രധാന മന്ത്രി യുടെ ▁ഉപ ദേ ▁വർഗ്ഗം : ഇന്ത്യ യുടെ ▁പ്രധാന മന്ത്രി മാർ ▁വർഗ്ഗം : ഭ ാരത ര ത് ന ▁പുരസ്കാരം ▁ലഭിച്ചവർ ▁വർഗ്ഗം : ഇന്ത്യ ൻ ▁നാഷണൽ ▁കോൺഗ്ര സിന്റെ ▁പ്രസിഡ ന്റ ു മാർ ▁വർഗ്ഗം : മു ൻ ▁കേന്ദ്ര മന്ത്രി മാർ ▁വർ ഗ |
| 5000 | ▁സാധാരണ ▁രണ്ടു ബ ാൻഡ ുള്ള ▁റേഡിയോ സ്വ ീകരണ ി ▁ഉപയോഗിച്ച് ▁ഹ ാം ▁റേഡിയോ ▁സന് ദേശ ങ്ങൾ ▁കേ ൾ ക്കാൻ ▁സാധിക്കും . ▁അവയിൽ ▁00 ▁മീറ്റ റിൽ ▁ട ്യൂ ൺ ▁ചെയ്ത ാൽ ▁ചെറു തായി ▁സംഭാഷ ണം ▁കേ ൾ ക്ക ാം . ▁റേ ▁ലോക സഭയിൽ ▁ഭൂരി പക്ഷ മുള്ള ▁പാർട്ട ിയുടെ ▁നേത ാവി നെ ▁രാഷ്ട്ര പതി ▁മന്ത്രി സഭ യുണ്ട ാക്കാൻ ▁ ക്ഷണ ിക്കുന്നു . ▁മന്ത്രി സഭ യുടെ ▁തല വന ാണ് ▁പ്രധാനമന്ത്രി . ▁പ്രധാനമന്ത്രി യുടെ ▁ഉപ ദേ ▁വർഗ്ഗം : ഇന്ത്യ യുടെ ▁പ്രധാനമന്ത്രി മാർ ▁വർഗ്ഗം : ഭ ാരത ര ത്ന ▁പുരസ്കാരം ▁ലഭിച്ചവർ ▁വർഗ്ഗം : ഇന്ത്യൻ ▁നാഷണൽ ▁കോൺഗ്ര സിന്റെ ▁പ്രസിഡന്റ ുമാർ ▁വർഗ്ഗം : മു ൻ ▁കേന്ദ്ര മന്ത്രി മാർ ▁വർ ഗ |
| 10000 | ▁സാധാരണ ▁രണ്ടു ബ ാൻഡ ുള്ള ▁റേഡിയോ സ്വ ീകരണ ി ▁ഉപയോഗിച്ച് ▁ഹ ാം ▁റേഡിയോ ▁സന്ദേശ ങ്ങൾ ▁കേൾ ക്കാൻ ▁സാധിക്കും . ▁അവയിൽ ▁00 ▁മീറ്റ റിൽ ▁ട്യൂ ൺ ▁ചെയ്ത ാൽ ▁ചെറു തായി ▁സംഭാഷണം ▁കേൾ ക്കാം . ▁റേ ▁ലോക സഭയിൽ ▁ഭൂരിപക്ഷ മുള്ള ▁പാർട്ടിയുടെ ▁നേത ാവിനെ ▁രാഷ്ട്രപതി ▁മന്ത്രിസഭ യുണ്ട ാക്കാൻ ▁ക്ഷണ ിക്കുന്നു . ▁മന്ത്രിസഭ യുടെ ▁തല വന ാണ് ▁പ്രധാനമന്ത്രി . ▁പ്രധാനമന്ത്രി യുടെ ▁ഉപ ദേ ▁വർഗ്ഗം : ഇന്ത്യ യുടെ ▁പ്രധാനമന്ത്രി മാർ ▁വർഗ്ഗം : ഭാരത ര ത്ന ▁പുരസ്കാരം ▁ലഭിച്ചവർ ▁വർഗ്ഗം : ഇന്ത്യൻ ▁നാഷണൽ ▁കോൺഗ്ര സിന്റെ ▁പ്രസിഡന്റ ുമാർ ▁വർഗ്ഗം : മുൻ ▁കേന്ദ്ര മന്ത്രി മാർ ▁വർഗ |
| 25000 | ▁സാധാരണ ▁രണ്ടു ബ ാൻഡ ുള്ള ▁റേഡിയോ സ്വ ീകരണ ി ▁ഉപയോഗിച്ച് ▁ഹാം ▁റേഡിയോ ▁സന്ദേശ ങ്ങൾ ▁കേൾ ക്കാൻ ▁സാധിക്കും . ▁അവയിൽ ▁00 ▁മീറ്ററിൽ ▁ട്യൂ ൺ ▁ചെയ്താൽ ▁ചെറുതായി ▁സംഭാഷണം ▁കേൾ ക്കാം . ▁റേ ▁ലോക സഭയിൽ ▁ഭൂരിപക്ഷ മുള്ള ▁പാർട്ടിയുടെ ▁നേത ാവിനെ ▁രാഷ്ട്രപതി ▁മന്ത്രിസഭ യുണ്ട ാക്കാൻ ▁ക്ഷണ ിക്കുന്നു . ▁മന്ത്രിസഭ യുടെ ▁തല വനാണ് ▁പ്രധാനമന്ത്രി . ▁പ്രധാനമന്ത്രി യുടെ ▁ഉപ ദേ ▁വർഗ്ഗം : ഇന്ത്യയുടെ ▁പ്രധാനമന്ത്രി മാർ ▁വർഗ്ഗം : ഭാരത രത്ന ▁പുരസ്കാരം ▁ലഭിച്ചവർ ▁വർഗ്ഗം : ഇന്ത്യൻ ▁നാഷണൽ ▁കോൺഗ്രസിന്റെ ▁പ്രസിഡന്റ ുമാർ ▁വർഗ്ഗം : മുൻ ▁കേന്ദ്രമന്ത്രി മാർ ▁വർഗ |
| 50000 | ▁സാധാരണ ▁രണ്ടു ബ ാൻഡ ുള്ള ▁റേഡിയോ സ്വ ീകരണ ി ▁ഉപയോഗിച്ച് ▁ഹാം ▁റേഡിയോ ▁സന്ദേശങ്ങൾ ▁കേൾക്കാൻ ▁സാധിക്കും . ▁അവയിൽ ▁00 ▁മീറ്ററിൽ ▁ട്യൂ ൺ ▁ചെയ്താൽ ▁ചെറുതായി ▁സംഭാഷണം ▁കേൾ ക്കാം . ▁റേ ▁ലോകസഭയിൽ ▁ഭൂരിപക്ഷ മുള്ള ▁പാർട്ടിയുടെ ▁നേത ാവിനെ ▁രാഷ്ട്രപതി ▁മന്ത്രിസഭ യുണ്ട ാക്കാൻ ▁ക്ഷണ ിക്കുന്നു . ▁മന്ത്രിസഭയുടെ ▁തല വനാണ് ▁പ്രധാനമന്ത്രി . ▁പ്രധാനമന്ത്രി യുടെ ▁ഉപ ദേ ▁വർഗ്ഗം : ഇന്ത്യയുടെ ▁പ്രധാനമന്ത്രി മാർ ▁വർഗ്ഗം : ഭാരതരത്ന ▁പുരസ്കാരം ▁ലഭിച്ചവർ ▁വർഗ്ഗം : ഇന്ത്യൻ ▁നാഷണൽ ▁കോൺഗ്രസിന്റെ ▁പ്രസിഡന്റ ുമാർ ▁വർഗ്ഗം : മുൻ ▁കേന്ദ്രമന്ത്രി മാർ ▁വർഗ |
| 100000 | ▁സാധാരണ ▁രണ്ടു ബ ാൻഡ ുള്ള ▁റേഡിയോ സ്വ ീകരണ ി ▁ഉപയോഗിച്ച് ▁ഹാം ▁റേഡിയോ ▁സന്ദേശങ്ങൾ ▁കേൾക്കാൻ ▁സാധിക്കും . ▁അവയിൽ ▁00 ▁മീറ്ററിൽ ▁ട്യൂ ൺ ▁ചെയ്താൽ ▁ചെറുതായി ▁സംഭാഷണം ▁കേൾക്കാം . ▁റേ ▁ലോകസഭയിൽ ▁ഭൂരിപക്ഷമുള്ള ▁പാർട്ടിയുടെ ▁നേതാവിനെ ▁രാഷ്ട്രപതി ▁മന്ത്രിസഭ യുണ്ടാക്കാൻ ▁ക്ഷണിക്കുന്നു . ▁മന്ത്രിസഭയുടെ ▁തലവനാണ് ▁പ്രധാനമന്ത്രി . ▁പ്രധാനമന്ത്രി യുടെ ▁ഉപ ദേ ▁വർഗ്ഗം : ഇന്ത്യയുടെ ▁പ്രധാനമന്ത്രി മാർ ▁വർഗ്ഗം : ഭാരതരത്ന ▁പുരസ്കാരം ▁ലഭിച്ചവർ ▁വർഗ്ഗം : ഇന്ത്യൻ ▁നാഷണൽ ▁കോൺഗ്രസിന്റെ ▁പ്രസിഡന്റുമാർ ▁വർഗ്ഗം : മുൻ ▁കേന്ദ്രമന്ത്രി മാർ ▁വർഗ |