Gujarati (gu) subword embeddings
Training corpus sample, encoded with different BPE vocabulary sizes
| Vocab size | guwiki sample |
|---|---|
| original | ગંગા કિનારે જઇ ગંગાને બોલ્યા: "હે ગંગા! આજે મને મારા પુત્રને જોવાની પ્રબળ ઇચ્છા થઇ છે જેને તમે તમારી સાથે લઇ ગયા હતા". ગંગા એ પુત્ર સાથે પ્રગટ થઇ ને બ પુણે ઇન્ટરનેશનલ એરપોર્ટ લોહેગાંવ ખાતેનું આંતરરાષ્ટ્રીય એરપોર્ટ છે જેનું સંચાલન એરપોર્ટ્સ ઓથોરિટી ઓફ ઇન્ડિયા મારફત થાય છે. તેના રનવેમાં પડોશમાં આવેલા ઇ બ્રિટિશ ભારતનો ધ્વજ બ્રિટિશ ભારતનો નૌસેના ધ્વજ (કલકત્તા)કોલકાતા ધ્વજ,સુરેન્દ્રનાથ બેનરજીએ ૧૯૦૬માં સૌપ્રથમ વખત (કલકત્તા) કોલકાતામાં લહેરાવેલ ભિખાયજી કા |
| 1000 | ▁ગ ંગ ા ▁કિ ના રે ▁જ ઇ ▁ગ ંગ ા ને ▁બો લ ્યા : ▁" હે ▁ગ ંગ ા ! ▁આ જે ▁મ ને ▁મા રા ▁પુ ત્ર ને ▁જો વાની ▁પ્ર બ ળ ▁ઇ ચ્છ ા ▁થઇ ▁છે ▁જે ને ▁ત મે ▁તમા રી ▁સાથે ▁લ ઇ ▁ગ યા ▁હતા " . ▁ગ ંગ ા ▁એ ▁પુ ત્ર ▁સાથે ▁પ્ર ગ ટ ▁થઇ ▁ને ▁બ ▁પુ ણે ▁ઇ ન્ટ ર ને શન લ ▁એ ર પો ર્ટ ▁લો હે ગા ં વ ▁ખાતે નું ▁આ ંતર રાષ્ટ્ર ીય ▁એ ર પો ર્ટ ▁છે ▁જે નું ▁સ ંચ ાલન ▁એ ર પો ર્ટ ્સ ▁ઓ થ ો રિ ટી ▁ઓફ ▁ઇ ન્ડ િયા ▁મા રફ ત ▁થાય ▁છે . ▁તેના ▁ર ન વે માં ▁પ ડો શ માં ▁આવેલા ▁ઇ ▁બ ્રિ ટિ શ ▁ભારત નો ▁ધ ્ વ જ ▁બ ્રિ ટિ શ ▁ભારત નો ▁ન ૌ સે ના ▁ધ ્ વ જ ▁( ક લ ક ત્ તા ) કો લ કા તા ▁ધ ્ વ જ , સ ુ રે ન્દ્ર ના થ ▁બે ન ર જી એ ▁0000 માં ▁સૌ પ્ર થમ ▁વખ ત ▁( ક લ ક ત્ તા ) ▁કો લ કા તા માં ▁લ હે રા વે લ ▁ભ િ ખ ાય જી ▁કા |
| 3000 | ▁ગ ંગા ▁કિ ના રે ▁જ ઇ ▁ગ ંગા ને ▁બોલ ્યા : ▁" હે ▁ગ ંગા ! ▁આજે ▁મ ને ▁મા રા ▁પુત્ર ને ▁જો વાની ▁પ્ર બ ળ ▁ઇ ચ્છ ા ▁થઇ ▁છે ▁જેને ▁ત મે ▁તમા રી ▁સાથે ▁લઇ ▁ગયા ▁હતા " . ▁ગ ંગા ▁એ ▁પુત્ર ▁સાથે ▁પ્રગ ટ ▁થઇ ▁ને ▁બ ▁પુ ણે ▁ઇન્ટર ને શનલ ▁એર પોર્ટ ▁લો હે ગા ં વ ▁ખાતે નું ▁આંતરરાષ્ટ્રીય ▁એર પોર્ટ ▁છે ▁જેનું ▁સંચાલન ▁એર પોર્ટ ્સ ▁ઓ થો રિ ટી ▁ઓફ ▁ઇન્ડ િયા ▁મા રફ ત ▁થાય ▁છે . ▁તેના ▁ર ન વે માં ▁પ ડો શ માં ▁આવેલા ▁ઇ ▁બ્રિટિશ ▁ભારત નો ▁ધ્વ જ ▁બ્રિટિશ ▁ભારત નો ▁ન ૌ સે ના ▁ધ્વ જ ▁( કલ ક ત્તા ) કો લ કા તા ▁ધ્વ જ , સુ રેન્દ્ર નાથ ▁બે ન ર જી એ ▁0000 માં ▁સૌ પ્રથમ ▁વખત ▁( કલ ક ત્તા ) ▁કોલ કા તા માં ▁લ હેરા વેલ ▁ભ િ ખ ાય જી ▁કા |
| 5000 | ▁ગંગા ▁કિનારે ▁જ ઇ ▁ગંગા ને ▁બોલ ્યા : ▁" હે ▁ગંગા ! ▁આજે ▁મ ને ▁મા રા ▁પુત્ર ને ▁જો વાની ▁પ્ર બળ ▁ઇ ચ્છા ▁થઇ ▁છે ▁જેને ▁તમે ▁તમા રી ▁સાથે ▁લઇ ▁ગયા ▁હતા ". ▁ગંગા ▁એ ▁પુત્ર ▁સાથે ▁પ્રગટ ▁થઇ ▁ને ▁બ ▁પુ ણે ▁ઇન્ટરનેશનલ ▁એરપોર્ટ ▁લો હે ગાં વ ▁ખાતે નું ▁આંતરરાષ્ટ્રીય ▁એરપોર્ટ ▁છે ▁જેનું ▁સંચાલન ▁એરપોર્ટ ્સ ▁ઓ થો રિ ટી ▁ઓફ ▁ઇન્ડિયા ▁મારફ ત ▁થાય ▁છે . ▁તેના ▁રન વે માં ▁પ ડો શ માં ▁આવેલા ▁ઇ ▁બ્રિટિશ ▁ભારત નો ▁ધ્વજ ▁બ્રિટિશ ▁ભારત નો ▁નૌ સે ના ▁ધ્વજ ▁( કલ ક ત્તા ) કોલ કા તા ▁ધ્વજ , સુ રેન્દ્ર નાથ ▁બે નર જીએ ▁0000 માં ▁સૌપ્રથમ ▁વખત ▁( કલ ક ત્તા ) ▁કોલ કા તામાં ▁લ હેરા વેલ ▁ભિ ખ ાય જી ▁કા |
| 10000 | ▁ગંગા ▁કિનારે ▁જઇ ▁ગંગા ને ▁બોલ ્યા : ▁" હે ▁ગંગા ! ▁આજે ▁મને ▁મારા ▁પુત્ર ને ▁જો વાની ▁પ્ર બળ ▁ઇચ્છા ▁થઇ ▁છે ▁જેને ▁તમે ▁તમા રી ▁સાથે ▁લઇ ▁ગયા ▁હતા ". ▁ગંગા ▁એ ▁પુત્ર ▁સાથે ▁પ્રગટ ▁થઇ ▁ને ▁બ ▁પુણે ▁ઇન્ટરનેશનલ ▁એરપોર્ટ ▁લો હે ગાંવ ▁ખાતે નું ▁આંતરરાષ્ટ્રીય ▁એરપોર્ટ ▁છે ▁જેનું ▁સંચાલન ▁એરપોર્ટ ્સ ▁ઓ થો રિટી ▁ઓફ ▁ઇન્ડિયા ▁મારફ ત ▁થાય ▁છે . ▁તેના ▁રન વે માં ▁પ ડો શ માં ▁આવેલા ▁ઇ ▁બ્રિટિશ ▁ભારતનો ▁ધ્વજ ▁બ્રિટિશ ▁ભારતનો ▁નૌ સેના ▁ધ્વજ ▁( કલ કત્તા ) કોલ કા તા ▁ધ્વજ , સુ રેન્દ્ર નાથ ▁બે નર જીએ ▁0000 માં ▁સૌપ્રથમ ▁વખત ▁( કલ કત્તા ) ▁કોલકા તામાં ▁લ હેરા વેલ ▁ભિ ખ ાય જી ▁કા |
| 25000 | ▁ગંગા ▁કિનારે ▁જઇ ▁ગંગા ને ▁બોલ્યા : ▁" હે ▁ગંગા ! ▁આજે ▁મને ▁મારા ▁પુત્રને ▁જોવાની ▁પ્રબળ ▁ઇચ્છા ▁થઇ ▁છે ▁જેને ▁તમે ▁તમારી ▁સાથે ▁લઇ ▁ગયા ▁હતા ". ▁ગંગા ▁એ ▁પુત્ર ▁સાથે ▁પ્રગટ ▁થઇ ▁ને ▁બ ▁પુણે ▁ઇન્ટરનેશનલ ▁એરપોર્ટ ▁લો હે ગાંવ ▁ખાતે નું ▁આંતરરાષ્ટ્રીય ▁એરપોર્ટ ▁છે ▁જેનું ▁સંચાલન ▁એરપોર્ટ ્સ ▁ઓથોરિટી ▁ઓફ ▁ઇન્ડિયા ▁મારફત ▁થાય ▁છે . ▁તેના ▁રન વે માં ▁પડો શમાં ▁આવેલા ▁ઇ ▁બ્રિટિશ ▁ભારતનો ▁ધ્વજ ▁બ્રિટિશ ▁ભારતનો ▁નૌ સેના ▁ધ્વજ ▁( કલ કત્તા ) કોલ કા તા ▁ધ્વજ , સુ રેન્દ્ર નાથ ▁બેનર જીએ ▁0000 માં ▁સૌપ્રથમ ▁વખત ▁( કલ કત્તા ) ▁કોલકા તામાં ▁લ હેરા વેલ ▁ભિ ખ ાય જી ▁કા |
| 50000 | ▁ગંગા ▁કિનારે ▁જઇ ▁ગંગાને ▁બોલ્યા : ▁" હે ▁ગંગા ! ▁આજે ▁મને ▁મારા ▁પુત્રને ▁જોવાની ▁પ્રબળ ▁ઇચ્છા ▁થઇ ▁છે ▁જેને ▁તમે ▁તમારી ▁સાથે ▁લઇ ▁ગયા ▁હતા ". ▁ગંગા ▁એ ▁પુત્ર ▁સાથે ▁પ્રગટ ▁થઇ ▁ને ▁બ ▁પુણે ▁ઇન્ટરનેશનલ ▁એરપોર્ટ ▁લો હે ગાંવ ▁ખાતેનું ▁આંતરરાષ્ટ્રીય ▁એરપોર્ટ ▁છે ▁જેનું ▁સંચાલન ▁એરપોર્ટ ્સ ▁ઓથોરિટી ▁ઓફ ▁ઇન્ડિયા ▁મારફત ▁થાય ▁છે . ▁તેના ▁રનવે માં ▁પડો શમાં ▁આવેલા ▁ઇ ▁બ્રિટિશ ▁ભારતનો ▁ધ્વજ ▁બ્રિટિશ ▁ભારતનો ▁નૌસેના ▁ધ્વજ ▁( કલ કત્તા ) કોલ કાતા ▁ધ્વજ , સુ રેન્દ્ર નાથ ▁બેનર જીએ ▁0000 માં ▁સૌપ્રથમ ▁વખત ▁( કલ કત્તા ) ▁કોલકાતામાં ▁લહેરા વેલ ▁ભિ ખ ાય જી ▁કા |
| 100000 | ▁ગંગા ▁કિનારે ▁જઇ ▁ગંગાને ▁બોલ્યા : ▁" હે ▁ગંગા ! ▁આજે ▁મને ▁મારા ▁પુત્રને ▁જોવાની ▁પ્રબળ ▁ઇચ્છા ▁થઇ ▁છે ▁જેને ▁તમે ▁તમારી ▁સાથે ▁લઇ ▁ગયા ▁હતા ". ▁ગંગા ▁એ ▁પુત્ર ▁સાથે ▁પ્રગટ ▁થઇ ▁ને ▁બ ▁પુણે ▁ઇન્ટરનેશનલ ▁એરપોર્ટ ▁લો હે ગાંવ ▁ખાતેનું ▁આંતરરાષ્ટ્રીય ▁એરપોર્ટ ▁છે ▁જેનું ▁સંચાલન ▁એરપોર્ટ્સ ▁ઓથોરિટી ▁ઓફ ▁ઇન્ડિયા ▁મારફત ▁થાય ▁છે . ▁તેના ▁રનવે માં ▁પડોશમાં ▁આવેલા ▁ઇ ▁બ્રિટિશ ▁ભારતનો ▁ધ્વજ ▁બ્રિટિશ ▁ભારતનો ▁નૌસેના ▁ધ્વજ ▁( કલકત્તા ) કોલકાતા ▁ધ્વજ , સુરેન્દ્ર નાથ ▁બેનર જીએ ▁0000 માં ▁સૌપ્રથમ ▁વખત ▁( કલકત્તા ) ▁કોલકાતામાં ▁લહેરા વેલ ▁ભિખ ાય જી ▁કા |