Bavarian (bar) subword embeddings

Vocab size vocab model 25 dim 50 dim 100 dim 200 dim 300 dim
1000 vocab model txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
3000 vocab model txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
5000 vocab model txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
10000 vocab model txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
25000 vocab model txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
50000 vocab model txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
100000 vocab model txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
200000 vocab model txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix
txt | bin
bokeh | umap | matrix

Training corpus sample, encoded with different BPE vocabulary sizes

Vocab sizebarwiki sample
original * 00 klaviersonaten * variationen iba vaschiedene themen * zahlreiche einzelstücke: fantasie, rondos, etc.
londschoftli prägt wird da flochgau vor oim im soizburga beckn durch'n untasberg südlich vo da londeshauptstod, der wos mid an vo seine güpfün (im soi
''verkündung der kapitulation der deutschen wehrmacht, 0. mai 0000''; originalton (00 sekunden) im deutschen rundfunkarchiv (real-audio-format) *
1000 ▁* ▁00 ▁k la v i ers on at en ▁* ▁v ar i ation en ▁i ba ▁v asch ied ene ▁th em en ▁* ▁z ah l reich e ▁ein z el st ück e : ▁f ant as ie , ▁r ond os , ▁e t c .
▁l ond schoft li ▁p rä gt ▁wir d ▁da ▁fl och g au ▁vor ▁o im ▁im ▁s oiz burg a ▁be ck n ▁durch ' n ▁unt as berg ▁s üd lich ▁vo ▁da ▁l ond es h au pt stod , ▁der ▁wos ▁mid ▁an ▁vo ▁seine ▁g ü pf ün ▁( im ▁s oi
▁'' ver k ün d ung ▁der ▁k ap it ul ation ▁der ▁de utsch en ▁we hr ma cht , ▁0. ▁ma i ▁0000 '' ; ▁or ig in al ton ▁(00 ▁se k und en ) ▁im ▁de utsch en ▁r und f un k ar ch iv ▁( re al - au d io - form at ) ▁*
3000 ▁* ▁00 ▁k lav i erson at en ▁* ▁var i ation en ▁iba ▁vasch ied ene ▁th em en ▁* ▁z ahl reich e ▁ein z el st ück e : ▁f ant as ie , ▁r ond os , ▁et c .
▁lond schoft li ▁prä gt ▁wird ▁da ▁fl och gau ▁vor ▁oim ▁im ▁soizburg a ▁be ckn ▁durch ' n ▁unt as berg ▁süd lich ▁vo ▁da ▁lond es haupt stod , ▁der ▁wos ▁mid ▁an ▁vo ▁seine ▁g ü pf ün ▁( im ▁soi
▁'' ver k ünd ung ▁der ▁kap it ul ation ▁der ▁deutsch en ▁we hr ma cht , ▁0. ▁mai ▁0000 ''; ▁or igin al ton ▁(00 ▁se kund en ) ▁im ▁deutsch en ▁rund f unk arch iv ▁( re al - aud io - form at ) ▁*
5000 ▁* ▁00 ▁k lav i erson aten ▁* ▁var i ationen ▁iba ▁vaschied ene ▁th em en ▁* ▁z ahl reich e ▁ein zel stück e : ▁f ant as ie , ▁r ond os , ▁et c .
▁lond schoft li ▁prä gt ▁wird ▁da ▁fl och gau ▁vor ▁oim ▁im ▁soizburga ▁be ckn ▁durch ' n ▁unt as berg ▁süd lich ▁vo ▁da ▁lond es haupt stod , ▁der ▁wos ▁mid ▁an ▁vo ▁seine ▁gü pf ün ▁( im ▁soi
▁'' ver k ünd ung ▁der ▁kap it ul ation ▁der ▁deutschen ▁we hr macht , ▁0. ▁mai ▁0000 ''; ▁origin al ton ▁(00 ▁se kund en ) ▁im ▁deutschen ▁rund f unk arch iv ▁( re al - aud io - form at ) ▁*
10000 ▁* ▁00 ▁klav i erson aten ▁* ▁vari ationen ▁iba ▁vaschied ene ▁them en ▁* ▁zahl reiche ▁ein zel stück e : ▁f antas ie , ▁rond os , ▁etc .
▁lond schoft li ▁prägt ▁wird ▁da ▁floch gau ▁vor ▁oim ▁im ▁soizburga ▁be ckn ▁durch ' n ▁untas berg ▁süd lich ▁vo ▁da ▁londes haupt stod , ▁der ▁wos ▁mid ▁an ▁vo ▁seine ▁gü pf ün ▁( im ▁soi
▁'' ver k ünd ung ▁der ▁kap it ulation ▁der ▁deutschen ▁we hr macht , ▁0. ▁mai ▁0000 ''; ▁original ton ▁(00 ▁se kund en ) ▁im ▁deutschen ▁rundfunk archiv ▁( real - aud io - format ) ▁*
25000 ▁* ▁00 ▁klav i erson aten ▁* ▁vari ationen ▁iba ▁vaschiedene ▁themen ▁* ▁zahl reiche ▁einzel stücke : ▁fantas ie , ▁rond os , ▁etc .
▁londschoft li ▁prägt ▁wird ▁da ▁flochgau ▁vor ▁oim ▁im ▁soizburga ▁beckn ▁durch ' n ▁untas berg ▁südlich ▁vo ▁da ▁londes hauptstod , ▁der ▁wos ▁mid ▁an ▁vo ▁seine ▁gü pf ün ▁( im ▁soi
▁'' verk ündung ▁der ▁kapit ulation ▁der ▁deutschen ▁wehr macht , ▁0. ▁mai ▁0000 ''; ▁original ton ▁(00 ▁sekund en ) ▁im ▁deutschen ▁rundfunk archiv ▁( real - aud io - format ) ▁*
50000 ▁* ▁00 ▁klav i erson aten ▁* ▁variationen ▁iba ▁vaschiedene ▁themen ▁* ▁zahlreiche ▁einzel stücke : ▁fantasie , ▁rond os , ▁etc .
▁londschoft li ▁prägt ▁wird ▁da ▁flochgau ▁vor ▁oim ▁im ▁soizburga ▁beckn ▁durch ' n ▁untas berg ▁südlich ▁vo ▁da ▁londeshauptstod , ▁der ▁wos ▁mid ▁an ▁vo ▁seine ▁gü pf ün ▁( im ▁soi
▁'' verk ündung ▁der ▁kapitulation ▁der ▁deutschen ▁wehr macht , ▁0. ▁mai ▁0000 ''; ▁original ton ▁(00 ▁sekund en ) ▁im ▁deutschen ▁rundfunk archiv ▁( real - aud io - format ) ▁*
100000 ▁* ▁00 ▁klav i erson aten ▁* ▁variationen ▁iba ▁vaschiedene ▁themen ▁* ▁zahlreiche ▁einzel stücke : ▁fantasie , ▁rond os , ▁etc .
▁londschoft li ▁prägt ▁wird ▁da ▁flochgau ▁vor ▁oim ▁im ▁soizburga ▁beckn ▁durch ' n ▁untasberg ▁südlich ▁vo ▁da ▁londeshauptstod , ▁der ▁wos ▁mid ▁an ▁vo ▁seine ▁gü pf ün ▁( im ▁soi
▁'' verk ündung ▁der ▁kapitulation ▁der ▁deutschen ▁wehrmacht , ▁0. ▁mai ▁0000''; ▁original ton ▁(00 ▁sekunden ) ▁im ▁deutschen ▁rundfunk archiv ▁( real - audio - format ) ▁*