utter_project_EuroLLM_9B.md

Report for utter-project/EuroLLM-9B

Model info

• Model Info:
  • Tied embeddings: False
  • LM head uses bias: False
  • Embeddings shape: [128000, 4096]
• Tokenizer Info:
  • Vocab Size: 128000
  • Tokenizer Class: LlamaTokenizer
  • Tokenizer Type: BPE
  • Bytes handling: Byte Fallback
  • Token for verification prompt building: includegraphics
  • Token id for verification prompt building: 8997
• Indicator summary:
  • Indicator for under-trained tokens: E_{in} L2 Norm
  • Overall distribution: 1.663 +/- 0.192
• Detected Token Counts:
  • Number of tested under-trained tokens: 2559, 2288 non-special, 60 below p = 0.01 threshold, 11 below soft indicator threshold
  • Number of single byte tokens: 354, of which 117 below indicator threshold
  • Number of special tokens: 1, of which 0 below indicator threshold
  • Number of non-single-byte unreachable tokens: 1, of which 0 below indicator threshold

Under-trained token indicators plot

Verification plot

Under-trained token verification results

11 entries below threshold of 0.537

token_id	token	indicator	max_prob	in_other_tokens
56539	funsio	0.0688092	2e-05
75613	urasGeneral	0.104158	5e-06	FacturasGeneral
35236	▁funsio	0.137954	3.3e-05
77603	FacturasGeneral	0.213124	0.89
58072	▁momč	0.237855	0.00011	▁momčadi, ▁momčad
114185	asaíne	0.239361	6.8e-07	asaíneonna
26610	jetain	0.272394	0.0047	▁dvejetain, vejetain, ▁dvejetainių, ▁Dvejetain, ▁dvejetainiai
43175	▁compéten	0.419309	0.0021	▁compétences, ▁compétence
33200	ħtie	0.485839	5.4e-05	ħtieġ, ħtieġa, ▁meħtieġa, ▁jeħtieġ
56988	▁meais	0.488893	0.96	▁meaisín, ▁meaisíní
16962	▁úsá	0.489419	0.98	▁úsáid, ▁úsáide, ▁úsáidtear, ▁úsáideoirí

2277 additional entries above threshold

token_id	token	indicator	max_prob	in_other_tokens
37963	▁voormal	0.537434	0.00081	▁voormalige, ▁voormalig
113503	XHCI	0.537517	0.24
114081	iċli	0.539734	9.6e-06	▁diffiċli
57615	байджа	0.547204	0.96	зербайджа, ▁Азербайджа
36239	▁wewnę	0.559108	0.14	▁wewnętrz, ▁wewnętrznych, ▁wewnętr
71528	ovoza	0.571637	0.48	▁kolovoza
124553	ᅲ	0.57366	1
40900	▁catholi	0.592693	0.96	▁catholique, ▁catholiques
59141	▁lekkoat	0.597534	0.02	▁lekkoatleta, ▁lekkoatlet
61232	▁récem	0.60949	0.75	▁récemment
25481	▁máqu	0.615809	0.99	▁máquina, ▁máquinas
37962	▁herramient	0.63507	1	▁herramientas, ▁herramienta
36136	▁statunit	0.638937	0.94	▁statunitense, ▁statunitensi
126623	ᅠ	0.642646	1
127930	鋂	0.655352	1
117498	▁Breata	0.656157	0.94	▁Breataine
111374	▁різнома	0.657297	0.92	▁різномані
35189	▁lesqu	0.669404	0.068	▁lesquels, ▁lesquelles
123820	겪	0.685661	0.99
33528	▁экспе	0.691583	1	▁экспер, ▁экспери, ▁экспеди, ▁эксперимента
83678	ριλίου	0.692549	0.99	▁Απριλίου
29142	▁Einwo	0.695397	0.72	▁Einwohner, ▁Einwohn, ▁Einwohnern
8477	▁tiegħ	0.698318	0.00096	▁tiegħu, ▁tiegħek, ▁tiegħi
96356	wajcar	0.698344	2.4e-05	▁szwajcar
104800	ipeas	0.704535	0.99	ipeasóid
20940	▁większo	0.706837	0.013	▁większość, ▁większości
96806	слідок	0.707092	0.8	наслідок
43400	لسط	0.715685	1	▁الفلسط, ▁فلسط, ▁الفلسطيني
44802	etilde	0.722675	1	widetilde
81466	anáir	0.725327	0.6	▁Eanáir
96555	ustizz	0.729102	0.027	ustizzja
21273	▁liječen	0.729517	0.96	▁liječenje, ▁liječenja, ▁liječenju
127428	鑭	0.729952	1
127363	錒	0.733217	1
123648	ᄏ	0.733614	1
100504	▁priopćen	0.735009	0.23
20375	▁técn	0.738207	0.94	▁técnica, ▁técnicas, ▁técnico, ▁técnicos
88379	únasa	0.743536	0.43	▁Lúnasa
43083	▁siječn	0.744525	0.027	▁siječnja
23987	▁대한민	0.752271	1	▁대한민국, ▁대한민국의
27644	▁indúst	0.758117	0.99	▁indústria, ▁indústrias
109078	▁एक्स्प	0.759383	0.68	▁एक्स्प्रेस
37778	▁malatt	0.763632	0.75	▁malattia, ▁malattie
115183	▁Predsjednik	0.76423	1
40824	▁ettev	0.766218	0.02	▁ettevõ, ▁ettevõt
127037	釷	0.767412	1
78708	трално	0.76947	0.95	▁Неутрално
33141	▁propried	0.776452	0.76	▁propriedade, ▁propriedades
56755	▁čty	0.781539	0.37	▁čtyř, ▁čtyři
100986	▁istaknuo	0.793021	0.41
42899	hodox	0.79706	0.96	▁orthodox, ▁Orthodox, orthodox
126543	ᅮ	0.800123	1
13127	▁películ	0.803343	0.93	▁película, ▁películas
90808	▁Nazzjonal	0.804577	0.97	▁Nazzjonalista, ▁Nazzjonali
54748	▁kazao	0.8094	0.005
26244	▁núcle	0.812592	1	▁núcleo, ▁núcleos
46045	▁véhic	0.812637	1	▁véhicules, ▁véhicule
42591	▁indivídu	0.819828	1	▁indivíduos, ▁indivíduo
123817	펼	0.822533	1
103049	egħdin	0.823108	0.038	▁qegħdin
109842	▁cijelog	0.824677	0.63
12098	▁сист	0.825322	1	▁система, ▁системы, ▁систем, ▁систему, ▁системи, ...
106829	▁živjeti	0.826434	1
76150	rojām	0.826544	0.049	oprojām, ▁joprojām
22708	▁февра	0.827503	1	▁февраля, ▁феврале
98645	hvezd	0.827718	1	▁súhvezd
25253	sięb	0.828659	0.94	siębior, ▁przedsiębior
28563	ikuuta	0.832682	0.9	▁tammikuuta, ▁huhtikuuta, ▁helmikuuta
127568	鈹	0.834368	1
34799	μβρίου	0.835213	0.76	▁Σεπτεμβρίου, ▁Νοεμβρίου, ▁Δεκεμβρίου
92635	šetkým	0.835634	0.12	ovšetkým, ▁predovšetkým
116905	iemożli	0.836352	0.97	▁uniemożli
38397	▁októ	0.840536	0.99	▁október, ▁októbra
115580	▁lionsa	0.842354	0.61
14703	jourd	0.84701	1	▁aujourd, ujourd, ▁Aujourd, aujourd
24041	▁niektó	0.848551	0.9	▁niektórych, ▁niektóre
24879	▁ragaz	0.851253	0.99	▁ragazzi, ▁ragazza, ▁ragazzo, ▁ragazze
127913	鸮	0.851462	1
30536	ajjiż	0.851598	0.0027	pajjiż, ajjiżi, ▁pajjiż, pajjiżi, ▁pajjiżi
79819	▁Μαΐ	0.851654	1	▁Μαΐου
70847	véken	0.85686	0.84	▁tevéken, ▁tevékenység
95008	▁prinċip	0.85696	0.75	▁prinċipali
98843	uniden	0.858031	1	▁estatuniden
86492	▁prosvjed	0.858682	0.93
127890	븀	0.859812	1
40227	iječn	0.862918	0.27	▁siječn, ▁siječnja, ▁liječnika, ▁liječnik
20025	ßerdem	0.863188	0.91	▁Außerdem, ▁außerdem
92990	▁Aibre	0.863461	1	▁Aibreán
73598	▁laikot	0.865282	0.32	▁laikotarp
33018	áinig	0.872775	0.11	▁tháinig, ▁Tháinig
24484	ięcy	0.873482	0.89	▁tysięcy, ▁miesięcy
75009	▁tisuća	0.873687	0.97
117035	▁uspjeh	0.875263	0.99
116170	▁uvjete	0.875533	0.99
83332	▁Σεπτε	0.881128	0.43	▁Σεπτεμβρίου
63389	▁Predsjed	0.881669	0.95	▁Predsjednik
86221	iezd	0.882107	1	▁hviezd
99694	ważi	0.882125	0.018	▁kważi
90056	áború	0.883715	0.98	▁világháború
43078	▁ožuj	0.883941	0.99	▁ožujka
127865	闐	0.884008	1
84818	▁Οκτωβ	0.884308	1	▁Οκτωβρίου
84070	τωβ	0.885107	0.99	▁Οκτωβ, ▁Οκτωβρίου
113849	▁liječenju	0.885785	1
127707	鰂	0.885895	1
108957	土耳	0.885954	1	土耳其
48448	▁γλώ	0.886055	0.99	▁γλώσσα, ▁γλώσσ
76284	▁veljače	0.886191	0.81
123885	圾	0.886574	1
22597	iluppo	0.886717	0.93	▁sviluppo
110548	▁glazbe	0.888422	0.97
127077	ӗ	0.888554	1
76402	томври	0.889345	0.17	▁октомври
35564	▁опубли	0.890508	1	▁опублико, ▁опубликова, ▁опубликован
45108	kiezingen	0.891713	0.0021	▁verkiezingen, verkiezingen
71902	▁prijed	0.891795	0.99	▁prijedlog
11193	країн	0.892309	1	▁україн, ▁України, ▁Україні, ▁Україн, ▁країни, ...
114792	▁odluku	0.893928	0.9
25857	▁britanni	0.894219	1	▁britannique, ▁britannico, ▁britanniques, ▁britannica
41187	▁évén	0.897009	1	▁événements, ▁événement
127922	💞	0.89918	1
127866	ᄌ	0.899385	1
112710	▁uvjeren	0.899908	1
105188	▁ministar	0.900095	1
125142	ḃ	0.901183	1
76446	▁Φεβ	0.901689	1	▁Φεβρου, ▁Φεβρουαρίου
106275	▁álb	0.902067	0.99	▁álbuns
34667	▁razdob	0.902159	0.28	▁razdoblju, ▁razdoblja, ▁razdoblje
40348	▁semelh	0.904745	0.98	▁semelhante, ▁semelhantes
74482	ywatel	0.905955	0.39	▁obywatel, ▁obywateli
32684	ябре	0.905974	0.99	▁сентябре, ▁октябре, ▁ноябре
115722	▁diljem	0.907931	0.011
88743	руари	0.90874	0.96	▁февруари
57680	ghilterra	0.909121	0.62	Inghilterra, ▁Inghilterra
108160	▁zemalja	0.909125	0.75
37122	ublike	0.910281	0.98	▁Republike, ▁republike
127383	鞨	0.910853	1
99868	\u200d\u200d\u200d\u200d	0.912744	0.99
55423	tanii	0.913641	1	▁Brytanii
85411	▁Νοε	0.914366	1	▁Νοεμβρίου
125123	ḋ	0.915526	1
42467	▁víct	0.915918	0.98	▁víctimas, ▁víctima
127818	栱	0.916009	1
40270	▁Władys	0.916306	0.99	▁Władysław, ▁Władysława
109220	▁prijedlog	0.919664	0.95
109924	oineamh	0.92117	0.00033	▁smaoineamh
127178	ᅵ	0.921262	0.98
31367	▁zabez	0.921322	0.19	▁zabezpie, ▁zabezpeč, ▁zabezpe
84261	▁Αυγού	0.922054	1	▁Αυγούστου
125378	ṫ	0.922362	1
72796	jeću	0.92275	0.76	▁stoljeću
72276	▁sgk	0.922769	0.98
127238	\ue6e7	0.922949	1
96349	▁priekšs	0.923099	0.57	▁priekšsēd
14131	▁społ	0.924049	0.91	▁społecz, ▁społec, ▁społecze, ▁społeczności, ▁społeczeństwa, ...
39003	▁będz	0.924455	0.98	▁będziemy, ▁będziesz
46901	ajjiżi	0.925817	0.0035	pajjiżi, ▁pajjiżi
20541	▁sempl	0.927388	1	▁semplice, ▁semplic, ▁semplicemente, ▁sempli, ▁semplici
104314	scoil	0.928209	1	▁Ollscoil
108817	onačel	0.928791	0.68
115545	▁odvjet	0.928882	0.89
12805	▁socied	0.929923	0.9	▁sociedade, ▁sociedad, ▁sociedades
43832	namelijk	0.930654	0.99	▁voornamelijk
85330	▁izcīnī	0.931961	0.97	▁izcīnīja
62027	▁uspje	0.93233	0.15	▁uspjeh, ▁uspješno
48211	▁vantag	0.93277	0.066	▁vantaggio, ▁vantaggi, ▁vantagem, ▁vantagens
99752	èct	0.933022	0.97	▁elèct
25216	ześnie	0.933718	0.51	nocześnie, ▁jednocześnie, cześnie, cześniej, ▁Jednocześnie
119632	▁uspješno	0.934218	0.67
100629	▁stoljeću	0.934552	0.95
89615	esù	0.935377	0.98	▁Ġesù
31115	▁indígen	0.935532	0.98	▁indígenas, ▁indígena
27298	▁enfermed	0.936149	0.95	▁enfermedad, ▁enfermedades
66078	▁predsjednika	0.937063	0.94
48458	αρίου	0.93804	1	▁Ιανουαρίου, ▁Φεβρουαρίου
114582	nijih	0.939535	1
66069	béco	0.940216	0.9	▁québéco, ▁québécois
119035	▁elèct	0.940259	0.98
100824	▁liječiti	0.942832	0.99
112536	▁vone	0.944379	1	▁voneinander
74349	endemain	0.944624	0.83	▁lendemain
37462	zystać	0.944897	0.81	▁korzystać, ▁skorzystać, ▁wykorzystać
94116	ollaig	0.945132	0.0068	▁Nollaig
3459	▁которы	0.94607	0.99	▁которые, ▁который, ▁которых, ▁которым, ▁которыми
79509	▁prosinca	0.946276	0.86
90732	▁अतिरिक	0.946434	1	▁अतिरिक्त
72337	unkwe	0.94741	1	▁kwalunkwe
89854	istiċi	0.947464	0.32	atteristiċi
116122	aquestes	0.949028	0.92
104052	▁escriptor	0.94932	0.99
41711	▁neighb	0.949585	1	▁neighbors, ▁neighboring, ▁neighbourhood, ▁neighbouring, ▁neighbours
104655	aquests	0.950094	0.99
66049	▁zrakop	0.951105	0.82	▁zrakoplov
113601	▁zenes	0.951698	1	▁zeneszerző
118420	▁najveći	0.954928	0.95
110837	▁tvrtka	0.955668	1
54885	▁ožujka	0.956987	0.56
58421	ньше	0.957061	0.97	▁раньше
127614	ᄅ	0.958134	1
98105	▁momčadi	0.958391	0.52
75718	wentual	0.958537	0.96	▁ewentual
123920	훨	0.95925	0.99
105442	▁momčad	0.959597	0.92
95910	▁osobi	0.959695	0.95	▁osobito, ▁osobiste, ▁osobiście
107361	▁ulogu	0.960988	0.96
42434	ómhair	0.962236	0.97	▁Fómhair
66682	▁obxect	0.963275	0.9	▁obxectivo
113303	▁cijele	0.963835	0.18
100946	▁productes	0.964042	1
127403	靺	0.96449	1
97096	▁natjecanja	0.966161	1
58503	▁liječnika	0.966656	0.95
51984	▁siječnja	0.968791	0.49
127487	⇆	0.969369	1
126956	눉	0.969496	0.025
109746	▁enerxía	0.97023	0.79
122467	얻	0.97045	1
52621	▁najvi	0.971092	0.91	▁najviše, ▁najviac, ▁najviš
99633	▁lijeka	0.973048	0.86
48590	▁djec	0.973171	0.86	▁djece, ▁djecu, ▁djeca
57919	▁rujna	0.973899	0.13
92605	▁lijekove	0.974055	0.99
6662	▁pierws	0.974423	0.95	▁pierwszy, ▁pierwsze, ▁pierwszej, ▁pierwszym, ▁pierwszych, ...
55481	▁lipnja	0.976594	0.92
127572	뮴	0.977088	0.94
70189	▁ndia	0.977873	1	▁ndiaidh
126697	ᅳ	0.977916	1
93707	észnő	0.97795	0.038	▁színésznő
15116	▁belangrij	0.979322	0.38	▁belangrijk, ▁belangrijke, ▁belangrijkste
111445	▁ukupno	0.979653	1
22722	evereiro	0.979878	0.97	▁fevereiro, ▁Fevereiro
59018	▁svibnja	0.979977	0.72
77963	vreden	0.980218	1	▁tevreden
127009	ᄃ	0.980366	1
98445	▁talijan	0.980528	0.074
65365	rancūz	0.980931	0.8	▁Prancūz, ▁Prancūzijos
127398	霑	0.980965	1
47537	ddiem	0.981218	0.0011	▁quddiem, ħaddiema
127591	儁	0.981702	1
118656	▁drugom	0.982234	0.1
65709	▁mjeseci	0.982283	0.97
111725	▁prvog	0.982876	0.99
127947	筲	0.982887	1
59736	öglicht	0.983001	0.7	▁ermöglicht
98704	▁proxectos	0.983652	0.9
67995	▁яну	0.985772	1	▁януари
72304	▁uklju	0.985961	0.54	▁uključu, ▁uključujući
105280	▁različitih	0.986215	0.92
31736	▁órg	0.986776	0.94	▁órgãos, ▁órgão, ▁órgano, ▁órganos
68901	ytecie	0.986831	0.49	▁Uniwersytecie
113606	▁promjena	0.986849	1
77811	▁mbli	0.987222	0.58	▁mbliana
111169	▁veći	0.987531	1
90880	aspē	0.987857	0.99	▁karaspē
81969	▁febreiro	0.987959	0.97
127116	ᄂ	0.988205	1
19982	▁Ewrop	0.988435	0.99	▁Ewropea, ▁Ewropew, ▁Ewropej
41551	▁Uniwersyt	0.988557	0.99	▁Uniwersytetu, ▁Uniwersytecie, ▁Uniwersytet
101561	▁països	0.98875	1
64930	▁gjel	0.98928	0.98	▁gjelder
106731	▁Επόμενο	0.989847	1
45740	ември	0.990391	0.79	тември, ▁септември, ▁ноември, ▁декември
72541	▁kolovoza	0.991874	0.33
98710	żejjed	0.991967	0.01	▁biżżejjed
82465	altaine	0.992562	0.55	▁Bealtaine
35890	▁twier	0.99366	0.99	▁twierd, ▁twierdzi, ▁twierdz
8490	▁españ	0.993909	0.99	▁español, ▁española, ▁españoles, ▁españolas
54996	▁Cumhuri	0.995251	1	▁Cumhuriyet, ▁Cumhuriyeti
59465	▁vjerojat	0.995575	1	▁vjerojatno
82493	▁tijelu	0.995662	0.62
91395	▁svjetskog	0.996463	0.55
62160	▁liječnik	0.99711	0.29
127517	ᄉ	0.997238	1
106199	върх	0.99761	0.99	▁повърх
70065	▁februār	0.998247	0.96	▁februārī
62335	▁priop	0.999091	0.99	▁priopćen
93490	ктак	0.999698	0.96	▁спектак
97894	▁Hrvatsku	0.999776	0.14
49658	nicima	0.999845	0.044
113012	settur	1.00023	0.97
59310	▁srpnja	1.00111	0.78
104977	찬가지	1.00114	0.99	▁마찬가지
91512	▁svjes	1.0017	0.97
62348	▁diġ	1.00233	0.9	▁diġà
109289	nostima	1.00237	0.37
88721	▁uključu	1.00244	0.45	▁uključujući
102919	▁vijeća	1.00269	0.43
91704	▁uvjetima	1.00358	0.91
102789	▁povijes	1.00461	0.27
106079	▁razdoblje	1.00464	0.99
127264	瘧	1.00472	1
99921	▁dijela	1.00501	0.9
81168	तेमाल	1.00564	1	▁इस्तेमाल
102727	▁Επό	1.0066	0.93	▁Επόμενο
87456	▁activitats	1.00723	1
127038	餾	1.0082	0.99
116448	▁cijeli	1.00845	0.99
72789	vejetain	1.0085	0.0016	▁dvejetainių, ▁Dvejetain, ▁dvejetainiai
99598	▁seniūnait	1.00931	0.7	▁seniūnaitija
106164	▁gairebé	1.01	1
82596	▁razdoblja	1.01039	0.93
126047	ᄋ	1.01094	1
123878	垃	1.0111	1
76993	aaegu	1.01125	0.22	▁peaaegu
102557	▁djeluje	1.01134	0.99
54788	▁símbol	1.01141	0.99	▁símbolos
100221	▁karij	1.01147	0.93
124288	ᄒ	1.0119	1
74049	▁espany	1.01203	0.83	▁espanyol, ▁espanyola
111345	▁साम्राज	1.0125	1	▁साम्राज्य
58982	▁uspješ	1.0136	0.29	▁uspješno
109393	újo	1.01396	1	▁Araújo
94295	ijeke	1.01397	0.83
70271	▁jinkl	1.01401	0.015	▁jinkludu
54767	zędu	1.01471	0.65	▁rzędu, ▁urzędu
73407	▁mjeseca	1.01712	0.93
60803	▁राजनी	1.01776	1	▁राजनीतिक, ▁राजनीति
127745	烴	1.01852	1
90300	észn	1.01869	0.043	észnő, ▁színésznő
104730	▁djelo	1.01903	1
127355	ᄀ	1.01906	1
110749	क्टूबर	1.01947	0.29	▁अक्टूबर
102900	sitwazzjoni	1.01954	0.0011
41244	▁mjest	1.02161	0.83	▁mjesta, ▁mjestu
59577	léans	1.02169	1	Orléans, ▁Orléans
93483	▁relix	1.02198	0.88
28072	usetts	1.02205	0.94	achusetts, ▁Massachusetts
61919	▁travnja	1.02286	0.67
110172	▁øya	1.02369	0.87
85092	▁četvr	1.02371	0.99
107486	▁xestión	1.02421	0.99
116906	▁troben	1.02444	0.97
6364	▁númer	1.02454	1	▁número, ▁números
42468	▁entdec	1.02469	0.99	▁entdeckt, ▁entdecken, ▁entdeck
88548	lavnom	1.02493	0.98	▁uglavnom
117237	tembru	1.02542	0.14
28111	ogħol	1.02563	0.061	xogħol, ▁xogħol
72813	arsanta	1.02648	0.88	▁pearsanta
109303	órnia	1.02649	1	▁Califórnia
46156	unsill	1.02685	0.96	Kunsill
89538	▁možemo	1.02687	0.99
74009	ουνίου	1.0271	1	▁Ιουνίου
92959	▁početkom	1.02751	0.99
82891	ётр	1.02767	0.72	▁Пётр
104103	▁imala	1.02777	0.45
108362	▁condicions	1.02827	1
114512	▁moraju	1.0288	0.99
98490	kanaście	1.02928	0.54	▁kilkanaście
111356	ġetti	1.02929	0.031
107220	adhom	1.0293	1	▁għadhom
74377	ġett	1.02945	1	ġġetti, ġġett, proġett, ġetti
127688	鐨	1.02953	1
82822	▁dizz	1.03059	1	▁dizziness
100044	▁njezin	1.03065	0.99
102277	▁móz	1.03114	0.99	▁mózgu
73814	ħtieġa	1.03151	1	▁meħtieġa
107956	ievelijk	1.03219	0.0089	▁respectievelijk
9858	▁njeg	1.03232	0.92	▁njegov, ▁njegova, ▁njegove, ▁njegovo, ▁njega, ...
86901	▁jgħix	1.0325	0.98	▁jgħixu
57501	▁dhia	1.03344	1	▁dhiaidh
58544	anuarie	1.0336	0.89	▁ianuarie
73027	▁xaneiro	1.03416	0.99
109150	▁훨	1.03425	1	▁훨씬
39848	õttu	1.0347	0.99	etõttu, ▁seetõttu, ▁Seetõttu, ▁mistõttu
118628	▁actualment	1.0349	1
110916	▁presència	1.03566	0.85
93168	утбу	1.0359	0.87	▁ноутбу
45641	▁liječenja	1.03606	0.99
111666	▁kojemu	1.03642	0.064
66751	▁istra	1.03679	1	▁istraživ, ▁istraž
28636	▁Bratis	1.03679	1	▁Bratislava, ▁Bratislave, ▁Bratislav
92101	▁Yhdysvallo	1.0369	0.97	▁Yhdysvalloissa
84168	maksas	1.03733	1	▁bezmaksas
48654	▁Hrv	1.03739	1	▁Hrvata, ▁Hrvatsku, ▁Hrvatski, ▁Hrvatskog, ▁Hrvati
87331	▁aangeb	1.03756	1	▁aangeboden
119331	miżuri	1.03791	0.13
2713	owever	1.03818	0.76	▁However, ▁however, however, However
60383	iembrie	1.03831	1	▁noiembrie
49397	▁reiv	1.03886	0.96	▁reivindic, ▁reivind
45173	▁milijuna	1.039	0.92
70490	awtor	1.03921	0.54	awtoritajiet
127709	ҫ	1.04002	1
92758	▁utakm	1.04054	0.19
63772	pjūčio	1.04061	0.0033	▁rugpjūčio
126667	ӑ	1.04103	1
115952	▁grazas	1.04155	0.99
49642	▁tjedna	1.04169	0.71
27466	▁propied	1.04174	0.91	▁propiedad, ▁propiedades
44830	▁predsjednik	1.04187	0.93	▁predsjednika
100222	▁pjeva	1.04237	1
106898	▁mjera	1.04239	0.99
108668	▁nalaze	1.04252	1
112222	▁miżuri	1.0431	0.89
13331	▁touj	1.04343	0.98	▁toujours
98546	ロッパ	1.04346	1	ヨーロッパ
101342	▁producció	1.04349	0.99
98252	öin	1.04353	1	ällöin
111582	▁engles	1.04414	0.98
126940	✠	1.04419	1
20316	▁svij	1.04438	1	▁svijeta, ▁svijetu, ▁svijet
108286	▁movemento	1.0445	0.37
98274	pflichtet	1.04503	0.87	▁verpflichtet
109505	▁uvjer	1.04593	0.78	▁uvjeren
95640	▁uopće	1.04597	0.99
76134	▁produción	1.046	0.86
38297	▁выи	1.04605	0.85	▁выигра, ▁выигры
94824	ċerka	1.04647	0.005
80253	▁natje	1.04664	0.39	▁natjecanja
115747	▁snaga	1.04688	1
112763	墨西	1.04757	1	墨西哥
116168	▁pasou	1.04791	0.0082
96289	▁construción	1.04855	0.78
71032	▁faċ	1.0487	0.13	▁faċli
114457	▁dereitos	1.0489	0.034
102996	▁Storbritannia	1.04893	1
100273	▁algunhas	1.04911	0.0076
108073	ijskog	1.04923	0.96
104512	▁neovis	1.04979	0.97
127380	₴	1.04986	1
127356	溼	1.05006	1
27966	▁weap	1.05061	0.99	▁weapons, ▁weapon
117507	industrija	1.05061	0.97
104631	▁djeteta	1.05061	0.98
55517	▁árv	1.05086	1	▁árvores, ▁árvore
15746	▁próp	1.05095	1	▁próprio, ▁própria, ▁próprios, ▁próprias
35692	među	1.05124	0.97	▁između, ▁među, ▁međunarod
99854	enerġija	1.05149	0.049
69129	▁trudnoće	1.05174	0.99
104635	▁Meitheamh	1.05183	1
127981	ᛁ	1.05197	0.94
53043	▁संस्क	1.05294	0.99	▁संस्कृत, ▁संस्कृति
117295	▁realitat	1.05302	1
88436	▁mogao	1.05308	1
127902	쾰	1.05308	1
55135	▁svijetu	1.0534	0.99
109713	arzysta	1.05354	0.82	▁scenarzysta
64870	▁uvjet	1.05401	1	▁uvjetima, ▁uvjete
112866	seamnă	1.05438	0.79	▁înseamnă
108243	paniji	1.05439	0.94
37161	брита	1.05579	1	▁Великобрита, ▁Великобритании, ▁Великобритания
67146	▁glazben	1.05584	0.98
97208	▁kršć	1.05588	0.94
113775	▁seniūnaitija	1.0562	0.89
63769	▁janvār	1.05642	0.94	▁janvārī
69864	▁xuño	1.05663	0.97
52489	могою	1.05672	0.74	▁допомогою
69212	▁jūn	1.05673	0.99	▁jūnijā
61194	▁Особ	1.05692	1	▁Особенно, ▁Особен
73414	早餐加盟	1.05747	0.035
84111	▁međunarod	1.05776	0.98
50833	iemeļ	1.05817	0.81	▁Ziemeļ, ▁ziemeļ
111162	ixxu	1.05835	0.99
75909	▁servizos	1.05922	0.9
84639	▁Ministar	1.05941	0.99
78478	ródeł	1.05967	0.93	▁źródeł
61807	oguć	1.0597	0.016	▁omoguć
127638	煬	1.06008	1
85559	▁Δεκε	1.06081	1	▁Δεκεμβρίου
127563	뀔	1.06101	0.99
31442	ewġ	1.06105	0.49	żewġ, ▁żewġ
37956	ritannien	1.06106	0.011	britannien, ▁Großbritannien, ▁Storbritannien
80511	▁razdoblju	1.06113	0.98
24208	▁Bevölker	1.06145	0.99	▁Bevölkerung, ▁Bevölkerungs
86158	▁setmana	1.06162	0.99
114093	mærksom	1.0617	0.46	▁opmærksom
80548	毛泽	1.0619	1	毛泽东
113792	▁pitanja	1.06219	1
102745	▁vrijednosti	1.06253	1
80675	skę	1.06323	1	▁Polskę
113850	produzzjoni	1.06367	0.36
109088	applikazzjoni	1.06389	0.97
93871	▁učinak	1.064	0.84
102743	▁Hrvatskog	1.06402	0.99
83686	早点加盟	1.06426	0.0019
105820	zymu	1.06439	1	▁Rzymu
77121	▁moltes	1.06466	0.99
67030	wazzjoni	1.06491	0.1	sitwazzjoni
86720	énez	1.06544	0.94	▁Jiménez
87519	▁comezou	1.06546	0.94
73881	ilíb	1.06584	0.5	ilíbrio, ▁equilíbrio
111183	▁meaisíní	1.06608	0.95
117573	▁referència	1.06615	1
127779	┈	1.06623	1
67458	▁njema	1.0665	0.63
68028	ाजपा	1.06652	0.42	▁भाजपा
80728	▁internazzjonali	1.06704	0.82
105099	layst	1.06711	1	laystyle, displaystyle
86847	▁pjesme	1.06749	1
92960	▁županije	1.06754	0.99
17778	▁nuest	1.06771	1	▁nuestra, ▁nuestros, ▁nuestras
82156	▁nedjel	1.06788	0.61
108501	ċembru	1.06831	0.009
20756	▁miem	1.06835	1	▁miembros, ▁miembro
127723	😭	1.06859	1
36092	▁Københav	1.06866	1	▁København, ▁Københavns
79486	▁buduć	1.06873	0.99
69102	▁ukup	1.06934	0.97	▁ukupno
105084	▁oktobrī	1.06966	1
78063	▁algunes	1.0701	1
37253	aczego	1.0702	1	▁dlaczego, laczego, ▁Dlaczego
111291	▁hrvatskom	1.07051	0.35
85899	▁situació	1.07092	0.83
126533	鎊	1.07129	1
102724	łaja	1.07158	1	▁Mikołaja
92471	miż	1.07162	0.52	▁miżuri, miżuri
111557	▁premierem	1.07195	0.97
37154	ħajr	1.07226	0.6	▁mingħajr
96202	▁electrò	1.07245	0.98
127770	蔔	1.07291	1
87258	ιναι	1.07321	0.97	▁ειναι
112248	▁općina	1.07333	1
83138	istgħu	1.07345	0.34	▁nistgħu
91156	▁desenvolupament	1.07349	1
106323	स्टेशन	1.07434	1
99068	▁početka	1.07451	0.98
107505	▁uitgez	1.07456	0.66	▁uitgezonden
108740	▁oruž	1.07464	0.97
127267	꿨	1.0749	0.85
126754	嫻	1.07541	1
92161	ijenti	1.07578	0.77
34324	▁tvrt	1.07578	0.93	▁tvrtke, ▁tvrtka
110660	▁potpis	1.07632	0.64
59328	ônibus	1.07651	0.99	▁ônibus
127547	铯	1.07661	1
115049	▁veciños	1.07683	0.98
51791	rótce	1.07689	0.0051	▁wkrótce, krótce, ▁Wkrótce
91514	áideoirí	1.07712	0.064	▁úsáideoirí
83385	▁vidjeti	1.07787	0.97
86408	▁utjecaj	1.07888	0.97
21102	▁liječ	1.07888	0.96	▁liječen, ▁liječenje, ▁liječenja, ▁liječnika, ▁liječnik, ...
11739	▁decreas	1.07912	1	▁decrease, ▁decreased, ▁decreases, ▁decreasing
127964	镧	1.07933	1
108990	ljuje	1.07975	0.99
86637	▁lijekovi	1.0799	1
57258	ombrie	1.08004	1	▁octombrie
99495	ндент	1.0805	0.96	спондент
92167	drittijiet	1.0807	0.044
22696	▁wicht	1.08138	0.99	▁wichtige, ▁wichtigsten, ▁wichtiger, ▁wichtigen, ▁wichtigste
16826	▁możliwo	1.08168	0.4	▁możliwości, ▁możliwość
16323	▁bhl	1.08235	1	▁bhliain
103199	proġett	1.08248	0.99
37507	estety	1.08277	0.98	▁niestety, ▁Niestety
87340	lijden	1.08301	1	▁overlijden
54740	ぞれ	1.08308	0.98	それぞれ
119024	』)	1.08317	0.94
116338	▁februārī	1.08337	1
104702	▁havien	1.08355	0.89
107341	▁eleccións	1.08356	0.98
40952	▁tová	1.08378	0.95	▁tovább, ▁további
112776	▁qalet	1.08397	0.96
68782	alkemm	1.084	0.00087	▁għalkemm
57802	▁povijesti	1.08406	1
99985	middell	1.08453	1	▁onmiddell
25390	▁mjes	1.0847	0.92	▁mjesto, ▁mjest, ▁mjesta, ▁mjestu, ▁mjeseci, ...
64625	▁lijekova	1.08502	0.9
87000	jevima	1.08503	0.92
98469	izzjonali	1.08511	0.89
125361	鈾	1.08512	0.99
76670	ïnv	1.0853	0.98	▁beïnv, ▁beïnvloed
127094	鉑	1.08547	1
59153	áirí	1.08581	0.94	áiríre, áirítear
127554	殭	1.08591	1
107103	tació	1.08617	1	▁documentación
113216	▁भवि	1.08632	1	▁भविष्य
100867	▁преименува	1.08636	0.97
46079	▁veebru	1.08649	0.56	▁veebruar, ▁veebruaril
127864	釗	1.08664	1
94853	ovšetkým	1.08676	0.99	▁predovšetkým
79999	▁преимену	1.0868	0.62	▁преименува
90312	▁oktoober	1.08681	1
102766	▁stanovništva	1.08684	0.83
79061	▁servizo	1.08712	0.45
110973	▁općini	1.08724	0.038
84342	ġiel	1.08731	0.79	irġiel
114724	ogodiš	1.08765	0.9
69770	▁jintu	1.08779	0.046	▁jintuża
29009	jeća	1.08795	0.89	▁stoljeća, ▁osjeća, ▁vijeća, ijeća
73164	▁decembro	1.08859	0.84
58076	▁millóns	1.08939	0.98
55973	ankollu	1.08957	0.0005	▁Madankollu
111129	▁augustā	1.08985	1
85357	μεις	1.09001	0.97	▁δυνάμεις
78981	nessä	1.0902	0.95	▁mennessä
115879	onoxx	1.09031	0.88
24015	ništ	1.09057	0.99	ništva, ništvo, ▁stanovništva, ▁ništa, ništvu
93195	näkö	1.0907	1	▁todennäkö
118730	▁úsáideoirí	1.09082	0.63
125736	滙	1.09111	1
84365	▁mjere	1.09175	0.43
83688	▁uralk	1.09213	1	▁uralkod
9673	▁despu	1.09217	0.75	▁después
75773	▁szwedz	1.09284	0.55	▁szwedzki
124086	끊	1.09358	1
69176	ictre	1.09395	1	▁leictre
99066	▁Feabhra	1.09398	0.97
109726	īlī	1.09399	0.91	▁aprīlī
107924	krótce	1.09437	0.022	▁Wkrótce
10137	▁listop	1.09457	0.99	▁listopada, ▁listopadu, ▁listopadzie, ▁listopad
70790	▁tvrtke	1.09457	0.96
127528	迺	1.09459	1
86114	▁tèc	1.09459	0.89
74874	▁promjene	1.09469	0.99
127274	😘	1.09482	1
127496	💛	1.09484	1
118312	▁mañá	1.09497	0.67
36794	▁ferrament	1.09505	1	▁ferramentas, ▁ferramenta
127054	💜	1.09535	1
107790	▁igrexa	1.0954	0.54
118776	▁bismo	1.0954	0.99
79868	▁finanzjar	1.0958	0.25
127377	枓	1.09582	1
77521	▁perfett	1.09634	0.75	▁perfetto, ▁perfetta, ▁perfettamente
103128	gbaar	1.09682	0.013	▁verkrijgbaar
110426	▁condicións	1.09683	0.99
108828	▁gràcies	1.0969	1
127053	뤘	1.09721	0.84
119257	▁februára	1.09729	0.97
117388	▁pedagogas	1.09749	0.99
91948	▁zagreba	1.09795	0.99
103277	▁Aibreán	1.09796	0.96
28617	missjoni	1.09813	1	Kummissjoni
68803	혔다	1.09866	0.99	▁밝혔다
48765	▁pauv	1.09909	1	▁pauvres, ▁pauvreté
113745	škog	1.09963	0.93
67692	▁Njema	1.1002	0.97
94187	▁kostola	1.10041	0.97
105319	▁dereito	1.10053	0.98	▁dereitos
104706	▁mitjana	1.10074	1
83305	▁Eanáir	1.10096	0.96
126997	🤣	1.10134	1
78883	▁sveučili	1.1014	0.97
72311	▁серьё	1.10159	1	▁серьёз
127593	堃	1.10163	1
89855	çalves	1.10176	0.99	▁Gonçalves
79572	huine	1.10197	0.99	▁dhuine
106627	reżent	1.102	0.022
85767	▁tjedan	1.10202	0.96
105008	िटिश	1.10208	0.33	▁ब्रिटिश
100669	unikazzjoni	1.10213	0.13
106486	▁pisarka	1.10226	1
74587	▁hrvatskog	1.10231	0.84
96405	▁天天中彩票	1.10248	0.00027
81617	▁Sveučili	1.10249	0.99
127713	毆	1.10317	1
54259	화국	1.10323	1	공화국, ▁공화국
89447	▁dobio	1.10329	0.99
39996	▁éags	1.1034	0.086	▁éagsúla
81130	▁segona	1.1035	0.99
55053	に登場するキャラクター	1.10356	1
77649	idirbti	1.10369	0.71	▁užsidirbti
107627	boljš	1.10455	0.97	▁izboljš
125726	뉜	1.10461	0.091
96792	▁osobito	1.10467	0.97
85696	▁tilsvar	1.1056	1	▁tilsvarende
55814	▁timpe	1.10621	0.92	▁timpeall
64359	kričio	1.10637	0.0014	▁lapkričio
88817	ссорти	1.10678	0.68	▁ассорти
114043	▁Hrvati	1.10688	0.99
90537	▁povjeren	1.10703	0.99
101475	emplaz	1.10728	1	▁reemplaz
42864	żonn	1.10757	0.0096	▁bżonn
66941	дьми	1.10769	0.99	▁людьми
127465	齣	1.10783	1
101068	▁određen	1.10814	1
126304	͜	1.10856	1
105317	▁jūlijā	1.10875	1
127805	楨	1.10881	1
76100	▁imao	1.10884	0.18
127390	鵑	1.10895	1
98672	▁milliún	1.10936	1
50643	ovjek	1.10956	1	▁čovjek
45797	▁obyv	1.10989	1	▁obyvatel, ▁obyvateľov, ▁obyvateľ
75988	▁vokie	1.11024	0.82	▁vokiečių
74649	▁Així	1.11058	0.99
87392	itianta	1.11078	0.78	▁coitianta
44676	▁svib	1.11138	1	▁svibnja
73111	▁Goberno	1.11143	0.95
115810	▁Membru	1.11144	1
90236	▁grups	1.11173	1
75855	žast	1.11175	0.98	▁priežast
115894	▁umjesto	1.11192	1
124955	\u2029	1.11196	1
87503	▁obxectivo	1.11244	1
86819	скохозяй	1.11248	0.48	▁сельскохозяй
116431	▁Ovaj	1.11275	0.98
108213	▁svake	1.11282	0.8
91489	▁reći	1.11316	1
82130	đeno	1.11325	0.71
43591	▁rekao	1.11351	1
123701	잃	1.11369	1
83940	▁pàg	1.11373	1	▁pàgina
104270	ijeća	1.11387	0.36
79115	ètica	1.1139	0.98
127610	饑	1.11431	1
114091	▁xhur	1.11441	0.88
84167	okārt	1.11465	0.0018	▁galvenokārt
27602	▁povij	1.11467	0.37	▁povijesti, ▁povijest, ▁povijes
78024	êmement	1.11469	0.052	▁extrêmement
91627	اطق	1.11477	0.78	▁مناطق
49698	生年不明	1.11497	0.96
83409	▁pobjed	1.11504	1
108129	▁sedam	1.11507	0.82
34932	▁можу	1.11507	1	▁можуть
93094	▁Iúil	1.11525	0.96
91816	▁sobretot	1.11532	1
72136	▁vjerojatno	1.11539	0.93
97759	ħaddiema	1.11574	0.98
9352	▁bhfu	1.11583	0.00078	▁bhfuil
118952	antilainen	1.11607	0.034
105377	▁septembrī	1.11612	1
93125	θλημα	1.11643	0.98	τάθλημα
75607	àries	1.11702	1
117825	▁septembris	1.11727	0.99
126609	鵰	1.11797	1
114824	ćenja	1.11801	0.91
97133	índo	1.11805	0.98
105533	▁snage	1.11834	0.99
105898	▁concellos	1.11838	1
112024	▁direcció	1.11852	0.98
45894	вичай	1.11862	0.037	звичай, вичайно, ▁звичай
110181	sigurtà	1.11868	0.99
68667	▁Međutim	1.11878	0.84
111248	▁speċjalment	1.11888	0.02
61900	▁homena	1.11894	0.18	▁homenaje, ▁homenage
119867	。	1.11906	1
97874	▁Nobelin	1.11908	1
119226	▁novembris	1.11922	0.99
58869	ajnuna	1.11939	0.0027	għajnuna
89591	▁Ewropej	1.11946	0.96
71621	bhne	1.11967	1	▁scríbhne
93529	▁coses	1.1197	1
95453	▁Despois	1.12005	0.96
101410	▁decembrī	1.12009	1
127529	鄴	1.12022	1
45381	РСР	1.12033	1	▁СРСР, ▁УРСР
54088	ħrajn	1.12034	0.9	▁oħrajn
102968	▁janvārī	1.12035	0.99
41958	ageal	1.12038	1	▁esophageal, ophageal
61299	ósł	1.12039	0.74	niósł, iósł
76918	▁període	1.12055	0.92
115413	▁aprīlī	1.1207	1
110700	nHotel	1.12088	1
96204	▁coñecido	1.121	1
108629	▁oriġ	1.12121	1
79196	▁stanovnika	1.12135	0.89
89326	▁ciutad	1.1214	1
115528	▁veï	1.12146	0.99
113197	església	1.12157	0.97
127217	橢	1.12174	0.94
105817	ćim	1.12182	0.081
95725	ejjeż	1.12182	0.016
101115	awtoritajiet	1.1219	0.38
85309	hulgas	1.12191	1	▁sealhulgas, ▁hulgas
52947	▁svijeta	1.12191	0.95
94725	ису	1.12202	1	▁Иису
127436	軾	1.12221	1
70472	amiselt	1.1224	0.033	▁peamiselt
72878	▁djela	1.12246	0.78
60708	▁преды	1.12275	1	▁предыду
99662	iċjali	1.12339	0.12
97596	▁uglavnom	1.12344	0.98
30731	ysvalt	1.12348	0.1	▁yhdysvalt, ▁Yhdysvaltain
90372	стрее	1.12375	1	▁быстрее
114501	ljaju	1.12381	0.44
100419	▁doći	1.12392	0.99
103014	▁austriacki	1.12402	1
117441	partijiet	1.12413	0.87
61881	futebol	1.12422	1	futebolista
61114	▁jūl	1.12427	0.96	▁jūlijā
103470	▁matematyk	1.12431	1
31821	▁памя	1.1244	0.97	▁памят, ▁памяти, ▁память, ▁памятник
106499	ġiż	1.12459	0.3
124038	촬	1.12501	1
88998	▁chlu	1.12516	0.94	▁chluiche
96620	żempju	1.12525	0.026
66138	čkim	1.12543	0.89
86444	▁següent	1.12562	0.98
95175	▁persoa	1.12562	1
88138	▁calidade	1.1258	0.99
99898	▁conxunto	1.12585	0.81
55830	γκόσμ	1.12595	0.24	▁Παγκόσμ, ▁παγκόσμ
107772	▁svakodnev	1.12603	0.92
102337	kumpanija	1.12626	1
124036	맺	1.12636	1
74336	▁serveis	1.12638	1
75788	ūnait	1.12643	0.89	▁seniūnait, ▁seniūnaitija
88526	roupe	1.1268	1	▁regroupe, ▁troupe
108102	nóstwo	1.12689	0.011	▁mnóstwo
114230	▁scenarzysta	1.12708	1
81816	▁segon	1.12733	1
94055	egħ	1.1275	0.12	egħdin, ▁qegħdin, ▁miegħ, ▁qiegħed
101859	imarães	1.12772	0.25	▁Guimarães
94200	▁Segons	1.1278	1
98017	▁drets	1.12791	0.98
81838	▁moći	1.128	1
102824	perjodu	1.12823	0.098
105964	▁jūnijā	1.12829	1
21351	▁predsjed	1.12829	0.16	▁predsjednik, ▁predsjednika
78813	ijeniti	1.12868	0.23
108117	▁prezidents	1.12897	1
8995	egraphics	1.12917	1	includegraphics
126953	鎳	1.1292	1
126151	ʖ	1.12944	1
50647	▁υπή	1.12947	1	▁υπήρ, ▁υπήρχ, ▁υπήρξε
126707	췄	1.1299	0.83
99209	▁ġdida	1.12992	0.96
104329	▁résoud	1.13011	1	▁résoudre
80448	čeo	1.13018	1
9542	ashington	1.13032	0.98	▁Washington, Washington
72139	▁postao	1.13084	1
127738	셴	1.13107	1
127556	碲	1.13165	1
81319	informazzjoni	1.13171	1
127645	镕	1.13185	1
93690	▁októbra	1.13188	0.99
106850	▁iznos	1.13193	1
110447	▁raditi	1.13195	1
104194	▁axuda	1.13212	0.44
94674	▁pajjiżi	1.13216	0.95
90527	háilte	1.1325	0.012	▁sábháilte
21390	▁nouv	1.13252	1	▁nouvelles, ▁nouveaux, ▁nouvel
127619	鉀	1.13277	1
83976	тьми	1.13283	0.71	▁детьми
126563	눇	1.13283	0.057
113760	persuna	1.13298	0.73
44633	sjed	1.13303	1	▁predsjednik, ▁Predsjed, ▁predsjednika, ▁Predsjednik
81205	▁općine	1.13306	0.65
62878	▁econò	1.13326	0.99
126793	鈉	1.13343	1
102456	▁formació	1.13352	1
84207	đene	1.13358	0.98
97010	▁societat	1.13365	1
72127	ćih	1.13375	0.25
123700	😀	1.13399	1
100664	ccions	1.1341	0.99	▁eleccions
80020	▁espazo	1.13413	0.62
99038	ूबर	1.13417	1	क्टूबर, ▁अक्टूबर
79174	▁persoal	1.13423	0.33
94151	▁juul	1.13466	1	▁juulil
118706	ціями	1.13474	1
108344	▁imali	1.13494	0.74
84323	ístiques	1.13499	0.8
58096	▁Meirice	1.13535	0.91	▁Meiriceánach
105983	▁júna	1.13541	0.92
92939	▁isključ	1.13577	1
123580	옮	1.13582	1
115945	irġiel	1.13584	0.86
118545	prodott	1.13585	1
116824	Iż	1.13623	1
68635	ïsos	1.13633	0.95	▁països
114261	popolazzjoni	1.13642	0.92
111793	▁nistgħu	1.13646	0.96
115155	▁aktieris	1.13653	1
107020	▁espanyola	1.13677	0.99
119579	▁augustil	1.1368	0.97
115990	ificació	1.13692	0.9
82704	àtic	1.13694	1	àtica
127935	嘧	1.13706	0.99
116171	▁Francus	1.13719	1
127924	ṉ	1.1372	1
107459	lēts	1.13732	1
42317	▁utjec	1.13743	0.081	▁utjecaj
99196	▁ewlenin	1.13755	0.99
100649	jerojat	1.13762	0.081
68492	▁aquestes	1.13767	0.98
18906	▁côt	1.1377	1	▁côté, ▁côte, ▁côtés, ▁côtes
107977	▁smanj	1.13777	0.97
75081	áronse	1.13806	0.98
97494	▁ću	1.13818	1
105242	▁júla	1.13819	0.74
72352	▁hrvatskih	1.13832	0.97
115663	Renju	1.13838	1
79467	icima	1.13845	0.98
16548	erdings	1.13846	0.99	▁allerdings, ▁Allerdings
69918	▁dijelu	1.13882	0.6
109452	▁nosos	1.1389	0.9
127889	獠	1.1389	1
108701	ātē	1.13896	1
115488	▁septembril	1.139	0.94
16806	▁kuiten	1.13912	0.99	▁kuitenkin, ▁kuitenkaan
127165	ʉ	1.13914	1
111103	ġju	1.13941	1
112465	▁funció	1.13954	0.98
16252	▁područ	1.13957	0.86	▁području, ▁područja, ▁područje
18414	kuuta	1.1398	1	ikuuta, ▁tammikuuta, ▁joulukuuta, ▁maaliskuuta, ▁lokakuuta, ...
117593	▁juulil	1.13981	0.73
105776	▁rijet	1.13993	0.99
41579	ywidual	1.14021	0.51	▁indywidual
85515	براير	1.14028	0.99	▁فبراير
87090	▁minū	1.1403	1	▁minūtes
99852	▁osjeća	1.14035	1
57060	▁aquests	1.14078	1
73237	nezeu	1.14082	0.52	▁Dumnezeu
103864	▁caràc	1.14084	0.86
10891	▁каж	1.14091	0.97	▁каждый, ▁каждо, ▁каждого, ▁каждой, ▁кажется, ...
81213	▁serà	1.1412	1
106073	▁godini	1.14157	0.8
69474	▁područje	1.14193	1
72041	Ajuntament	1.14205	1
57336	prilis	1.14209	1	▁április
96868	▁gewij	1.14211	1	▁gewijzig, ▁gewijzigd
108540	ètic	1.14212	0.97
104888	níctvom	1.1422	0.2	▁prostredníctvom
61880	▁xullo	1.14229	0.97
118043	ništvu	1.14234	0.61
100820	adament	1.14281	0.98
50965	туга	1.14309	1	▁Португа, ▁португа
107527	петров	1.14311	1	пропетров
53339	biltà	1.14326	0.048	abbiltà
71158	jodu	1.1434	0.96	perjodu
102287	servizz	1.14346	1
67934	niedem	1.14358	0.68	bniedem
29743	ļuva	1.14362	0.25	▁kļuva
41827	▁goberno	1.14384	0.38
73856	▁algúns	1.14391	0.00088
77607	▁Φεβρου	1.14418	1	▁Φεβρουαρίου
111876	▁camiño	1.14476	0.99
108843	numru	1.14485	1
100994	ätere	1.14487	0.77	▁spätere
101156	idelijke	1.14513	0.93	▁duidelijke
116099	▁jaanuaril	1.14536	0.89
93372	rufa	1.14571	1	▁magħrufa
84435	jectiu	1.14577	0.89
127663	誣	1.14605	1
127973	癱	1.14626	1
107398	▁gadsimtā	1.14629	1
71570	▁ηθο	1.1463	0.94	▁ηθοποι, ▁ηθοποιός
109667	▁spillere	1.1464	1
83296	paravant	1.14665	0.71	▁auparavant
112875	▁imreoir	1.14674	0.98
102012	▁Nru	1.14677	1
10209	ijekom	1.14679	0.93	▁tijekom, ▁Tijekom
103988	avanju	1.14686	0.72
74461	▁Iako	1.14687	0.98
113582	▁simplí	1.14689	0.98
42926	▁liječenje	1.14692	1
96147	▁Deputación	1.14694	0.96
127479	镓	1.14704	1
91871	ració	1.14724	0.99	▁elaboración, ▁preparación, ▁integración, ▁separación, ▁decoración, ...
94887	▁britisk	1.14739	1
87145	itivement	1.14742	0.13	▁définitivement
79783	pajjiżi	1.148	0.77	▁pajjiżi
34947	▁newsp	1.14803	1	▁newspaper, ▁newspapers
77135	oprojām	1.14805	0.022	▁joprojām
88956	▁imre	1.14815	1	▁imreoir
111385	πρεπε	1.14841	0.99	▁έπρεπε
110493	werkelijk	1.14847	1	▁daadwerkelijk
106856	▁juunil	1.14868	0.21
116615	▁Lije	1.14879	1
16432	▁ць	1.14881	1	▁цього, ▁цьому
110554	▁holenderski	1.14905	1
127586	탔	1.14906	1
63737	jalment	1.14906	0.0049	▁speċjalment
65625	раздо	1.14932	0.98	▁гораздо
110658	▁apríla	1.1494	0.95
86632	ijeku	1.14942	0.99
59366	▁juliol	1.14952	0.99
94066	ódios	1.1496	1	▁episódios
66913	ikāņu	1.14988	0.98	▁amerikāņu
119665	▁unutarn	1.1499	0.96
113146	▁karalis	1.14995	0.99
94796	zmán	1.15015	0.98	▁Guzmán
78248	liono	1.15032	0.99	▁vogliono
96798	τίον	1.15033	0.99	▁εναντίον
61236	▁miljoona	1.15061	1	▁miljoonaa
74660	▁histò	1.15073	0.99
124684	ᆞ	1.15079	0.99
100084	варин	1.15089	1	▁тварин
127789	詛	1.15117	1
70877	endeels	1.15139	0.76	▁grotendeels
96937	▁rytus	1.15143	0.82
119638	▁błogosławiony	1.15157	1
49799	▁tisu	1.15157	0.81	▁tisuća
84304	▁ovdje	1.1516	1
36582	orith	1.15167	1	▁Algorith, ▁Algorithm, algorith
82329	oeurop	1.15175	1	▁indoeurop
18339	▁транспо	1.15196	1	▁транспорт, ▁транспор, ▁транспорта
92497	▁Aínda	1.15197	0.12
108897	▁imaxe	1.15202	0.99
93613	ġijiet	1.15209	0.68
13274	▁crít	1.15212	1	▁crítica, ▁críticas, ▁crítico, ▁críticos
57091	▁kasnije	1.15223	1
110180	ksjonen	1.15229	1
127245	綢	1.15229	1
127991	嶄	1.1523	1
86911	ćem	1.15234	0.76
36579	▁hÉ	1.15235	0.99	▁hÉireann
108372	▁atmós	1.1525	0.99	▁atmósfera
88978	▁najav	1.1526	0.95
115605	▁mogla	1.15268	0.99
103938	▁vakarus	1.15278	0.62
127916	⇌	1.15287	1
65706	aigua	1.15289	1
97166	▁zrakoplov	1.15292	1
127598	💋	1.15305	1
112013	omszéd	1.15325	0.99	▁szomszéd
90221	▁svojoj	1.15336	0.84
78946	igoje	1.15344	0.6	▁pabaigoje
62397	unarod	1.15345	0.92	▁međunarod
63549	▁ġodda	1.15346	0.97
127734	妤	1.1535	1
40635	▁Veröff	1.15351	0.97	▁Veröffentlicht, ▁Veröffentlich
88176	еруса	1.15356	1	▁Иеруса
63795	▁djelat	1.1536	1
86943	servizzi	1.15378	1
112479	issió	1.15381	0.91
89155	▁juun	1.1539	0.98	▁juunil
54953	ċiżjoni	1.15409	0.74	deċiżjoni
79398	▁dhátú	1.15417	0.18
52862	▁cijel	1.15448	0.95	▁cijelog, ▁cijele, ▁cijeli
61394	asaíneo	1.15452	0.00065	▁ceasaíneo, asaíneonna
105395	▁unutar	1.15458	0.99	▁unutarn
60867	pjū	1.15471	1	pjūčio, ▁rugpjūčio
100131	▁meħtieġa	1.15476	1
57166	▁setembre	1.15476	0.99
109767	aranki	1.1548	0.99	▁savaranki
42778	▁stoljeća	1.15486	0.94
112750	ambjent	1.15502	0.95
46751	▁sliot	1.15508	0.94	▁sliotán
117285	▁pàgina	1.15516	0.99
31068	▁opć	1.15551	0.93	▁općine, ▁općini, ▁općina
106813	лём	1.15579	1
118049	▁märtsil	1.15586	0.99
83442	▁उम्मी	1.15596	0.99	▁उम्मीद
85427	ejje	1.15601	1	ejjeż, żejjed, ▁biżżejjed
74468	كتوبر	1.15608	0.53	▁أكتوبر
4757	úbl	1.15615	1	ública, úblico, ▁público, úblic, ▁República, ...
62527	▁hrvatske	1.15629	1
14322	▁miejs	1.15629	0.99	▁miejscu, ▁miejsca, ▁miejscowości, ▁miejscach, ▁miejskie, ...
90731	▁obres	1.1569	0.99
77461	تمبر	1.15735	1	▁سبتمبر
103598	йтинг	1.15748	1	▁рейтинг
109539	websajt	1.15749	0.98
55124	▁soċjali	1.15759	0.83
116591	itzats	1.15777	0.93
104995	jazzjoni	1.15778	0.68
69149	xtie	1.15783	1	xtieq, ▁extiende
45317	年逝世	1.15787	0.13
66439	динён	1.15794	0.21	единён
127067	頡	1.15803	1
68744	▁sprije	1.15823	0.023
113818	▁obliku	1.15823	0.52
123998	짧	1.1583	1
40814	ónaí	1.15833	0.00092	▁gcónaí
127073	紝	1.15848	1
116559	ħl	1.15852	0.31
43724	għaż	1.15856	0.95	għażagħ, ▁għaż, għażla
55768	ιαί	1.15865	1	▁ιδιαί, ▁ιδιαίτερα
126317	ѵ	1.1587	1
88064	ijeti	1.15875	0.98
126544	铉	1.15885	1
85303	▁апреле	1.1592	0.98
103030	abbiltà	1.15926	0.94
58991	▁desembre	1.15932	1
105227	▁martā	1.15957	1
108849	▁trebao	1.15962	0.97
126670	檸	1.15992	1
45686	Istati	1.15992	0.69
66689	▁mitjan	1.15998	0.89	▁mitjançant, ▁mitjana, ▁mitjans
82641	▁povijest	1.1601	1
54600	στόσο	1.1601	0.085	▁Ωστόσο, ▁ωστόσο
70826	▁desember	1.16017	1
55820	čaju	1.16023	1	▁slučaju
127962	蜴	1.16032	1
95814	▁činjen	1.16065	0.83
84631	▁storočí	1.16074	0.99
125717	卐	1.16102	1
63869	тември	1.16104	0.01	▁септември
116385	ksjoner	1.16147	0.97
89610	▁detsember	1.16175	1
117530	▁istraž	1.16178	1
105885	▁filla	1.16193	0.96
127680	📢	1.16217	1
107300	▁nucli	1.1622	0.99
127976	鬍	1.16222	1
95774	acció	1.16229	0.62	▁interacción
74586	▁elokuuta	1.16243	1
47037	▁cyw	1.16259	1	▁cywil, ▁cywiliz
97193	razzjoni	1.1626	0.38
79440	θυπουργ	1.16261	0.97	▁πρωθυπουργ
80916	سمبر	1.16261	0.96	▁ديسمبر
57795	▁istak	1.16277	0.99	▁istaknuo
115353	▁krytyk	1.16291	1
77333	familja	1.16295	0.1
114528	▁Scrí	1.16334	1
112058	▁chluiche	1.1634	0.99
53313	nisja	1.16345	0.92	Knisja
110280	랫폼	1.1635	0.35	▁플랫폼
20210	▁fregues	1.16354	1	▁freguesia, ▁freguesias
100388	▁treneris	1.16364	0.98
75793	▁ηθοποι	1.16411	0.83	▁ηθοποιός
72193	ськими	1.16434	0.69
117779	▁doncs	1.16444	0.99
70543	▁lokakuuta	1.16446	1
66883	▁Madankollu	1.16456	1
51017	▁Итали	1.16516	0.99	▁Италии, ▁Италия
87199	▁spisovateľ	1.16523	0.98
90622	proċed	1.16528	0.96
112464	▁Egiptu	1.16562	0.98
116581	wiż	1.16562	0.68
82506	▁miljun	1.1657	0.99
126939	ѧ	1.16585	1
85701	▁disponibbli	1.16631	0.45
126529	듐	1.16634	0.99
125875	▋	1.16635	1
88574	жидан	1.16636	0.62	▁неожидан
119582	▁ekonomista	1.1664	0.97
19247	▁quím	1.16714	1	▁química, ▁químico, ▁químicos, ▁químicas
47541	čkoj	1.1675	0.98
74456	▁començar	1.16775	0.99
113664	▁åpnet	1.16782	1
127344	💙	1.16795	1
113941	▁mbagħad	1.16796	0.74
110861	ровались	1.16797	1
50334	seteq	1.16798	1	subseteq
127870	賂	1.16799	1
58113	▁segü	1.16808	0.92	▁següent
119310	▁inclou	1.16828	1
119217	▁Italiji	1.16833	0.22
101540	▁tempada	1.1684	1
61023	▁escript	1.16845	0.99	▁escriptor
77278	▁grà	1.16872	0.99	▁gràcies
78249	плоть	1.16886	1	▁вплоть
113854	▁prezydentem	1.16886	0.96
84129	ivši	1.16918	0.99
106638	▁speċjali	1.16936	0.00057
89185	♀♀♀♀	1.16937	0.98
108472	▁joff	1.16938	0.99
93875	▁mokyklą	1.16954	1
106317	тными	1.16955	0.88
63310	▁sjever	1.16977	0.89
98848	deċiżjoni	1.1702	0.99
62881	▁història	1.17023	1
58459	▁pouv	1.17027	0.95	▁pouvant, ▁pouvoirs, ▁pouvons, ▁pouvaient
113845	▁Aastatel	1.17059	0.59
49786	ωνσταν	1.17068	0.88	▁Κωνσταν
113901	▁ežero	1.17098	1
127661	燊	1.17115	1
127740	Ќ	1.17115	1
127951	餵	1.17115	1
69231	▁liña	1.17115	0.61
127721	鄯	1.17127	1
79301	itzada	1.17129	0.041
103913	radarb	1.1714	0.95	▁bendradarb
85788	▁dvejetainių	1.17147	1
95367	▁Iżda	1.17171	0.94
126883	샀	1.17183	1
114725	poznat	1.17189	1
54619	▁vije	1.17199	0.75	▁vijeća
93888	likwid	1.17201	0.98	▁zlikwid
87476	ċità	1.17202	0.88
127458	슭	1.17221	1
127408	💚	1.1723	1
66491	▁Ιανου	1.17236	1	▁Ιανουαρίου
85978	▁умова	1.17246	1	▁умовах
87868	▁Això	1.17258	0.97
52823	▁momen	1.17274	1	▁momencie, ▁momenti, ▁momentu, ▁momenteel, ▁momentul
127914	랠	1.17296	1
109987	▁prvaka	1.17302	0.47
65384	▁Opć	1.17303	1
102352	▁maijā	1.17327	1
110242	▁ranskalainen	1.17333	0.93
86456	▁sustava	1.17341	0.99
102681	▁Впер	1.17343	1	▁Впервые
93361	▁męczen	1.17349	0.99	▁męczennik
113544	nDette	1.17355	0.2
55654	usztus	1.17371	0.31	▁augusztus
119715	▁	1.17376	0.99
113738	▁internasjonale	1.17385	0.99
100933	▁beë	1.17397	0.99	▁beëind
65975	▁Aħ	1.17408	1	▁Aħna
93167	ümpi	1.1741	0.95	ümpiamäng
96007	țione	1.17416	0.4	ționează
33039	▁όλ	1.1742	1	▁όλα, ▁όλες, ▁όλοι, ▁όλους, ▁όλη, ...
89349	għajnuna	1.17422	0.98
98481	▁żgħ	1.17449	1
30190	▁oorspr	1.17449	0.99	▁oorspronkelijke, ▁oorspronkelijk, ▁oorsprong
109369	▁Dúirt	1.17464	0.97
55464	▁moitos	1.17473	1
111270	▁prvenstva	1.17483	0.97
108032	ellschaften	1.17494	0.056	gesellschaften
107854	▁Frankrig	1.17494	1
127919	崂	1.17498	1
100434	ustizzja	1.17506	0.54
111940	▁jinkludu	1.17512	0.94
118688	▁mitjans	1.17513	1
116362	ствовало	1.17521	0.98
54227	etõttu	1.17532	0.013	▁seetõttu, ▁Seetõttu
126919	轅	1.17537	1
108088	▁dvejetainiai	1.1754	1
86552	▁avui	1.17549	1
89490	▁феврале	1.17558	0.99
112152	ссуа	1.17565	0.96
127766	Ἁ	1.17578	1
84473	reżenta	1.17579	0.0013
53926	▁touk	1.17596	1	▁toukoku, ▁toukokuuta
114316	asaíneonna	1.17616	0.00043
115725	▁postroj	1.17631	1
28056	zzjonali	1.17665	0.57	▁nazzjonali, ▁internazzjonali, ▁Nazzjonalista, izzjonali, ▁Nazzjonali
53659	▁tijelo	1.17674	1
115669	▁diffiċli	1.17675	0.00084
82867	▁njez	1.17694	0.77	▁njezin
93437	▁aryst	1.177	0.99	▁arystokrat
80322	▁Hrvata	1.1771	0.98
98535	▁jaħdmu	1.17718	0.99
89544	▁kwietniu	1.17738	0.95
84093	▁grudniu	1.17743	0.98
104650	iserte	1.17752	0.98
77237	▁авст	1.17754	0.99	▁австрий
94304	▁possibbli	1.1776	1
98412	nske	1.17774	1	▁ønsket, ▁ženske, enskej, ▁Danske, ▁slovenskej, ...
122263	됩	1.17792	0.79
43147	owiek	1.17812	0.99	▁człowiek
89575	▁kralja	1.17814	0.98
72375	zdłuż	1.1784	0.052	▁wzdłuż
107273	pazjenti	1.17841	0.44
83168	зніше	1.17841	0.15	▁пізніше
57570	▁juny	1.17843	1
64192	onkelijke	1.17851	0.96	▁oorspronkelijke
111783	▁daljn	1.17852	0.15
72457	▁desenvolvemento	1.1788	0.88
108065	rała	1.17897	1	▁generała
80976	▁rexión	1.17923	0.059
71091	▁kesäkuuta	1.1794	0.99
75194	▁helmikuuta	1.17947	0.99
127848	옙	1.17961	1
119246	▁drabi	1.17968	0.99
126840	놨	1.17977	0.82
93312	ànica	1.17984	0.96
45137	▁Tijekom	1.17989	0.76
80324	▁mjesec	1.18017	0.98
95790	▁igrzy	1.18035	1	▁igrzysk
82738	▁октябре	1.18038	0.96
127743	擄	1.18042	1
97420	▁Već	1.18047	1
127630	靂	1.18074	0.97
104505	bbili	1.18081	0.66
105331	жнему	1.18083	0.99	прежнему
117348	▁zpěvák	1.18099	1
100209	▁suíomhanna	1.18109	0.36
86588	vaigžd	1.18109	0.95	▁žvaigžd
97468	▁djeca	1.18109	1
90354	▁Lúnasa	1.18125	1
127834	愍	1.18128	1
36895	▁agrí	1.18128	1	▁agrícola, ▁agrícolas
13413	utebol	1.18135	0.0099	▁futebol, ▁futebolista, ▁Futebol, futebol, futebolista
85123	▁gañ	1.18152	1
87116	footnotes	1.18154	1	footnotesize
16611	▁эф	1.18156	1	▁эффектив, ▁эффек, ▁эффект, ▁эфи
118954	▁veebruaril	1.18169	0.87
13974	▁circumst	1.18174	1	▁circumstances, ▁circumstance
127484	酗	1.18184	1
51818	▁coneg	1.18187	0.99	▁conegut
24662	▁tjed	1.18221	0.98	▁tjedna, ▁tjedan
47831	▁desenvolup	1.18223	0.97	▁desenvolupament
107283	▁eleccions	1.18235	1
52743	▁veebruar	1.18239	1	▁veebruaril
103781	▁novembrī	1.18246	1
69876	▁mateixa	1.18248	0.97
64619	▁febrer	1.1825	0.99
127744	濬	1.18254	1
98464	▁нових	1.18274	1
63620	embru	1.18287	1	ċembru, ▁Membru, tembru
50626	ंग्रेस	1.18303	0.97	▁कांग्रेस
111357	льним	1.18304	0.9
118922	▁sábháilte	1.1831	0.0039
103153	стеза	1.18331	0.92	▁състеза
127937	氹	1.18335	1
42603	▁papie	1.18335	0.98	▁papieża, ▁papież
80955	▁uirthi	1.18336	1
100835	álnym	1.18341	0.47
92633	人民共和國	1.18355	0.98	中華人民共和國
106799	▁Prije	1.18355	1
71643	▁syyskuuta	1.18367	0.97
70696	▁багать	1.18379	0.87	▁багатьох
76221	unionen	1.18383	1	▁Sovjetunionen
92509	▁tradisjon	1.18392	1
39512	▁оке	1.18447	0.84	▁океа, ▁океан, ▁океана
98771	ivao	1.18452	1
60842	glésia	1.18458	0.99	església
127728	쾨	1.18459	1
86115	ființ	1.18464	1	▁înființ
107435	▁camí	1.18474	1
80798	proċess	1.18496	0.81
87415	đuje	1.18502	0.96
38799	irithe	1.18512	0.96	▁áirithe, ▁háirithe
71258	ykloje	1.18518	0.92	▁mokykloje
117837	ovića	1.1852	1
28035	▁mexic	1.18533	1	▁mexicano, ▁mexicana, ▁mexicanos
118488	oireachta	1.18542	0.99
75139	għażagħ	1.18567	0.81
127373	鈺	1.18567	1
127014	斃	1.18569	1
112923	▁llocs	1.1857	1
127658	攏	1.18576	1
85506	▁començ	1.18588	0.99
108822	▁lliure	1.18599	1
76376	rīd	1.18604	1	obrīd, ▁brīd
96107	фикси	1.1862	1	▁зафикси
72267	возгла	1.18622	0.99	▁провозгла
48734	▁atja	1.18629	1	▁atjauno, ▁atjaun
78210	中彩票	1.18629	1	▁天天中彩票
88273	▁июне	1.18636	0.97
125636	壢	1.18645	1
47008	▁područja	1.18647	0.99
97395	▁Francijas	1.18656	0.99
103116	▁għalkemm	1.18657	0.96
95028	▁Aħna	1.18661	1
101645	▁Париже	1.18662	0.95
127929	軀	1.18675	1
100924	▁здравоохра	1.18675	1	▁здравоохранения
84926	cką	1.1869	0.99
93750	▁construcció	1.18701	0.96
92363	ničke	1.1871	0.99
78579	đenja	1.18715	0.88
92766	▁Φεβρουαρίου	1.18736	0.99
94550	▁cimit	1.18747	1	▁cimitero
92882	▁innbyggere	1.18748	1
86744	▁jipprov	1.18751	0.99
112993	▁Njegova	1.18772	0.97
101846	▁gewijzig	1.18778	0.98	▁gewijzigd
47998	кульп	1.18781	0.35	▁скульп
119288	▁actualidade	1.18783	1
96579	▁saksalainen	1.18784	0.87
86065	bhre	1.18785	1	bhreith
127899	슛	1.18788	1
119216	iskajās	1.188	0.02
118655	▁Rusija	1.18805	0.91
39099	▁natjec	1.18808	0.97	▁natjecanja
111497	▁disseny	1.18812	1
126094	̋	1.18816	1
126643	뒀	1.18829	0.96
73561	izzazzjoni	1.18833	0.72
126887	▀	1.18854	1
115370	riure	1.18863	1
83061	▁juuli	1.18863	0.95	▁juulil
119409	Kumitat	1.18868	0.98
42164	imkien	1.18876	0.94	▁flimkien
116092	▁Consello	1.1888	0.81
103177	▁sèrie	1.18881	0.96
109936	▁европейских	1.18897	1
59427	ФСР	1.18917	1	▁РСФСР
103703	uania	1.18922	0.99	▁Lithuania
56357	сориа	1.18923	0.98	▁псориа, ▁псориазис
33774	▁χαρακ	1.18931	1	▁χαρακτη, ▁χαρακτηρισ, ▁χαρακτή
104066	▁czeski	1.18984	1
127995	輾	1.18985	1
100470	▁Stoga	1.18991	1
54863	egužės	1.18997	0.014	▁gegužės
112400	ħloq	1.19012	0.017
111001	▁preuz	1.19028	1
101725	▁francez	1.19034	1
127299	囑	1.19052	0.99
103294	▁Carneg	1.19068	1	▁Carnegie
74945	▁polític	1.19078	0.99
43719	तिहास	1.19082	0.98	▁इतिहास, तिहासिक
108132	▁Njegov	1.19083	0.96	▁Njegova
72198	▁internasjon	1.19087	1	▁internasjonale
72778	uega	1.19098	1	▁Noruega
67685	▁četiri	1.1911	1
87818	▁ноябре	1.19165	0.94
127749	🤗	1.19173	1
110759	▁biżżejjed	1.19185	1
87697	żb	1.192	0.99	▁Elżb, ▁służb
97314	▁opcionų	1.19213	1
101277	▁sovint	1.19216	1
26635	Петербур	1.19223	1	Петербург, ▁Петербур, Петербурге, ▁Петербург, Петербурга
96498	▁conegut	1.1924	1
114448	▁Scors	1.1924	1	▁Scorsese
109715	ittivat	1.19245	0.99
69678	▁georgan	1.19247	0.98	▁georganiseerd
80770	▁korišten	1.19252	1
118444	▁Dende	1.19257	1
114148	▁trád	1.19268	1
126252	犧	1.19287	0.98
112735	▁составила	1.19305	1
111826	▁početku	1.19314	0.87
115234	▁sønn	1.19315	1
127886	✚	1.1933	1
96149	▁pirmininkas	1.19336	0.99
119238	▁tuża	1.19338	0.97
48318	біт	1.19339	1	▁робіт, робіт
80989	▁persuni	1.19341	0.96
108692	▁supón	1.19341	0.98
86828	▁entón	1.19348	0.041
98920	▁mijen	1.19351	1
127338	氡	1.19351	1
87285	▁kuće	1.19352	1
75732	▁priemerom	1.19353	0.91
105991	ighetene	1.19354	0.73
87187	▁βιβλ	1.19355	1	▁βιβλίο
116980	▁Skont	1.19369	1
45551	▁Испа	1.1937	1	▁Испании, ▁Испания
127464	鉗	1.19371	0.98
26386	akespe	1.19384	0.91	akespeare, ▁Shakespeare
69959	▁maaliskuuta	1.19392	1
65098	чними	1.19403	0.97
127812	膩	1.19406	1
115180	▁samoloty	1.19409	1
98798	λάχιστον	1.19411	0.91	▁τουλάχιστον
117477	atteristiċi	1.19413	0.0015
99100	täjä	1.19419	1
113377	▁bhuaigh	1.19423	1
76000	▁seirbhís	1.1944	0.92	▁seirbhísí
114826	▁preż	1.19442	0.82
56115	дям	1.1947	0.92	▁людям
127722	😦	1.19482	1
126114	鯊	1.19484	1
72685	▁heinäkuuta	1.19485	0.99
87749	▁sierpniu	1.19508	1
61406	britannien	1.19511	0.86	▁Großbritannien, ▁Storbritannien
110610	▁léi	1.19523	0.98
95298	ildup	1.19549	0.86	▁buildup
94086	▁ruský	1.19555	0.98
127817	嘌	1.19585	1
68860	hachtach	1.19604	0.96	▁tábhachtach
91251	bniedem	1.19608	0.83
98971	▁απόφα	1.19609	0.97	▁απόφαση
127657	勛	1.19611	0.99
92705	▁żvilupp	1.19612	0.99
45358	▁fenó	1.19616	1	▁fenómeno, ▁fenómenos
115102	▁Америке	1.19626	0.99
98318	ciji	1.19629	0.76
115191	емую	1.19635	0.95
88321	▁služben	1.19638	0.94
125826	渑	1.19651	1
64309	▁llengua	1.19672	1
119408	▁velge	1.19675	1
63459	skje	1.19676	1	▁forskjellige, ▁kanskje, ▁skjer, ▁skjed
42356	▁poboación	1.19678	1
86020	kedy	1.19691	1	▁niekedy
87296	▁relació	1.19695	1
91252	ningene	1.1971	0.93
33975	سرائ	1.19726	0.99	سرائيل, ▁إسرائيل, سرائيلي
118041	▁otkr	1.19728	0.68
90509	▁uzim	1.19739	0.97
127475	😆	1.1974	1
94848	ódáil	1.19752	0.47
94028	▁lutym	1.19781	0.95
108193	▁Προηγούμενο	1.19781	0.93
113017	▁anglès	1.19797	1
110270	▁ihmistä	1.19822	1
51579	iddels	1.1983	1	▁inmiddels
90099	▁dátaithe	1.1983	0.22
86983	▁Montp	1.19831	1	▁Montpellier
53875	▁mulleres	1.19838	0.98
9139	ября	1.19869	0.96	▁сентября, ▁октября, ▁ноября
51580	▁Aquesta	1.19884	1
97466	ylaxis	1.19889	0.96	▁prophylaxis
127921	괌	1.19897	1
112679	▁spēlēja	1.19902	0.94
69023	▁ćemo	1.19903	0.98
23304	ंत्री	1.19904	0.98	मंत्री, ▁मंत्री, ▁मुख्यमंत्री, ▁प्रधानमंत्री
3470	ющи	1.19904	0.97	ющих, ющие, ющий, ющим, ющими, ...
93565	úen	1.19907	1
21260	braio	1.19914	1	▁febbraio, ▁Febbraio
92565	qorti	1.19923	0.47
55029	▁març	1.19926	1
24679	▁seiz	1.19934	1	▁seizures, ▁seizoen, ▁seized, ▁seizure, ▁seize
89995	▁rugpjūčio	1.19936	1
86752	égias	1.19962	0.99	▁estratégias
75571	ixement	1.19963	0.23
108980	▁fheiceáil	1.19972	0.17
114231	▁uključujući	1.20004	0.23
61151	Ewropa	1.20018	0.84
87077	▁lipcu	1.20022	0.76
72968	uthú	1.20043	0.96	▁chruthú
109740	▁kirken	1.20058	1
97672	▁izcīnīja	1.2006	0.99
119151	▁airgid	1.20064	0.98
83055	vać	1.20084	0.99
112915	annië	1.20088	0.0091
98522	▁aconseguir	1.20095	0.99
108318	Józef	1.20099	1
108951	▁coñecer	1.20118	1
117266	▁parinkčių	1.20122	1
127716	촨	1.20123	1
102725	ानीय	1.20127	1	▁स्थानीय
116621	▁skjed	1.20139	1
47705	▁Ewropew	1.20141	0.98
86693	▁pitanje	1.20165	1
55447	ध्यम	1.20168	0.98	▁माध्यम
127352	婭	1.20173	0.85
118286	▁fundou	1.20189	1
108355	▁yhtyeen	1.20209	0.96
59386	▁Româ	1.20209	1	▁României, ▁Române
61790	▁německý	1.20213	1
110337	▁smije	1.2022	0.98
58830	đena	1.20258	0.85
127860	哔	1.2026	1
113729	▁temelju	1.2027	0.081
64471	▁koristiti	1.20271	0.99
112267	▁vadovavo	1.20274	1
75205	▁Estats	1.20278	1
127011	彧	1.20278	1
106267	▁näitleja	1.2029	1
86589	▁hores	1.20296	1
12932	▁nuev	1.20321	1	▁nueva, ▁nuevos, ▁nuevas, ▁nueve, ▁nuevamente
68690	越来	1.20328	1	越来越
114484	▁malajr	1.20334	0.98
48040	▁anbe	1.20353	1	▁anbefal, ▁anbef
110807	Espanya	1.20355	1
86003	▁październiku	1.20361	0.98
109487	▁jednostav	1.20363	1
85630	▁Ägyp	1.20372	0.99	▁Ägypten
78252	▁poduz	1.2038	0.99
107160	▁gospodarstva	1.20385	0.53
95449	▁изток	1.20406	1
94540	▁przeciwie	1.20415	0.98	▁przeciwieństwie
127999	瑣	1.20415	1
50613	windigkeit	1.20418	0.0012	geschwindigkeit, ▁Geschwindigkeit
55759	▁prosv	1.2042	0.99	▁prosvjed
69120	depodob	1.20422	0.17	▁pravdepodob, ▁pravdepodobne
126453	😁	1.20425	1
126324	譴	1.2043	1
81053	▁měs	1.2045	1	▁městě, ▁měsíc, ▁měsí
127043	檳	1.2045	1
74833	▁huhtikuuta	1.20452	0.99
111521	▁tibda	1.20455	0.99
127449	孀	1.20455	1
80910	▁imati	1.20468	0.9
110775	▁prinċipali	1.20473	0.03
118288	▁junija	1.20492	0.99
127567	襪	1.20506	1
96765	▁дробилка	1.2054	1
112898	▁jagħtu	1.20541	0.9
74679	▁istraživ	1.20544	0.91
95239	▁Rzes	1.20549	1	▁Rzesz, ▁Rzeszy
96016	november	1.20564	1
104024	▁nasjonal	1.20571	1
80954	▁phró	1.20572	0.62
95266	▁voltant	1.20577	0.91
127912	躊	1.20582	1
127331	😅	1.20591	1
126957	쑨	1.20591	1
67979	iżvilupp	1.20592	0.96
60108	▁Berlus	1.20594	0.99	▁Berlusconi
92166	▁americká	1.20596	0.91
93482	▁ipak	1.2061	0.99
119052	għux	1.20613	0.00078
57879	▁catro	1.20624	1
69588	чём	1.20636	1	▁причём
24650	▁licha	1.20652	1	▁lichaam, ▁lichaams
127895	覓	1.2066	0.99
9769	▁américa	1.20662	1	▁américain, ▁américaine, ▁américains, ▁américaines
72298	▁zajedno	1.20665	0.94
103007	▁aċċess	1.20666	0.97
113040	▁erlä	1.20667	0.93	▁erläut
69363	▁joulukuuta	1.20684	0.99
85429	ċċju	1.20686	0.007
84557	qasam	1.20692	0.95
113830	uivat	1.20694	0.81
105686	▁εβδο	1.20715	1	▁εβδομά
25113	рёх	1.20716	0.97	▁трёх, ▁четырёх
79609	▁juuni	1.20734	0.99	▁juunil
106290	entrali	1.20734	0.49	▁centrali
86560	▁servei	1.20736	0.97
127336	锑	1.20737	1
13474	вропе	1.20738	0.96	вропей, ▁европей, ▁Европе, ▁Европей, ▁європей, ...
33276	xía	1.20769	0.99	oloxía, ▁enerxía
106024	▁armijas	1.20773	1
85901	共產	1.20774	1	共產黨
60284	empju	1.20776	0.95	żempju
82399	aois	1.2078	1	▁aois
19818	▁noss	1.20784	1	▁nosso, ▁nossa, ▁nossos, ▁nossas
46971	▁διάρκ	1.20784	1	▁διάρκεια
74327	▁kompi	1.20788	0.97	▁kompiuter, ▁kompil
55875	▁lokaku	1.2081	0.76	▁lokakuuta
43016	ċess	1.20818	0.88	proċess, ▁aċċess
116010	ònim	1.20821	1
113119	▁opprettet	1.20827	1
106775	▁Сева	1.20827	1	▁Севасто
68376	▁majoria	1.20831	0.054
65868	▁Šiaur	1.20835	0.99	▁Šiaurės
40888	▁uitgebre	1.20842	0.92	▁uitgebreid, ▁uitgebreide
118929	▁qü	1.20844	1
126384	壟	1.20846	1
76533	▁planétka	1.20848	0.89
75100	▁vegades	1.20859	1
127188	跆	1.2087	1
65096	soċ	1.20875	0.99
90743	λεις	1.2088	1	▁πόλεις
102102	ànic	1.2089	0.96
110528	▁historiske	1.20898	1
118935	skemu	1.20905	0.59
118029	▁hrvatska	1.20914	1
54439	ômetros	1.20916	1	▁quilômetros
96802	tenut	1.20918	1	▁tenuta, ▁sostenuto
66754	▁toegep	1.2092	0.97	▁toegepast
83172	▁nostres	1.2093	0.99
110330	zyły	1.20944	0.47
83979	▁开元棋牌	1.20948	0.99
96591	▁іншими	1.2095	0.97
94661	ardzo	1.20951	1	nBardzo
115944	▁tríú	1.20966	0.85
85324	▁ġdid	1.20977	0.98	▁ġdida
118534	▁ovu	1.20981	1
104128	úpiter	1.21002	0.026	▁Júpiter
103546	jaci	1.21003	1
33651	▁thab	1.21005	1	▁thabhairt
87955	enzoll	1.21006	0.77	enzollern, ▁Hohenzollern
19261	▁апре	1.21008	1	▁апреля, ▁апреле
102418	náisiúnta	1.21028	0.99
50570	▁També	1.21046	1
67341	▁moitas	1.21047	0.94
81915	▁naroda	1.21053	0.99
98742	▁potpuno	1.21066	0.91
109737	▁kważi	1.21085	0.87
95280	esaist	1.21101	0.26	▁iesaist
84705	▁samolotów	1.21115	0.99
25426	uês	1.21149	1	▁português, ▁Português
20996	▁contex	1.21162	1	▁contexto, ▁contexte, ▁contexts, ▁contextual
124107	肪	1.21177	1
86217	▁čempionātā	1.2118	1
98014	대한민국의	1.21181	0.92
127985	涮	1.21183	1
110025	Igre	1.21196	1
71651	▁marraskuuta	1.21208	1
17947	▁Frankr	1.21216	0.99	▁Frankreich, ▁Frankrijk, ▁Frankrike, ▁Frankrig
99962	uretat	1.21249	0.49
85174	▁diġà	1.21253	0.49
99020	▁optu	1.21259	0.91
110652	▁Rzymu	1.21272	0.99
58756	▁stručn	1.21294	0.4
104683	▁Občini	1.21306	0.19
127185	鋰	1.21306	1
119404	▁eagra	1.21323	0.73
100628	▁teatre	1.21362	0.99
92425	▁riż	1.21374	0.67
69858	èixer	1.21375	1
98421	▁сосре	1.21397	0.99	▁сосредото
88090	▁njima	1.21398	0.31
72720	▁sezonā	1.21403	1
70254	▁Prancūz	1.21403	1	▁Prancūzijos
83426	▁učiniti	1.21406	1
83032	ाजिक	1.21412	1	▁सामाजिक
96061	тивних	1.21417	0.62
116888	▁zeneszerző	1.21425	1
86446	▁Dvejetain	1.21426	1
88041	▁Δεκεμβρίου	1.21426	0.91
90262	▁Отзы	1.21434	1	▁Отзывы
97963	▁utviklet	1.21445	1
127266	鋅	1.21447	0.96
103329	▁noves	1.21458	1
89973	▁prozaik	1.21459	0.99
108876	▁høyere	1.21466	1
88131	▁июле	1.21475	0.98
83377	▁Zwią	1.21481	0.98	▁Związek
33222	▁knji	1.21486	1	▁književ, ▁knjiž, ▁knjiga, ▁knjige
62876	ybėje	1.21487	0.79	▁savivaldybėje
52787	▁nazzjonali	1.21488	0.96
127700	퓌	1.21488	1
78280	đeni	1.21494	1
97385	olució	1.21504	0.99
74946	ziehungsweise	1.21507	0.85	▁beziehungsweise
93567	omlán	1.21509	0.93	▁hiomlán
110046	▁uzvarēja	1.21535	1
85368	▁njegovih	1.21542	0.94
64410	▁maioría	1.21544	0.32
88063	ajiet	1.21547	0.33	awtoritajiet
107523	▁ells	1.2155	0.99
118661	▁dovoljno	1.21565	0.95
64431	▁izcī	1.21575	0.81	▁izcīnī, ▁izcīnīja
92175	aduais	1.21581	0.74	▁estaduais
78795	бто	1.21585	1	▁тобто
25972	▁राष्ट	1.21609	1	▁राष्ट्र, ▁राष्ट्रीय, ▁राष्ट्रपति
74405	žioje	1.21615	0.42	▁pradžioje
125936	贛	1.21627	1
83511	olóx	1.21635	0.51
52377	▁proxecto	1.21635	0.94	▁proxectos
123928	娛	1.21641	1
119488	▁markedet	1.21647	1
114802	úpil	1.21653	0.98
105337	nejših	1.21661	0.9
35399	▁célè	1.21663	0.92	▁célèbre, ▁célèbres
110011	negozju	1.21675	0.98
107427	▁policija	1.21681	0.98
116954	▁inkludert	1.21695	0.97
100424	▁Regne	1.21698	1
59523	▁mentres	1.21711	1
98049	èrica	1.21716	1
22539	ċjali	1.21723	0.8	▁soċjali, iċjali, ▁speċjali
85583	▁svaki	1.21723	1
96588	▁juridi	1.21733	0.98	▁juridiques
117924	niły	1.21744	0.97
116386	kummerċ	1.2179	0.65
91464	▁iako	1.218	0.81
126473	醣	1.21804	1
127225	薨	1.21805	1
64632	▁tammikuuta	1.21815	0.99
119664	▁laimėjo	1.21817	1
94822	behu	1.21819	1	▁priebehu
103227	▁laulaja	1.2182	1
108230	▁jż	1.21824	0.87
76061	àc	1.21825	0.98	▁caràc, ▁gràcies
111051	viż	1.21831	1
99840	konċ	1.21832	0.4
78930	λληνες	1.2185	0.99	▁Έλληνες
86105	Regolament	1.21851	1
110124	pubbl	1.21851	1
48547	raidh	1.21861	1	▁iarraidh
77546	▁Ιουνίου	1.21876	1
89338	▁eċċ	1.21885	0.96
38671	▁oploss	1.21886	1	▁oplossing, ▁oplossingen
53848	Unjoni	1.21891	0.56
127692	蠶	1.21896	0.99
105503	вокуп	1.21905	0.027	▁совокуп
116771	ilaires	1.21912	1	▁similaires
97780	беки	1.21918	1	▁Узбеки
57733	pidamente	1.21921	1	▁rápidamente
55489	terech	1.21929	1	▁czterech
115828	wiło	1.21932	0.96
127176	🔸	1.21941	1
119686	ćenje	1.21951	1
97544	iranih	1.21951	1
91591	жными	1.21955	1
79992	▁haois	1.21959	1
91528	▁marec	1.21978	0.99
77535	ιώργ	1.21998	0.96	▁Γιώργ
109284	▁eldre	1.22001	1
127813	薑	1.22002	1
28496	ногда	1.22008	0.26	▁иногда, ▁Иногда
38234	приєм	1.22011	0.99	▁підприєм, ▁підприємства
47800	nJeg	1.22014	0.015
111389	▁новий	1.22021	1
77007	▁znači	1.22026	0.99
46003	irbh	1.22031	1	irbhís, ▁seirbhís, ▁seirbhísí
54456	▁obitelj	1.22045	1
92780	▁Ġesù	1.22046	0.99
34622	▁platel	1.22048	1	▁platelet, ▁platelets
43057	тальян	1.2205	0.84	▁итальян, ▁итальянский
16848	▁авгу	1.22056	1	▁августа, ▁август, ▁августе
82951	iteindelijk	1.22059	0.037	▁Uiteindelijk
100321	▁niemieckie	1.22066	1
106840	▁dèc	1.2207	0.98
55975	njeg	1.22076	1	▁njega, njega, ▁njegovi, ▁njegovih
97710	▁Vlade	1.22085	1
50562	osoof	1.22088	1	▁filosoof
119124	рованием	1.22099	1
80237	▁prà	1.22127	1
79142	zju	1.22137	1	negozju
92887	íam	1.2214	1
97877	色列	1.22141	1	以色列
93318	▁fillo	1.22145	0.96
99640	bażi	1.22145	0.98
57044	▁sezone	1.22172	0.92
106930	▁hverandre	1.22173	0.67
94617	▁verjaard	1.22194	1	▁verjaardag
117773	яват	1.22194	0.98
102582	amäng	1.22197	0.95	ümpiamäng
119286	▁francúzsky	1.22203	1
81994	▁dtug	1.22215	0.77	▁dtugtar
116924	žiti	1.22217	0.99
52305	▁Towarzyst	1.2222	0.95	▁Towarzystwa, ▁Towarzystwo
127275	Ὀ	1.22224	1
115038	ācijām	1.22228	0.98
42349	aciju	1.22229	0.94
70128	▁partikolari	1.2227	0.67
98540	▁sentrum	1.22277	0.99
112508	▁bitwa	1.22277	1
105774	▁izlož	1.22281	0.99
80320	▁segle	1.22295	0.99
97669	▁tracta	1.22324	0.99
127952	駭	1.22329	1
83787	سطس	1.22332	0.97	▁أغسطس
71337	▁toukokuuta	1.22346	1
58103	ċer	1.22349	0.98	ċerka
13064	▁thous	1.22353	1	▁thousand, ▁thousands
113429	▁Ollscoil	1.22369	0.99
107500	angacha	1.22404	0.88
76990	▁unterscheid	1.22407	1	▁unterscheidet
113831	▁Níor	1.22424	0.79
115812	▁ljubav	1.22433	0.99
104459	▁inqas	1.22438	0.7
85782	▁choinne	1.22443	0.94	▁choinneáil
127871	뇽	1.22451	0.99
54471	itzat	1.22453	0.92	itzats
86345	▁kojih	1.22465	0.45
54089	▁Tamén	1.22466	1
64868	κανε	1.22472	1	▁έκανε, ▁κανείς
57363	▁kardyna	1.22474	0.99	▁kardynał
110513	▁réigi	1.22484	0.076
118388	▁Γαλλία	1.22492	0.81
127762	츰	1.22503	1
97091	▁gyveno	1.22503	0.96
126238	莖	1.22509	1
71966	ychmiast	1.22514	0.014	▁natychmiast
59732	ptsächlich	1.22519	0.00057	▁hauptsächlich
117326	▁coitianta	1.2252	1
94818	▁Wyświetleń	1.2254	0.94
73722	▁ġenerali	1.2254	0.87
94629	icznymi	1.22551	0.71
120013	।	1.22551	0.88
115106	▁galvaspils	1.22562	1
127127	儉	1.22565	1
81314	▁xente	1.22572	1
50726	▁tijela	1.22576	0.9
68109	▁kazino	1.22584	1
70459	liġi	1.22585	0.017
32519	♀♀	1.22596	1	♀♀♀♀
88167	følgelig	1.22607	0.053	▁selvfølgelig
90890	▁poslije	1.2261	1
112734	▁úsáidtear	1.22629	0.95
115574	▁țării	1.22641	0.96
74899	jšie	1.22647	0.19	astejšie
66792	řejm	1.22652	0.31	řejmě
119065	▁милиона	1.22652	0.95
93498	▁līgas	1.22672	1
96090	▁svega	1.22675	1
103068	istorja	1.22676	0.96
83768	▁espanyol	1.22676	0.98	▁espanyola
109701	ceho	1.22683	0.39
47694	культе	1.22683	1	▁факульте, ▁факультет
58396	▁huht	1.22689	0.99	▁huhtikuuta
76483	▁senón	1.22692	0.99
96421	habt	1.22694	1	▁gehabt
67156	ivament	1.22694	0.98	▁esclusivamente, ▁rispettivamente, ▁Successivamente, ▁effettivamente
109789	▁lles	1.22697	1
77891	рьох	1.227	0.39	▁трьох
87155	▁tajba	1.22709	1
102759	istjoni	1.22712	0.00054
76635	jesto	1.22724	0.96	▁umjesto
97776	alną	1.22732	1
46325	▁obx	1.2274	1	▁obxect, ▁obxectivo
104651	▁Jorku	1.2275	0.83
71560	ecemento	1.22752	0.55
107382	▁bpr	1.22754	1
108895	velopp	1.22758	0.95	veloppement
80647	dmu	1.22761	1	▁jaħdmu
127793	ా	1.22767	0.81
30907	дераль	1.22771	0.65	▁федераль, ▁Федераль
114312	▁партії	1.22775	1
101848	▁працював	1.22775	1
87765	Stanisław	1.22784	1
102327	барди	1.2279	1	▁бомбарди
112990	▁prolje	1.22791	0.8
126240	晷	1.22805	1
86393	▁Νοεμβρίου	1.22813	1
84520	▁zago	1.22814	0.99	▁zagotav, ▁zagotov
94772	avyzd	1.2282	0.18	▁pavyzdžiui, avyzdžiui
118298	▁politycznej	1.22822	1
97153	ājus	1.22826	1
75703	▁декабре	1.22829	0.84
12739	▁pubbl	1.22834	0.87	▁pubblico, ▁pubblicato, ▁pubblica, ▁pubblici, ▁pubblicazione, ...
78926	▁Myan	1.22839	1	▁Myanmar
116344	▁tábhachtach	1.22843	0.98
69760	▁espanh	1.22848	0.57	▁espanhola
89785	▁nabíz	1.22856	0.98	▁nabízí
122839	😉	1.22859	1
113689	▁miegħ	1.22864	1
93241	▁szwedzki	1.22868	0.94
126874	擱	1.2287	0.99
126803	謨	1.2288	1
127671	Ἔ	1.22902	1
49216	aquesta	1.22905	1
97530	udeerde	1.22916	0.8	▁studeerde
93555	▁Rzymie	1.22921	0.96
70405	▁zaled	1.22926	0.35	▁zaledwie
96069	▁politiķis	1.22926	1
46036	ρωπα	1.22931	0.82	▁Ευρωπα, ▁ευρωπα
127040	Ἄ	1.22945	0.99
83112	▁línia	1.2296	0.99
74805	manjš	1.22979	0.9	▁zmanjš
49159	▁jaanuar	1.22987	0.99	▁jaanuaril
57922	▁informació	1.23003	1
118551	▁живеят	1.23007	1
104472	▁miljonit	1.23016	0.76
18668	▁lijek	1.23023	0.98	▁lijekova, ▁lijekovi, ▁lijekove, ▁lijeka
94925	▁Polijas	1.23033	0.096
127508	鞑	1.23037	1
87980	▁Għalhekk	1.23039	0.99
18009	▁сент	1.23053	1	▁сентября, ▁сентябре
106765	▁seirbhísí	1.23055	0.83
116358	▁królem	1.23085	0.98
24286	▁большин	1.23085	1	▁большинство, ▁большинстве, ▁большинства
106929	▁prosjekt	1.23095	1
98754	▁mája	1.231	0.99
96526	èria	1.231	0.99
50430	班牙	1.23103	0.94	西班牙
95361	ciła	1.23118	0.74
57087	▁crk	1.23133	0.99
35391	▁الأمري	1.23134	1	▁الأمريكية, ▁الأمريكي
75089	preż	1.23134	0.99	▁preż
127437	Ἱ	1.23156	1
116499	рных	1.23158	1
84638	▁alemães	1.23171	1
109997	▁EEU	1.2318	1	▁EEUU
16027	спубли	1.23185	0.45	▁Республи, ▁республи, ▁Республики, ▁республики, ▁Республика
98131	baħar	1.23186	0.36
87934	sajt	1.23192	1	websajt
86364	itiúil	1.23217	0.46
67541	zikas	1.23222	1	▁mūzikas
99986	▁kuljum	1.23237	0.99
35032	▁अच्छ	1.23241	1	▁अच्छा, ▁अच्छी, ▁अच्छे
119530	jenim	1.23241	0.94
84380	▁scríbhne	1.23241	0.91
107473	ційної	1.23247	0.92
88662	▁naselja	1.23259	1
93417	okaliz	1.23264	0.98	▁zlokaliz, ▁lokalizacji
103529	▁turnī	1.23264	0.47
76131	▁біблі	1.23268	1	▁бібліоте
127044	瀋	1.23271	1
109706	níkom	1.23274	0.96
114862	▁ħdan	1.23275	0.0016
68734	▁projecte	1.23279	0.84	▁projecten
87260	iméad	1.23293	0.94	▁nóiméad
115717	▁ništa	1.23296	0.99
103711	▁kirjanik	1.23308	1
16736	्ञ	1.23319	0.94	ज्ञ, ज्ञान, ▁ज्ञ, ▁विज्ञान, ▁ज्ञान, ...
111834	▁Prancūzijos	1.23321	0.97
80381	ômage	1.23331	0.49	▁chômage
90550	▁djecu	1.23334	0.99
127592	呤	1.23335	1
105252	▁svetovej	1.23338	0.39
109845	▁organizacije	1.23343	0.99
83341	▁odmah	1.23345	0.86
114592	▁vargon	1.23351	1
73369	naqq	1.23352	0.86	naqqis
127381	暱	1.23358	1
83157	▁cesarza	1.23361	0.97
91968	▁lapkričio	1.23372	1
78951	▁kwalunkwe	1.23383	0.7
48399	ogrā	1.23393	0.99	ogrāf
126878	鈦	1.23393	1
80508	▁czerwcu	1.23397	0.97
51541	▁svih	1.23398	0.97
92860	▁britânica	1.23406	1
112611	ваны	1.23411	1
119643	wiły	1.23444	0.99
126645	侖	1.23444	1
77869	▁червня	1.23446	0.99
87313	▁jeziku	1.23454	1
89066	ornais	1.23457	0.97	▁jornais
52421	▁valod	1.23465	1	▁valodā, ▁valodas
94696	żira	1.23473	0.98
107225	nBardzo	1.2349	0.017
82244	ченка	1.23491	0.99	▁Шевченка
74090	▁albuma	1.23497	1
74836	ecji	1.23497	0.92	▁Szwecji, ▁Grecji
12665	▁siè	1.23499	0.99	▁siècle, ▁siège, ▁siècles, ▁sièges
89153	▁€\	1.235	0.98
75453	▁żydowskiego	1.23501	1
45724	arzyst	1.23504	1	▁Towarzyst, ▁Towarzystwa, arzysta, ▁scenarzysta, ▁towarzyst, ...
96678	vjaġġ	1.23524	0.51
81356	▁godinu	1.23528	0.92
115096	▁Eiropā	1.23537	0.96
111747	íron	1.23553	0.99
17829	ħra	1.23554	0.99	▁oħra, ħrajn, oħra, ▁oħrajn
101699	▁láidir	1.23558	1
81102	▁августе	1.2356	0.98
107520	▁Úsá	1.23568	1
78664	iegħed	1.23568	0.023	▁qiegħed
711	.\	1.2357	1	...\, ).\, ..\, ▁...\, ”.\, ...
107522	āliem	1.23571	0.88
102205	kbira	1.23575	1
43341	▁Киє	1.2358	1	▁Києві, ▁Києва
102680	▁ssir	1.2358	0.99
95507	구하고	1.23583	0.96	▁불구하고
65298	▁iċ	1.23592	0.99
34575	▁inev	1.23595	0.99	▁inevit, ▁inevitable
127911	誹	1.23597	1
127784	翦	1.23604	1
110483	▁ozbil	1.2361	0.97
127735	柩	1.23617	1
103451	▁tagħti	1.23623	0.65
47029	▁pobli	1.23632	0.97	▁pobliżu
83776	▁llibre	1.23639	1
119477	▁znati	1.23642	0.98
51024	untament	1.23664	0.15	▁juntamente, Ajuntament, ▁appuntamento
91632	owałam	1.23696	1
28240	▁ομά	1.23698	0.99	▁ομάδα, ▁ομάδες, ▁ομάδας
72428	▁kbir	1.237	0.99
125819	磡	1.23709	1
92734	ġġetti	1.23713	0.14
127473	樁	1.23714	1
44414	▁obitelji	1.23714	0.96
27053	ристову	1.23733	1	▁використову, ▁використовувати
50823	ukārt	1.23734	0.0015	▁savukārt, ▁Savukārt
109419	seħħ	1.2374	0.25
78404	рией	1.23747	0.99
125658	꼈	1.23748	0.95
59248	▁veroorza	1.2375	0.99	▁veroorzaakt, ▁veroorzaken
97514	▁волосы	1.23767	1
81687	▁серпня	1.23769	0.96
127863	砝	1.23777	1
84739	ycznymi	1.23781	0.98
113837	▁ilgio	1.23784	1
109960	▁एक्स्प्रेस	1.23795	0.67
113633	Wład	1.23818	1
119236	nMijn	1.23831	0.99
83969	▁Paryżu	1.23833	0.98
118411	għażla	1.23835	0.59
59361	твра	1.23847	0.41	▁предотвра
108118	▁Αμερικανός	1.2385	0.84
83047	▁tjel	1.23851	1
89194	▁listopadzie	1.23855	0.96
53739	pieza	1.23875	1	▁piezas, ▁empieza, ▁pieza, ▁limpieza
94920	anjima	1.23881	1
16859	▁жур	1.23882	1	▁журна, ▁журнали, ▁журнал, ▁журнала, ▁журналі, ...
64017	roduceerd	1.23883	0.57	▁geproduceerd
80101	tevano	1.23887	0.68	▁potevano
13500	egól	1.23891	0.97	▁szczegól, ▁szczególnie, zczegól, ▁poszczegól, ▁poszczególnych, ...
81058	▁orixe	1.23896	0.94
127747	씁	1.23897	1
50464	▁Madagas	1.23898	1	▁Madagascar, ▁Madagaskar
90804	▁meaisín	1.23901	0.99	▁meaisíní
92804	venih	1.23902	0.69
126017	컸	1.23906	1
74331	▁zapovjed	1.23921	1
71255	▁Prantsus	1.23932	0.77	▁Prantsusmaa
77290	▁sluča	1.23936	0.79
57215	plyv	1.2394	1	▁ovplyv, ▁vplyv
127668	彿	1.23942	1
116593	ājumus	1.23951	0.34
104042	▁Άρης	1.23953	0.99
90945	▁порів	1.23965	1	▁порівня
114915	▁tradições	1.23969	1
102566	▁Biex	1.23971	1
47228	enerali	1.23976	0.055	▁Generalitat, ▁generalization, ▁ġenerali, ▁generaliz, ▁generali, ...
51110	ärel	1.23977	1	ejärel, ▁järel, ▁seejärel
81048	▁mitjançant	1.23982	1
112140	▁hiomlán	1.24009	0.023
73205	▁wewną	1.2401	1	▁wewnątrz
98866	▁teritoriju	1.24018	1
94293	álnu	1.2402	0.92
93216	▁izab	1.24034	0.98
119566	▁álbuns	1.24035	1
46556	▁Aquest	1.24045	1	▁Aquesta
74071	▁tliet	1.24056	0.92
112840	▁možda	1.24058	0.97
4098	▁increas	1.24059	1	▁increased, ▁increase, ▁increasing, ▁increases, ▁increasingly
9827	▁téc	1.2406	1	▁técn, ▁técnica, ▁técnicas, ▁técnico, ▁técnicos
95786	змов	1.24071	1
76344	rodę	1.24082	0.93	▁nagrodę
97161	atasaray	1.24082	0.95	▁Galatasaray
108703	시켰다	1.24087	0.98
107423	▁Barcell	1.24088	1	▁Barcellona
125413	녔	1.24089	0.99
96345	▁otoka	1.24095	1
110529	▁amerykańskich	1.24095	0.98
106698	▁Bosne	1.24098	1
109300	ània	1.24099	1
127228	漯	1.24105	1
91288	istrazzjoni	1.24115	0.88
75024	▁звё	1.24122	1	▁звёзд
110944	▁pilsētu	1.24122	0.99
107235	▁Prantsusmaa	1.24131	1
94551	▁numru	1.24138	1
127033	🏼	1.24138	1
97298	▁политических	1.24145	1
68548	tfal	1.24152	1	Westfalen
118724	▁pôvodne	1.24153	1
112122	▁Mađ	1.24154	0.99
117299	▁electrones	1.24159	1
74714	▁́s	1.24167	1
80218	▁Ιανουαρίου	1.24179	1
84139	ologije	1.24183	0.028
113808	arzem	1.24186	1
33171	▁aħ	1.24193	0.99	▁aħna, ▁aħjar
93104	▁partijas	1.24211	1
81768	▁sajandil	1.24215	1
76530	▁квітня	1.24218	1
117357	▁итальянский	1.24223	1
113334	igiúil	1.24228	0.6
117391	▁популярность	1.24229	1
38528	▁kte	1.24236	1	▁kteří, ▁kterou, ▁kterých, ▁kterým, ▁kterém
105725	ipeasóid	1.24239	0.8
100233	ującą	1.24253	0.69
118394	▁daktaras	1.24255	1
38932	狗万	1.24257	1	▁狗万
127652	寢	1.24269	1
81333	poñ	1.24278	0.76	▁poñ
70800	ρεταν	1.2428	0.98	▁Βρεταν
111289	Direttiva	1.24299	0.99
89260	▁Deireadh	1.24309	1
89426	▁dicir	1.24315	0.95
44087	▁powy	1.24316	1	▁powyżej, ▁powyż
91657	▁chathair	1.24324	0.77
60905	▁tobac	1.24324	1	▁tobacco
93025	▁čega	1.24334	0.99
113167	rijed	1.24344	0.92
65301	ijent	1.24361	0.98	ijenti
91784	▁kulħadd	1.24364	0.98
110725	ślił	1.24392	0.31
96730	▁poñ	1.24409	1
127909	熠	1.24409	1
98979	▁galegos	1.24409	1
6536	▁któr	1.24411	0.94	▁która, ▁których, ▁którym, ▁której, ▁którzy, ...
127062	崁	1.24432	1
102744	▁estatuniden	1.24435	1
127796	歎	1.24442	1
116847	▁aonair	1.24445	0.89
104445	▁Γερμανία	1.24451	0.91
54465	niei	1.24451	1	▁României, aniei
88272	▁svom	1.24455	0.84
107923	elsene	1.24456	0.97
95996	▁peress	1.24464	0.89
118514	▁Senere	1.2448	0.99
58573	▁उपल	1.24486	1	▁उपलब्, ▁उपलब्ध
127748	웁	1.2449	1
81868	▁styczniu	1.24495	1
103871	▁italský	1.24499	0.96
116490	▁Её	1.24502	1
88625	Ministru	1.24518	1
113508	ānija	1.24523	1
127393	瑋	1.24524	1
118986	тельностью	1.24536	1
127596	誡	1.2454	1
76784	▁зар	1.24541	1	▁заря, ▁зарпла, ▁зараз, ▁заряд, ▁зарубе, ...
81847	livell	1.24552	1	▁livell
78823	bigniew	1.24563	0.99	▁Zbigniew
47248	rodze	1.24566	0.98	▁drodze, rodzenia
114861	▁jõgi	1.24574	0.99
88725	▁partijos	1.24576	0.99
93111	ciją	1.24577	0.99
49070	byggere	1.24578	1	▁innbyggere, ▁indbyggere
118294	▁teachta	1.24586	0.98
116030	▁jgħixu	1.24586	2.7e-05
127100	畲	1.24589	1
102635	▁oktobra	1.24592	0.95
25316	▁próxim	1.24606	1	▁próxima, ▁próximos, ▁próximas
122988	룹	1.24621	1
105088	▁Ġenerali	1.24622	0.65
112415	▁вторая	1.24626	1
91343	▁publicysta	1.24637	0.96
110843	▁популярных	1.24639	1
91698	▁Δημή	1.24647	1	▁Δημήτ
127514	💖	1.24649	1
99141	werra	1.2465	0.99
81359	▁musicais	1.2465	1
30948	íncipe	1.24656	0.99	▁príncipe, ▁Príncipe
127828	阆	1.24657	1
113838	▁армії	1.24666	1
87284	kejja	1.24668	0.0033
86291	▁शता	1.24674	1	▁शताब्दी
115849	nOnze	1.24677	0.83
127551	晝	1.24682	1
64843	vedra	1.24689	1	▁Pontevedra
127302	隴	1.24689	1
41974	ċed	1.24701	0.99	proċed
86118	▁Zbog	1.24701	0.99
28924	▁κυβ	1.24712	1	▁κυβέρνη, ▁κυβέρνηση, ▁κυβερ
68936	▁conx	1.24713	1	▁conxunto
75920	▁stoletju	1.24723	0.55
111064	▁армию	1.24727	1
86092	▁декември	1.24731	1
114085	▁Sje	1.24733	1
125909	塢	1.24739	1
112363	▁pealinn	1.24747	1
126464	褲	1.24747	1
103264	▁ġen	1.24756	0.94
127654	耒	1.24756	1
81036	pożizzjoni	1.24767	0.99
104155	▁súhvezd	1.24771	0.94
45987	ikolu	1.24779	1	Artikolu
49099	hachta	1.24781	0.88	hachtach, ▁tábhachtach
44459	▁näyttelij	1.24784	1	▁näyttelijä
115367	pjan	1.24788	0.99
48390	▁Zagrebu	1.24793	0.96
105514	▁Áustria	1.24794	1
55096	▁honder	1.24801	0.83	▁honderd, ▁honderden
109047	raali	1.24815	1
111312	▁Itaalia	1.24815	0.13
119165	▁αυτοκράτο	1.24818	0.99
56557	▁hoxe	1.24819	0.55
127209	埗	1.2482	1
101120	ístic	1.24836	0.95
72349	зантий	1.24855	0.24	▁византий
63382	탈리아	1.24865	0.99	▁이탈리아
42751	úns	1.24874	1	▁algúns
103665	▁gnéithe	1.24885	0.98
35923	▁dvejetain	1.24886	1	▁dvejetainių, ▁dvejetainiai
52164	▁ghl	1.24891	0.99	▁ghlac
89492	▁Bealtaine	1.24896	1
56491	atelja	1.24904	0.99
26685	▁wewn	1.24904	0.99	▁wewnę, ▁wewnętrz, ▁wewną, ▁wewnątrz, ▁wewnętrznych, ...
76154	▁липня	1.24906	1
110356	triq	1.24911	1
44699	▁speċ	1.24913	1	▁speċjali, ▁speċjalment
38238	rivain	1.24913	1	▁écrivain, écrivain
112943	cijām	1.24914	0.95	ācijām
126994	珲	1.24925	1
101503	▁Nazzjonali	1.24928	0.47
53680	alpoj	1.24933	0.21	▁pakalpoj, ▁pakalpojumu
97215	▁karaspē	1.24937	1
98032	niła	1.24947	0.94
98362	дневно	1.24956	1	▁ежедневно
66667	▁svjed	1.24959	0.59
96795	covo	1.24963	1	ivescovo
127259	埕	1.24964	1
82023	▁njemu	1.24969	0.31
95256	anymi	1.2497	0.98
52673	▁секу	1.24971	1	▁секун, ▁секунд
14342	anamh	1.24972	0.95	▁dhéanamh, ▁déanamh
89683	▁upės	1.24973	1
65131	дента	1.24974	0.78	▁Президента
63764	niji	1.24992	1	paniji, nijih
119460	▁исторических	1.25012	1
57156	▁ciut	1.25024	0.98	▁ciutad
111712	條約	1.25029	0.99
127629	雒	1.2503	1
16215	▁Бълга	1.25036	1	▁България, ▁Българ
90432	iltere	1.25051	0.96	▁İngiltere, ▁filtered
127959	竄	1.25052	1
103191	wieġ	1.25052	0.018
100351	ссёр	1.25055	0.98
16536	jonali	1.25056	0.9	zzjonali, ▁nazzjonali, ▁internazzjonali, ▁Nazzjonalista, izzjonali, ...
103608	▁Bhaile	1.25058	0.99
111025	▁saivat	1.25062	1
111474	▁Europoje	1.25077	0.99
74626	эффици	1.25077	0.97	▁коэффици
96196	▁miałam	1.25083	1
44009	ďar	1.25084	0.9	▁maďar, ▁Maďar
109458	▁prijev	1.25086	1
103876	▁inneholder	1.25094	1
54450	żmu	1.25096	0.91
94988	▁Svjet	1.25102	1
79602	vainc	1.25105	1	▁convainc
107400	▁Australië	1.25105	1
83762	ummerċ	1.25108	0.0037	kummerċ
126991	蔥	1.25113	1
114307	▁ćete	1.25117	0.94
89000	валася	1.25118	1
117061	▁grúpa	1.25135	0.88
84374	▁днів	1.25136	1
113148	▁nóiméad	1.25151	0.99
117789	▁chéanna	1.25158	0.96
80646	시켰	1.25163	1	시켰다
92405	▁kjente	1.25171	0.99
98732	мекер	1.25175	1
57004	ħi	1.25186	0.99	ħin, ▁jgħid, ▁tiegħi, ħid, ▁sħi, ...
66376	тії	1.25191	0.96	▁партії
10327	▁wła	1.25191	0.95	▁włas, ▁wład, ▁właśnie, ▁właści, ▁właśc, ...
127325	😄	1.25194	1
64389	ċiż	1.25199	0.77	deċiżjoni
119239	▁vārt	1.25205	0.99
103410	вшую	1.25208	0.65
127597	윅	1.25216	1
127307	氙	1.25218	0.99
96790	▁japonês	1.25221	1
108683	maņu	1.25221	0.94
110193	zyło	1.25223	0.87
67290	λυμπ	1.25224	1	▁Ολυμπ
74450	jącymi	1.25227	0.98
105126	▁substituído	1.25229	1
79668	taña	1.25231	0.99	▁montañas, ▁Bretaña
90368	ркут	1.25232	1	▁Иркут
85578	olaik	1.25234	1	iuolaik
84275	κράτο	1.25235	0.74	▁κράτος, ▁αυτοκράτο
57370	Artikolu	1.2524	0.89
58133	bagħad	1.25245	0.0016	▁mbagħad
37915	▁persones	1.25248	0.99
75390	ційних	1.25251	0.94
93106	▁pearsanta	1.25253	0.028
92135	▁szemp	1.25255	1	▁szempont
65308	фраструк	1.25259	0.072	▁инфраструк
76692	nątrz	1.25264	0.065	▁wewnątrz, ▁zewnątrz
101993	▁cousas	1.25271	0.99
58749	▁zapov	1.25273	1	▁zapovjed
79073	baż	1.2528	1	bażi
125115	ԁ	1.25292	1
108115	▁japoński	1.25301	1
98098	zkiego	1.25302	0.93
127620	ર	1.25306	1
80734	▁obiljež	1.25306	0.99
66967	спублі	1.25306	0.1	▁Республі
77256	▁zangeres	1.25309	1
46690	▁gebase	1.25326	0.99	▁gebaseerd
102970	▁частину	1.25338	0.99
99547	▁likevel	1.2534	0.99
30116	▁sudjel	1.25348	1
83579	àtica	1.25349	0.99
80022	▁kvinner	1.25352	1
54749	▁toukoku	1.25354	0.98	▁toukokuuta
127847	轎	1.25375	1
127391	촘	1.25382	1
100642	▁jsir	1.25383	0.5

Byte tokens

117 entries below threshold of 1.087

token_id	token	indicator	ord	hex	byte_type	reencoded
294	<0x21>	9.46444e-05	33	0x21	ascii	119906: !
315	<0x36>	9.47728e-05	54	0x36	ascii	119805: 6
307	<0x2E>	9.56863e-05	46	0x2E	ascii	119735: .
333	<0x48>	9.60606e-05	72	0x48	ascii	119795: H
349	<0x58>	9.60758e-05	88	0x58	ascii	119931: X
335	<0x4A>	9.61211e-05	74	0x4A	ascii	119820: J
325	<0x40>	9.61743e-05	64	0x40	ascii	120286: @
298	<0x25>	9.63144e-05	37	0x25	ascii	119941: %
380	<0x77>	9.64133e-05	119	0x77	ascii	119741: w
367	<0x6A>	9.64458e-05	106	0x6A	ascii	119744: j
317	<0x38>	9.64621e-05	56	0x38	ascii	119793: 8
346	<0x55>	9.6664e-05	85	0x55	ascii	119830: U
296	<0x23>	9.68478e-05	35	0x23	ascii	120135: #
507	<0xF6>	9.69337e-05	246	0xF6	unused_utf8
304	<0x2B>	9.69781e-05	43	0x2B	ascii	119994: +
366	<0x69>	9.71291e-05	105	0x69	ascii	119718: i
331	<0x46>	9.71732e-05	70	0x46	ascii	119794: F
454	<0xC1>	9.71943e-05	193	0xC1	unused_utf8
351	<0x5A>	9.73125e-05	90	0x5A	ascii	119874: Z
302	<0x29>	9.73154e-05	41	0x29	ascii	119762: )

97 additional entries below threshold

token_id	token	indicator	ord	hex	byte_type	reencoded
379	<0x76>	9.73308e-05	118	0x76	ascii	119734: v
309	<0x30>	9.73379e-05	48	0x30	ascii	119752: 0
369	<0x6C>	9.73479e-05	108	0x6C	ascii	119724: l
322	<0x3D>	9.73896e-05	61	0x3D	ascii	119926: =
509	<0xF8>	9.74023e-05	248	0xF8	unused_utf8
506	<0xF5>	9.74091e-05	245	0xF5	unused_utf8
318	<0x39>	9.74107e-05	57	0x39	ascii	119772: 9
273	<0x0C>	9.7434e-05	12	0x0C	ascii	127915: \x0c
343	<0x52>	9.74488e-05	82	0x52	ascii	119785: R
345	<0x54>	9.74495e-05	84	0x54	ascii	119766: T
332	<0x47>	9.75304e-05	71	0x47	ascii	119796: G
512	<0xFB>	9.75383e-05	251	0xFB	unused_utf8
372	<0x6F>	9.76071e-05	111	0x6F	ascii	119720: o
334	<0x49>	9.76948e-05	73	0x49	ascii	119768: I
339	<0x4E>	9.77072e-05	78	0x4E	ascii	119787: N
387	<0x7E>	9.77284e-05	126	0x7E	ascii	120038: ~
308	<0x2F>	9.779e-05	47	0x2F	ascii	119858: /
359	<0x62>	9.78208e-05	98	0x62	ascii	119736: b
301	<0x28>	9.785e-05	40	0x28	ascii	119763: (
362	<0x65>	9.7853e-05	101	0x65	ascii	119716: e
323	<0x3E>	9.7858e-05	62	0x3E	ascii	120057: >
355	<0x5E>	9.79665e-05	94	0x5E	ascii	119952: ^
364	<0x67>	9.79776e-05	103	0x67	ascii	119731: g
330	<0x45>	9.7992e-05	69	0x45	ascii	119775: E
340	<0x4F>	9.80268e-05	79	0x4F	ascii	119802: O
376	<0x73>	9.80397e-05	115	0x73	ascii	119723: s
384	<0x7B>	9.80591e-05	123	0x7B	ascii	119828: {
311	<0x32>	9.80605e-05	50	0x32	ascii	119759: 2
313	<0x34>	9.80888e-05	52	0x34	ascii	119799: 4
378	<0x75>	9.81038e-05	117	0x75	ascii	119726: u
385	<0x7C>	9.8122e-05	124	0x7C	ascii	119920: |
305	<0x2C>	9.81248e-05	44	0x2C	ascii	119732: ,
306	<0x2D>	9.81387e-05	45	0x2D	ascii	119754: -
299	<0x26>	9.8151e-05	38	0x26	ascii	119945: &
324	<0x3F>	9.81714e-05	63	0x3F	ascii	119882: ?
269	<0x08>	9.82002e-05	8	0x08	ascii	127515: \x08
373	<0x70>	9.82584e-05	112	0x70	ascii	119730: p
352	<0x5B>	9.83135e-05	91	0x5B	ascii	119980: [
314	<0x35>	9.83263e-05	53	0x35	ascii	119791: 5
356	<0x5F>	9.83378e-05	95	0x5F	ascii	119839: _
344	<0x53>	9.83479e-05	83	0x53	ascii	119755: S
348	<0x57>	9.83559e-05	87	0x57	ascii	119812: W
297	<0x24>	9.83825e-05	36	0x24	ascii	119822: $
514	<0xFD>	9.83965e-05	253	0xFD	unused_utf8
510	<0xF9>	9.83995e-05	249	0xF9	unused_utf8
375	<0x72>	9.84313e-05	114	0x72	ascii	119722: r
368	<0x6B>	9.84685e-05	107	0x6B	ascii	119733: k
292	<0x1F>	9.84715e-05	31	0x1F	ascii	127739: \x1f
516	<0xFF>	9.85771e-05	255	0xFF	unused_utf8
350	<0x59>	9.85884e-05	89	0x59	ascii	119928: Y
319	<0x3A>	9.86263e-05	58	0x3A	ascii	119782: :
365	<0x68>	9.86324e-05	104	0x68	ascii	119729: h
320	<0x3B>	9.86338e-05	59	0x3B	ascii	119852: ;
329	<0x44>	9.86561e-05	68	0x44	ascii	119774: D
361	<0x64>	9.86706e-05	100	0x64	ascii	119725: d
381	<0x78>	9.86859e-05	120	0x78	ascii	119778: x
321	<0x3C>	9.86901e-05	60	0x3C	ascii	120155: <
515	<0xFE>	9.8704e-05	254	0xFE	unused_utf8
293	<0x20>	9.87058e-05	32	0x20	ascii	119715: ▁
341	<0x50>	9.87219e-05	80	0x50	ascii	119769: P
453	<0xC0>	9.87348e-05	192	0xC0	unused_utf8
337	<0x4C>	9.87981e-05	76	0x4C	ascii	119779: L
310	<0x31>	9.88151e-05	49	0x31	ascii	119749: 1
511	<0xFA>	9.88159e-05	250	0xFA	unused_utf8
347	<0x56>	9.88771e-05	86	0x56	ascii	119807: V
508	<0xF7>	9.888e-05	247	0xF7	unused_utf8
513	<0xFC>	9.89132e-05	252	0xFC	unused_utf8
371	<0x6E>	9.89143e-05	110	0x6E	ascii	119719: n
303	<0x2A>	9.89393e-05	42	0x2A	ascii	119997: *
353	<0x5C>	9.89396e-05	92	0x5C	ascii	119765: \
358	<0x61>	9.8977e-05	97	0x61	ascii	119717: a
312	<0x33>	9.89912e-05	51	0x33	ascii	119790: 3
383	<0x7A>	9.90015e-05	122	0x7A	ascii	119740: z
300	<0x27>	9.90079e-05	39	0x27	ascii	119792: '
370	<0x6D>	9.90097e-05	109	0x6D	ascii	119728: m
268	<0x07>	9.90334e-05	7	0x07	ascii	126478: \x07
336	<0x4B>	9.90698e-05	75	0x4B	ascii	119804: K
328	<0x43>	9.90852e-05	67	0x43	ascii	119771: C
382	<0x79>	9.90919e-05	121	0x79	ascii	119738: y
338	<0x4D>	9.91946e-05	77	0x4D	ascii	119770: M
295	<0x22>	9.93469e-05	34	0x22	ascii	119813: "
377	<0x74>	9.93672e-05	116	0x74	ascii	119721: t
456	<0xC3>	9.93824e-05	195	0xC3	utf8
316	<0x37>	9.94454e-05	55	0x37	ascii	119806: 7
357	<0x60>	9.94835e-05	96	0x60	ascii	120355: `
326	<0x41>	9.9544e-05	65	0x41	ascii	119758: A
386	<0x7D>	9.98344e-05	125	0x7D	ascii	119829: }
374	<0x71>	9.98557e-05	113	0x71	ascii	119764: q
360	<0x63>	0.000100001	99	0x63	ascii	119727: c
363	<0x66>	0.000100278	102	0x66	ascii	119737: f
327	<0x42>	0.000100408	66	0x42	ascii	119776: B
354	<0x5D>	0.000100614	93	0x5D	ascii	119979: ]
342	<0x51>	0.000100934	81	0x51	ascii	119961: Q
119735	.	0.77417	46	0x2E	ascii
119732	,	0.874736	44	0x2C	ascii
271	<0x0A>	0.925749	10	0x0A	ascii
449	<0xBC>	1.08602	188	0xBC	utf8

237 additional entries above threshold

token_id	token	indicator	ord	hex	byte_type
503	<0xF2>	1.10099	242	0xF2	utf8
272	<0x0B>	1.12072	11	0x0B	ascii
283	<0x16>	1.20333	22	0x16	ascii
289	<0x1C>	1.21431	28	0x1C	ascii
284	<0x17>	1.22645	23	0x17	ascii
290	<0x1D>	1.22825	29	0x1D	ascii
282	<0x15>	1.24076	21	0x15	ascii
119782	:	1.24508	58	0x3A	ascii
505	<0xF4>	1.24558	244	0xF4	utf8
291	<0x1E>	1.24668	30	0x1E	ascii
287	<0x1A>	1.2481	26	0x1A	ascii
286	<0x19>	1.25907	25	0x19	ascii
285	<0x18>	1.29572	24	0x18	ascii
278	<0x11>	1.30376	17	0x11	ascii
275	<0x0E>	1.31406	14	0x0E	ascii
280	<0x13>	1.32155	19	0x13	ascii
276	<0x0F>	1.32941	15	0x0F	ascii
267	<0x06>	1.34169	6	0x06	ascii
279	<0x12>	1.34623	18	0x12	ascii
265	<0x04>	1.35013	4	0x04	ascii
119765	\	1.35526	92	0x5C	ascii
261	<0x00>	1.35565		0x00	ascii
477	<0xD8>	1.35732	216	0xD8	utf8
482	<0xDD>	1.35739	221	0xDD	utf8
119752	0	1.3895	48	0x30	ascii
502	<0xF1>	1.41883	241	0xF1	utf8
119754	-	1.42022	45	0x2D	ascii
277	<0x10>	1.42224	16	0x10	ascii
483	<0xDE>	1.43039	222	0xDE	utf8
484	<0xDF>	1.43836	223	0xDF	utf8
266	<0x05>	1.4488	5	0x05	ascii
469	<0xD0>	1.46211	208	0xD0	utf8
281	<0x14>	1.46225	20	0x14	ascii
504	<0xF3>	1.46768	243	0xF3	utf8
119749	1	1.46992	49	0x31	ascii
127515	\x08	1.47113	8	0x08	ascii
119759	2	1.48087	50	0x32	ascii
127739	\x1f	1.48412	31	0x1F	ascii
119719	n	1.50264	110	0x6E	ascii
262	<0x01>	1.50326	1	0x01	ascii
288	<0x1B>	1.51406	27	0x1B	ascii
388	<0x7F>	1.51929	127	0x7F	ascii
119792	'	1.5198	39	0x27	ascii
119763	(	1.54822	40	0x28	ascii
263	<0x02>	1.55142	2	0x02	ascii
264	<0x03>	1.55148	3	0x03	ascii
126478	\x07	1.55851	7	0x07	ascii
420	<0x9F>	1.56383	159	0x9F	utf8
127915	\x0c	1.56474	12	0x0C	ascii
481	<0xDC>	1.574	220	0xDC	utf8
119828	{	1.57987	123	0x7B	ascii
478	<0xD9>	1.58512	217	0xD9	utf8
119718	i	1.59398	105	0x69	ascii
119758	A	1.59925	65	0x41	ascii
119852	;	1.60138	59	0x3B	ascii
421	<0xA0>	1.60215	160	0xA0	utf8
119717	a	1.61158	97	0x61	ascii
457	<0xC4>	1.61304	196	0xC4	utf8
119723	s	1.61407	115	0x73	ascii
466	<0xCD>	1.61513	205	0xCD	utf8
119772	9	1.61769	57	0x39	ascii
389	<0x80>	1.61958	128	0x80	utf8
471	<0xD2>	1.61998	210	0xD2	utf8
270	<0x09>	1.62107	9	0x09	ascii
119882	?	1.62216	63	0x3F	ascii
119720	o	1.62277	111	0x6F	ascii
119768	I	1.62299	73	0x49	ascii
119721	t	1.62343	116	0x74	ascii
461	<0xC8>	1.62991	200	0xC8	utf8
274	<0x0D>	1.63177	13	0x0D	ascii
119762	)	1.63687	41	0x29	ascii
119790	3	1.63906	51	0x33	ascii
473	<0xD4>	1.63986	212	0xD4	utf8
119737	f	1.64732	102	0x66	ascii
459	<0xC6>	1.6544	198	0xC6	utf8
119813	"	1.65485	34	0x22	ascii
472	<0xD3>	1.65506	211	0xD3	utf8
119727	c	1.65708	99	0x63	ascii
476	<0xD7>	1.65859	215	0xD7	utf8
119726	u	1.66055	117	0x75	ascii
119716	e	1.66087	101	0x65	ascii
119734	v	1.66277	118	0x76	ascii
119738	y	1.66422	121	0x79	ascii
119725	d	1.66505	100	0x64	ascii
455	<0xC2>	1.66609	194	0xC2	utf8
119736	b	1.67414	98	0x62	ascii
119722	r	1.67696	114	0x72	ascii
119733	k	1.67724	107	0x6B	ascii
119728	m	1.68232	109	0x6D	ascii
470	<0xD1>	1.68236	209	0xD1	utf8
119729	h	1.68385	104	0x68	ascii
119740	z	1.6843	122	0x7A	ascii
119730	p	1.68737	112	0x70	ascii
479	<0xDA>	1.69326	218	0xDA	utf8
119731	g	1.69494	103	0x67	ascii
119791	5	1.69568	53	0x35	ascii
458	<0xC5>	1.69911	197	0xC5	utf8
119766	T	1.70089	84	0x54	ascii
119724	l	1.70771	108	0x6C	ascii
119775	E	1.7096	69	0x45	ascii
462	<0xC9>	1.71241	201	0xC9	utf8
468	<0xCF>	1.71268	207	0xCF	utf8
500	<0xEF>	1.71778	239	0xEF	utf8
119799	4	1.71779	52	0x34	ascii
119779	L	1.71915	76	0x4C	ascii
119802	O	1.72389	79	0x4F	ascii
119755	S	1.7261	83	0x53	ascii
119796	G	1.72889	71	0x47	ascii
463	<0xCA>	1.72919	202	0xCA	utf8
474	<0xD5>	1.73094	213	0xD5	utf8
119804	K	1.73158	75	0x4B	ascii
119774	D	1.73563	68	0x44	ascii
460	<0xC7>	1.73613	199	0xC7	utf8
119794	F	1.73699	70	0x46	ascii
480	<0xDB>	1.74275	219	0xDB	utf8
119744	j	1.74303	106	0x6A	ascii
119771	C	1.74465	67	0x43	ascii
119793	8	1.74483	56	0x38	ascii
475	<0xD6>	1.74496	214	0xD6	utf8
119770	M	1.74662	77	0x4D	ascii
467	<0xCE>	1.74915	206	0xCE	utf8
119952	^	1.74958	94	0x5E	ascii
119928	Y	1.74996	89	0x59	ascii
119805	6	1.75105	54	0x36	ascii
119776	B	1.75159	66	0x42	ascii
119795	H	1.75321	72	0x48	ascii
119807	V	1.75629	86	0x56	ascii
465	<0xCC>	1.75949	204	0xCC	utf8
119839	_	1.7608	95	0x5F	ascii
119741	w	1.76102	119	0x77	ascii
119778	x	1.76353	120	0x78	ascii
119830	U	1.76995	85	0x55	ascii
427	<0xA6>	1.77402	166	0xA6	utf8
119906	!	1.7744	33	0x21	ascii
119769	P	1.78059	80	0x50	ascii
120057	>	1.78378	62	0x3E	ascii
119858	/	1.78754	47	0x2F	ascii
119785	R	1.78843	82	0x52	ascii
119787	N	1.79238	78	0x4E	ascii
119806	7	1.79464	55	0x37	ascii
119931	X	1.8032	88	0x58	ascii
119920	|	1.80688	124	0x7C	ascii
119820	J	1.80811	74	0x4A	ascii
119874	Z	1.80965	90	0x5A	ascii
499	<0xEE>	1.8098	238	0xEE	utf8
119980	[	1.81125	91	0x5B	ascii
119997	*	1.81582	42	0x2A	ascii
119812	W	1.82323	87	0x57	ascii
119822	$	1.82571	36	0x24	ascii
119829	}	1.83002	125	0x7D	ascii
501	<0xF0>	1.83102	240	0xF0	utf8
495	<0xEA>	1.84409	234	0xEA	utf8
464	<0xCB>	1.85105	203	0xCB	utf8
489	<0xE4>	1.85167	228	0xE4	utf8
119945	&	1.8538	38	0x26	ascii
119979	]	1.85925	93	0x5D	ascii
401	<0x8C>	1.86004	140	0x8C	utf8
119764	q	1.86463	113	0x71	ascii
119926	=	1.87385	61	0x3D	ascii
488	<0xE3>	1.8776	227	0xE3	utf8
119994	+	1.8781	43	0x2B	ascii
120135	#	1.87824	35	0x23	ascii
498	<0xED>	1.88275	237	0xED	utf8
411	<0x96>	1.88515	150	0x96	utf8
493	<0xE8>	1.88619	232	0xE8	utf8
487	<0xE2>	1.89073	226	0xE2	utf8
425	<0xA4>	1.89616	164	0xA4	utf8
494	<0xE9>	1.89935	233	0xE9	utf8
120038	~	1.90608	126	0x7E	ascii
441	<0xB4>	1.91035	180	0xB4	utf8
440	<0xB3>	1.91056	179	0xB3	utf8
442	<0xB5>	1.91333	181	0xB5	utf8
407	<0x92>	1.91472	146	0x92	utf8
119961	Q	1.92114	81	0x51	ascii
497	<0xEC>	1.92164	236	0xEC	utf8
496	<0xEB>	1.92254	235	0xEB	utf8
446	<0xB9>	1.92755	185	0xB9	utf8
432	<0xAB>	1.9327	171	0xAB	utf8
399	<0x8A>	1.9332	138	0x8A	utf8
491	<0xE6>	1.93367	230	0xE6	utf8
452	<0xBF>	1.93376	191	0xBF	utf8
416	<0x9B>	1.93753	155	0x9B	utf8
429	<0xA8>	1.938	168	0xA8	utf8
398	<0x89>	1.93851	137	0x89	utf8
120155	<	1.93978	60	0x3C	ascii
119941	%	1.94153	37	0x25	ascii
120286	@	1.94282	64	0x40	ascii
422	<0xA1>	1.94441	161	0xA1	utf8
434	<0xAD>	1.94479	173	0xAD	utf8
485	<0xE0>	1.94572	224	0xE0	utf8
438	<0xB1>	1.94638	177	0xB1	utf8
424	<0xA3>	1.94752	163	0xA3	utf8
405	<0x90>	1.94837	144	0x90	utf8
402	<0x8D>	1.94961	141	0x8D	utf8
403	<0x8E>	1.95083	142	0x8E	utf8
120355	`	1.95114	96	0x60	ascii
443	<0xB6>	1.9518	182	0xB6	utf8
490	<0xE5>	1.95688	229	0xE5	utf8
436	<0xAF>	1.95704	175	0xAF	utf8
435	<0xAE>	1.95831	174	0xAE	utf8
410	<0x95>	1.95913	149	0x95	utf8
492	<0xE7>	1.96232	231	0xE7	utf8
415	<0x9A>	1.96374	154	0x9A	utf8
406	<0x91>	1.96464	145	0x91	utf8
397	<0x88>	1.96507	136	0x88	utf8
408	<0x93>	1.9672	147	0x93	utf8
430	<0xA9>	1.9689	169	0xA9	utf8
412	<0x97>	1.97089	151	0x97	utf8
431	<0xAA>	1.97104	170	0xAA	utf8
393	<0x84>	1.97345	132	0x84	utf8
418	<0x9D>	1.97596	157	0x9D	utf8
391	<0x82>	1.97664	130	0x82	utf8
445	<0xB8>	1.97679	184	0xB8	utf8
395	<0x86>	1.97769	134	0x86	utf8
439	<0xB2>	1.979	178	0xB2	utf8
409	<0x94>	1.97905	148	0x94	utf8
400	<0x8B>	1.97978	139	0x8B	utf8
433	<0xAC>	1.98486	172	0xAC	utf8
414	<0x99>	1.98983	153	0x99	utf8
444	<0xB7>	1.98987	183	0xB7	utf8
396	<0x87>	1.9905	135	0x87	utf8
486	<0xE1>	1.99411	225	0xE1	utf8
423	<0xA2>	1.99447	162	0xA2	utf8
428	<0xA7>	2.00279	167	0xA7	utf8
392	<0x83>	2.00331	131	0x83	utf8
394	<0x85>	2.00593	133	0x85	utf8
413	<0x98>	2.00856	152	0x98	utf8
451	<0xBE>	2.01442	190	0xBE	utf8
437	<0xB0>	2.01864	176	0xB0	utf8
447	<0xBA>	2.02138	186	0xBA	utf8
390	<0x81>	2.02503	129	0x81	utf8
426	<0xA5>	2.03069	165	0xA5	utf8
448	<0xBB>	2.03094	187	0xBB	utf8
404	<0x8F>	2.03162	143	0x8F	utf8
417	<0x9C>	2.03197	156	0x9C	utf8
450	<0xBD>	2.05249	189	0xBD	utf8
419	<0x9E>	2.0553	158	0x9E	utf8

Special tokens

261 entries below threshold of 1.087

token_id	token	indicator	max_prob
208	<extra_id_203>	9.50915e-05	4.3e-07
235	<extra_id_230>	9.52087e-05	4.3e-07
249	<extra_id_244>	9.52303e-05	4.3e-07
192	<extra_id_187>	9.52553e-05	4.3e-07
181	<extra_id_176>	9.53296e-05	4.3e-07
82	<extra_id_77>	9.54303e-05	4.3e-07
173	<extra_id_168>	9.55039e-05	4.3e-07
170	<extra_id_165>	9.55338e-05	4.3e-07
159	<extra_id_154>	9.55918e-05	4.3e-07
183	<extra_id_178>	9.5845e-05	4.3e-07
198	<extra_id_193>	9.58635e-05	4.3e-07
48	<extra_id_43>	9.5889e-05	4.3e-07
70	<extra_id_65>	9.59102e-05	4.3e-07
29	<extra_id_24>	9.59226e-05	4.3e-07
236	<extra_id_231>	9.59331e-05	4.3e-07
133	<extra_id_128>	9.5955e-05	4.3e-07
46	<extra_id_41>	9.59894e-05	4.3e-07
167	<extra_id_162>	9.59922e-05	4.3e-07
39	<extra_id_34>	9.60331e-05	4.3e-07
230	<extra_id_225>	9.60563e-05	4.3e-07

241 additional entries below threshold

token_id	token	indicator	max_prob
137	<extra_id_132>	9.60694e-05	4.3e-07
216	<extra_id_211>	9.60878e-05	4.3e-07
107	<extra_id_102>	9.61415e-05	4.3e-07
139	<extra_id_134>	9.61868e-05	4.3e-07
169	<extra_id_164>	9.61936e-05	4.3e-07
212	<extra_id_207>	9.61961e-05	4.3e-07
223	<extra_id_218>	9.62032e-05	4.3e-07
61	<extra_id_56>	9.62078e-05	4.3e-07
248	<extra_id_243>	9.62132e-05	4.3e-07
247	<extra_id_242>	9.62264e-05	4.3e-07
68	<extra_id_63>	9.62523e-05	4.3e-07
52	<extra_id_47>	9.64315e-05	4.3e-07
59	<extra_id_54>	9.64483e-05	4.3e-07
143	<extra_id_138>	9.64514e-05	4.3e-07
214	<extra_id_209>	9.64687e-05	4.3e-07
209	<extra_id_204>	9.64916e-05	4.3e-07
164	<extra_id_159>	9.64976e-05	4.3e-07
155	<extra_id_150>	9.65943e-05	4.3e-07
256	<extra_id_251>	9.65956e-05	4.3e-07
102	<extra_id_97>	9.66031e-05	4.3e-07
62	<extra_id_57>	9.66066e-05	4.3e-07
47	<extra_id_42>	9.66432e-05	4.3e-07
64	<extra_id_59>	9.66455e-05	4.3e-07
90	<extra_id_85>	9.66667e-05	4.3e-07
74	<extra_id_69>	9.67165e-05	4.3e-07
168	<extra_id_163>	9.67264e-05	4.3e-07
20	<extra_id_15>	9.67511e-05	4.3e-07
203	<extra_id_198>	9.67545e-05	4.3e-07
9	<extra_id_4>	9.67739e-05	4.3e-07
219	<extra_id_214>	9.68475e-05	4.3e-07
104	<extra_id_99>	9.68504e-05	4.3e-07
128	<extra_id_123>	9.68513e-05	4.3e-07
35	<extra_id_30>	9.68686e-05	4.3e-07
99	<extra_id_94>	9.68693e-05	4.3e-07
217	<extra_id_212>	9.68767e-05	4.3e-07
199	<extra_id_194>	9.69134e-05	4.3e-07
189	<extra_id_184>	9.70066e-05	4.3e-07
3	<|im_start|>	9.70118e-05
238	<extra_id_233>	9.70496e-05	4.3e-07
158	<extra_id_153>	9.70502e-05	4.3e-07
131	<extra_id_126>	9.7078e-05	4.3e-07
120	<extra_id_115>	9.70894e-05	4.3e-07
111	<extra_id_106>	9.70905e-05	4.3e-07
16	<extra_id_11>	9.70946e-05	4.3e-07
55	<extra_id_50>	9.71052e-05	4.3e-07
176	<extra_id_171>	9.71084e-05	4.3e-07
245	<extra_id_240>	9.71212e-05	4.3e-07
163	<extra_id_158>	9.71242e-05	4.3e-07
51	<extra_id_46>	9.71271e-05	4.3e-07
122	<extra_id_117>	9.71497e-05	4.3e-07
76	<extra_id_71>	9.71724e-05	4.3e-07
79	<extra_id_74>	9.71769e-05	4.3e-07
260	<extra_id_255>	9.7181e-05	4.3e-07
112	<extra_id_107>	9.71875e-05	4.3e-07
220	<extra_id_215>	9.72162e-05	4.3e-07
241	<extra_id_236>	9.72179e-05	4.3e-07
165	<extra_id_160>	9.72254e-05	4.3e-07
152	<extra_id_147>	9.72279e-05	4.3e-07
157	<extra_id_152>	9.72616e-05	4.3e-07
156	<extra_id_151>	9.73258e-05	4.3e-07
243	<extra_id_238>	9.73601e-05	4.3e-07
78	<extra_id_73>	9.73719e-05	4.3e-07
191	<extra_id_186>	9.73838e-05	4.3e-07
240	<extra_id_235>	9.73852e-05	4.3e-07
213	<extra_id_208>	9.74076e-05	4.3e-07
109	<extra_id_104>	9.74181e-05	4.3e-07
255	<extra_id_250>	9.74315e-05	4.3e-07
25	<extra_id_20>	9.74355e-05	4.3e-07
117	<extra_id_112>	9.74667e-05	4.3e-07
124	<extra_id_119>	9.74731e-05	4.3e-07
149	<extra_id_144>	9.7487e-05	4.3e-07
231	<extra_id_226>	9.74906e-05	4.3e-07
91	<extra_id_86>	9.74942e-05	4.3e-07
23	<extra_id_18>	9.74966e-05	4.3e-07
95	<extra_id_90>	9.7541e-05	4.3e-07
118	<extra_id_113>	9.75508e-05	4.3e-07
148	<extra_id_143>	9.75643e-05	4.3e-07
136	<extra_id_131>	9.75713e-05	4.3e-07
96	<extra_id_91>	9.75764e-05	4.3e-07
151	<extra_id_146>	9.75993e-05	4.3e-07
50	<extra_id_45>	9.76186e-05	4.3e-07
92	<extra_id_87>	9.76237e-05	4.3e-07
89	<extra_id_84>	9.76364e-05	4.3e-07
130	<extra_id_125>	9.76381e-05	4.3e-07
138	<extra_id_133>	9.76524e-05	4.3e-07
186	<extra_id_181>	9.76537e-05	4.3e-07
83	<extra_id_78>	9.76599e-05	4.3e-07
218	<extra_id_213>	9.76673e-05	4.3e-07
110	<extra_id_105>	9.77283e-05	4.3e-07
161	<extra_id_156>	9.77361e-05	4.3e-07
65	<extra_id_60>	9.77395e-05	4.3e-07
154	<extra_id_149>	9.77709e-05	4.3e-07
30	<extra_id_25>	9.7772e-05	4.3e-07
103	<extra_id_98>	9.77972e-05	4.3e-07
178	<extra_id_173>	9.77992e-05	4.3e-07
116	<extra_id_111>	9.78093e-05	4.3e-07
182	<extra_id_177>	9.78101e-05	4.3e-07
67	<extra_id_62>	9.78282e-05	4.3e-07
7	<extra_id_2>	9.78346e-05	4.3e-07
127	<extra_id_122>	9.78385e-05	4.3e-07
22	<extra_id_17>	9.78462e-05	4.3e-07
13	<extra_id_8>	9.78538e-05	4.3e-07
202	<extra_id_197>	9.78581e-05	4.3e-07
172	<extra_id_167>	9.78957e-05	4.3e-07
237	<extra_id_232>	9.79003e-05	4.3e-07
232	<extra_id_227>	9.79008e-05	4.3e-07
26	<extra_id_21>	9.79259e-05	4.3e-07
206	<extra_id_201>	9.79344e-05	4.3e-07
184	<extra_id_179>	9.79377e-05	4.3e-07
113	<extra_id_108>	9.7947e-05	4.3e-07
197	<extra_id_192>	9.79712e-05	4.3e-07
94	<extra_id_89>	9.79904e-05	4.3e-07
144	<extra_id_139>	9.80072e-05	4.3e-07
100	<extra_id_95>	9.80104e-05	4.3e-07
42	<extra_id_37>	9.80166e-05	4.3e-07
160	<extra_id_155>	9.80362e-05	4.3e-07
150	<extra_id_145>	9.80424e-05	4.3e-07
258	<extra_id_253>	9.80445e-05	4.3e-07
174	<extra_id_169>	9.80451e-05	4.3e-07
15	<extra_id_10>	9.80481e-05	4.3e-07
227	<extra_id_222>	9.8074e-05	4.3e-07
119	<extra_id_114>	9.8079e-05	4.3e-07
43	<extra_id_38>	9.80831e-05	4.3e-07
54	<extra_id_49>	9.80834e-05	4.3e-07
194	<extra_id_189>	9.80881e-05	4.3e-07
188	<extra_id_183>	9.81004e-05	4.3e-07
259	<extra_id_254>	9.81056e-05	4.3e-07
233	<extra_id_228>	9.81468e-05	4.3e-07
251	<extra_id_246>	9.81693e-05	4.3e-07
229	<extra_id_224>	9.81818e-05	4.3e-07
224	<extra_id_219>	9.81984e-05	4.3e-07
115	<extra_id_110>	9.82005e-05	4.3e-07
146	<extra_id_141>	9.82137e-05	4.3e-07
221	<extra_id_216>	9.82275e-05	4.3e-07
140	<extra_id_135>	9.82476e-05	4.3e-07
166	<extra_id_161>	9.82574e-05	4.3e-07
177	<extra_id_172>	9.82582e-05	4.3e-07
201	<extra_id_196>	9.82641e-05	4.3e-07
250	<extra_id_245>	9.82731e-05	4.3e-07
57	<extra_id_52>	9.82772e-05	4.3e-07
108	<extra_id_103>	9.82844e-05	4.3e-07
135	<extra_id_130>	9.83061e-05	4.3e-07
228	<extra_id_223>	9.8335e-05	4.3e-07
185	<extra_id_180>	9.83395e-05	4.3e-07
145	<extra_id_140>	9.83599e-05	4.3e-07
106	<extra_id_101>	9.83663e-05	4.3e-07
87	<extra_id_82>	9.83683e-05	4.3e-07
226	<extra_id_221>	9.83707e-05	4.3e-07
252	<extra_id_247>	9.83862e-05	4.3e-07
234	<extra_id_229>	9.8391e-05	4.3e-07
84	<extra_id_79>	9.83932e-05	4.3e-07
196	<extra_id_191>	9.83937e-05	4.3e-07
72	<extra_id_67>	9.8433e-05	4.3e-07
17	<extra_id_12>	9.84456e-05	4.3e-07
38	<extra_id_33>	9.84778e-05	4.3e-07
6	<extra_id_1>	9.84808e-05	4.3e-07
4	<|im_end|>	9.84811e-05
142	<extra_id_137>	9.85035e-05	4.3e-07
215	<extra_id_210>	9.8513e-05	4.3e-07
53	<extra_id_48>	9.85226e-05	4.3e-07
141	<extra_id_136>	9.85345e-05	4.3e-07
175	<extra_id_170>	9.85531e-05	4.3e-07
246	<extra_id_241>	9.85766e-05	4.3e-07
97	<extra_id_92>	9.86452e-05	4.3e-07
5	<extra_id_0>	9.86568e-05	4.3e-07
180	<extra_id_175>	9.86577e-05	4.3e-07
63	<extra_id_58>	9.86582e-05	4.3e-07
37	<extra_id_32>	9.86605e-05	4.3e-07
31	<extra_id_26>	9.86881e-05	4.3e-07
225	<extra_id_220>	9.87017e-05	4.3e-07
81	<extra_id_76>	9.87115e-05	4.3e-07
126	<extra_id_121>	9.87182e-05	4.3e-07
21	<extra_id_16>	9.87212e-05	4.3e-07
40	<extra_id_35>	9.87214e-05	4.3e-07
129	<extra_id_124>	9.87342e-05	4.3e-07
27	<extra_id_22>	9.87346e-05	4.3e-07
187	<extra_id_182>	9.87356e-05	4.3e-07
69	<extra_id_64>	9.87386e-05	4.3e-07
45	<extra_id_40>	9.87459e-05	4.3e-07
204	<extra_id_199>	9.87623e-05	4.3e-07
93	<extra_id_88>	9.87988e-05	4.3e-07
105	<extra_id_100>	9.87993e-05	4.3e-07
222	<extra_id_217>	9.88204e-05	4.3e-07
125	<extra_id_120>	9.88432e-05	4.3e-07
41	<extra_id_36>	9.88727e-05	4.3e-07
77	<extra_id_72>	9.88879e-05	4.3e-07
12	<extra_id_7>	9.88984e-05	4.3e-07
32	<extra_id_27>	9.8904e-05	4.3e-07
205	<extra_id_200>	9.89103e-05	4.3e-07
56	<extra_id_51>	9.89251e-05	4.3e-07
11	<extra_id_6>	9.89268e-05	4.3e-07
101	<extra_id_96>	9.89378e-05	4.3e-07
190	<extra_id_185>	9.89532e-05	4.3e-07
14	<extra_id_9>	9.89547e-05	4.3e-07
253	<extra_id_248>	9.89754e-05	4.3e-07
121	<extra_id_116>	9.89783e-05	4.3e-07
132	<extra_id_127>	9.89788e-05	4.3e-07
24	<extra_id_19>	9.90093e-05	4.3e-07
123	<extra_id_118>	9.90156e-05	4.3e-07
153	<extra_id_148>	9.90182e-05	4.3e-07
242	<extra_id_237>	9.90333e-05	4.3e-07
244	<extra_id_239>	9.90547e-05	4.3e-07
195	<extra_id_190>	9.90816e-05	4.3e-07
162	<extra_id_157>	9.91299e-05	4.3e-07
58	<extra_id_53>	9.91308e-05	4.3e-07
28	<extra_id_23>	9.91744e-05	4.3e-07
134	<extra_id_129>	9.91984e-05	4.3e-07
18	<extra_id_13>	9.91997e-05	4.3e-07
19	<extra_id_14>	9.9233e-05	4.3e-07
75	<extra_id_70>	9.92376e-05	4.3e-07
71	<extra_id_66>	9.9239e-05	4.3e-07
49	<extra_id_44>	9.92716e-05	4.3e-07
210	<extra_id_205>	9.92966e-05	4.3e-07
98	<extra_id_93>	9.92989e-05	4.3e-07
36	<extra_id_31>	9.93356e-05	4.3e-07
34	<extra_id_29>	9.93786e-05	4.3e-07
239	<extra_id_234>	9.9394e-05	4.3e-07
207	<extra_id_202>	9.9397e-05	4.3e-07
254	<extra_id_249>	9.94283e-05	4.3e-07
80	<extra_id_75>	9.94769e-05	4.3e-07
257	<extra_id_252>	9.95583e-05	4.3e-07
200	<extra_id_195>	9.96313e-05	4.3e-07
44	<extra_id_39>	9.96329e-05	4.3e-07
8	<extra_id_3>	9.96488e-05	4.3e-07
114	<extra_id_109>	9.96952e-05	4.3e-07
33	<extra_id_28>	9.97652e-05	4.3e-07
171	<extra_id_166>	9.97749e-05	4.3e-07
73	<extra_id_68>	9.98237e-05	4.3e-07
193	<extra_id_188>	9.98467e-05	4.3e-07
60	<extra_id_55>	9.98843e-05	4.3e-07
211	<extra_id_206>	9.99378e-05	4.3e-07
86	<extra_id_81>	0.000100019	4.3e-07
85	<extra_id_80>	0.000100061	4.3e-07
88	<extra_id_83>	0.000100079	4.3e-07
179	<extra_id_174>	0.000100491	4.3e-07
10	<extra_id_5>	0.000100679	4.3e-07
147	<extra_id_142>	0.000100879	4.3e-07
66	<extra_id_61>	0.000100914	4.3e-07
1	<s>	0.716203	1
0	<unk>	0.811294	1
2	</s>	0.994836	0.0032

Unreachable tokens

0 entries below threshold of 1.087

1 additional entries above threshold

token_id	token	indicator	reencoded
1080	...	1.81084	119913: «, 1080: ...