Last change
on this file since 1315 was 1315, checked in by paynter, 24 years ago |
Language models for the textcat language identification package.
|
-
Property svn:keywords
set to
Author Date Id Revision
|
File size:
3.1 KB
|
Line | |
---|
1 | _ 11688
|
---|
2 | e 3223
|
---|
3 | a 2469
|
---|
4 | t 2269
|
---|
5 | i 1928
|
---|
6 | n 1903
|
---|
7 | r 1414
|
---|
8 | o 1406
|
---|
9 | h 1369
|
---|
10 | s 1249
|
---|
11 | l 929
|
---|
12 | n_ 890
|
---|
13 | _t 862
|
---|
14 | _a 843
|
---|
15 | d 818
|
---|
16 | e_ 798
|
---|
17 | th 704
|
---|
18 | w 661
|
---|
19 | he 625
|
---|
20 | an 612
|
---|
21 | t_ 606
|
---|
22 | u 592
|
---|
23 | _th 575
|
---|
24 | c 508
|
---|
25 | s_ 471
|
---|
26 | the 470
|
---|
27 | , 469
|
---|
28 | - 458
|
---|
29 | in 455
|
---|
30 | m 445
|
---|
31 | ,_ 440
|
---|
32 | b 434
|
---|
33 | g 429
|
---|
34 | er 409
|
---|
35 | ee 408
|
---|
36 | _the 407
|
---|
37 | k 402
|
---|
38 | an_ 402
|
---|
39 | f 385
|
---|
40 | _w 378
|
---|
41 | he_ 376
|
---|
42 | the_ 364
|
---|
43 | _an 362
|
---|
44 | _o 360
|
---|
45 | y 358
|
---|
46 | _the_ 354
|
---|
47 | _s 353
|
---|
48 | _an_ 342
|
---|
49 | a_ 335
|
---|
50 | r_ 327
|
---|
51 | _b 316
|
---|
52 | d_ 303
|
---|
53 | i_ 278
|
---|
54 | en 277
|
---|
55 | p 270
|
---|
56 | ei 245
|
---|
57 | A 236
|
---|
58 | wa 232
|
---|
59 | _A 231
|
---|
60 | re 229
|
---|
61 | in_ 229
|
---|
62 | ui 218
|
---|
63 | oo 217
|
---|
64 | le 217
|
---|
65 | ai 216
|
---|
66 | et 212
|
---|
67 | ti 209
|
---|
68 | it 209
|
---|
69 | _f 206
|
---|
70 | te 204
|
---|
71 | _a_ 203
|
---|
72 | _m 202
|
---|
73 | ha 200
|
---|
74 | as 193
|
---|
75 | on 188
|
---|
76 | at 184
|
---|
77 | _i 183
|
---|
78 | _wa 183
|
---|
79 | _c 182
|
---|
80 | o_ 180
|
---|
81 | or 178
|
---|
82 | _h 176
|
---|
83 | _g 169
|
---|
84 | ch 165
|
---|
85 | A_ 159
|
---|
86 | _l 158
|
---|
87 | _A_ 157
|
---|
88 | st 156
|
---|
89 | _d 155
|
---|
90 | _ti 148
|
---|
91 | . 148
|
---|
92 | ._ 146
|
---|
93 | ke 144
|
---|
94 | ti_ 143
|
---|
95 | -- 143
|
---|
96 | _o_ 142
|
---|
97 | ow 142
|
---|
98 | --- 140
|
---|
99 | ed 138
|
---|
100 | ---- 138
|
---|
101 | _r 137
|
---|
102 | as_ 137
|
---|
103 | y_ 136
|
---|
104 | er_ 136
|
---|
105 | ----- 136
|
---|
106 | ir 135
|
---|
107 | aa 135
|
---|
108 | la 131
|
---|
109 | een 130
|
---|
110 | ae 129
|
---|
111 | _ti_ 128
|
---|
112 | ra 126
|
---|
113 | es 125
|
---|
114 | nd 124
|
---|
115 | de 120
|
---|
116 | h_ 120
|
---|
117 | ie 120
|
---|
118 | ar 119
|
---|
119 | ll 119
|
---|
120 | nt 118
|
---|
121 | ot 118
|
---|
122 | en_ 115
|
---|
123 | ma 115
|
---|
124 | eet 113
|
---|
125 | her 112
|
---|
126 | el 112
|
---|
127 | is 112
|
---|
128 | ' 112
|
---|
129 | at_ 111
|
---|
130 | ic 109
|
---|
131 | se 108
|
---|
132 | or_ 106
|
---|
133 | wu 104
|
---|
134 | me 104
|
---|
135 | ne 103
|
---|
136 | fo 102
|
---|
137 | on_ 101
|
---|
138 | was 99
|
---|
139 | _was 98
|
---|
140 | et_ 98
|
---|
141 | ri 98
|
---|
142 | _e 97
|
---|
143 | _ma 97
|
---|
144 | v 97
|
---|
145 | _n 97
|
---|
146 | ! 97
|
---|
147 | li 97
|
---|
148 | ht 93
|
---|
149 | hi 92
|
---|
150 | _wu 92
|
---|
151 | ng 91
|
---|
152 | ro 91
|
---|
153 | it_ 90
|
---|
154 | ck 90
|
---|
155 | _fo 90
|
---|
156 | tha 90
|
---|
157 | k_ 89
|
---|
158 | il 89
|
---|
159 | cht 86
|
---|
160 | eet_ 86
|
---|
161 | _p 86
|
---|
162 | we 86
|
---|
163 | _was_ 85
|
---|
164 | was_ 85
|
---|
165 | rt 84
|
---|
166 | ed_ 83
|
---|
167 | ter 83
|
---|
168 | id 83
|
---|
169 | ga 82
|
---|
170 | ; 82
|
---|
171 | ;_ 81
|
---|
172 | ther 79
|
---|
173 | tt 76
|
---|
174 | air 76
|
---|
175 | e, 75
|
---|
176 | un 75
|
---|
177 | ho 75
|
---|
178 | for 74
|
---|
179 | ge 74
|
---|
180 | _st 73
|
---|
181 | _y 72
|
---|
182 | _he 72
|
---|
183 | wh 71
|
---|
184 | _on 71
|
---|
185 | sh 70
|
---|
186 | z 70
|
---|
187 | e,_ 69
|
---|
188 | bi 68
|
---|
189 | _tha 68
|
---|
190 | wui 67
|
---|
191 | !_ 67
|
---|
192 | ad 67
|
---|
193 | een_ 66
|
---|
194 | l_ 66
|
---|
195 | ts 66
|
---|
196 | _for 66
|
---|
197 | n, 66
|
---|
198 | _wh 65
|
---|
199 | re_ 65
|
---|
200 | be 65
|
---|
201 | eh 64
|
---|
202 | hat 64
|
---|
203 | ns 64
|
---|
204 | br 64
|
---|
205 | g_ 64
|
---|
206 | ui_ 64
|
---|
207 | rr 64
|
---|
208 | wui_ 63
|
---|
209 | ni 63
|
---|
210 | _wui 62
|
---|
211 | ay 62
|
---|
212 | s, 62
|
---|
213 | pe 61
|
---|
214 | n,_ 61
|
---|
215 | bo 61
|
---|
216 | al 61
|
---|
217 | ye 61
|
---|
218 | _bi 60
|
---|
219 | oot 60
|
---|
220 | na 60
|
---|
221 | ang 60
|
---|
222 | s,_ 59
|
---|
223 | es_ 59
|
---|
224 | ill 58
|
---|
225 | that 58
|
---|
226 | _wui_ 58
|
---|
227 | nn 58
|
---|
228 | eh_ 58
|
---|
229 | oa 57
|
---|
230 | han 57
|
---|
231 | _that 56
|
---|
232 | _br 56
|
---|
233 | ca 56
|
---|
234 | _ga 56
|
---|
235 | ng_ 56
|
---|
236 | um 55
|
---|
237 | hat_ 55
|
---|
238 | oon 55
|
---|
239 | od 55
|
---|
240 | for_ 55
|
---|
241 | no 55
|
---|
242 | ree 55
|
---|
243 | _for_ 54
|
---|
244 | _le 54
|
---|
245 | ht_ 54
|
---|
246 | ot_ 54
|
---|
247 | _k 53
|
---|
248 | rd 53
|
---|
249 | ki 53
|
---|
250 | aw 53
|
---|
251 | nd_ 53
|
---|
252 | _on_ 53
|
---|
253 | _it 53
|
---|
254 | ik 53
|
---|
255 | t, 53
|
---|
256 | _be 52
|
---|
257 | that_ 52
|
---|
258 | ve 52
|
---|
259 | rn 52
|
---|
260 | 's 51
|
---|
261 | au 51
|
---|
262 | co 51
|
---|
263 | ich 51
|
---|
264 | to 51
|
---|
265 | lo 51
|
---|
266 | t,_ 51
|
---|
267 | ea 51
|
---|
268 | tee 51
|
---|
269 | lan 50
|
---|
270 | fi 50
|
---|
271 | _at 50
|
---|
272 | am 50
|
---|
273 | _in 50
|
---|
274 | ere 50
|
---|
275 | ur 50
|
---|
276 | le_ 50
|
---|
277 | nt_ 49
|
---|
278 | 's_ 49
|
---|
279 | hin 49
|
---|
280 | yi 49
|
---|
281 | hr 49
|
---|
282 | ts_ 49
|
---|
283 | _ca 48
|
---|
284 | " 48
|
---|
285 | ta 48
|
---|
286 | cht_ 48
|
---|
287 | -_ 48
|
---|
288 | _as 47
|
---|
289 | T 47
|
---|
290 | ang_ 47
|
---|
291 | lei 46
|
---|
292 | _ma_ 46
|
---|
293 | tr 46
|
---|
294 | _ro 46
|
---|
295 | fe 46
|
---|
296 | ma_ 46
|
---|
297 | icht 46
|
---|
298 | _as_ 46
|
---|
299 | der 46
|
---|
300 | cl 46
|
---|
301 | e- 45
|
---|
302 | n- 45
|
---|
303 | thr 45
|
---|
304 | ba 45
|
---|
305 | m_ 45
|
---|
306 | st_ 45
|
---|
307 | rt_ 45
|
---|
308 | _u 45
|
---|
309 | do 45
|
---|
310 | _T 45
|
---|
311 | im 44
|
---|
312 | _se 44
|
---|
313 | sk 44
|
---|
314 | _la 44
|
---|
315 | eik 44
|
---|
316 | bit 43
|
---|
317 | ike 43
|
---|
318 | B 43
|
---|
319 | kee 43
|
---|
320 | tte 43
|
---|
321 | di 43
|
---|
322 | eed 43
|
---|
323 | _B 42
|
---|
324 | _aa 42
|
---|
325 | her_ 42
|
---|
326 | da 42
|
---|
327 | ff 42
|
---|
328 | tu 42
|
---|
329 | ie_ 42
|
---|
330 | _cl 42
|
---|
331 | _ba 42
|
---|
332 | oot_ 42
|
---|
333 | bu 41
|
---|
334 | eike 41
|
---|
335 | oc 41
|
---|
336 | hu 41
|
---|
337 | _thr 41
|
---|
338 | ther_ 41
|
---|
339 | _co 41
|
---|
340 | aa_ 41
|
---|
341 | so 41
|
---|
342 | _me 41
|
---|
343 | H 41
|
---|
344 | _H 40
|
---|
345 | ke_ 40
|
---|
346 | ert 40
|
---|
347 | lu 40
|
---|
348 | ist 40
|
---|
349 | si 40
|
---|
350 | iz 40
|
---|
351 | ar_ 39
|
---|
352 | uc 39
|
---|
353 | thi 39
|
---|
354 | ad_ 39
|
---|
355 | ru 39
|
---|
356 | owe 39
|
---|
357 | gi 38
|
---|
358 | _bit 38
|
---|
359 | _do 38
|
---|
360 | int 38
|
---|
361 | bl 38
|
---|
362 | ld 38
|
---|
363 | _at_ 38
|
---|
364 | lt 38
|
---|
365 | ac 38
|
---|
366 | _ha 38
|
---|
367 | ae_ 38
|
---|
368 | rs 37
|
---|
369 | here 37
|
---|
370 | ei_ 37
|
---|
371 | han_ 37
|
---|
372 | p_ 37
|
---|
373 | is_ 37
|
---|
374 | eth 37
|
---|
375 | fa 37
|
---|
376 | _sk 37
|
---|
377 | ll_ 37
|
---|
378 | ss 36
|
---|
379 | bra 36
|
---|
380 | wha 36
|
---|
381 | gl 36
|
---|
382 | ck_ 36
|
---|
383 | pl 36
|
---|
384 | lin 36
|
---|
385 | ir_ 36
|
---|
386 | ab 36
|
---|
387 | _ther 36
|
---|
388 | _da 35
|
---|
389 | ce 35
|
---|
390 | rin 35
|
---|
391 | _oo 35
|
---|
392 | rl 35
|
---|
393 | wee 35
|
---|
394 | and 35
|
---|
395 | sa 35
|
---|
396 | _yi 35
|
---|
397 | _bra 35
|
---|
398 | 'd 35
|
---|
399 | ds 35
|
---|
400 | _bo 35
|
---|
Note:
See
TracBrowser
for help on using the repository browser.