etnc19_reference_corpus_6000000_web_2019_600000
A2
Recall by error type:
	 type 	 total 	 correct 	 scope 	 overlap
	 M:PUNCT	49	0.0	0.0	0.16	
	 R:PUNCT	28	0.0	0.0	0.04	
	 R:NOM:FORM	133	0.0	0.0	0.18	
	 R:WO	104	0.0	0.0	0.17	
	 U:LEX	25	0.0	0.0	0.04	
	 R:LEX	59	0.02	0.02	0.2	
	 R:WS:NOM:FORM	2	0.0	0.0	0.0	
	 M:LEX	55	0.0	0.0	0.18	
	 R:SPELL	119	0.42	0.42	0.6	
	 R:CASE	22	0.0	0.0	0.32	
	 R:VERB:FORM	39	0.0	0.0	0.13	
	 R:VERB:FORM:SPELL	4	0.0	0.0	0.75	
	 R:NOM:FORM:SPELL	14	0.07	0.07	0.79	
	 U:PUNCT	39	0.0	0.0	0.15	
	 R:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:LEX:NOM:FORM	3	0.0	0.0	0.33	
	 R:WS:SPELL	5	0.0	0.0	0.4	
	 R:WS	11	0.0	0.0	0.27	
	 R:NOM:FORM:SPELL:CASE	3	0.0	0.0	0.33	
	 R:LEX:SPELL	3	0.0	0.0	0.67	
	 R:LEX:VERB:FORM	2	0.0	0.0	0.0	
	 R:NOM:FORM:CASE	3	0.0	0.0	0.0	
	 R:SPELL:CASE	4	0.0	0.0	1.0	

Recall by error type, accounting for edits within encompassing WO:
	 type 	 total 	 correct 	 scope 	 overlap
	 M:PUNCT	51	0.04	0.04	0.2	
	 R:PUNCT	28	0.0	0.0	0.04	
	 R:NOM:FORM	166	0.2	0.2	0.34	
	 R:WO	104	0.0	0.0	0.17	
	 R:VERB:FORM	52	0.25	0.25	0.35	
	 R:NOM:FORM:CASE	4	0.25	0.25	0.25	
	 U:LEX	27	0.07	0.07	0.11	
	 R:LEX	75	0.23	0.23	0.37	
	 R:WS:NOM:FORM	3	0.33	0.33	0.33	
	 M:LEX	64	0.14	0.14	0.3	
	 R:SPELL	131	0.47	0.47	0.63	
	 R:CASE	27	0.19	0.19	0.44	
	 R:VERB:FORM:SPELL	4	0.0	0.0	0.75	
	 R:NOM:FORM:SPELL	17	0.24	0.24	0.82	
	 U:PUNCT	40	0.03	0.03	0.17	
	 R:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:LEX:NOM:FORM	3	0.0	0.0	0.33	
	 R:WS:SPELL	5	0.0	0.0	0.4	
	 R:WS	11	0.0	0.0	0.27	
	 R:NOM:FORM:SPELL:CASE	3	0.0	0.0	0.33	
	 R:LEX:SPELL	3	0.0	0.0	0.67	
	 R:LEX:VERB:FORM	2	0.0	0.0	0.0	
	 R:SPELL:CASE	4	0.0	0.0	1.0	

Precision   : 0.5306
Recall      : 0.0715
F_0.5       : 0.2324

B1
Recall by error type:
	 type 	 total 	 correct 	 scope 	 overlap
	 M:PUNCT	54	0.0	0.0	0.04	
	 U:LEX	25	0.04	0.04	0.24	
	 M:LEX	37	0.0	0.0	0.0	
	 R:WO	246	0.0	0.0	0.09	
	 R:WS	14	0.0	0.0	0.14	
	 R:NOM:FORM	229	0.01	0.01	0.14	
	 R:SPELL	126	0.51	0.51	0.69	
	 R:VERB:FORM	49	0.0	0.0	0.14	
	 U:PUNCT	64	0.0	0.0	0.19	
	 R:LEX:CASE	1	0.0	0.0	0.0	
	 R:LEX	75	0.01	0.01	0.16	
	 R:PUNCT	6	0.0	0.0	0.0	
	 R:LEX:SPELL	4	0.0	0.0	0.75	
	 R:WS:NOM:FORM	4	0.0	0.0	0.25	
	 R:LEX:VERB:FORM	2	0.0	0.0	0.0	
	 R:LEX:NOM:FORM	7	0.0	0.0	0.29	
	 R:SPELL:CASE	2	0.0	0.0	0.5	
	 R:VERB:FORM:SPELL	5	0.0	0.0	0.2	
	 R:NOM:FORM:SPELL	13	0.0	0.0	0.69	
	 U:LEX:SPELL	1	0.0	0.0	1.0	
	 R:CASE	10	0.0	0.0	0.1	
	 R:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:WS:SPELL	3	0.0	0.0	0.33	
	 R:WS:NOM:FORM:SPELL	1	0.0	0.0	0.0	

Recall by error type, accounting for edits within encompassing WO:
	 type 	 total 	 correct 	 scope 	 overlap
	 M:PUNCT	65	0.17	0.17	0.2	
	 U:LEX	28	0.14	0.14	0.32	
	 M:LEX	55	0.33	0.33	0.33	
	 R:WO	246	0.0	0.0	0.09	
	 R:VERB:FORM	73	0.33	0.33	0.42	
	 R:NOM:FORM	269	0.16	0.16	0.26	
	 R:WS	16	0.12	0.12	0.25	
	 R:SPELL	141	0.56	0.56	0.72	
	 R:LEX	102	0.27	0.27	0.38	
	 U:PUNCT	68	0.06	0.06	0.24	
	 R:LEX:CASE	1	0.0	0.0	0.0	
	 R:PUNCT	6	0.0	0.0	0.0	
	 R:LEX:SPELL	5	0.2	0.2	0.8	
	 R:WS:NOM:FORM	4	0.0	0.0	0.25	
	 R:LEX:VERB:FORM	4	0.5	0.5	0.5	
	 R:LEX:NOM:FORM	7	0.0	0.0	0.29	
	 R:NOM:FORM:SPELL	19	0.32	0.32	0.79	
	 R:SPELL:CASE	2	0.0	0.0	0.5	
	 R:VERB:FORM:SPELL	6	0.17	0.17	0.33	
	 U:LEX:SPELL	1	0.0	0.0	1.0	
	 R:CASE	11	0.09	0.09	0.18	
	 R:WS:NOM:FORM:SPELL	2	0.5	0.5	0.5	
	 R:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:WS:SPELL	3	0.0	0.0	0.33	

Precision   : 0.5667
Recall      : 0.0695
F_0.5       : 0.2330

B2
Recall by error type:
	 type 	 total 	 correct 	 scope 	 overlap
	 R:WO	252	0.0	0.0	0.08	
	 M:PUNCT	78	0.0	0.0	0.08	
	 R:LEX	115	0.0	0.0	0.08	
	 R:NOM:FORM	258	0.01	0.01	0.12	
	 R:VERB:FORM	49	0.0	0.0	0.1	
	 R:SPELL	98	0.59	0.59	0.74	
	 R:WS:NOM:FORM:CASE	1	0.0	0.0	0.0	
	 R:CASE	15	0.0	0.0	0.0	
	 R:NOM:FORM:CASE	2	0.0	0.0	0.0	
	 R:PUNCT	26	0.0	0.0	0.08	
	 U:PUNCT	108	0.0	0.0	0.06	
	 M:LEX	48	0.0	0.0	0.19	
	 R:WS	28	0.0	0.0	0.07	
	 U:LEX	34	0.0	0.0	0.12	
	 R:LEX:SPELL	6	0.0	0.0	0.5	
	 R:VERB:FORM:SPELL	2	0.5	0.5	0.5	
	 R:LEX:VERB:FORM	3	0.0	0.0	0.0	
	 R:NOM:FORM:SPELL	13	0.23	0.23	0.69	
	 R:LEX:NOM:FORM	3	0.0	0.0	0.33	
	 R:WS:NOM:FORM	3	0.0	0.0	0.0	
	 R:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:LEX:WO	1	0.0	0.0	0.0	
	 R:WS:SPELL	1	0.0	0.0	1.0	

Recall by error type, accounting for edits within encompassing WO:
	 type 	 total 	 correct 	 scope 	 overlap
	 R:WO	252	0.0	0.0	0.08	
	 R:VERB:FORM	66	0.26	0.26	0.33	
	 M:PUNCT	89	0.12	0.12	0.19	
	 R:LEX	144	0.2	0.2	0.26	
	 R:NOM:FORM	310	0.18	0.18	0.27	
	 R:SPELL	104	0.62	0.62	0.76	
	 R:WS:NOM:FORM:CASE	1	0.0	0.0	0.0	
	 R:CASE	18	0.17	0.17	0.17	
	 R:NOM:FORM:CASE	3	0.33	0.33	0.33	
	 R:PUNCT	26	0.0	0.0	0.08	
	 U:PUNCT	114	0.05	0.05	0.11	
	 M:LEX	63	0.24	0.24	0.38	
	 R:WS	29	0.03	0.03	0.1	
	 U:LEX	38	0.11	0.11	0.21	
	 R:LEX:SPELL	6	0.0	0.0	0.5	
	 R:VERB:FORM:SPELL	3	0.67	0.67	0.67	
	 R:LEX:VERB:FORM	4	0.25	0.25	0.25	
	 R:NOM:FORM:SPELL	16	0.38	0.38	0.75	
	 R:LEX:NOM:FORM	3	0.0	0.0	0.33	
	 R:WS:NOM:FORM	3	0.0	0.0	0.0	
	 R:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:LEX:WO	1	0.0	0.0	0.0	
	 R:WS:SPELL	1	0.0	0.0	1.0	

Precision   : 0.5963
Recall      : 0.0568
F_0.5       : 0.2056

C1
Recall by error type:
	 type 	 total 	 correct 	 scope 	 overlap
	 R:NOM:FORM	159	0.02	0.02	0.12	
	 R:WO	223	0.0	0.0	0.1	
	 R:SPELL	117	0.53	0.53	0.65	
	 U:PUNCT	50	0.0	0.0	0.02	
	 R:LEX	92	0.0	0.0	0.17	
	 R:WS	23	0.0	0.0	0.04	
	 R:NOM:FORM:SPELL	5	0.0	0.0	0.8	
	 M:LEX	37	0.0	0.0	0.05	
	 U:LEX	16	0.06	0.06	0.06	
	 R:VERB:FORM	25	0.0	0.0	0.08	
	 M:PUNCT	46	0.0	0.0	0.11	
	 R:LEX:SPELL	3	0.0	0.0	0.67	
	 R:WS:SPELL	4	0.0	0.0	0.5	
	 R:PUNCT	3	0.0	0.0	0.0	
	 R:WS:NOM:FORM	1	0.0	0.0	0.0	
	 R:LEX:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:CASE	2	0.0	0.0	0.0	
	 R:WS:CASE	2	0.0	0.0	0.0	
	 R:LEX:WO	1	0.0	0.0	0.0	

Recall by error type, accounting for edits within encompassing WO:
	 type 	 total 	 correct 	 scope 	 overlap
	 R:NOM:FORM	191	0.18	0.18	0.27	
	 R:WO	223	0.0	0.0	0.1	
	 R:WS	31	0.26	0.26	0.29	
	 R:SPELL	129	0.57	0.57	0.68	
	 U:PUNCT	55	0.09	0.09	0.11	
	 R:LEX	105	0.12	0.12	0.28	
	 M:LEX	43	0.14	0.14	0.19	
	 R:NOM:FORM:SPELL	6	0.17	0.17	0.83	
	 U:LEX	19	0.21	0.21	0.21	
	 R:VERB:FORM	32	0.22	0.22	0.28	
	 M:PUNCT	54	0.15	0.15	0.24	
	 R:LEX:SPELL	4	0.25	0.25	0.75	
	 R:WS:SPELL	4	0.0	0.0	0.5	
	 R:PUNCT	3	0.0	0.0	0.0	
	 R:WS:NOM:FORM	1	0.0	0.0	0.0	
	 R:LEX:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:CASE	4	0.5	0.5	0.5	
	 R:WS:CASE	2	0.0	0.0	0.0	
	 R:LEX:WO	1	0.0	0.0	0.0	

Precision   : 0.5946
Recall      : 0.0815
F_0.5       : 0.2632

koos
Recall by error type:
	 type 	 total 	 correct 	 scope 	 overlap
	 M:PUNCT	227	0.0	0.0	0.09	
	 R:PUNCT	63	0.0	0.0	0.05	
	 R:NOM:FORM	779	0.01	0.01	0.14	
	 R:WO	825	0.0	0.0	0.1	
	 U:LEX	100	0.02	0.02	0.12	
	 R:LEX	341	0.01	0.01	0.14	
	 R:WS:NOM:FORM	10	0.0	0.0	0.1	
	 M:LEX	177	0.0	0.0	0.12	
	 R:SPELL	460	0.51	0.51	0.67	
	 R:CASE	49	0.0	0.0	0.16	
	 R:VERB:FORM	162	0.0	0.0	0.12	
	 R:VERB:FORM:SPELL	11	0.09	0.09	0.45	
	 R:NOM:FORM:SPELL	45	0.09	0.09	0.73	
	 U:PUNCT	261	0.0	0.0	0.1	
	 R:WO:NOM:FORM	3	0.0	0.0	0.0	
	 R:LEX:NOM:FORM	13	0.0	0.0	0.31	
	 R:WS:SPELL	13	0.0	0.0	0.46	
	 R:WS	76	0.0	0.0	0.11	
	 R:NOM:FORM:SPELL:CASE	3	0.0	0.0	0.33	
	 R:LEX:SPELL	16	0.0	0.0	0.62	
	 R:LEX:VERB:FORM	7	0.0	0.0	0.0	
	 R:NOM:FORM:CASE	5	0.0	0.0	0.0	
	 R:SPELL:CASE	6	0.0	0.0	0.83	
	 R:LEX:CASE	1	0.0	0.0	0.0	
	 U:LEX:SPELL	1	0.0	0.0	1.0	
	 R:WS:NOM:FORM:SPELL	1	0.0	0.0	0.0	
	 R:WS:NOM:FORM:CASE	1	0.0	0.0	0.0	
	 R:LEX:WO	2	0.0	0.0	0.0	
	 R:LEX:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:WS:CASE	2	0.0	0.0	0.0	

Recall by error type, accounting for edits within encompassing WO:
	 type 	 total 	 correct 	 scope 	 overlap
	 M:PUNCT	259	0.12	0.12	0.2	
	 R:PUNCT	63	0.0	0.0	0.05	
	 R:NOM:FORM	936	0.18	0.18	0.28	
	 R:WO	825	0.0	0.0	0.1	
	 R:VERB:FORM	223	0.27	0.27	0.36	
	 R:NOM:FORM:CASE	7	0.29	0.29	0.29	
	 U:LEX	112	0.12	0.12	0.21	
	 R:LEX	426	0.2	0.2	0.31	
	 R:WS:NOM:FORM	11	0.09	0.09	0.18	
	 M:LEX	225	0.21	0.21	0.31	
	 R:SPELL	505	0.55	0.55	0.7	
	 R:CASE	60	0.18	0.18	0.32	
	 R:VERB:FORM:SPELL	13	0.23	0.23	0.54	
	 R:NOM:FORM:SPELL	58	0.29	0.29	0.79	
	 U:PUNCT	277	0.06	0.06	0.15	
	 R:WO:NOM:FORM	3	0.0	0.0	0.0	
	 R:LEX:NOM:FORM	13	0.0	0.0	0.31	
	 R:WS:SPELL	13	0.0	0.0	0.46	
	 R:WS	87	0.13	0.13	0.22	
	 R:NOM:FORM:SPELL:CASE	3	0.0	0.0	0.33	
	 R:LEX:SPELL	18	0.11	0.11	0.67	
	 R:LEX:VERB:FORM	10	0.3	0.3	0.3	
	 R:SPELL:CASE	6	0.0	0.0	0.83	
	 R:LEX:CASE	1	0.0	0.0	0.0	
	 U:LEX:SPELL	1	0.0	0.0	1.0	
	 R:WS:NOM:FORM:SPELL	2	0.5	0.5	0.5	
	 R:WS:NOM:FORM:CASE	1	0.0	0.0	0.0	
	 R:LEX:WO	2	0.0	0.0	0.0	
	 R:LEX:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:WS:CASE	2	0.0	0.0	0.0	

Precision   : 0.5731
Recall      : 0.0686
F_0.5       : 0.2318

etnc19_reference_corpus_model_6000000_lines
A2
Recall by error type:
	 type 	 total 	 correct 	 scope 	 overlap
	 M:PUNCT	49	0.0	0.0	0.18	
	 R:PUNCT	28	0.0	0.0	0.04	
	 R:NOM:FORM	134	0.0	0.0	0.21	
	 R:WO	100	0.0	0.0	0.17	
	 U:LEX	25	0.0	0.0	0.08	
	 R:LEX	59	0.02	0.02	0.2	
	 R:WS:NOM:FORM	2	0.0	0.0	0.0	
	 M:LEX	56	0.0	0.0	0.18	
	 R:SPELL	125	0.52	0.52	0.71	
	 R:CASE	22	0.0	0.0	0.32	
	 R:VERB:FORM	39	0.0	0.0	0.15	
	 R:VERB:FORM:SPELL	4	0.0	0.0	0.75	
	 R:NOM:FORM:SPELL	15	0.07	0.07	0.73	
	 U:PUNCT	39	0.0	0.0	0.15	
	 R:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:LEX:NOM:FORM	3	0.0	0.0	0.33	
	 R:WS:SPELL	5	0.0	0.0	0.4	
	 R:WS	11	0.0	0.0	0.27	
	 R:NOM:FORM:SPELL:CASE	3	0.0	0.0	0.67	
	 R:LEX:SPELL	3	0.0	0.0	0.67	
	 R:LEX:VERB:FORM	2	0.0	0.0	0.0	
	 R:NOM:FORM:CASE	3	0.0	0.0	0.0	
	 R:SPELL:CASE	4	0.0	0.0	1.0	

Recall by error type, accounting for edits within encompassing WO:
	 type 	 total 	 correct 	 scope 	 overlap
	 M:PUNCT	51	0.04	0.04	0.22	
	 R:PUNCT	28	0.0	0.0	0.04	
	 R:NOM:FORM	166	0.19	0.19	0.36	
	 R:WO	100	0.0	0.0	0.17	
	 R:VERB:FORM	52	0.25	0.25	0.37	
	 R:NOM:FORM:CASE	4	0.25	0.25	0.25	
	 U:LEX	27	0.07	0.07	0.15	
	 R:LEX	75	0.23	0.23	0.37	
	 R:WS:NOM:FORM	3	0.33	0.33	0.33	
	 M:LEX	64	0.12	0.12	0.28	
	 R:SPELL	131	0.54	0.54	0.73	
	 R:CASE	27	0.19	0.19	0.44	
	 R:VERB:FORM:SPELL	4	0.0	0.0	0.75	
	 R:NOM:FORM:SPELL	17	0.18	0.18	0.76	
	 U:PUNCT	40	0.03	0.03	0.17	
	 R:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:LEX:NOM:FORM	3	0.0	0.0	0.33	
	 R:WS:SPELL	5	0.0	0.0	0.4	
	 R:WS	11	0.0	0.0	0.27	
	 R:NOM:FORM:SPELL:CASE	3	0.0	0.0	0.67	
	 R:LEX:SPELL	3	0.0	0.0	0.67	
	 R:LEX:VERB:FORM	2	0.0	0.0	0.0	
	 R:SPELL:CASE	4	0.0	0.0	1.0	

Precision   : 0.5776
Recall      : 0.0915
F_0.5       : 0.2801

B1
Recall by error type:
	 type 	 total 	 correct 	 scope 	 overlap
	 M:PUNCT	54	0.0	0.0	0.04	
	 U:LEX	26	0.04	0.04	0.23	
	 M:LEX	37	0.0	0.0	0.0	
	 R:WO	247	0.0	0.0	0.11	
	 R:WS	14	0.0	0.0	0.14	
	 R:NOM:FORM	230	0.01	0.01	0.13	
	 R:SPELL	126	0.58	0.58	0.75	
	 R:VERB:FORM	48	0.0	0.0	0.17	
	 U:PUNCT	64	0.0	0.0	0.19	
	 R:LEX:CASE	1	0.0	0.0	0.0	
	 R:LEX	75	0.01	0.01	0.19	
	 R:PUNCT	6	0.0	0.0	0.0	
	 R:LEX:SPELL	4	0.0	0.0	0.75	
	 R:WS:NOM:FORM	4	0.0	0.0	0.25	
	 R:LEX:VERB:FORM	2	0.0	0.0	0.0	
	 R:LEX:NOM:FORM	7	0.0	0.0	0.29	
	 R:SPELL:CASE	2	0.0	0.0	0.5	
	 R:VERB:FORM:SPELL	5	0.0	0.0	0.2	
	 R:NOM:FORM:SPELL	13	0.0	0.0	0.77	
	 U:LEX:SPELL	1	1.0	1.0	1.0	
	 R:CASE	10	0.0	0.0	0.1	
	 R:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:WS:SPELL	3	0.0	0.0	0.33	
	 R:WS:NOM:FORM:SPELL	1	0.0	0.0	0.0	

Recall by error type, accounting for edits within encompassing WO:
	 type 	 total 	 correct 	 scope 	 overlap
	 M:PUNCT	65	0.17	0.17	0.2	
	 U:LEX	29	0.14	0.14	0.31	
	 M:LEX	55	0.33	0.33	0.33	
	 R:WO	247	0.0	0.0	0.11	
	 R:VERB:FORM	72	0.33	0.33	0.44	
	 R:NOM:FORM	270	0.16	0.16	0.26	
	 R:WS	16	0.12	0.12	0.25	
	 R:SPELL	140	0.62	0.62	0.78	
	 R:LEX	102	0.27	0.27	0.4	
	 U:PUNCT	68	0.06	0.06	0.24	
	 R:LEX:CASE	1	0.0	0.0	0.0	
	 R:PUNCT	6	0.0	0.0	0.0	
	 R:LEX:SPELL	5	0.2	0.2	0.8	
	 R:WS:NOM:FORM	4	0.0	0.0	0.25	
	 R:LEX:VERB:FORM	4	0.5	0.5	0.5	
	 R:LEX:NOM:FORM	7	0.0	0.0	0.29	
	 R:NOM:FORM:SPELL	19	0.32	0.32	0.84	
	 R:SPELL:CASE	2	0.0	0.0	0.5	
	 R:VERB:FORM:SPELL	6	0.17	0.17	0.33	
	 U:LEX:SPELL	1	1.0	1.0	1.0	
	 R:CASE	11	0.09	0.09	0.18	
	 R:WS:NOM:FORM:SPELL	2	0.5	0.5	0.5	
	 R:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:WS:SPELL	3	0.0	0.0	0.33	

Precision   : 0.5778
Recall      : 0.0795
F_0.5       : 0.2564

B2
Recall by error type:
	 type 	 total 	 correct 	 scope 	 overlap
	 R:WO	252	0.0	0.0	0.08	
	 M:PUNCT	78	0.0	0.0	0.09	
	 R:LEX	115	0.0	0.0	0.1	
	 R:NOM:FORM	258	0.01	0.01	0.13	
	 R:VERB:FORM	49	0.0	0.0	0.1	
	 R:SPELL	98	0.62	0.62	0.79	
	 R:WS:NOM:FORM:CASE	1	0.0	0.0	0.0	
	 R:CASE	15	0.0	0.0	0.0	
	 R:NOM:FORM:CASE	2	0.0	0.0	0.0	
	 R:PUNCT	26	0.0	0.0	0.08	
	 U:PUNCT	108	0.0	0.0	0.06	
	 M:LEX	48	0.0	0.0	0.17	
	 R:WS	28	0.0	0.0	0.04	
	 U:LEX	34	0.0	0.0	0.12	
	 R:LEX:SPELL	6	0.0	0.0	0.5	
	 R:VERB:FORM:SPELL	2	0.5	0.5	0.5	
	 R:LEX:VERB:FORM	3	0.0	0.0	0.0	
	 R:NOM:FORM:SPELL	13	0.23	0.23	0.77	
	 R:LEX:NOM:FORM	3	0.0	0.0	0.33	
	 R:WS:NOM:FORM	3	0.0	0.0	0.0	
	 R:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:LEX:WO	1	0.0	0.0	0.0	
	 R:WS:SPELL	1	0.0	0.0	1.0	

Recall by error type, accounting for edits within encompassing WO:
	 type 	 total 	 correct 	 scope 	 overlap
	 R:WO	252	0.0	0.0	0.08	
	 R:VERB:FORM	66	0.26	0.26	0.33	
	 M:PUNCT	89	0.12	0.12	0.2	
	 R:LEX	144	0.2	0.2	0.28	
	 R:NOM:FORM	310	0.17	0.17	0.28	
	 R:SPELL	104	0.64	0.64	0.8	
	 R:WS:NOM:FORM:CASE	1	0.0	0.0	0.0	
	 R:CASE	18	0.17	0.17	0.17	
	 R:NOM:FORM:CASE	3	0.33	0.33	0.33	
	 R:PUNCT	26	0.0	0.0	0.08	
	 U:PUNCT	114	0.05	0.05	0.11	
	 M:LEX	63	0.24	0.24	0.37	
	 R:WS	29	0.03	0.03	0.07	
	 U:LEX	38	0.11	0.11	0.21	
	 R:LEX:SPELL	6	0.0	0.0	0.5	
	 R:VERB:FORM:SPELL	3	0.67	0.67	0.67	
	 R:LEX:VERB:FORM	4	0.25	0.25	0.25	
	 R:NOM:FORM:SPELL	16	0.38	0.38	0.81	
	 R:LEX:NOM:FORM	3	0.0	0.0	0.33	
	 R:WS:NOM:FORM	3	0.0	0.0	0.0	
	 R:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:LEX:WO	1	0.0	0.0	0.0	
	 R:WS:SPELL	1	0.0	0.0	1.0	

Precision   : 0.5982
Recall      : 0.0585
F_0.5       : 0.2103

C1
Recall by error type:
	 type 	 total 	 correct 	 scope 	 overlap
	 R:NOM:FORM	160	0.02	0.02	0.11	
	 R:WO	221	0.0	0.0	0.12	
	 R:SPELL	118	0.55	0.55	0.67	
	 U:PUNCT	51	0.0	0.0	0.02	
	 R:LEX	92	0.0	0.0	0.17	
	 R:WS	23	0.0	0.0	0.04	
	 R:NOM:FORM:SPELL	5	0.0	0.0	0.8	
	 M:LEX	37	0.0	0.0	0.05	
	 U:LEX	16	0.06	0.06	0.06	
	 R:VERB:FORM	25	0.0	0.0	0.08	
	 M:PUNCT	46	0.0	0.0	0.11	
	 R:LEX:SPELL	3	0.0	0.0	0.67	
	 R:WS:SPELL	4	0.0	0.0	0.5	
	 R:PUNCT	3	0.0	0.0	0.0	
	 R:WS:NOM:FORM	1	0.0	0.0	0.0	
	 R:LEX:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:CASE	2	0.0	0.0	0.0	
	 R:WS:CASE	2	0.0	0.0	0.0	
	 R:LEX:WO	1	0.0	0.0	0.0	

Recall by error type, accounting for edits within encompassing WO:
	 type 	 total 	 correct 	 scope 	 overlap
	 R:NOM:FORM	191	0.18	0.18	0.26	
	 R:WO	221	0.0	0.0	0.12	
	 R:WS	31	0.26	0.26	0.29	
	 R:SPELL	129	0.59	0.59	0.7	
	 U:PUNCT	55	0.07	0.07	0.09	
	 R:LEX	105	0.12	0.12	0.28	
	 M:LEX	43	0.14	0.14	0.19	
	 R:NOM:FORM:SPELL	6	0.17	0.17	0.83	
	 U:LEX	19	0.21	0.21	0.21	
	 R:VERB:FORM	32	0.22	0.22	0.28	
	 M:PUNCT	54	0.15	0.15	0.24	
	 R:LEX:SPELL	4	0.25	0.25	0.75	
	 R:WS:SPELL	4	0.0	0.0	0.5	
	 R:PUNCT	3	0.0	0.0	0.0	
	 R:WS:NOM:FORM	1	0.0	0.0	0.0	
	 R:LEX:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:CASE	4	0.5	0.5	0.5	
	 R:WS:CASE	2	0.0	0.0	0.0	
	 R:LEX:WO	1	0.0	0.0	0.0	

Precision   : 0.6053
Recall      : 0.0851
F_0.5       : 0.2723

koos
Recall by error type:
	 type 	 total 	 correct 	 scope 	 overlap
	 M:PUNCT	227	0.0	0.0	0.1	
	 R:PUNCT	63	0.0	0.0	0.05	
	 R:NOM:FORM	782	0.01	0.01	0.14	
	 R:WO	820	0.0	0.0	0.11	
	 U:LEX	101	0.02	0.02	0.13	
	 R:LEX	341	0.01	0.01	0.16	
	 R:WS:NOM:FORM	10	0.0	0.0	0.1	
	 M:LEX	178	0.0	0.0	0.11	
	 R:SPELL	467	0.57	0.57	0.73	
	 R:CASE	49	0.0	0.0	0.16	
	 R:VERB:FORM	161	0.0	0.0	0.13	
	 R:VERB:FORM:SPELL	11	0.09	0.09	0.45	
	 R:NOM:FORM:SPELL	46	0.09	0.09	0.76	
	 U:PUNCT	262	0.0	0.0	0.1	
	 R:WO:NOM:FORM	3	0.0	0.0	0.0	
	 R:LEX:NOM:FORM	13	0.0	0.0	0.31	
	 R:WS:SPELL	13	0.0	0.0	0.46	
	 R:WS	76	0.0	0.0	0.09	
	 R:NOM:FORM:SPELL:CASE	3	0.0	0.0	0.67	
	 R:LEX:SPELL	16	0.0	0.0	0.62	
	 R:LEX:VERB:FORM	7	0.0	0.0	0.0	
	 R:NOM:FORM:CASE	5	0.0	0.0	0.0	
	 R:SPELL:CASE	6	0.0	0.0	0.83	
	 R:LEX:CASE	1	0.0	0.0	0.0	
	 U:LEX:SPELL	1	1.0	1.0	1.0	
	 R:WS:NOM:FORM:SPELL	1	0.0	0.0	0.0	
	 R:WS:NOM:FORM:CASE	1	0.0	0.0	0.0	
	 R:LEX:WO	2	0.0	0.0	0.0	
	 R:LEX:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:WS:CASE	2	0.0	0.0	0.0	

Recall by error type, accounting for edits within encompassing WO:
	 type 	 total 	 correct 	 scope 	 overlap
	 M:PUNCT	259	0.12	0.12	0.21	
	 R:PUNCT	63	0.0	0.0	0.05	
	 R:NOM:FORM	937	0.17	0.17	0.28	
	 R:WO	820	0.0	0.0	0.11	
	 R:VERB:FORM	222	0.27	0.27	0.37	
	 R:NOM:FORM:CASE	7	0.29	0.29	0.29	
	 U:LEX	113	0.12	0.12	0.22	
	 R:LEX	426	0.2	0.2	0.32	
	 R:WS:NOM:FORM	11	0.09	0.09	0.18	
	 M:LEX	225	0.21	0.21	0.3	
	 R:SPELL	504	0.6	0.6	0.75	
	 R:CASE	60	0.18	0.18	0.32	
	 R:VERB:FORM:SPELL	13	0.23	0.23	0.54	
	 R:NOM:FORM:SPELL	58	0.28	0.28	0.81	
	 U:PUNCT	277	0.05	0.05	0.15	
	 R:WO:NOM:FORM	3	0.0	0.0	0.0	
	 R:LEX:NOM:FORM	13	0.0	0.0	0.31	
	 R:WS:SPELL	13	0.0	0.0	0.46	
	 R:WS	87	0.13	0.13	0.21	
	 R:NOM:FORM:SPELL:CASE	3	0.0	0.0	0.67	
	 R:LEX:SPELL	18	0.11	0.11	0.67	
	 R:LEX:VERB:FORM	10	0.3	0.3	0.3	
	 R:SPELL:CASE	6	0.0	0.0	0.83	
	 R:LEX:CASE	1	0.0	0.0	0.0	
	 U:LEX:SPELL	1	1.0	1.0	1.0	
	 R:WS:NOM:FORM:SPELL	2	0.5	0.5	0.5	
	 R:WS:NOM:FORM:CASE	1	0.0	0.0	0.0	
	 R:LEX:WO	2	0.0	0.0	0.0	
	 R:LEX:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:WS:CASE	2	0.0	0.0	0.0	

Precision   : 0.5891
Recall      : 0.0766
F_0.5       : 0.2519

etnc19_web_2019
A2
Recall by error type:
	 type 	 total 	 correct 	 scope 	 overlap
	 M:PUNCT	49	0.0	0.0	0.06	
	 R:PUNCT	28	0.0	0.0	0.0	
	 R:NOM:FORM	133	0.01	0.01	0.09	
	 R:WO	105	0.0	0.0	0.07	
	 U:LEX	25	0.0	0.0	0.04	
	 R:LEX	58	0.02	0.02	0.14	
	 R:WS:NOM:FORM	2	0.0	0.0	0.5	
	 M:LEX	55	0.0	0.0	0.11	
	 R:SPELL	117	0.38	0.38	0.52	
	 R:CASE	22	0.0	0.0	0.23	
	 R:VERB:FORM	40	0.0	0.0	0.1	
	 R:VERB:FORM:SPELL	4	0.0	0.0	0.5	
	 R:NOM:FORM:SPELL	14	0.14	0.14	0.57	
	 U:PUNCT	39	0.0	0.0	0.1	
	 R:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:LEX:NOM:FORM	3	0.0	0.0	0.33	
	 R:WS:SPELL	5	0.0	0.0	0.4	
	 R:WS	11	0.0	0.0	0.09	
	 R:NOM:FORM:SPELL:CASE	3	0.0	0.0	0.33	
	 R:LEX:SPELL	3	0.0	0.0	0.67	
	 R:LEX:VERB:FORM	2	0.0	0.0	0.0	
	 R:NOM:FORM:CASE	3	0.0	0.0	0.0	
	 R:SPELL:CASE	4	0.0	0.0	0.5	

Recall by error type, accounting for edits within encompassing WO:
	 type 	 total 	 correct 	 scope 	 overlap
	 M:PUNCT	51	0.04	0.04	0.1	
	 R:PUNCT	28	0.0	0.0	0.0	
	 R:NOM:FORM	166	0.2	0.2	0.27	
	 R:WO	105	0.0	0.0	0.07	
	 R:VERB:FORM	53	0.25	0.25	0.32	
	 R:NOM:FORM:CASE	4	0.25	0.25	0.25	
	 U:LEX	27	0.07	0.07	0.11	
	 R:LEX	74	0.23	0.23	0.32	
	 R:WS:NOM:FORM	3	0.33	0.33	0.67	
	 M:LEX	64	0.14	0.14	0.23	
	 R:SPELL	131	0.44	0.44	0.57	
	 R:CASE	27	0.19	0.19	0.37	
	 R:VERB:FORM:SPELL	4	0.0	0.0	0.5	
	 R:NOM:FORM:SPELL	17	0.29	0.29	0.65	
	 U:PUNCT	40	0.03	0.03	0.12	
	 R:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:LEX:NOM:FORM	3	0.0	0.0	0.33	
	 R:WS:SPELL	5	0.0	0.0	0.4	
	 R:WS	11	0.0	0.0	0.09	
	 R:NOM:FORM:SPELL:CASE	3	0.0	0.0	0.33	
	 R:LEX:SPELL	3	0.0	0.0	0.67	
	 R:LEX:VERB:FORM	2	0.0	0.0	0.0	
	 R:SPELL:CASE	4	0.0	0.0	0.5	

Precision   : 0.6154
Recall      : 0.0661
F_0.5       : 0.2312

B1
Recall by error type:
	 type 	 total 	 correct 	 scope 	 overlap
	 M:PUNCT	54	0.0	0.0	0.07	
	 U:LEX	25	0.04	0.04	0.16	
	 M:LEX	37	0.0	0.0	0.03	
	 R:WO	245	0.0	0.0	0.09	
	 R:WS	14	0.0	0.0	0.07	
	 R:SPELL	124	0.51	0.51	0.66	
	 R:NOM:FORM	229	0.01	0.01	0.14	
	 R:VERB:FORM	50	0.02	0.02	0.18	
	 U:PUNCT	64	0.0	0.0	0.14	
	 R:LEX:CASE	1	0.0	0.0	0.0	
	 R:LEX	75	0.01	0.01	0.19	
	 R:PUNCT	6	0.0	0.0	0.0	
	 R:LEX:SPELL	4	0.0	0.0	0.75	
	 R:WS:NOM:FORM	4	0.0	0.0	0.25	
	 R:LEX:VERB:FORM	2	0.0	0.0	0.0	
	 R:LEX:NOM:FORM	7	0.0	0.0	0.29	
	 R:SPELL:CASE	2	0.0	0.0	0.5	
	 R:VERB:FORM:SPELL	5	0.0	0.0	0.8	
	 R:NOM:FORM:SPELL	14	0.0	0.0	0.5	
	 U:LEX:SPELL	1	0.0	0.0	1.0	
	 R:CASE	10	0.0	0.0	0.0	
	 R:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:WS:SPELL	3	0.0	0.0	0.33	
	 R:WS:NOM:FORM:SPELL	1	0.0	0.0	0.0	

Recall by error type, accounting for edits within encompassing WO:
	 type 	 total 	 correct 	 scope 	 overlap
	 M:PUNCT	65	0.17	0.17	0.23	
	 U:LEX	28	0.14	0.14	0.25	
	 M:LEX	55	0.33	0.33	0.35	
	 R:WO	245	0.0	0.0	0.09	
	 R:VERB:FORM	73	0.33	0.33	0.44	
	 R:NOM:FORM	269	0.16	0.16	0.27	
	 R:WS	16	0.12	0.12	0.19	
	 R:SPELL	139	0.56	0.56	0.7	
	 R:LEX	101	0.27	0.27	0.4	
	 U:PUNCT	68	0.06	0.06	0.19	
	 R:LEX:CASE	1	0.0	0.0	0.0	
	 R:PUNCT	6	0.0	0.0	0.0	
	 R:LEX:SPELL	5	0.2	0.2	0.8	
	 R:WS:NOM:FORM	4	0.0	0.0	0.25	
	 R:LEX:VERB:FORM	4	0.5	0.5	0.5	
	 R:LEX:NOM:FORM	7	0.0	0.0	0.29	
	 R:NOM:FORM:SPELL	20	0.3	0.3	0.65	
	 R:SPELL:CASE	2	0.0	0.0	0.5	
	 R:VERB:FORM:SPELL	6	0.17	0.17	0.83	
	 U:LEX:SPELL	1	0.0	0.0	1.0	
	 R:CASE	11	0.09	0.09	0.09	
	 R:WS:NOM:FORM:SPELL	2	0.5	0.5	0.5	
	 R:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:WS:SPELL	3	0.0	0.0	0.33	

Precision   : 0.6053
Recall      : 0.0706
F_0.5       : 0.2406

B2
Recall by error type:
	 type 	 total 	 correct 	 scope 	 overlap
	 R:WO	255	0.0	0.0	0.07	
	 M:PUNCT	78	0.0	0.0	0.08	
	 R:LEX	113	0.0	0.0	0.08	
	 R:NOM:FORM	257	0.02	0.02	0.11	
	 R:VERB:FORM	49	0.04	0.04	0.12	
	 R:SPELL	94	0.52	0.52	0.66	
	 R:WS:NOM:FORM:CASE	1	0.0	0.0	0.0	
	 R:CASE	15	0.0	0.0	0.13	
	 R:NOM:FORM:CASE	2	0.0	0.0	0.0	
	 R:PUNCT	26	0.0	0.0	0.08	
	 U:PUNCT	108	0.0	0.0	0.04	
	 M:LEX	48	0.0	0.0	0.1	
	 R:WS	28	0.0	0.0	0.04	
	 U:LEX	35	0.03	0.03	0.11	
	 R:LEX:SPELL	6	0.0	0.0	0.17	
	 R:VERB:FORM:SPELL	3	0.33	0.33	0.33	
	 R:LEX:VERB:FORM	3	0.0	0.0	0.0	
	 R:NOM:FORM:SPELL	12	0.17	0.17	0.67	
	 R:LEX:NOM:FORM	3	0.0	0.0	0.33	
	 R:WS:NOM:FORM	3	0.0	0.0	0.0	
	 R:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:LEX:WO	1	0.0	0.0	0.0	
	 R:WS:SPELL	1	0.0	0.0	0.0	

Recall by error type, accounting for edits within encompassing WO:
	 type 	 total 	 correct 	 scope 	 overlap
	 R:WO	255	0.0	0.0	0.07	
	 R:VERB:FORM	66	0.29	0.29	0.35	
	 M:PUNCT	89	0.12	0.12	0.19	
	 R:LEX	143	0.21	0.21	0.27	
	 R:NOM:FORM	311	0.19	0.19	0.26	
	 R:SPELL	103	0.56	0.56	0.69	
	 R:WS:NOM:FORM:CASE	1	0.0	0.0	0.0	
	 R:CASE	18	0.17	0.17	0.28	
	 R:NOM:FORM:CASE	3	0.33	0.33	0.33	
	 R:PUNCT	26	0.0	0.0	0.08	
	 U:PUNCT	114	0.05	0.05	0.09	
	 M:LEX	63	0.24	0.24	0.32	
	 R:WS	29	0.03	0.03	0.07	
	 U:LEX	39	0.13	0.13	0.21	
	 R:LEX:SPELL	6	0.0	0.0	0.17	
	 R:VERB:FORM:SPELL	4	0.5	0.5	0.5	
	 R:LEX:VERB:FORM	4	0.25	0.25	0.25	
	 R:NOM:FORM:SPELL	16	0.38	0.38	0.75	
	 R:LEX:NOM:FORM	3	0.0	0.0	0.33	
	 R:WS:NOM:FORM	3	0.0	0.0	0.0	
	 R:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:LEX:WO	1	0.0	0.0	0.0	
	 R:WS:SPELL	1	0.0	0.0	0.0	

Precision   : 0.6316
Recall      : 0.0525
F_0.5       : 0.1971

C1
Recall by error type:
	 type 	 total 	 correct 	 scope 	 overlap
	 R:NOM:FORM	160	0.01	0.01	0.03	
	 R:WO	223	0.0	0.0	0.09	
	 R:SPELL	115	0.44	0.44	0.58	
	 U:PUNCT	50	0.0	0.0	0.08	
	 R:LEX	91	0.0	0.0	0.11	
	 R:WS	23	0.0	0.0	0.04	
	 R:NOM:FORM:SPELL	7	0.0	0.0	0.29	
	 M:LEX	37	0.0	0.0	0.11	
	 U:LEX	16	0.06	0.06	0.06	
	 R:VERB:FORM	25	0.0	0.0	0.12	
	 M:PUNCT	46	0.0	0.0	0.09	
	 R:LEX:SPELL	3	0.0	0.0	0.33	
	 R:WS:SPELL	4	0.0	0.0	0.5	
	 R:PUNCT	3	0.0	0.0	0.0	
	 R:WS:NOM:FORM	1	0.0	0.0	0.0	
	 R:LEX:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:CASE	2	0.0	0.0	0.0	
	 R:WS:CASE	2	0.0	0.0	0.0	
	 R:LEX:WO	1	0.0	0.0	0.0	

Recall by error type, accounting for edits within encompassing WO:
	 type 	 total 	 correct 	 scope 	 overlap
	 R:NOM:FORM	191	0.17	0.17	0.19	
	 R:WO	223	0.0	0.0	0.09	
	 R:WS	31	0.26	0.26	0.29	
	 R:SPELL	127	0.5	0.5	0.62	
	 U:PUNCT	55	0.09	0.09	0.16	
	 R:LEX	105	0.13	0.13	0.23	
	 M:LEX	43	0.14	0.14	0.23	
	 R:NOM:FORM:SPELL	8	0.12	0.12	0.38	
	 U:LEX	19	0.21	0.21	0.21	
	 R:VERB:FORM	32	0.22	0.22	0.31	
	 M:PUNCT	54	0.15	0.15	0.22	
	 R:LEX:SPELL	4	0.25	0.25	0.5	
	 R:WS:SPELL	4	0.0	0.0	0.5	
	 R:PUNCT	3	0.0	0.0	0.0	
	 R:WS:NOM:FORM	1	0.0	0.0	0.0	
	 R:LEX:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:CASE	4	0.5	0.5	0.5	
	 R:WS:CASE	2	0.0	0.0	0.0	
	 R:LEX:WO	1	0.0	0.0	0.0	

Precision   : 0.6092
Recall      : 0.0654
F_0.5       : 0.2288

koos
Recall by error type:
	 type 	 total 	 correct 	 scope 	 overlap
	 M:PUNCT	227	0.0	0.0	0.07	
	 R:PUNCT	63	0.0	0.0	0.03	
	 R:NOM:FORM	779	0.01	0.01	0.1	
	 R:WO	828	0.0	0.0	0.08	
	 U:LEX	101	0.03	0.03	0.1	
	 R:LEX	337	0.01	0.01	0.12	
	 R:WS:NOM:FORM	10	0.0	0.0	0.2	
	 M:LEX	177	0.0	0.0	0.09	
	 R:SPELL	450	0.46	0.46	0.6	
	 R:CASE	49	0.0	0.0	0.14	
	 R:VERB:FORM	164	0.02	0.02	0.13	
	 R:VERB:FORM:SPELL	12	0.08	0.08	0.58	
	 R:NOM:FORM:SPELL	47	0.09	0.09	0.53	
	 U:PUNCT	261	0.0	0.0	0.08	
	 R:WO:NOM:FORM	3	0.0	0.0	0.0	
	 R:LEX:NOM:FORM	13	0.0	0.0	0.31	
	 R:WS:SPELL	13	0.0	0.0	0.38	
	 R:WS	76	0.0	0.0	0.05	
	 R:NOM:FORM:SPELL:CASE	3	0.0	0.0	0.33	
	 R:LEX:SPELL	16	0.0	0.0	0.44	
	 R:LEX:VERB:FORM	7	0.0	0.0	0.0	
	 R:NOM:FORM:CASE	5	0.0	0.0	0.0	
	 R:SPELL:CASE	6	0.0	0.0	0.5	
	 R:LEX:CASE	1	0.0	0.0	0.0	
	 U:LEX:SPELL	1	0.0	0.0	1.0	
	 R:WS:NOM:FORM:SPELL	1	0.0	0.0	0.0	
	 R:WS:NOM:FORM:CASE	1	0.0	0.0	0.0	
	 R:LEX:WO	2	0.0	0.0	0.0	
	 R:LEX:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:WS:CASE	2	0.0	0.0	0.0	

Recall by error type, accounting for edits within encompassing WO:
	 type 	 total 	 correct 	 scope 	 overlap
	 M:PUNCT	259	0.12	0.12	0.19	
	 R:PUNCT	63	0.0	0.0	0.03	
	 R:NOM:FORM	937	0.18	0.18	0.25	
	 R:WO	828	0.0	0.0	0.08	
	 R:VERB:FORM	224	0.28	0.28	0.37	
	 R:NOM:FORM:CASE	7	0.29	0.29	0.29	
	 U:LEX	113	0.13	0.13	0.19	
	 R:LEX	423	0.21	0.21	0.3	
	 R:WS:NOM:FORM	11	0.09	0.09	0.27	
	 M:LEX	225	0.21	0.21	0.28	
	 R:SPELL	500	0.51	0.51	0.64	
	 R:CASE	60	0.18	0.18	0.3	
	 R:VERB:FORM:SPELL	14	0.21	0.21	0.64	
	 R:NOM:FORM:SPELL	61	0.3	0.3	0.64	
	 U:PUNCT	277	0.06	0.06	0.13	
	 R:WO:NOM:FORM	3	0.0	0.0	0.0	
	 R:LEX:NOM:FORM	13	0.0	0.0	0.31	
	 R:WS:SPELL	13	0.0	0.0	0.38	
	 R:WS	87	0.13	0.13	0.17	
	 R:NOM:FORM:SPELL:CASE	3	0.0	0.0	0.33	
	 R:LEX:SPELL	18	0.11	0.11	0.5	
	 R:LEX:VERB:FORM	10	0.3	0.3	0.3	
	 R:SPELL:CASE	6	0.0	0.0	0.5	
	 R:LEX:CASE	1	0.0	0.0	0.0	
	 U:LEX:SPELL	1	0.0	0.0	1.0	
	 R:WS:NOM:FORM:SPELL	2	0.5	0.5	0.5	
	 R:WS:NOM:FORM:CASE	1	0.0	0.0	0.0	
	 R:LEX:WO	2	0.0	0.0	0.0	
	 R:LEX:WO:NOM:FORM	1	0.0	0.0	0.0	
	 R:WS:CASE	2	0.0	0.0	0.0	

Precision   : 0.6150
Recall      : 0.0629
F_0.5       : 0.2232