Avaliação dos métodos de correção do Julgamento

Relatório gerado: 10/14/2020, 13:02:11

Sistema: Petroles v1_udpipe.conllu

Sistema guia (pré-correções): Petroles v1_stanza.conllu

Golden (pós-correções): Petroles v1.conllu

Características do corpus

Arquivos	Sentenças	Tokens
Sistema	652	22288
Sistema guia	652	22288
Golden	652	22288

Sentenças comparáveis	652
Tokens corrigidos	4394

Avaliação dos métodos

Método	Erros detectados (por token)	Verdadeiro Positivo	Falso Positivo	Precisão	Abrangência	Erros repetidos	Repetidos VP
Nenhum método	1812
Erros de validação	301	171	130	56.81063122923588%	3.891670459717797%	Não se aplica	Não se aplica
Erros de validação + Matriz de confusão	4519	2555	1964	56.539057313564946%	58.1474738279472%	171	112
Erros de validação + N-grams gramaticais	301	171	130	56.81063122923588%	3.891670459717797%	0	0
Erros de validação + N-grams lexicais	491	273	218	55.60081466395112%	6.21301775147929%	1	1
Erros de validação + Matriz de confusão + N-grams gramaticais	4519	2555	1964	56.539057313564946%	58.1474738279472%	0	0
Erros de validação + Matriz de confusão + N-grams lexicais	4613	2582	2031	55.972252330370694%	58.76194811106054%	1	1
Erros de validação + N-grams gramaticais + N-grams lexicais	491	273	218	55.60081466395112%	6.21301775147929%	0	0
Erros de validação + Matriz de confusão + N-grams gramaticais + N-grams lexicais	4613	2582	2031	55.972252330370694%	58.76194811106054%	0	0
Matriz de confusão	4389	2496	1893	56.869446343130555%	56.80473372781065%	Não se aplica	Não se aplica
Matriz de confusão + N-grams gramaticais	4389	2496	1893	56.869446343130555%	56.80473372781065%	0	0
Matriz de confusão + N-grams lexicais	4483	2523	1960	56.27927726968548%	57.41920801092399%	97	76
Matriz de confusão + N-grams gramaticais + N-grams lexicais	4483	2523	1960	56.27927726968548%	57.41920801092399%	0	0
N-grams gramaticais	0	0	0	0%	0.0%	Não se aplica	Não se aplica
N-grams gramaticais + N-grams lexicais	191	103	88	53.92670157068063%	2.3441055985434684%	0	0
N-grams lexicais	191	103	88	53.92670157068063%	2.3441055985434684%	Não se aplica	Não se aplica

Detalhe: matriz de confusão

Coluna	Divergências (por coluna)	sistema_guia estava correto (não é erro)	Não é erro %	sistema estava correto (erro de fato)	Ninguém estava correto (erro de fato)	Erro de fato %	sistema estava correto %	Precisa de correção cuidadosa (ninguém estava correto)
dephead	3433	2021	58.869793183804255%	613	799	41.130206816195745%	17.856102534226626%	23.274104281969123%
deprel	2095	1201	57.326968973747015%	423	471	42.673031026252985%	20.190930787589497%	22.482100238663485%
upos	819	499	60.927960927960925%	184	136	39.072039072039075%	22.466422466422465%	16.605616605616607%
Total	6347	3721	58.626122577595716%	1220	1406	41.373877422404284%	19.22167953363794%	22.152197888766345%

Coluna	Convergências (por coluna)	Convergência correta	Convergência incorreta	Confiança das convergências
dephead	20449	19374	1075	94.7430192185437%
deprel	21787	20766	1021	95.31371919034287%
upos	23063	22702	361	98.43472228244374%
Total	65299	62842	2457	96.23730838144535

	Dos 2058 tokens com erros de fato, o método encontrou:	Dos 1826 tokens com convergência incorreta, o método encontrou:
Nenhum método (apenas a matriz)	1894 (92.03109815354713%)	1726 (94.52354874041622%)
Erros de validação	96 (4.664723032069971%)	71 (3.888280394304491%)
N-grams gramaticais	0 (0.0%)	0 (0.0%)
N-grams lexicais	69 (3.3527696793002915%)	29 (1.588170865279299%)