Avaliação dos métodos de correção do Julgamento

Relatório gerado: 10/14/2020, 13:04:23

Sistema: Petroles v1_udpipe.conllu

Sistema guia (pré-correções): Petroles v1_stanza.conllu

Golden (pós-correções): Petroles v1.conllu

Características do corpus

Arquivos	Sentenças	Tokens
Sistema	652	22288
Sistema guia	652	22288
Golden	652	22288

Sentenças comparáveis	652
Tokens corrigidos	4394

Avaliação dos métodos

Método	Erros detectados (por token)	Verdadeiro Positivo	Falso Positivo	Precisão	Abrangência	Erros repetidos	Repetidos VP
Nenhum método	1797
Erros de validação	298	168	130	56.375838926174495%	3.823395539371871%	Não se aplica	Não se aplica
Erros de validação + Matriz de confusão	4518	2554	1964	56.5294378043382%	58.12471552116523%	169	110
Erros de validação + N-grams gramaticais	298	168	130	56.375838926174495%	3.823395539371871%	0	0
Erros de validação + N-grams lexicais	609	308	301	50.57471264367816%	7.0095584888484295%	1	1
Erros de validação + Matriz de confusão + N-grams gramaticais	4518	2554	1964	56.5294378043382%	58.12471552116523%	0	0
Erros de validação + Matriz de confusão + N-grams lexicais	4705	2597	2108	55.19659936238045%	59.10332271279017%	1	1
Erros de validação + N-grams gramaticais + N-grams lexicais	609	308	301	50.57471264367816%	7.0095584888484295%	0	0
Erros de validação + Matriz de confusão + N-grams gramaticais + N-grams lexicais	4705	2597	2108	55.19659936238045%	59.10332271279017%	0	0
Matriz de confusão	4389	2496	1893	56.869446343130555%	56.80473372781065%	Não se aplica	Não se aplica
Matriz de confusão + N-grams gramaticais	4389	2496	1893	56.869446343130555%	56.80473372781065%	0	0
Matriz de confusão + N-grams lexicais	4576	2539	2037	55.48513986013986%	57.783340919435595%	125	98
Matriz de confusão + N-grams gramaticais + N-grams lexicais	4576	2539	2037	55.48513986013986%	57.783340919435595%	0	0
N-grams gramaticais	0	0	0	0%	0.0%	Não se aplica	Não se aplica
N-grams gramaticais + N-grams lexicais	312	141	171	45.19230769230769%	3.2089212562585345%	0	0
N-grams lexicais	312	141	171	45.19230769230769%	3.2089212562585345%	Não se aplica	Não se aplica

Detalhe: matriz de confusão

Coluna	Divergências (por coluna)	sistema_guia estava correto (não é erro)	Não é erro %	sistema estava correto (erro de fato)	Ninguém estava correto (erro de fato)	Erro de fato %	sistema estava correto %	Precisa de correção cuidadosa (ninguém estava correto)
dephead	3433	2021	58.869793183804255%	613	799	41.130206816195745%	17.856102534226626%	23.274104281969123%
deprel	2095	1201	57.326968973747015%	423	471	42.673031026252985%	20.190930787589497%	22.482100238663485%
upos	819	499	60.927960927960925%	184	136	39.072039072039075%	22.466422466422465%	16.605616605616607%
Total	6347	3721	58.626122577595716%	1220	1406	41.373877422404284%	19.22167953363794%	22.152197888766345%

Coluna	Convergências (por coluna)	Convergência correta	Convergência incorreta	Confiança das convergências
dephead	20449	19374	1075	94.7430192185437%
deprel	21787	20766	1021	95.31371919034287%
upos	23063	22702	361	98.43472228244374%
Total	65299	62842	2457	96.23730838144535

	Dos 2058 tokens com erros de fato, o método encontrou:	Dos 1826 tokens com convergência incorreta, o método encontrou:
Nenhum método (apenas a matriz)	1879 (91.3022351797862%)	1718 (94.08543263964951%)
Erros de validação	95 (4.616132167152576%)	69 (3.7787513691128147%)
N-grams gramaticais	0 (0.0%)	0 (0.0%)
N-grams lexicais	85 (4.13022351797862%)	39 (2.135815991237678%)