10/12/24 - Seminário do Programa Interinstitucional de Pós-Graduação em Estatística (PIPGEs) da UFSCar-USP

Title: Eficiência das métricas de avaliação en classificação de dados desbalanceados

Abstract: A apresentação aborda o estudo da eficiência de várias métricas utilizadas para selecionar modelos em classificação binária, especialmente no contexto de dados desbalanceados. Com base em um estudo de simulação que analisa 12 métricas comuns, destaca-se que o Coeficiente de Correlação de Matthews, o G-Mean e o kappa de Cohen consistentemente demonstram desempenho favorável. Em contraste, as métricas de área sob a curva e acurácia apresentam resultados fracos em todos os cenários analisados, enquanto as outras sete métricas mostram diferentes graus de eficácia em contextos específicos. Por fim, é apresentado um caso prático no domínio financeiro, demonstrando a utilidade dessas métricas para selecionar modelos de forma eficiente ao comparar diferentes funções de ligação.