Matriz de confusão
A matriz de confusão é uma tabela com duas linhas e duas colunas que compara os resultados de uma análise de fraude ou crédito com o que aconteceu de fato. Um verdadeiro positivo é uma fraude identificada, e um falso positivo é um cliente legítimo sinalizado. Um falso negativo é uma fraude não identificada, e um verdadeiro negativo é um cliente legítimo aprovado.
Exemplo
Para ilustrar, considere 100 pagamentos, dos quais 10 envolvem fraude e 90 são de clientes legítimos. Em determinado ponto de corte, 6 casos de fraude e 9 clientes legítimos são sinalizados, enquanto 4 casos de fraude não são identificados e 81 clientes legítimos são aprovados. A precisão é 6 ÷ 15, ou 40%, e a taxa de captura é 6 ÷ 10, ou 60%.
Como interpretar as células e as taxas
A tabela cruza o resultado real com o que a análise fez: sinalizou ou aprovou. Assim, cada resultado fica na célula de verdadeiro positivo, falso positivo, falso negativo ou verdadeiro negativo.
A precisão usa todos os casos sinalizados como denominador. Recall, também chamado de taxa de captura, usa todos os casos de fraude, e a taxa de falsos positivos usa todos os casos legítimos. A taxa de falsos positivos é o número de falsos positivos dividido pela soma de falsos positivos e verdadeiros negativos.
Como o ponto de corte altera a matriz
Com um ponto de corte mais alto no score, menos casos são sinalizados. Em geral, a precisão aumenta e a taxa de captura diminui.
Para escolher um ponto de corte pelo custo, atribua um custo a cada resultado. Uma fraude não identificada gera prejuízo com fraude, e uma recusa indevida reduz a margem. Ao ponderar as células por esses custos, você encontra o ponto de corte de menor custo.
Perguntas frequentes
O que as linhas e colunas de uma matriz de confusão comparam?
Elas comparam o resultado real com o que a análise sinalizou ou aprovou. A disposição da tabela pode variar, mas as quatro categorias de resultado são as mesmas.
A matriz de confusão explica por que um pagamento foi sinalizado?
Não. Ela agrupa os resultados conforme a análise sinalizou ou aprovou o pagamento e o que se confirmou depois. A matriz não informa o motivo de um alerta específico.
A matriz de confusão informa o custo de uma recusa indevida?
Não. A matriz mostra a categoria do resultado, não o custo. Para avaliar esse impacto, atribua um custo, como a margem perdida com uma recusa indevida.
A calculadora de ponto de corte para fraude da Decisimo encontra o ponto de corte do score de fraude que gera a maior economia e mostra a precisão, a taxa de captura e a matriz de confusão.