Cohen's Kappa: Medindo a Consistência Entre Avaliadores Alem do Acaso


Saída: Aperte calcular

Kappa-de-Cohen:-Uma-Medida-de-Concordância-entre-Avaliadores

No-campo-da-estatística,-garantir-a-precisão-e-confiabilidade-das-avaliações-de-dados-é-primordial.-Quando-dois-avaliadores-categorizam-ou-rotulam-itens,-é-crítico-medir-o-nível-de-concordância-entre-eles.-É-aí-que-entra-o-Kappa-de-Cohen.-Nomeado-em-honra-ao-psicólogo-norte-americano-Jacob-Cohen,-o-Kappa-de-Cohen-é-uma-métrica-estatística-robusta-que-quantifica-o-nível-de-concordância-entre-dois-avaliadores-que-classificam-itens-em-categorias-mutualmente-exclusivas.

Por-que-o-Kappa-de-Cohen-é-Importante?

O-Kappa-de-Cohen-é-importante-porque-leva-em-conta-a-concordância-que-ocorre-por-acaso.-Ao-contrário-dos-cálculos-simples-de-percentual-de-concordância,-que-não-consideram-a-possibilidade-de-chance,-o-Kappa-de-Cohen-fornece-uma-representação-mais-precisa.-Essa-estatística-é-amplamente-utilizada-em-análise-de-conteúdo,-testes-psicológicos,-classificação-de-aprendizagem-de-máquina,-diagnósticos-de-saúde,-e-mais.

Entendendo-a-Fórmula-do-Kappa-de-Cohen

A-fórmula-para-o-Kappa-de-Cohen-é:

κ=-(Po---Pe)-/-(1---Pe)

    -
  • κ--é-o-Kappa-de-Cohen.
    • -
  • Po--é-a-concordância-observada-relativa-entre-os-avaliadores.
    • -
  • Pe--é-a-probabilidade-hipotética-de-concordância-por-chance.

Embora-essa-fórmula-possa-parecer-intimidante-à-primeira-vista,-dividir-cada-componente-pode-torná-la-mais-acessível.

Entendendo-o-Po-(Concordância-Observada)

Porepresenta-o-percentual-observado-de-concordância-entre-os-dois-avaliadores.-É-calculado-dividindo-o-número-de-vezes-que-ambos-concordam-pelo-número-total-de-itens-avaliados.

Entendendo-o-Pe-(Concordância-por-Chance)

Perepresenta-a-probabilidade-de-ambos-os-avaliadores-concordarem-puramente-por-chance.-É-calculado-com-base-nas-probabilidades-marginais-de-cada-avaliador-classificar-um-item-em-uma-categoria-específica.

Exemplo:-Calculando-o-Kappa-de-Cohen

Imagine-dois-médicos-diagnosticando-um-conjunto-de-100-pacientes-para-uma-determinado-condição.-Seus-resultados-de-classificação-são:

    -
  • Ambos-os-Médicos-Concordam-(Sim):-40-pacientes
    • -
  • Ambos-os-Médicos-Concordam-(Não):-30-pacientes
    • -
  • Médico-A:-Sim,-Médico-B:-Não:-10-pacientes
    • -
  • Médico-A:-Não,-Médico-B:-Sim:-20-pacientes

Primeiro,-vamos-calcular-o-Po:

Po=-(40-+-30)-/-100-=-0.70

Em-seguida,-calculamos-o-Pe.-Considere-que:

    -
  • Taxa-de-Sim-do-Médico-A:-(40-+-10)-/-100-=-0.50
    • -
  • Taxa-de-Não-do-Médico-A:-(30-+-20)-/-100-=-0.50
    • -
  • Taxa-de-Sim-do-Médico-B:-(40-+-20)-/-100-=-0.60
    • -
  • Taxa-de-Não-do-Médico-B:-(30-+-10)-/-100-=-0.40

Agora,-calcule-o-Pe:

Pe=-(0.50-*-0.60)-+-(0.50-*-0.40)=-0.50

Finalmente,-insira-esses-valores-na-fórmula-do-Kappa-de-Cohen:

κ-=-(0.70---0.50)-/-=(1---0.50)--=--0.40

Esse-valor-de-Kappa-de-0.40-indica-um-nível-moderado-de-concordância-além-do-chance.

Conclusão

O-Kappa-de-Cohen-oferece-um-meio-poderoso-para-medir-a-concordância-entre-avaliadores-enquanto-leva-em-conta-a-possibilidade-de-concordância-por-chance.-É-uma-ferramenta-essencial-em-muitas-disciplinas,-proporcionando-claridade-e-compreensão-em-contextos-onde-o-julgamento-humano-desempenha-um-papel-crucial.-Compreendendo-seus-componentes-e-cálculos,-estatísticos-e-profissionais-podem-aproveitar-essa-métrica-para-determinar-a-confiabilidade-e-consistência-de-seus-avaliadores.

Perguntas-Frequentes-(FAQ)

    -
  1. Qual-é-um-bom-valor-para-o-Kappa-de-Cohen?-

    Geralmente,-valores-κ>0.75-são-considerados-excelentes,-0.40<κ<0.75-são-concordâncias-boas-a-moderadas,-e-κ<0.40-são-pobres.

    2. -
  2. O-Kappa-de-Cohen-pode-ser-negativo?-

    Sim,-um-Kappa-negativo-indica-menos-concordância-do-que-o-esperado-pela-chance.

    3. -
  3. O Kappa de Cohen funciona para mais de dois avaliadores?

    O Kappa de Cohen é especificamente para dois avaliadores. Para mais avaliadores, considere usar o Kappa de Fleiss.

Tags: Estatísticas, Análise de Dados, Acordo Medição