Pular para o conteúdo
Mind Flaws

Julgamento e Decisão · Teste Rápido

Negligência da Taxa-Base

Um exame deu positivo: qual é a chance de a doença ser real?

O experimento

Leia a pergunta e responda com o número que achar certo.

Um teste detecta uma doença que atinge 1 em cada 1.000 pessoas. O teste tem taxa de falso positivo de 5%. Uma pessoa fez o teste e o resultado deu positivo. Sem saber nada sobre os sintomas ou sinais dela, qual é a chance de ela ter mesmo a doença?
%

O que aconteceu?

A resposta mais comum é 95%, a partir da ideia de que o teste “acerta 95% das vezes”. Mas a doença é rara: a cada 1.000 pessoas, só 1 a tem. As outras 999 são saudáveis, e 5% delas, umas 50, recebem um positivo por engano. Somando a pessoa doente, que também dá positivo, são 51 positivos, e só 1 deles é verdadeiro: cerca de 2%.

Por que seu cérebro faz isso?

A pergunta traz dois números de naturezas diferentes. Um fala do caso, o resultado do teste; o outro fala da população, a raridade da doença. O resultado do teste parece dizer algo sobre aquela pessoa, enquanto a proporção na população parece um dado distante. A mente se apoia no primeiro e deixa o segundo de lado, embora ele seja o que mais pesa na conta.

Quando esse atalho funciona bem?

Quando o que se procura não é raro, a precisão do teste fica perto da chance real. Se metade das pessoas testadas tivesse a doença, um positivo indicaria doença em cerca de 95% dos casos. Prestar atenção na informação nova também ajuda quando a situação de fato mudou e a média da população não descreve mais aquele caso.

Onde isso aparece no dia a dia?

Num exame de rotina para uma doença rara, num detector de fraudes que bloqueia compras legítimas ou num alarme de “comportamento suspeito” que dispara para quase todo mundo. Antes de levar um alerta ao pé da letra, vale perguntar: de cada mil casos, quantos são de verdade, e quantos alarmes falsos aparecem junto?

Modo Nerd

Abrir o Modo Nerd

A pergunta deste experimento foi feita em 1978 por Ward Casscells, Arno Schoenberger e Thomas Graboys a 60 pessoas da Faculdade de Medicina de Harvard: 20 estudantes, 20 residentes e 20 médicos formados. Só 11 (18%) acertaram, e 27 (45%) responderam 95%.

Em 2013, Arjun Manrai e colaboradores repetiram a mesma pergunta com 61 médicos e estudantes de medicina num hospital da região de Boston. Acertaram 14 (23%), uma diferença que não foi estatisticamente significativa em relação a 1978. A resposta mais comum continuou sendo 95%, dada por 27 pessoas (44%), e a mediana das respostas ficou em 66%, 33 vezes mais que o valor certo. Os autores supuseram um teste que acha todos os doentes e chegaram a 1,96%. Eles defendem mais treino em estatística ao longo de toda a formação médica.

O fenômeno foi descrito nos anos 1970 por Daniel Kahneman e Amos Tversky, que estudaram como as pessoas fazem previsões, e ficou conhecido como falácia da taxa-base com o trabalho de Maya Bar-Hillel (1980). A “taxa-base” é a proporção de casos na população, a probabilidade antes de qualquer teste. A conta certa usa o teorema de Bayes, que combina essa proporção com a qualidade do teste.

O selo de evidência é “misto” porque a base aqui são duas amostras pequenas, de médicos da região de Boston, com uma única pergunta. O resultado se repetiu com 35 anos de distância, mas não mostra quanto o erro muda com outras perguntas e outros públicos.

Termos técnicos

  • Probabilidade
  • Probabilidade condicional
  • Taxa-base

Descoberta

Descrito por Daniel Kahneman e Amos Tversky em 1973.

Nível de evidência

Evidência mista

O efeito existe, mas o tamanho, as condições ou a interpretação variam entre estudos.

Base: Manrai, A. K.; Bhatia, G.; Strymish, J.; Kohane, I. S.; Jain, S. H. (2014). Medicine’s uncomfortable relationship with math.

Referências

  1. Estudo originalCasscells, W.; Schoenberger, A.; Graboys, T. B. (1978). Interpretation by physicians of clinical laboratory results. New England Journal of Medicine, 299(18), 999–1001.
  2. ReplicaçãoManrai, A. K.; Bhatia, G.; Strymish, J.; Kohane, I. S.; Jain, S. H. (2014). Medicine’s uncomfortable relationship with math. JAMA Internal Medicine, 174(6), 991–993.
  3. Estudo originalKahneman, D.; Tversky, A. (1973). On the psychology of prediction. Psychological Review, 80(4), 237–251.
  4. Estudo originalBar-Hillel, M. (1980). The base-rate fallacy in probability judgments. Acta Psychologica, 44(3), 211–233.

Revisão

Este texto ainda não passou por revisão voluntária. Quer ajudar a revisar?

Achou um erro? Escreva para [email protected]