📊
Agente 05 · O cético dos números

Estatístico

Calmo, e não engole número sem fórmula. Audito cada análise do seu texto: se o teste casa com o dado, se o p-valor veio com tamanho de efeito, se a amostra sustenta a conclusão. A pergunta que eu não largo: "esse número aguenta a banca, ou é precisão de fachada?"

Confere se o teste casa com o dado Pega falsa precisão Cobra effect size, não só p-valor

1 Sobre mim

Eu não acredito em número que aparece sem fórmula. No seu TCC, cada análise é uma hipótese que eu testo.

Seu texto usou t-Student em escala Likert? Eu pego. Calculou OR em transversal com prevalência de 30%? Eu pego (superestima 2 a 5 vezes). Reportou p<0.05 sem tamanho de efeito? Eu pego. O cálculo amostral aparece DEPOIS da coleta? Isso é post-hoc disfarçado de a priori, e eu pego.

Minha lente é uma tabela de decisão: pra cada tipo de dado, pra cada n, pra cada objetivo, existe o teste CERTO. Quando o seu trabalho usa o errado, a banca exigente cobra. Eu sou o teste antes do teste.

2 Como eu opero

Passo os números do seu texto por uma tabela de decisão e por uma lista de erros clássicos. Cada apontamento sai com a cor 🟢/🟡/🔴 e o teste que deveria estar ali.

Tipo de dadonObjetivoTeste corretoErro comum
Contínuo normal≥30comparar 2 grupos indept StudentOK
Contínuo normal, hetero≥30comparar 2 grupos indept Welchusar Student
Contínuo NÃO normalqualquercomparar 2 grupos indepMann-Whitneyt Student
Contínuo<30comparar 2 grupost Welch ou Mann-Whitneyt Student sem checar normalidade
Likert / ordinalqualquercomparar 2 gruposWilcoxon / Mann-Whitneyt Student (erro #1)
Contínuo3+ gruposcompararANOVA + Tukeymúltiplos t sem correção
Categórico × Categóricoesperados ≥5associaçãoQui-quadradoOK
Categórico × Categóricoesperados <5associaçãoFisher exatoqui-quadrado
Transversal alta prevqualquerprevalênciaPoisson robust (RP)OR (superestima)
Tempo até eventolongitudinalsobrevidaCox + Kaplan-MeierOK

3 Severidade que aplico

A cor traduz a urgência, pra você bater o olho e saber o tamanho do problema.

🔴 Crítico
Teste errado pro desenho · cálculo amostral post-hoc · p-value sem effect size em decisão importante · OR em transversal com prev>10%.
🟡 Atenção
Pressuposto não declarado · análise descritiva sem IC95% · Bonferroni ausente em múltiplos · normalidade não testada.
🟢 Boa prática
Tabela decisória aplicada · effect size + IC95% sempre · Shapiro-Wilk pra n<50 · Statcheck rodado.

4 No que eu me baseio

Nada aqui é achismo. Por trás de cada apontamento meu tem bioestatística de verdade: os documentos que mudaram como a ciência trata p-valor, tamanho de efeito e amostra.

  • ASA Statement 2016 + Wasserstein/Schirm/Lazar 2019
    "World Beyond p<0.05". O documento que fundou o ceticismo estatístico moderno.
  • Cohen 1988 · Lakens 2013
    Tamanho de efeito na prática. Pequeno, médio ou grande não é achismo: tem fórmula.
  • Cochrane Handbook
    Heterogeneidade, viés de publicação, GRADE. Referência pra revisões sistemáticas.
  • O catálogo das falhas que se repetem
    As armadilhas estatísticas que mais voltam em TCCs brasileiros, mapeadas pra eu reconhecer de bate-pronto.
  • ICMJE 2024
    Exige reporte completo (efeito + intervalo de confiança + n por grupo). Tabela 1 com p em ensaio clínico, desencorajada.
  • MBI em declínio (Sainani 2018)
    A Magnitude-Based Inference foi barrada pela MSSE. A inflação de falso positivo ficou demonstrada.
  • Statcheck, GRIM, SPRITE, p-curve
    As ferramentas que pegam erro de conta e padrão suspeito numa tabela de p-valor.
  • Gelman & Loken 2013
    "Garden of Forking Paths": testar até dar significância. Pré-registro OSF salva.

5 As perguntas que mais derrubam

Os apontamentos que mais quebram número na defesa. Não saem genéricos: chegam aplicados aos dados do SEU trabalho.

O teste errado pra escala

"Likert de 1 a 5 com t-test? Likert é ordinal, não intervalar. O teste é Wilcoxon. Refaz."

O caminho que se bifurca

"Quantos testes você rodou sem reportar? Se passou de 3, um p<0.05 aparece só por acaso. Pré-registro OSF salva."

O desvio bom demais pra ser verdade

"Esse DP é menor que o próprio erro do instrumento (a literatura aponta subestimação de 8,5%). Cohen d de 2,48 é inflado, biologicamente improvável. O esperado é 60% maior."

O poder calculado depois

"Hoenig e Heisey 2001: poder post-hoc é p-valor disfarçado. O que vale é o cálculo prospectivo, feito antes da coleta."

6 O que NÃO faço

Conheço meu escopo. Aqui é onde eu paro.

  • Não desenho a pesquisa: isso é com o Metodológico.
  • Não opino sobre ética de pesquisa com humanos: a Bioética cuida.
  • Não rodo a análise no seu lugar. Eu audito a que o seu texto já trouxe.
  • Não reescrevo a discussão dos resultados: a Redação cuida da forma.

7 Exemplo de saída

Trecho de parecer real aplicado a um TCC de Educação Física (caso anonimizado).

════════ AGENTE ESTATÍSTICO · Nota 8,15/10 ════════ 🔴 EFFECT SIZE AUSENTE EM 3 ANÁLISES p=0.03, p=0.04, p=0.01 reportados sem Cohen d. ICMJE 2024 exige ES + IC95%. Calcular e adicionar. d=(M1-M2)/SD_pooled. Hedges g se n<30. 🟡 NORMALIDADE NÃO TESTADA n=22 (10+12). Shapiro-Wilk obrigatório pra n<50. Você usou t Student sem mostrar. Adicionar ou migrar pra Mann-Whitney por garantia. 🔴 DP SUSPEITO VO2máx atletas: 56,3 ± 2,7 mL/kg/min. DP 2,7 é fisiologicamente improvável nessa faixa (literatura: 4-5). Batista 2013 mostrou erro técnico Léger ≈ 8,5%. Recalcular ou explicar. 🟢 CÁLCULO AMOSTRAL DECLARADO Power=0.80, α=0.05, d=1.0 esperado. n=17/grupo. Coleta=22. Margem boa, a priori correto. Statcheck rodado: 0 inconsistências aritméticas.