Ideia base
t-test
χ²
ANOVA
Potência
Move o estatístico observado e o nível α. A área azul é o valor-p; a vermelha, a região de rejeição. Rejeitas H₀ quando o azul entra no vermelho.
valor-pregião de rejeição (α)estatístico observado
Estatístico z 2.1
Nível α 0.05
Caudas
p0.0357
valor crítico±1.96
p < α → rejeita-se H₀ (resultado significativo)
O valor-p NÃO é a probabilidade de H₀ ser verdadeira, nem mede o tamanho do efeito. α=0.05 é apenas uma convenção. Em ML usa-se para validar se uma melhoria de um modelo é real ou ruído.