Interpretação crítica dos resultados estatísticos: para lá da significância estatística

 

Luís Manuel de Jesus Loureiro* e Manuel Gonçalves Henriques Gameiro**

* Professor Adjunto da Escola Superior de Enfermagem de Coimbra (ESEnfC – UCPSMP). Doutorado em Saúde Mental [luisloureiro@esenfc.pt].

** Professor Coordenador da ESENFC – UCPSMP. Mestre em Ciências da Enfermagem [mgameiro@esenfc.pt].

 

Resumo

Este artigo tem como objectivos a descrição e análise do processo de tomada de decisão (interpretativo e conclusivo) em estatística, quando se recorre a testes de hipóteses. É apresentada a lógica do processo decisório e os conceitos de erros tipo I e II, poder do teste e magnitude do efeito (effect size), demonstrados a partir da medida «d» de magnitude do efeito.

O artigo dirige-se a duas situações críticas: resultados com significado estatístico mas sem significado clínico efectivo; e resultados sem significado estatístico mas que se devem a problemas relacionados com a natureza dos fenómenos, effect size pequeno e reduzido tamanho da amostra.

Palavras-chave: erros de inferência; tamanho do efeito; poder do teste; significância.

 

Critical interpretation of statistical results: beyond statistical significance

Abstract

This paper aims to describe and analyse the decision-making process (conclusive and interpretative) in statistics when performing hypothesis tests. The logic of the decision process is presented, as well as the concepts of type I and type II errors, power of the test and effect size. We also make demonstrations of effect size «d» measure.

This paper targets two critical situations: results of statistical significance but no real clinical significance, and results without statistical significance but which are due to problems related to the nature of the phenomena, small effect size and small sample size.

Keywords: inference errors; effect size; power test; significance.

 

Interpretación crítica de resultados estadísticos: mas allá de la significancia estatística

Resumen

Este artículo tiene el doble objetivo de describir y el analizar el proceso de toma de decisión (interpretativo y conclusivo) cuando se recurre en estadística a tests de hipótesis. Se presenta a continuación la lógica del proceso decisorio y los conceptos de errores de tipo I y II, la potencia de la prueba y el tamaño del efecto (effect size), demostrados a partir de la medida «d» de tamaño del efecto.

El artículo se orienta hacia dos situaciones críticas: resultados con significado estadístico aunque sin significado clínico efectivo; y resultados sin significado estadístico pero que se deben a problemas relacionados con la naturaleza de los fenómenos, tamaño del efecto pequeño y reducido tamaño de la muestra.

Palabras clave: errores de la inferencia, tamaño del efecto, prueba de potencia, significancia.

 

Texto completo disponível apenas em PDF.

Full text only available in PDF format.

 

Referências Bibliográficas:

COHEN, J. (1988) - Statistical power analysis for the behavioral sciences. 2ª ed. Hillsdale, New Jersey: Lawrence Erbaum.

COHEN, J. (1994) - The earth is round (p .05). American Psychologist. Vol. 49, nº 12, p. 997-1003.

CONBOY, J. (2003) - Algumas medidas típicas univariadas da magnitude do efeito. Análise Psicológica. Série 21, nº 2, p. 145-158.         [ Links ]

FAUL, F. [et al.] (2007) - G*Power 3: a flexible statistical power analysis program for the social, behavioral, and biomedical sciences. Behavior Research Methods. Vol. 39, nº 2, p. 175-191.

GLASSER, D. (1999) - The Controversy of significance testing: misconceptions and alternatives. American Journal of Critical Care. Vol. 8, nº 5, p. 291-296.

HEDGES, L. ; OLKIN, I. (1985) - Statistical methods for meta- analysis. Orlando : Academic Press.

HILL, M.; HILL, A. (2000) - A investigação por questionário. Lisboa : Edições Sílabo.

HUNTER, J. ; SCHMIDT, F. (1990) - Methods of meta-analysis: correcting error and bias in research findings. Newbury Park : Sage Publications.

JOHNSON, D. (1999) - The insignificance of statistical significance testing. Journal of Wildlife Management. Vol. 63, nº 3, p. 763-772.

KENDALL, P. (1999) - Clinical significance [Special section]. Journal of Consulting and Clinical Psychology. Vol. 67, p. 283-239.

KERLINGER, F. (1980) - Metodologia da pesquisa em ciências sociais: um tratamento conceptual. São Paulo : E.P.V.

MURPHY, K.; MYORS, B. (1998) - Statistical power analysis: a simple and general model for traditional and modern hypothesis tests. Mahwah, New Jersey : Erlbaum.

NESTER, M. (1996) - An applied statistician´s creed. Applied Statistics. Vol. 54, nº 4, p. 401-410.

RUNYON, R. [et al.] (1996) - Fundamentals of behavioural statistics. New York : McGraw-Hill.

SEDLMEIER, P.; GIGERENZER, G. (1989) - Do studies of statistical power have an effect on the power of studies? Psychological Bulletin. Vol. 105, nº 2, p. 309-316.

TALLMADGE, G. (1977) - The joint dissemination review panel ideabook. Washington: National Institute of Education and the US Office of Education.

WILKINSON, L.; APA TASK FORCE ON STATISTICAL INFERENCE (1999) - Statistical methods in psychology journals: guidelines and explanations. American Psychologist. Vol. 54, nº 8, p. 594-604.

 

Recebido para publicação em: 21.08.10

Aceite para publicação em: 04.02.11