Datenanalyse. Das Null-Ritual und der Umgang mit Effekten in der Zeitschrift für Sportpsychologie

Ziel dieses Beitrages ist die Analyse der Anwendung empirischer Tests in der deutschsprachigen Sportpsychologie. Die Ergebnisse vergleichbarer Analysen, bspw. in der Psychologie, zeigen, dass zwischen Anforderungen aus Testkonzepten und empirischer Realität Unterschiede existieren, die bislang für die Sportpsychologie nicht beschrieben und bewertet worden sind. Die Jahrgänge 1994–2007 der Zeitschrift für Sportpsychologie (früher psychologie und sport) wurden danach untersucht, ob Forschungsfragen formuliert, welche Stichprobenart gewählt, welches Testkonzept verwendet, welches Signifikanzniveau benutzt und ob statistische Probleme diskutiert wurden. 83 Artikel wurden von zwei unabhängigen Bewertern nach diesen Aspekten kategorisiert. Als Ergebnis ist festzuhalten, dass in der sportpsychologischen Forschung überwiegend eine Mischung aus Fishers Signifikanztesten sowie Neyman-Pearsons-Hypothesentesten zur Anwendung kommt,das sogenannte „Hybrid-Modell” oder „Null-Ritual”. Die Beschreibung der Teststärke ist kaum zu beobachten. Eine zeitliche Analyse der Beiträge zeigt, dass vor allem die Benutzung von Effektgrößen in den letzten Jahren zugenommen hat. Abschließend werden Ansätze zur Verbesserung und der Vereinheitlichung der Anwendung empirischer Tests vorgeschlagen und diskutiert.

This article analyzes the use of statistical tests in German-language sport psychology. Results from comparable analyses in, for example psychology, reveal discrepancies between theoretical requirements and empirical practice that have not yet been described or discussed in the field of sport psychology. Volumes 1994–2007 of the journal Zeitschrift für Sportpsychologie (formerly psychologie und sport) were analyzed to see whether research questions were formulated, how participants were sampled, what test theory was used, what significance criterion was applied, and, finally, whether statistical problems were described. Two independent raters categorized 83 articles based on these criteria. Results showed that a mixture of Fisher’s significance testing and Neyman-Pearson’s hypothesis testing was used in sport psychology. These approaches are often described as the ”hybrid model” or the ”null ritual.” Descriptions of test power were infrequent. The temporal analysis of articles revealed that effect sizes have been used increasingly in recent years. Ways to improve and standardize the use of statistical testing are presented and discussed.