Im Nebel der Präzision: die Bestimmung von GrenzfallkandidatInnen oder wie viel Reliabilität ist genug?

Hintergrund: Bei der Durchführung von summativen Prüfungen wird üblicherweise eine Mindestreliabilität von 0,8 gefordert. Bei praktischen Prüfungen wie OSCEs werden manchmal 0,7 akzeptiert (Downing 2004). Doch was kann man sich eigentlich unter der Präzision einer Messung mit einer Reliabilität von 0,7 oder 0,8 vorstellen? Methode: Mittels verschiedener statistischer Methoden wie dem Standardmessfehler oder der Generalisierbarkeitstheorie lässt sich die Reliabilität in ein Konfidenzintervall um eine festgestellte Kandidatenleistung übersetzen (Brennan 2003, Harvill 1991, McManus 2012). Hat ein Kandidat beispielsweise bei einer Prüfung 57 Punkte erreicht, schwankt seine wahre Leistung aufgrund der Messungenauigkeit der Prüfung um diesen Wert (z.B. zwischen 50 und 64 Punkte). Im Bereich der Bestehensgrenze ist die Messgenauigkeit aber besonders wichtig. Läge die Bestehensgrenze in unserem Beispiel bei 60 Punkten, wäre der Kandidat mit 57 Punkten zwar pro forma durchgefallen, allerdings könnte er aufgrund der Schwankungsbreite um seine gemessene Leistung in Wahrheit auch knapp bestanden haben. Überträgt man diese Erkenntnisse auf alle KandidatInnen einer Prüfung, kann man die Anzahl der Grenzfallkandidaten bestimmen, also all jene Kandidatinnen, die mit Ihrem Prüfungsergebnis so nahe an der Bestehensgrenze liegen, dass ihr jeweiliges Prüfungsresultate falsch positiv oder falsch negativ sein kann. Ergebnisse: Die Anzahl der GrenzfallkandidatInnen in einer Prüfung ist, nicht nur von der Reliabilität abhängig, sondern auch von der Leistung der KandidatInnen, der Varianz, dem Abstand der Bestehensgrenze zum Mittelwert und der Schiefe der Verteilung. Es wird anhand von Modelldaten und konkreten Prüfungsdaten der Zusammenhang zwischen der Reliabilität und der Anzahl der Grenzfallkandidaten auch für den Nichtstatistiker verständlich dargestellt. Es wird gezeigt, warum selbst eine Reliabilität von 0.8 in besonderen Situationen keine befriedigende Präzision der Messung bieten wird, während in manchen OSCEs die Reliabilität fast ignoriert werden kann. Schlussfolgerungen: Die Berechnung oder Schätzung der Grenzfallkandidaten anstatt der Reliabilität verbessert auf anschauliche Weise das Verständnis für die Präzision einer Prüfung. Wenn es darum geht, wie viele Stationen ein summativer OSCE benötigt oder wie lange eine MC-Prüfung dauern soll, sind Grenzfallkandidaten ein valideres Entscheidungskriterium als die Reliabilität. Brennan, R.L. (2003) Generalizability Theory. New York, Springer Downing, S.M. (2004) ‘Reliability: on the reproducibility of assessment data’, Medical Education 2004, 38, 1006–12 Harvill, L.M. (1991) ‘Standard Error of Measurement’, Educational Measurement: Issues and Practice, 33-41 McManus, I.C. (2012) ‘The misinterpretation of the standard error of measurement in medical education: A primer on the problems, pitfalls and peculiarities of the three different standard errors of measurement’ Medical teacher, 34, 569 - 76

Wenn Situationen bestimmen, wie Fussballer handeln. Eine empirische Untersuchung zur Bestimmung ökologischer Affordanzen für Passspielentscheidungen

Interpersonelle Handlungskoordination ist einer derjenigen Faktoren, die für das oft erwähnte, auf Gruppenebene auftauchende “Mehr” als die Summe beitragender Einzelleistungen verantwortlich gemacht wird. Verschiedene Theorien zur Gruppenhandlung anerkennen die Wichtigkeit koordinativer Prozesse und machen primär zwei Mechanismen für gelingende Handlungskoordination verantwortlich. Die Konzeption mentaler Modelle sieht den Grund in Situationsrepräsentationen, welche eine antizipative Koordination von individuellen Handlungsbeiträgen aufgrund von situationsbezogenen Wissensstrukturen ermöglichen. Gemäß dem dynamisch-ökologischen Ansatz hingegen erwächst interpersonell koordiniertes Handeln aus den situativen Affordanzen und Bedingungen, die sich im Verlauf von Spielen ergeben. Entsprechend basieren interpersonelle Handlungen nicht aus vorgefertigten Handlungsplänen, sondern ergeben sich online aus der Interaktion mit situativen Gegebenheiten. Aufgrund der Schwierigkeit, mit Daten von Gruppensystemen in dynamischen Kontexten statistisch umzugehen, hinkt die empirische Bestimmung des Einflusses kontextueller Affordanzen auf Handlungsentscheidungen theoretischen Überlegungen hinterher. Das Ziel der vorliegenden Studie war deswegen, die Effekte von Spielsituationsmerkmalen auf Passspielentscheidungen statistisch zu überprüfen. Als Versuchspersonen dienten die Kader zweier Fußballmannschaften (N = 36, M = 23.06 Jahre, SD = 4.85) aus der vierten Spielliga der Schweizer Fußballverbandes. Anhand von Informationen zu Mannschaftsaufstellungen und Spielsystemen wurden 40 Spielsituationen graphisch aufbereitet und auf Plausibilität rücküberprüft. Die Versuchspersonen übernahmen die Perspektive des ballbesitzenden Spielers und entschieden sich aus den jeweiligen Spielsituationen heraus für Passzuspiele. Zur Bestimmung von kontextuellen Handlungsindikatoren wurden die Spielsituationen im Hinblick auf Spielerpositionierungen und -verteilungen, interpersonelle Distanzen und die Stellungen der Verteidiger vermessen. Zur Bestimmung des Effektes von situativen Gegebenheiten auf die abhängige Variable Passspielentscheidung wurden verallgemeinerte gemischte lineare Modelle für binomial verteilte Daten spezifiziert. Signifikante Effekte der Distanzen zu Mitspielern, deren Nähe zum gegnerischen Tor, der Offenheit von Passwegen, sowie der defensiven Abschirmung bestätigten den Einfluss kontextueller Gegebenheiten auf Passentscheidungen (alle p < .001). Die Ergebnisse weisen auf die Relevanz von Situationsmerkmalen bei Passentscheidungen und damit auf die Angemessenheit des dynamisch-ökologischen Erklärungsansatzes hin. Durch seine Funktion als Spielgerät bestimmt der Spielball meist den fokalen Punkt einer handelnden Fußballmannschaft. Dadurch gerät der Fokus in theoretischen Gruppenhandlungsmodellen meist weg von den kontextuellen Gegebenheiten. Da diese im Fußball nicht starr oder vorbestimmt sind, sondern sich durch das Verhalten anderer Mit- und Gegenspieler verändern lassen, drängt sich ein Verständnis von dezentral mitgesteuerter Gruppenhandlung auf, gemäß dem Mitspieler abseits des Balls für das Schaffen ökologischer Gegebenheiten verantwortlich sind und damit interpersonelle Handlungseinheiten indirekt beeinflussen können.

Die Zeit der Pädagogik. Zeitperspektiven im erziehungswissenschaftlichen Diskurs. Festschrift für Walter Herzog

Zeit ist in der öffentlichen Diskussion über Erziehung eine konstitu tive Bestimmung. Dabei wird sie sehr unterschiedlich gefasst: Erziehung wird verstanden als ein Prozess, der zeitlich konsekutiv geordnet werden muss. Es wird aber auch von einer Erziehungszeit der Eltern gesprochen und von der Schulzeit im Lebenslauf. Unterricht und Didaktik verlangen von den Lehrpersonen ein Zeitmanagement. Über Schulanfang, Schul ende und Dauer der Schulzeit wird politisch debattiert. Aber weit dar über hinaus werden Erziehung und Bildung selbst zum Instrument, mit dem in der Gegenwart die Zukunft, die Zeit des einzelnen Menschen und sogar der ganzen Gesellschaft berechenbar werden sollen. Trotz dieser Zentralität der Dimension «Zeit» ist die theoretische Diskussion darüber wenig entwickelt. Der vorliegende Band diskutiert aus soziologischen, pädagogisch-psychologischen und historischen Perspektiven die Zeit dimensionen von Erziehung.