Student, school, and country differences in sustained test-taking effort in the 2009 PISA reading assessment

In this article, the change in examinee effort during an assessment, which we will refer to as persistence, is modeled as an effect of item position. A multilevel extension is proposed to analyze hierarchically structured data and decompose the individual differences in persistence. Data from the 2009 Program of International Student Achievement (PISA) reading assessment from N = 467,819 students from 65 countries are analyzed with the proposed model, and the results are compared across countries. A decrease in examinee effort during the PISA reading assessment was found consistently across countries, with individual differences within and between schools. Both the decrease and the individual differences are more pronounced in lower performing countries. Within schools, persistence is slightly negatively correlated with reading ability; but at the school level, this correlation is positive in most countries. The results of our analyses indicate that it is important to model and control examinee effort in low-stakes assessments. (DIPF/Orig.)

Dokumentation der Befragungsinstrumente der Interventionsstudie im Projekt “Conditions and Consequences of Classroom Assessment” (Co²CA)

Das im Rahmen des DFG-Schwerpunktprogramms „Kompetenzmodelle“ durchgeführte Projekt „Conditions and Consequences of Classroom Assessment“ (Co²CA) geht in vier Teilstudien der Frage nach, wie formatives Assessment im Unterricht gestaltet werden kann, um sowohl eine präzise Leistungsmessung zu ermöglichen als auch positive Wirkungen auf den Lehr-Lernprozess zu erreichen. Das Project Co²CA leistet damit einen wichtigen Beitrag zur Erforschung zweier Kernelemente formativen Assessments – der detaillierten Diagnose von Schülerleistungen und der Nutzung der gewonnenen Informationen in Form lernförderlichen Feedbacks. Zentrale Idee von formativem Assessment (Lernbegleitende Leistungsbeurteilung und –rückmeldung) ist es mit Hilfe von Leistungsmessungen Informationen über den Lernstand der Schülerinnen und Schüler zu gewinnen und diese Informationen für die Gestaltung des weiteren Lehr- und Lernprozess zu nutzen. Den Lernenden kann auf Basis der Leistungsbeurteilung lernförderliches Feedback gegeben werden, um so die Diskrepanz zwischen Lernstand und Lernziel zu verringern. Die Kernelemente formativem Assessments bestehen also aus einer detaillierten Diagnose des Lernstandes und der Nutzung der gewonnen Informationen – z.B. in Form von Feedback. [...] Das vorliegende Skalenhandbuch dokumentiert die in der Unterrichtsstudie eingesetzten Befragungsinstrumente für Schülerinnen und Schüler sowie für Lehrkräfte. (DIPF/Autor)