Lokale Abhängigkeit von Items im TestDaF-Leseverstehen

Abstract

Testlets sind Teilmengen von Testitems, die sich auf denselben Input beziehen. Testverfahren, die Testlets enthalten, sind in der pädagogisch-psychologischen Diagnostik weit verbreitet. Mit der Verwendung von Testlets ist allerdings ein ernstes psychometrisches Problem verbunden: Items, die einem Testlet angehören, verletzen die grundlegende Annahme der lokalen Unabhängigkeit. Gegenstand dieser Arbeit waren Einflüsse von Testlets im Prüfungsteil Leseverstehen des Tests Deutsch als Fremdsprache (TestDaF). Anhand eines Modells der Testlet-Response-Theorie ( Wainer, Bradlow & Wang, 2007 ) wurden Antworten von Teilnehmenden (N = 2 859) auf 30 Items, aufgeteilt auf drei Lesetexte (Testlets) mit je 10 Items, analysiert. Im ersten Lesetext fielen die Testlet-Effekte deutlich aus; in den beiden anderen Lesetexten ergaben sich nur schwache Effekte. Weitere Analysen zeigten, dass die Vernachlässigung der Testlet-Effekte eine erhöhte Schätzung der Testreliabilität sowie abweichende Schätzungen der Itemtrennschärfe und Itemschwierigkeit zur Folge hatte. Implikationen der Ergebnisse für die Entwicklung, Analyse und Evaluation testlet-basierter Testverfahren werden diskutiert.