Abgeschlossene Projektphase 2014-2017

Für die im Längsschnitt des NEPS mehrfach erhobenen Domänen Lesen, Mathematik, Naturwissenschaften und ICT Literacy wurden, basierend auf kombinierten Mode-Effekt und Linkstudien sowie mit Hilfe experimenteller Modus-Variation, Änderungen der Messinstrumente infolge der Computerisierung psychometrisch erforscht (siehe z.B. Buerger, Kroehne & Goldhammer,  2016). Dazu wurden solche Verfahren der Quantifizierung und Korrektur von Mode-Effekten untersucht und angewendet, die eine Einführung computerbasierter Kompetenztestung im NEPS ermöglichen. Forschungs- und Entwicklungsschwerpunkt lag in dieser Projektphase auf der Nutzung von Eigenschaften technologiebasierten Testens für die Weiterentwicklung und Optimierung von NEPS Kompetenztests (z.B. die Erprobung von multiplem Highlighting als Antwortformat).
Für die vertiefte Erforschung von Modus- und Settingseffekten wurde bei TBA beispielsweise ein Verfahren zur Erfassung von Log-Daten bei der papierbasierten Testung entwickelt, welches in ausgewählten NEPS-Studien zum Einsatz gekommen ist (siehe z.B. Kroehne & Goldhammer, 2017). Mit Hilfe digitaler Kugelschreiber erfolgt dabei die Beantwortung der papierbasiert administrierten Fragen in Testheften, in welchem ein spezielles Punktmuster aufgedruckt ist (siehe u.a. Dirk et al, 2017 für eine Beschreibung). Während die Eintragungen im Testheft mit diesen digitalen Kugelschreibern für die Panelteilnehmenden so sichtbar sind als wären sie mit einem gewöhnlichen Kugelschreiber vorgenommen worden, werden die Koordinaten und Zeitstempel aller Antworten zusätzlich über einen Bluetooth-verbundenen Computer aufgezeichnet. Diese Erhebungsmethode erlaubt die Analyse von Beantwortungsprozessen, wie bspw. den Vergleich der Bearbeitungszeiten zwischen papier- und computerbasierter Testung (siehe z.B. Kroehne, Hahnel, & Goldhammer, 2018).