Für verschiedene Schritte im Assessment-Zyklus stellt das TBA-Zentrum R-Pakete zur Verfügung, darunter shinyReCoR für die Auswertung von kurzen Textantworten mit Hilfe von Natural Langue Processing (NLP), LogFSM für die Analyse von Logdaten mit Hilfe von Finite-State-Machines und ShinyItemBuilder für die Verwendung von CBA ItemBuilder-Items im Assessment auf der Basis von R.

Bewertung von Kurztextantworten

Das R-Paket shinyReCoR bietet eine Shiny-Anwendung zur automatischen Kodierung von Textantworten mit R. Die Anwendung ist spezialisiert auf kurze Textantworten aus Assessments wie PISA, kann aber auch in anderen Kontexten eingesetzt werden. In der Vollversion der Anwendung können Sie eigene Textkorpora aus Wikipedia erstellen, maßgeschneiderte semantische Räume berechnen, automatische Rechtschreibkorrekturen durchführen, den Arbeitsablauf an Ihre Bedürfnisse anpassen, indem Sie jederzeit zu R wechseln, den Klassifikator exportieren, so dass er bei der Bewertung als Dienst verwendet werden kann, andere Testsprachen auswählen und vieles mehr.

* Kontakt: Dr. Fabian Zehner
* Entwicklung: Nico Andersen & Dr. Fabian Zehner
* Weiterführende Links: Projekt ReCo; https://www.reco.science/

Analysen von Log-Daten

Das R-Paket LogFSM veranschaulicht die Verwendung von Finite-State-Maschinen zur Extraktion von Low-Level-Features aus Log-Daten, wobei der Schwerpunkt auf der Reproduzierbarkeit und Validität von Log-Datenanalysen (d. h. der Konstruktion von Prozessindikatoren) liegt. Das Tool kann zur Analyse von Log-Daten in Standardformaten (wie dem XES-Standard) verwendet werden und bietet Methoden zur Konvertierung von Daten, die mit unterschiedlicher Software (z. B. mit der IRTlib Auslieferungssoftware und CBA ItemBuilder-Inhalten) erfasst wurden, in Standardformate.

* Kontakt & Entwicklung: PD Dr. Ulf Kröhne
* Weiterführende Links: https://www.logfsm.com

Computergestützte Assessments mit R (und Shiny)

Das R-Paket ShinyItemBuilder ermöglicht die Verwendung von Assessment-Inhalten, die mit dem CBA ItemBuilder erstellt wurden, zusammen mit R in Shiny-Anwendungen. Dies erlaubt es, verschiedene Arten von innovativen Assessments durchzuführen. ShinyItemBuilder eignet sich gut für viele kleine Anwendungen (mit einer begrenzten Anzahl von gleichzeitigen Testteilnehmern) und ermöglicht die Verwendung leicht zugänglicher Hosting-Umgebungen (wie shinyapps.io) für Onlinetests. Feedback kann den Testteilnehmern mit Markdown und R gegeben werden, und die IRT-basierte Testzusammenstellung wird mit einem der verfügbaren Pakete für computerisierte adaptive Tests (CAT) und mehrstufige Tests (MST) in R unterstützt.

* Kontakt: PD Dr. Ulf Kröhne
* Entwicklung: Ulf Kröhne & Felix Wagner
* Weiterführende Links: https://github.com/kroehne/ShinyItemBuilder

Weitere Werkzeuge