onSET
Menu
Blick in den Bibliothekslesesaal der Freien Universität Berlin

Forschungsprojekte zum onSET

Kontinuierliche Qualität

Qualität endet nicht mit dem Testdesign. Sie wird durch fortlaufende Forschung überprüft und weiterentwickelt.

  • Konstruktvalidierung
    Was genau messen C-Tests? Welche sprachlichen Strukturen, Kompetenzen und kognitiven Prozesse spiegeln sich in den Antworten der Teilnehmenden wider?
  • Standard-Setting beim onSET
    Welche Methoden des Standard-Settings eignen sich für die Bestimmung der Cut-Scores mit GER-Bezug im onSET? Wie aussagekräftig sind die ermittelten Werte?
  • Psychometrische Modellierung
    Welche psychometrischen Modelle eignen sich für die Skalierung von C-Tests? Wie gut stimmen die nach verschiedenen Modellen geschätzten Parameter für Aufgaben (Schwierigkeit) und Teilnehmende (Fähigkeit) überein? Welche Modelle und Softwarepakete erlauben den zügigen Auf- und Ausbau einer qualitätsgesicherten Itembank? 
  • Testlet-Effekte beim onSET – Fairness und Aufgabenschwierigkeit
    Welche Faktoren bestimmen die Schwierigkeit auf Text- und Lückenebene? Welchen Einfluss haben Testlet-Effekte (Abhängigkeiten zwischen Lücken innerhalb eines Textes) auf die Bestimmung der Reliabilität und die Schätzung von Personenparametern (allgemeine Sprachkompetenz) und Itemparametern (Schwierigkeit, Trennschärfe)?
  • Beziehung des onSET zu fertigkeitsspezifischen Sprachtests 
    Wie verhält sich die vom onSET gemessene allgemeine Sprachkompetenz zu fertigkeitsspezifischen Teilkompetenzen wie Lesen, Hören, Schreiben und Sprechen? Wie verlässlich lässt sich das Abschneiden beim TestDaF anhand von onSET-Ergebnissen vorhersagen?
  • Schwierigkeit von C-Test-Aufgaben
    Welche Faktoren bestimmen die Schwierigkeit von C-Test-Aufgaben, sowohl auf Text- als auch auf Lückenebene? 
    Faktor Zeit im Konstrukt von C-Tests
    Inwiefern verändert Zeitdruck das, was computergestützte C-Tests messen, und wie wirkt sich dies auf Validität, Reliabilität und Konstruktstruktur über verschiedene Sprachen und Kompetenzniveaus hinweg aus? 
    Mobile Version des onSET
    Beeinflusst das Endgerät (Desktop vs. Mobilgerät) Leistung, Bearbeitungszeit und wahrgenommene Nutzbarkeit eines digitalen C-Tests, und kann von Geräteäquivalenz gesprochen werden?
     

Ergebnisse dieser Untersuchungen finden sich in Fachzeitschriften und Fachbüchern.  Publikationen zum onSET 

Differenzierung der GER-Niveaus

Der onSET gibt eine Gesamtpunktzahl sowie eine Einstufung nach GER (Gemeinsamer Europäischer Referenzrahmen für Sprachen) aus – auf den Niveaus A2, B1, B2 oder C1 und höher.

Die Tabelle listet die Ergebnissen des onSET zun deren Zuordnung zu den GER-Stufen.

Ein Beispiel

Wurde das Sprachniveau einer Testperson im onSET-Deutsch mit B1 ausgewiesen und liegt die Gesamtpunktzahl bei 64 Punkten, lässt sich die Leistung dem unteren B1-Niveau zuordnen – 10 Punkte unterhalb der unteren Grenze des B1-Kernbereichs. Bei 87 Punkten käme hingegen der obere B1-Bereich in Betracht, 8 Punkte oberhalb der oberen Grenze.

 Publikationen zum onSET

Forschungsprojekte

In Forschungsprojekten untersucht g.a.s.t. gemeinsam mit Partnerinnen und Partnern aus Wissenschaft und Praxis aktuelle Fragen rund um Sprachkompetenz, Studieneignung und digitales Lernen. Entdecken Sie unsere Projekte, Kooperationen und Forschungsergebnisse.

Projekte

Design des onSET

Jede onSET-Aufgabe wird testtheoretisch, sprachwissenschaftlich und muttersprachlich geprüft und anschließend mit zahlreichen Lernenden erprobt. So entstehen individuelle Aufgabensets mit vergleichbarem Schwierigkeitsgrad – für zuverlässige und faire Ergebnisse.

Design onSET

onSET-Publikationen

Entdecken Sie wissenschaftliche Publikationen zum onSET und zu deutschsprachigen C-Tests – von Skalierung und Standard-Setting bis zu Schwierigkeitsvorhersage und Bearbeitungszeit.

Publikationen

Sie haben Fragen?
Wir unterstützen Sie gern.

+49 234 36715 500
 kontakt@gast.de
Kontakt