Menü Überspringen
Kontakt
Presse
Deutsch
English
Not track
Datenverarbeitung
Suche
Anmelden
DIPF aktuell
Forschung
Infrastrukturen
Institut
Zurück
Kontakt
Presse
Deutsch
English
Not track
Datenverarbeitung
Suche
Startseite
>
Forschung
>
Publikationen
>
Publikationendatenbank
Ergebnis der Suche in der DIPF Publikationendatenbank
Ihre Abfrage:
(Personen: "Zehner," und "Fabian")
zur erweiterten Suche
Suchbegriff
Nur Open Access
Suchen
Markierungen aufheben
Alle Treffer markieren
Export
24
Inhalte gefunden
Alle Details anzeigen
Automatic coding of short text responses via clustering in educational assessment
Zehner, Fabian; Sälzer, Christine; Goldhammer, Frank
Zeitschriftenbeitrag
| In: Educational and Psychological Measurement | 2016
35473 Endnote
Autor*innen:
Zehner, Fabian; Sälzer, Christine; Goldhammer, Frank
Titel:
Automatic coding of short text responses via clustering in educational assessment
In:
Educational and Psychological Measurement, 76 (2016) 2, S. 280-303
DOI:
10.1177/0013164415590022
URN:
urn:nbn:de:0111-pedocs-149795
URL:
https://nbn-resolving.org/urn:nbn:de:0111-pedocs-149795
Dokumenttyp:
3a. Beiträge in begutachteten Zeitschriften; Aufsatz (keine besondere Kategorie)
Sprache:
Englisch
Schlagwörter:
Antwort; Automatisierung; Codierung; Computerlinguistik; Leistungstest; Methode; PISA <Programme for International Student Assessment>; Software; Technologiebasiertes Testen; Testkonstruktion
Abstract:
Automatic coding of short text responses opens new doors in assessment. We implemented and integrated baseline methods of natural language processing and statistical modelling by means of software components that are available under open licenses. The accuracy of automatic text coding is demonstrated by using data collected in the Programme for International Student Assessment (PISA) 2012 in Germany. Free text responses of 10 items with Formula responses in total were analyzed. We further examined the effect of different methods, parameter values, and sample sizes on performance of the implemented system. The system reached fair to good up to excellent agreement with human codings Formula Especially items that are solved by naming specific semantic concepts appeared properly coded. The system performed equally well with Formula and somewhat poorer but still acceptable down to Formula Based on our findings, we discuss potential innovations for assessment that are enabled by automatic coding of short text responses. (DIPF/Orig.)
DIPF-Abteilung:
Bildungsqualität und Evaluation
Die Erhebung von Lern- und Lehrkontexten, Hintergrundmerkmalen und nichtleistungsbezogenen […]
Jude, Nina; Klieme, Eckhard; Kuger, Susanne; Zehner, Fabian
Sammelbandbeitrag
| Aus: Reiss, Kristina; Sälzer, Christine; Schiepe-Tiska, Anja; Klieme, Eckhard; Köller, Olaf (Hrsg.): PISA 2015: Eine Studie zwischen Kontinuität und Innovation | Münster: Waxmann | 2016
36673 Endnote
Autor*innen:
Jude, Nina; Klieme, Eckhard; Kuger, Susanne; Zehner, Fabian
Titel:
Die Erhebung von Lern- und Lehrkontexten, Hintergrundmerkmalen und nichtleistungsbezogenen Lernergebnissen in PISA 2015
Aus:
Reiss, Kristina; Sälzer, Christine; Schiepe-Tiska, Anja; Klieme, Eckhard; Köller, Olaf (Hrsg.): PISA 2015: Eine Studie zwischen Kontinuität und Innovation, Münster: Waxmann, 2016 , S. 431-445
URL:
https://www.pedocs.de/volltexte/2017/14020/pdf/PISA_2015_eine_Studie_zwischen_Kontinuitaet_und_Innovation.pdf#page=432
Dokumenttyp:
4. Beiträge in Sammelbänden; Sammelband (keine besondere Kategorie)
Sprache:
Deutsch
Schlagwörter:
Bildungslebenslauf; Computerunterstütztes Verfahren; Datenschutz; Eltern; Entwicklung; Frage; Fragebogen; Fragebogenerhebung; Internationaler Vergleich; Konzeption; Kulturdifferenz; Lehrer; Migration; Migrationshintergrund; PISA <Programme for International Student Assessment>; Qualitätssicherung; Schüler; Schulleiter; Skalierung; Soziale Herkunft
Abstract:
Die sogenannten Hintergrund-Fragebögen haben in den PISA-Erhebungen wachsende Bedeutung. Die Auskünfte von Lernenden, Lehrkräften, Schulleitungen und Eltern werden benötigt, um den sozialen Hintergrund, die Zuwanderungsgeschichte und den Bildungsverlauf zu rekonstruieren sowie Lehr-Lernprozesse, schulische Rahmenbedingungen und die Steuerung des Schulsystems zu beschreiben. Neben diesen Kontextfaktoren werden auch wichtige Lernergebnisse wie Interessen und Lernmotivation erfasst. Das Kapitel skizziert die Rahmenkonzeption der international eingesetzten Fragebögen, für die erstmals ein Team aus Deutschland verantwortlich zeichnete. Abschließend diskutiert das Kapitel Fragen der Qualitätssicherung, die Vergleichbarkeit von Daten über Staaten hinweg, den Computereinsatz und den Datenschutz sowie Grenzen der Aussagekraft von Fragebögen. (DIPF/Orig.)
DIPF-Abteilung:
Bildungsqualität und Evaluation
Lesekompetenz in PISA 2015. Ergebnisse, Veränderungen und Perspektiven
Weis, Mirjam; Zehner, Fabian; Sälzer, Christine; Strohmaier, Anselm; Artelt, Cordula; […]
Sammelbandbeitrag
| Aus: Reiss, Kristina; Sälzer, Christine; Schiepe-Tiska, Anja; Klieme, Eckhard; Köller, Olaf (Hrsg.): PISA 2015: Eine Studie zwischen Kontinuität und Innovation | Münster: Waxmann | 2016
36672 Endnote
Autor*innen:
Weis, Mirjam; Zehner, Fabian; Sälzer, Christine; Strohmaier, Anselm; Artelt, Cordula; Pfost, Maximilian
Titel:
Lesekompetenz in PISA 2015. Ergebnisse, Veränderungen und Perspektiven
Aus:
Reiss, Kristina; Sälzer, Christine; Schiepe-Tiska, Anja; Klieme, Eckhard; Köller, Olaf (Hrsg.): PISA 2015: Eine Studie zwischen Kontinuität und Innovation, Münster: Waxmann, 2016 , S. 249-283
URL:
https://www.pedocs.de/volltexte/2017/14020/pdf/PISA_2015_eine_Studie_zwischen_Kontinuitaet_und_Innovation.pdf#page=250
Dokumenttyp:
4. Beiträge in Sammelbänden; Sammelband (keine besondere Kategorie)
Sprache:
Deutsch
Schlagwörter:
Berufsneigung; Deutschland; Eltern; Familie; Fragebogen; Geschlechtsspezifischer Unterschied; Internationaler Vergleich; Kompetenzerwerb; Lernumgebung; Lesekompetenz; Mathematische Kompetenz; Messverfahren; Migrationshintergrund; Motivation; Naturwissenschaftliche Kompetenz; Naturwissenschaftlicher Unterricht; PISA <Programme for International Student Assessment>; Schülerleistung; Schülerleistungstest; Schulform; Schulklima; Selbsteinschätzung; Skalierung; Soziale Herkunft; Stichprobe; Technologiebasiertes Testen; Unterstützung
Abstract:
Die Ergebnisse der PISA-Studie 2015 zeigen, dass die Lesekompetenz der Jugendlichen in Deutschland signifikant höher ist als die durchschnittliche Lesekompetenz der Jugendlichen aller OECD-Staaten. Insgesamt befindet sich Deutschland im Vergleich mit den anderen OECD-Staaten im oberen Drittel der Rangreihenfolge. Die Gruppe der besonders leistungsstarken Schülerinnen und Schüler ist in Deutschland signifikant größer als im Durchschnitt der OECD-Staaten. Die Gruppe der sehr leistungsschwachen Schülerinnen und Schüler ist hingegen signifikant kleiner als im Durchschnitt der OECD-Staaten. Vertiefende Analysen zeigen eine höhere Lesekompetenz bei Schülerinnen und Schülern am Gymnasium als bei den Fünfzehnjährigen an nicht gymnasialen Schularten. Zudem verfügen Mädchen in Deutschland über eine höhere Lesekompetenz als Jungen, wobei sich dieser Geschlechterunterschied im Vergleich zu früheren Erhebungsrunden deutlich verringert hat. Zuletzt wurde die Lesekompetenz in der PISA-Studie 2009 als Hauptdomäne erhoben. Zu diesem Zeitpunkt lag die Lesekompetenz der Schülerinnen und Schüler in Deutschland noch im Durchschnitt der OECD-Staaten. Seitdem ist die Lesekompetenz in Deutschland deutlich gestiegen. Es sind vor allem die Jungen, die 2015 im Vergleich zur Erhebung im Jahr 2009 eine höhere Lesekompetenz zeigen. Außerdem ist die Gruppe der besonders leistungsstarken Schülerinnen und Schüler in Deutschland seit 2009 signifikant gewachsen. (DIPF/Orig.)
DIPF-Abteilung:
Bildungsqualität und Evaluation
Using and improving coding guides for and by automatic coding of PISA short text responses
Zehner, Fabian; Goldhammer, Frank; Sälzer, Christine
Sammelbandbeitrag
| Aus: IEEE ICDM Workshop (Hrsg.): Proceedings of the IEEE ICDM Workshop on Data Mining for Educational Assessment and Feedback (ASSESS 2015) | Atlantic City; NJ: Institute of Electrical and Electronics Engineers | 2015
35884 Endnote
Autor*innen:
Zehner, Fabian; Goldhammer, Frank; Sälzer, Christine
Titel:
Using and improving coding guides for and by automatic coding of PISA short text responses
Aus:
IEEE ICDM Workshop (Hrsg.): Proceedings of the IEEE ICDM Workshop on Data Mining for Educational Assessment and Feedback (ASSESS 2015), Atlantic City; NJ: Institute of Electrical and Electronics Engineers, 2015 , S. 1-8
URL:
http://www.aspiringminds.com/assess/2015/papers/PID3896317.pdf
Dokumenttyp:
4. Beiträge in Sammelwerken; Tagungsband/Konferenzbeitrag/Proceedings
Sprache:
Englisch
Schlagwörter:
Antwort; Codierung; PISA <Programme for International Student Assessment>; Regel <Richtlinie>; Text
Abstract (english):
We propose and empirically evaluate a theoretical framework of how to use coding guides for automatic coding (scoring) and how, in turn, automatic coding can enhance the use of coding guides. We adopted a recently described baseline approach to automatically classify responses. Well-established coding guides from PISA, comprising reference responses, and its German sample from 2012 were used for evaluation. Ten items with 41,990 responses at total were analyzed. Results showed that (1) responses close to the cluster centroid constitute prototypes, (2) automatic coding can improve coding guides, while (3) the proposed procedure leads to unreliable accuracy for small numbers of clusters but promising agreement to human coding for higher numbers. Further analyses are still to be done to find the optimal balance of the implied coding effort and model accuracy. (DIPF/Orig.)
DIPF-Abteilung:
Bildungsqualität und Evaluation
Markierungen aufheben
Alle Treffer markieren
Export
<
1
2
3
(aktuell)
Alle anzeigen
(24)