Menü Überspringen
Contact
Deutsch
English
Not track
Data Protection
Search
Log in
DIPF News
Research
Infrastructures
Institute
Zurück
Contact
Deutsch
English
Not track
Data Protection
Search
Home
>
Research
>
Publications
>
Publications Data Base
Search results in the DIPF database of publications
Your query:
(Personen: "Zehner," und "Fabian")
Advanced Search
Search term
Only Open Access
Search
Unselect matches
Select all matches
Export
24
items matching your search terms.
Show all details
Automatic coding of short text responses via clustering in educational assessment
Zehner, Fabian; Sälzer, Christine; Goldhammer, Frank
Journal Article
| In: Educational and Psychological Measurement | 2016
35473 Endnote
Author(s):
Zehner, Fabian; Sälzer, Christine; Goldhammer, Frank
Title:
Automatic coding of short text responses via clustering in educational assessment
In:
Educational and Psychological Measurement, 76 (2016) 2, S. 280-303
DOI:
10.1177/0013164415590022
URN:
urn:nbn:de:0111-pedocs-149795
URL:
https://nbn-resolving.org/urn:nbn:de:0111-pedocs-149795
Publication Type:
3a. Beiträge in begutachteten Zeitschriften; Aufsatz (keine besondere Kategorie)
Language:
Englisch
Keywords:
Antwort; Automatisierung; Codierung; Computerlinguistik; Leistungstest; Methode; PISA <Programme for International Student Assessment>; Software; Technologiebasiertes Testen; Testkonstruktion
Abstract:
Automatic coding of short text responses opens new doors in assessment. We implemented and integrated baseline methods of natural language processing and statistical modelling by means of software components that are available under open licenses. The accuracy of automatic text coding is demonstrated by using data collected in the Programme for International Student Assessment (PISA) 2012 in Germany. Free text responses of 10 items with Formula responses in total were analyzed. We further examined the effect of different methods, parameter values, and sample sizes on performance of the implemented system. The system reached fair to good up to excellent agreement with human codings Formula Especially items that are solved by naming specific semantic concepts appeared properly coded. The system performed equally well with Formula and somewhat poorer but still acceptable down to Formula Based on our findings, we discuss potential innovations for assessment that are enabled by automatic coding of short text responses. (DIPF/Orig.)
DIPF-Departments:
Bildungsqualität und Evaluation
Die Erhebung von Lern- und Lehrkontexten, Hintergrundmerkmalen und nichtleistungsbezogenen […]
Jude, Nina; Klieme, Eckhard; Kuger, Susanne; Zehner, Fabian
Book Chapter
| Aus: Reiss, Kristina; Sälzer, Christine; Schiepe-Tiska, Anja; Klieme, Eckhard; Köller, Olaf (Hrsg.): PISA 2015: Eine Studie zwischen Kontinuität und Innovation | Münster: Waxmann | 2016
36673 Endnote
Author(s):
Jude, Nina; Klieme, Eckhard; Kuger, Susanne; Zehner, Fabian
Title:
Die Erhebung von Lern- und Lehrkontexten, Hintergrundmerkmalen und nichtleistungsbezogenen Lernergebnissen in PISA 2015
In:
Reiss, Kristina; Sälzer, Christine; Schiepe-Tiska, Anja; Klieme, Eckhard; Köller, Olaf (Hrsg.): PISA 2015: Eine Studie zwischen Kontinuität und Innovation, Münster: Waxmann, 2016 , S. 431-445
URL:
https://www.pedocs.de/volltexte/2017/14020/pdf/PISA_2015_eine_Studie_zwischen_Kontinuitaet_und_Innovation.pdf#page=432
Publication Type:
4. Beiträge in Sammelbänden; Sammelband (keine besondere Kategorie)
Language:
Deutsch
Keywords:
Bildungslebenslauf; Computerunterstütztes Verfahren; Datenschutz; Eltern; Entwicklung; Frage; Fragebogen; Fragebogenerhebung; Internationaler Vergleich; Konzeption; Kulturdifferenz; Lehrer; Migration; Migrationshintergrund; PISA <Programme for International Student Assessment>; Qualitätssicherung; Schüler; Schulleiter; Skalierung; Soziale Herkunft
Abstract:
Die sogenannten Hintergrund-Fragebögen haben in den PISA-Erhebungen wachsende Bedeutung. Die Auskünfte von Lernenden, Lehrkräften, Schulleitungen und Eltern werden benötigt, um den sozialen Hintergrund, die Zuwanderungsgeschichte und den Bildungsverlauf zu rekonstruieren sowie Lehr-Lernprozesse, schulische Rahmenbedingungen und die Steuerung des Schulsystems zu beschreiben. Neben diesen Kontextfaktoren werden auch wichtige Lernergebnisse wie Interessen und Lernmotivation erfasst. Das Kapitel skizziert die Rahmenkonzeption der international eingesetzten Fragebögen, für die erstmals ein Team aus Deutschland verantwortlich zeichnete. Abschließend diskutiert das Kapitel Fragen der Qualitätssicherung, die Vergleichbarkeit von Daten über Staaten hinweg, den Computereinsatz und den Datenschutz sowie Grenzen der Aussagekraft von Fragebögen. (DIPF/Orig.)
DIPF-Departments:
Bildungsqualität und Evaluation
Lesekompetenz in PISA 2015. Ergebnisse, Veränderungen und Perspektiven
Weis, Mirjam; Zehner, Fabian; Sälzer, Christine; Strohmaier, Anselm; Artelt, Cordula; […]
Book Chapter
| Aus: Reiss, Kristina; Sälzer, Christine; Schiepe-Tiska, Anja; Klieme, Eckhard; Köller, Olaf (Hrsg.): PISA 2015: Eine Studie zwischen Kontinuität und Innovation | Münster: Waxmann | 2016
36672 Endnote
Author(s):
Weis, Mirjam; Zehner, Fabian; Sälzer, Christine; Strohmaier, Anselm; Artelt, Cordula; Pfost, Maximilian
Title:
Lesekompetenz in PISA 2015. Ergebnisse, Veränderungen und Perspektiven
In:
Reiss, Kristina; Sälzer, Christine; Schiepe-Tiska, Anja; Klieme, Eckhard; Köller, Olaf (Hrsg.): PISA 2015: Eine Studie zwischen Kontinuität und Innovation, Münster: Waxmann, 2016 , S. 249-283
URL:
https://www.pedocs.de/volltexte/2017/14020/pdf/PISA_2015_eine_Studie_zwischen_Kontinuitaet_und_Innovation.pdf#page=250
Publication Type:
4. Beiträge in Sammelbänden; Sammelband (keine besondere Kategorie)
Language:
Deutsch
Keywords:
Berufsneigung; Deutschland; Eltern; Familie; Fragebogen; Geschlechtsspezifischer Unterschied; Internationaler Vergleich; Kompetenzerwerb; Lernumgebung; Lesekompetenz; Mathematische Kompetenz; Messverfahren; Migrationshintergrund; Motivation; Naturwissenschaftliche Kompetenz; Naturwissenschaftlicher Unterricht; PISA <Programme for International Student Assessment>; Schülerleistung; Schülerleistungstest; Schulform; Schulklima; Selbsteinschätzung; Skalierung; Soziale Herkunft; Stichprobe; Technologiebasiertes Testen; Unterstützung
Abstract:
Die Ergebnisse der PISA-Studie 2015 zeigen, dass die Lesekompetenz der Jugendlichen in Deutschland signifikant höher ist als die durchschnittliche Lesekompetenz der Jugendlichen aller OECD-Staaten. Insgesamt befindet sich Deutschland im Vergleich mit den anderen OECD-Staaten im oberen Drittel der Rangreihenfolge. Die Gruppe der besonders leistungsstarken Schülerinnen und Schüler ist in Deutschland signifikant größer als im Durchschnitt der OECD-Staaten. Die Gruppe der sehr leistungsschwachen Schülerinnen und Schüler ist hingegen signifikant kleiner als im Durchschnitt der OECD-Staaten. Vertiefende Analysen zeigen eine höhere Lesekompetenz bei Schülerinnen und Schülern am Gymnasium als bei den Fünfzehnjährigen an nicht gymnasialen Schularten. Zudem verfügen Mädchen in Deutschland über eine höhere Lesekompetenz als Jungen, wobei sich dieser Geschlechterunterschied im Vergleich zu früheren Erhebungsrunden deutlich verringert hat. Zuletzt wurde die Lesekompetenz in der PISA-Studie 2009 als Hauptdomäne erhoben. Zu diesem Zeitpunkt lag die Lesekompetenz der Schülerinnen und Schüler in Deutschland noch im Durchschnitt der OECD-Staaten. Seitdem ist die Lesekompetenz in Deutschland deutlich gestiegen. Es sind vor allem die Jungen, die 2015 im Vergleich zur Erhebung im Jahr 2009 eine höhere Lesekompetenz zeigen. Außerdem ist die Gruppe der besonders leistungsstarken Schülerinnen und Schüler in Deutschland seit 2009 signifikant gewachsen. (DIPF/Orig.)
DIPF-Departments:
Bildungsqualität und Evaluation
Using and improving coding guides for and by automatic coding of PISA short text responses
Zehner, Fabian; Goldhammer, Frank; Sälzer, Christine
Book Chapter
| Aus: IEEE ICDM Workshop (Hrsg.): Proceedings of the IEEE ICDM Workshop on Data Mining for Educational Assessment and Feedback (ASSESS 2015) | Atlantic City; NJ: Institute of Electrical and Electronics Engineers | 2015
35884 Endnote
Author(s):
Zehner, Fabian; Goldhammer, Frank; Sälzer, Christine
Title:
Using and improving coding guides for and by automatic coding of PISA short text responses
In:
IEEE ICDM Workshop (Hrsg.): Proceedings of the IEEE ICDM Workshop on Data Mining for Educational Assessment and Feedback (ASSESS 2015), Atlantic City; NJ: Institute of Electrical and Electronics Engineers, 2015 , S. 1-8
URL:
http://www.aspiringminds.com/assess/2015/papers/PID3896317.pdf
Publication Type:
4. Beiträge in Sammelwerken; Tagungsband/Konferenzbeitrag/Proceedings
Language:
Englisch
Keywords:
Antwort; Codierung; PISA <Programme for International Student Assessment>; Regel <Richtlinie>; Text
Abstract (english):
We propose and empirically evaluate a theoretical framework of how to use coding guides for automatic coding (scoring) and how, in turn, automatic coding can enhance the use of coding guides. We adopted a recently described baseline approach to automatically classify responses. Well-established coding guides from PISA, comprising reference responses, and its German sample from 2012 were used for evaluation. Ten items with 41,990 responses at total were analyzed. Results showed that (1) responses close to the cluster centroid constitute prototypes, (2) automatic coding can improve coding guides, while (3) the proposed procedure leads to unreliable accuracy for small numbers of clusters but promising agreement to human coding for higher numbers. Further analyses are still to be done to find the optimal balance of the implied coding effort and model accuracy. (DIPF/Orig.)
DIPF-Departments:
Bildungsqualität und Evaluation
Unselect matches
Select all matches
Export
<
1
2
3
Show all
(24)