-
-
Author(s): Visser, Linda; Cartschau, Friederike; Goldammer, Ariane von; Brandenburg, Janin; Timmerman, Marieke; Hasselhorn, Marcus; Mähler, Claudia
Title: Measurement invariance in relation to first language. An evaluation of German reading and spelling tests
In: Applied Measurement in Education, 36 (2023) 2, S. 115-131
DOI: 10.1080/08957347.2023.2201701
URL: https://www.tandfonline.com/doi/full/10.1080/08957347.2023.2201701
Publication Type: Zeitschriftenbeiträge; Zeitschriftenbeiträge
Language: Englisch
Keywords: Bewertung; deutsch; Deutsch als Zweitsprache; Deutschland; Faktorenanalyse; Grundschule; Lesen; Lesetest; Messung; Muttersprache; Rechtschreibtest; Rechtschreibung; Reliabilität; Sekundarstufe I; Testkonstruktion; Textverständnis; Varianzanalyse; Vergleich
Abstract (english): The growing number of children in primary schools in Germany who have German as their second language (L2) has raised questions about the fairness of performance assessment. Fair tests are a prerequisite for distinguishing between L2 learning delay and a specific learning disability. We evaluated five commonly-used reading and spelling tests for measurement invariance (MI) as a function of first language (German vs. other). Multi-group confirmatory factor analyses revealed strict MI for the Weingarten Basic Vocabulary Spelling Tests (WRTs) 3+ and 4+ and the Salzburger Reading (SLT) and Spelling (SRT) Tests, suggesting these instruments are suitable for assessing reading and spelling skills regardless of first language. The MI for A Reading Comprehension Test for First to Seventh Graders - 2nd Edition (ELFE II) was partly strict with unequal intercepts for the text subscale. We discuss the implications of this finding for assessing reading performance of children with L2. (DIPF/Orig.)
DIPF-Departments: Bildung und Entwicklung
-
-
Editor(s) Kollmann, Stefanie; Reh, Sabine
Title: Zeigen und Bildung. Das Bild als Medium der Unterrichtung seit der frühen Neuzeit. 1. Workshop "Pictura Paedagogica Online: Pädagogisches Wissen in Bildern"
Published: Berlin: DIPF | Leibniz-Institut für Bildungsforschung und Bildungsinformation / BBF | Bibliothek für Bildungsgeschichtliche Forschung, 2021
DOI: 10.25656/01:23306
URN: urn:nbn:de:0111-pedocs-233062
URL: https://www.pedocs.de/frontdoor.php?source_opus=23306
Publication Type: Sammelbände; Werkeditionen (Herausgeberschaft); Sammelband (keine besondere Kategorie)
Language: Deutsch
Keywords: 16. Jahrhundert; 17. Jahrhundert; 18. Jahrhundert; 19. Jahrhundert; 20. Jahrhundert; Anschauungsunterricht; Bild; Bildungsgeschichte; Deutschland; Didaktisches Material; Druck <Grafik>; Flugblatt; Frauenbild; Geschichte <Histor>; Geschichtsunterricht; Großbritannien; Illustration; Kinderbuch; Lehrmittel; Lesenlernen; Niederlande; Sachbuch; Schweiz; Selbstportrait; Sinti und Roma; Unterrichtsmedien; Visuelle Erziehung; Visuelles Medium; Wandbild
Abstract: Als didaktisches Material wurden Bilder seit der frühen Neuzeit eingesetzt; Bilder, die dazu dienten, die Welt mit ihrer Hilfe zu erklären, gibt es selbstverständlich schon länger. Dem Bild wurde eine veranschaulichende Funktion zugeschrieben, oftmals mit der Hoffnung verbunden, den Lernenden einen sowohl weiteren wie auch leichteren Zugang zum Lerngegenstand zu eröffnen. Es stellt sich die Frage, auf welche - historisch unterschiedlichen - Weisen das visuelle Medium einen Lerngegenstand präsentierte und damit auch konstruierte, wie zu unterschiedlichen Zeiten Bild und Wort dabei in Verbindung gestellt wurden, sich ergänzten oder auch widersprachen und auf welche Weise den Lernenden Bilder zugänglich gemacht wurden, was mit den Bildern geschah und wie mit ihnen umgegangen wurde. (DIPF/Orig.)
Abstract (english): Images have been used as didactic material since early modern times; images that served to explain the world with their help have of course been around for longer. The image has been ascribed an illustrative function, often with the hope of giving learners both wider and easier access to the subject matter. The question arises in which - historically different - ways the visual medium presented and thus also constructed an object of learning, how at different times the image and the word were connected, complemented or also contradicted each other, and in which ways images were made accessible to learners, what happened to the images and how they were dealt with. (DIPF/Orig.)
DIPF-Departments: Bibliothek für Bildungsgeschichtliche Forschung
-
-
Author(s): Grützmacher, Luisa; Vieluf, Svenja; Hartig, Johannes
Title: Are questionnaire scales which measure non-cognitive constructs suitable as school effectiveness criteria? A measurement invariance analysis
In: School Effectiveness and School Improvement, 32 (2021) 3, S. 430-447
DOI: 10.1080/09243453.2021.1903511
URL: https://www.tandfonline.com/doi/full/10.1080/09243453.2021.1903511
Publication Type: Zeitschriftenbeiträge; Zeitschriftenbeiträge
Language: Englisch
Keywords: Schule; Effektivität; Messverfahren; Fragebogen; Reliabilität; Validität; Schüler; Sekundarbereich; Deutschunterricht; Lesen; Einstellung <Psy>; Mathematikunterricht; Interesse; Selbstkonzept; Mitarbeit; Längsschnittuntersuchung; Datenanalyse; Hamburg; Deutschland
Abstract (english): This study aimed at examining the suitability of questionnaire instruments commonly used in large-scale assessments for measuring non-cognitive school effectiveness criteria. It focused on questions of reliability and validity for capturing changes in students within schools across time and the instruments' sensitivity to school effects. The aim was also to propose an approach for analyzing measurement invariance across levels and time simultaneously. The study used longitudinal data from the KESS (Kompetenzen und Einstellungen von Schülerinnen und Schülern [competencies and attitudes of students]) study, conducted in Hamburg, Germany. The sample is comprised of 17,926 students in 189 secondary schools. Data were collected three or four times. The results of the analyses show that all investigated scales are suitable in terms of reliability and validity. However, only the scale interest in mathematics is sensitive to school effects and therefore suitable as a school effectiveness criterion. (DIPF/Orig.)
DIPF-Departments: Lehr und Lernqualität in Bildungseinrichtungen
-
-
Author(s): Hahnel, Carolin; Goldhammer, Frank; Kroehne, Ulf; Mahlow, Nina; Artelt, Cordula; Schoor, Cornelia
Title: Automated and controlled processes in comprehending multiple documents
In: Studies in Higher Education, 46 (2021) 10, S. 2074-2086
DOI: 10.1080/03075079.2021.1953333
URN: urn:nbn:de:0111-pedocs-243880
URL: https://nbn-resolving.org/urn:nbn:de:0111-pedocs-243880
Publication Type: Zeitschriftenbeiträge; Zeitschriftenbeiträge
Language: Englisch
Keywords: Student; Lesen; Dokument; Vielfalt; Informationsverarbeitung; Verhalten; Lesegeschwindigkeit; Kognitive Prozesse; Arbeitsgedächtnis; Leseverstehen; Kognitive Kompetenz; Test; Computerunterstütztes Verfahren; Datenanalyse; Empirische Untersuchung; Deutschland
Abstract: The study investigates automated and controlled cognitive processes that occur when university students read multiple documents (MDs). We examined data of 401 students dealing with two MD sets in a digital environment. Performance was assessed through several comprehension questions. Recorded log data gave indications about students' time allocation, corroboration, and sourcing. Independent measures were used for reading speed to tap the effects of automatic processing and for working memory and single-text reading comprehension to tap effects of controlled processing, with working memory considered the mental capacity for performing controlled processing. We found that faster readers completed the MD tasks faster and showed more corroboration behavior. At the same time, students skilled in comprehension allocated more time to processing MD tasks and were more likely to show MD-specific behaviors of corroboration and sourcing. Students' success in MD tasks was predicted by reading speed and working memory, with the effect of working memory being mediated by single-text comprehension. Behavioral indicators contributed independently in predicting students' MD comprehension. Results suggest that reading MDs resembles a problem-solving situation where students need to engage in controlled, non-routine processing to build up a comprehensive representation of MDs and benefit from highly automated, lower-level reading processes. (DIPF/Orig.)
DIPF-Departments: Lehr und Lernqualität in Bildungseinrichtungen
-
-
Author(s): Korinth, Sebastian; Nagler, Telse
Title: Improving reading rates and comprehension? Benefits and limitations of the reading acceleration approach
In: Language and Linguistics Compass, 15 (2021) 3, S. e12408
DOI: 10.1111/lnc3.12408
URL: https://onlinelibrary.wiley.com/doi/10.1111/lnc3.12408
Publication Type: Zeitschriftenbeiträge; Zeitschriftenbeiträge
Language: Englisch
Keywords: Empirische Forschung; Lesen; Leseverstehen; Lesegeschwindigkeit; Leistungssteigerung; Lesekompetenz; Schulanfänger; Unterrichtsmethode; Wirkung; Validität; Messverfahren; Aufmerksamkeit; Arbeitsgedächtnis; Einflussfaktor; Grundschüler; Sprache; Forschungsstand
Abstract (english): The reading acceleration phenomenon refers to the effect that experimentally induced time constraints can generate instantaneous improvements of reading rate, accuracy and comprehension among typical and reading impaired readers of different age groups. An overview of studies applying the fading manipulation (i.e., letters are erased in reading direction), which induces the time constraints causing the acceleration phenomenon, is provided in the first part of this review. The second part summarises the outcomes of studies using a training approach called the reading acceleration program (RAP) that integrated core principles of the acceleration phenomenon to generate persistent reading performance improvements. Our review shows ample evidence for the validity of the acceleration phenomenon, since it has been replicated across various languages and populations. However, although there are several explanatory approaches for underlying mechanisms, none of them is well substantiated by empirical evidence so far. Similarly, although generally positive effects of RAP training were reported for several languages and groups of readers, the exact mechanisms causing improved reading rates and comprehension are not well understood. Our critical discussion points out several limitations of RAP that call for further research. However, we also highlight several benefits regarding RAP's potential as an intervention approach for enhancements in reading performance. (DIPF/Orig.)
DIPF-Departments: Bildung und Entwicklung
-
-
Author(s): Huschka, Sina Simone; Emde, Kim Raquel; Brandenburg, Janin
Title: Zur Vorhersage der Schriftsprache durch vorschulische Kompetenzen. Sind die Prädiktionsmuster zwischen ein- und mehrsprachigen Kindern vergleichbar?
In: Frühe Bildung, 9 (2020) 4, S. 193-202
DOI: 10.1026/2191-9186/a000496
URN: urn:nbn:de:0111-pedocs-218969
URL: https://nbn-resolving.org/urn:nbn:de:0111-pedocs-218969
Publication Type: Zeitschriftenbeiträge; Zeitschriftenbeiträge
Language: Deutsch
Keywords: Kind; Vorschulalter; Schuljahr 01; Schulanfänger; Schriftsprache; Schreibenlernen; Schreibkompetenz; Einsprachigkeit; Mehrsprachigkeit; Vorschulerziehung; Vorwissen; Einflussfaktor; Rechtschreibung; Lesen; Selbstregulation; Phonologie; Informationsverarbeitung; Prognose; Lesegeschwindigkeit; Test; Vergleich; Strukturgleichungsmodell; Deutschland
Abstract: In Deutschland wachsen viele Kinder mit mehr als nur einer Muttersprache auf - dies kann ein mögliches Risiko für den Schriftspracherwerb darstellen, wenn die Unterrichtssprache Deutsch nicht ausreichend beherrscht wird. Wichtige Grundlagen für den Schrift-spracherwerb werden bereits vor dem Schuleintritt gelegt. Daher beschäftigt sich die vorliegende Studie mit der Frage, ob die Vorhersage von Lese- und Rechtschreibleistungen durch vorschulische Kompetenzen für einsprachig deutsche Kinder und mehrsprachige Kinder vergleichbar ist. Bei 162 einsprachig und 143 mehrsprachig aufwachsenden Kindern wurden im letzten Kindergartenjahr die phonologische Bewusstheit, die Benenngeschwindigkeit, die phonologische Schleife und die behaviorale Selbstregulation erfasst. Am Ende der ersten Klasse erfolgte die Überprüfung von Lesegeschwindigkeit, Leseverständnis und Rechtschreiben. Die durchgeführten Strukturgleichungsmodelle zeigten zum Teil differenzielle Prädiktionsmuster für die Gruppen: Bei den mehrsprachigen Kindern war nur die Benenngeschwindigkeit prädiktiv für die Lese-geschwindigkeit, bei den einsprachigen Kindern zusätzlich die phonologische Schleife. Für das Leseverständnis und das Rechtschreiben setzte sich bei den mehrsprachigen Kindern einzig die phonologische Bewusstheit als Prädiktor durch, während bei den einsprachigen Kindern die Benenngeschwindigkeit ebenfalls prädiktiv war. (DIPF/Orig.)
Abstract (english): In Germany, many children grow up speaking more than one language - which can be a potential risk for the acquisition of written language if the language of instruction German is not sufficiently mastered. Important foundations for the literacy acquisition are already laid before school entry. The present study addresses the question of whether the prediction of reading and spelling performance through pre-school skills is comparable for monolingual German children and multilingual children. In 162 monolingual and 143 multilingual children, pho-nological awareness, naming speed, phonological loop and behavioral self-regulation were assessed in the last year of kindergarten. At the end of the first grade, reading fluency, reading comprehension and spelling were assessed. Structural equation models showed partially differential prediction patterns for the groups: In the multilingual children only naming speed was predictive of reading fluency, in the monolingual children the phonological loop was an additional predictor. For reading comprehension and spelling, only phonological awareness was predictive in the multilingual children, while in the monolingual children naming speed was also predictive. (DIPF/Orig.)
DIPF-Departments: Bildung und Entwicklung
-
-
Author(s): Weis, Mirjam; Doroganova, Anastasia; Hahnel, Carolin; Becker-Mrotzek, Michael; Lindauer, Thomas; Artelt, Cordula; Reiss, Kristina
Title: Aktueller Stand der Lesekompetenz in PISA 2018
In: Schulmanagement-Handbuch, (2020) 173, S. 9-19
Publication Type: Zeitschriftenbeiträge; Zeitschriftenbeiträge
Language: Deutsch
Keywords: Lesekompetenz; PISA <Programme for International Student Assessment>; Schülerleistung; Leistungsmessung; Aufgabe; Beispiel; Lesen; Jugendlicher; Leistungssteigerung; Leseförderung; Wirkung; Schulform; Geschlechtsspezifischer Unterschied; Internationaler Vergleich; OECD-Länder; Deutschland
Abstract: Welche Lehren können aus den Ergebnissen zur Lesekompetenz der PISA-Erhebung 2018 gezogen werden? Erfreulich ist, dass die Lesekompetenz der Fünfzehnjährigen in Deutschland im Vergleich zum OECD-Mittelwert überdurchschnittlich ausgeprägt ist. Zudem hat sich der Anteil der besonders lesestarken Jugendlichen in Deutschland bei PISA 2018 im Vergleich zum Jahr 2009 signifikant vergrößert. Somit gibt es in Deutschland im internationalen Vergleich einen relativ großen Anteil an Fünfzehnjährigen, die hochkompetent im Lesen sind und optimale Voraussetzungen für ein selbstständiges Lernen mittels Lesen mitbringen. Es ist wichtig, in der Förderung der Spitzengruppe nicht nachzulassen, um so ihren Anteil aufrechterhalten und ausbauen zu können. Wenig erfreulich ist der große Anteil besonders lernschwacher Schülerinnen und Schüler in Deutschland. Mehr als ein Fünftel der Fünfzehnjährigen zeigt Kompetenzen unterhalb der Kompetenzstufe II und ist damit kaum in der Lage, sinnerfassend mit Texten umzugehen. Insbesondere an nicht gymnasialen Schularten ist der Anteil leseschwacher Jugendlicher im Vergleich zu 2009 bedeutsam angestiegen. Dies ist ein besorgniserregender Befund, der zur Konsequenz haben sollte, dass leseschwache Kinder und Jugendliche in Deutschland noch stärker gefördert werden. Die Forschung hat gezeigt, dass die durchgängige Leseförderung vom Vorschulbereich bis zum Ende der Schulzeit besonders wirksam ist. Insgesamt legen die Ergebnisse aus PISA 2018 zum Lesen in Deutschland nahe, dass eine Förderung des besonders leseschwachen Schülerinnen und Schüler in den Blick genommen werden muss, um die Risikogruppe der Jugendlichen, die sich auf den untersten Kompetenzstufen befinden, deutlich zu verringern. (DIPF/Orig.)
DIPF-Departments: Bildungsqualität und Evaluation
-
-
Author(s): Zhou, Ji; He, Jia; Lafontaine, Dominique
Title: Cross-cultural comparability and validity of metacognitive knowledge in reading in PISA 2009. A comparison of two scoring methods
In: Assessment in Education, 27 (2020) 6, S. 635-654
DOI: 10.1080/0969594X.2020.1828820
URN: urn:nbn:de:0111-pedocs-221384
URL: https://nbn-resolving.org/urn:nbn:de:0111-pedocs-221384
Publication Type: Zeitschriftenbeiträge; Zeitschriftenbeiträge
Language: Englisch
Keywords: Metakognition; Wissen; Messung; Lesen; PISA <Programme for International Student Assessment>; Interkultureller Vergleich; Datenanalyse; Sekundäranalyse; Validität; Vergleich; Likert-Skala; OECD-Länder
Abstract: Accurate measurement of metacognitive knowledge in reading is important. Different instruments and scoring methods have been proposed but not systematically compared for their measurement comparability across cultures and validity. Given student data from 34 OECD countries in the Programme for International Student Assessment (PISA) in 2009, we compared two scoring methods for metacognitive knowledge in reading based on pair-wise comparisons of strategies and with conventional Likert-scale responses of selected items. Metacognitive knowledge scored with conventional Likert-scale responses demonstrated higher cross-cultural comparability than the pair-wise comparison method. Linked with reading competence, motivation and control strategy in reading, scores from the two scoring methods showed differential criterion validity, possibly related to the types of tasks (understanding and remembering versus summarising), item content (complexity and discrimination between preferred strategies in reading) and common method variance (e.g., individuals' stable response style in rating scales). Theoretical and methodological implications are discussed. (DIPF/Orig.)
DIPF-Departments: Bildungsqualität und Evaluation
-
-
Author(s): Hahnel, Carolin; Mahlow, Nina; Schoor, Cornelia; Cerdán, Raquel
Title: Promoting reading goals and strategy knowledge to improve university students' comprehension of multiple documents
Published: Berlin: Humboldt University; Johannes Gutenberg University, 2019 (Lautenbach, Corinna; Fischer, Jennifer; Zlatkin-Troitschanskaia, Olga; Pant, Hans Anand; Toepper, Miriam (Hrsg.): Student learning outcomes assessment in higher education: Ideas, approaches and concepts for research, transfer and implementation)
URL: https://www.kompetenzen-im-hochschulsektor.de/files/2019/07/Working-Paper_12_IJFRC_final.pdf
Publication Type: Arbeitspapiere; dokumentarische und Diskussionsbeiträge; weitere Arbeits- und Diskussionspapiere
Language: Englisch
Keywords: Student; Universität; Hochschulbildung; Lesen; Metakognition; Verstehen; Textverständnis; Strategie; Leseverhalten; Forschungsdesign; Projekt
Abstract: The proposed project focuses on the comprehension of multiple documents in university students. Although strategies and skills are required to achieve a comprehensive understanding of multiple documents for studying successfully, many students struggle with important parts of this process. The proposed project seeks to investigate how interindividual differences in the representation of a task will affect students' comprehension, and examines the effectiveness of a short-term intervention on the students' performance and behavior when dealing with multiple documents. (DIPF/Orig.)
DIPF-Departments: Bildungsqualität und Evaluation
-
-
Author(s): Goldhammer, Frank; Harrison, Scott; Bürger, Sarah; Kroehne, Ulf; Lüdtke, Oliver; Robitzsch, Alexander; Köller, Olaf; Heine, Jörg-Henrik; Mang, Julia
Title: Vertiefende Analysen zur Umstellung des Modus von Papier auf Computer
In: Reiss, Kristina; Weis, Mirjam; Klieme, Eckhard; Köller, Olaf (Hrsg.): PISA 2018: Grundbildung im internationalen Vergleich, Münster: Waxmann, 2019 , S. 163-186
URL: https://www.pisa.tum.de/fileadmin/w00bgi/www/Berichtsbaende_und_Zusammenfassungungen/PISA_2018_Berichtsband_online_29.11.pdf#page=163
Publication Type: Beiträge in Sammelbänden; Sammelband (keine besondere Kategorie)
Language: Deutsch
Keywords: PISA <Programme for International Student Assessment>; Papier-Bleistift-Test; Technologiebasiertes Testen; Veränderung; Methode; Wirkung; Computerunterstütztes Verfahren; Testaufgabe; Antwort; Schwierigkeit; Lesen; Mathematik; Naturwissenschaften; Testkonstruktion; Testdurchführung; Korrelation; Vergleich; Deutschland
Abstract: In PISA 2015 wurde der Erhebungsmodus von Papier zu Computer umgestellt. Eine nationale Ergänzungsstudie im Rahmen von PISA 2018 hatte entsprechend das Ziel, vertiefende Analysen zu möglichen Unterschieden papierbasierter und computerbasierter Messungen durchzuführen. Im Fokus standen die Vergleichbarkeit des gemessenen Konstrukts und der einzelnen Aufgaben (Items), beispielsweise hinsichtlich ihrer Schwierigkeit. Darüber hinaus wurden die Auswirkungen des Moduswechsels auf die Vergleichbarkeit mit den Ergebnissen früherer PISA-Erhebungen in Deutschland untersucht. Als empirische Basis wurden Daten aus dem PISA-2015-Feldtest genutzt sowie Daten, die im Rahmen der nationalen PISA-Haupterhebung 2018 an einem zweiten Testtag mit papierbasierten Testheften aus PISA 2009 zusätzlich erhoben wurden. Erste Ergebnisse der Ergänzungsstudie liefern Belege für die Konstruktäquivalenz zwischen papier- und computerbasierten Messungen. Zudem weisen die Daten der Ergänzungsstudie darauf hin, dass die computerbasierten Items im Mittel etwas schwieriger sind als die papierbasierten Items. Hinsichtlich der Veränderungen zwischen 2015 und 2018 zeigt sich eine hohe Übereinstimmung von international berichtetem (originalem) und nationalem (marginalem) Trend. Die Veränderungen zwischen 2009 und 2018 fallen für den nationalen Trend, der allein auf papierbasierten Messungen beruht, insgesamt etwas günstiger aus als für den originalen Trend. (DIPF/Orig.)
DIPF-Departments: Bildungsqualität und Evaluation