Menü Überspringen
Contact
Deutsch
English
Not track
Data Protection
Search
Log in
DIPF News
Research
Infrastructures
Institute
Zurück
Contact
Deutsch
English
Not track
Data Protection
Search
Home
>
Research
>
Publications
>
Publications Data Base
Search results in the DIPF database of publications
Your query:
(Schlagwörter: "Schülerleistungstest")
Advanced Search
Search term
Only Open Access
Search
Unselect matches
Select all matches
Export
51
items matching your search terms.
Show all details
IGLU 2021. Lesekompetenz von Grundschulkindern im internationalen Vergleich und im Trend über 20 […]
McElvany, Nele; Lorenz, Ramona; Goldhammer, Frank; Schilcher, Anita; Stubbe, Tobias C. (Hrsg.)
Compilation Book
| Münster: Waxmann | 2023
43956 Endnote
Editor(s)
McElvany, Nele; Lorenz, Ramona; Goldhammer, Frank; Schilcher, Anita; Stubbe, Tobias C.
Title:
IGLU 2021. Lesekompetenz von Grundschulkindern im internationalen Vergleich und im Trend über 20 Jahre
Published:
Münster: Waxmann, 2023
URL:
https://www.waxmann.com/index.php?eID=download&buchnr=4700
Publication Type:
2. Herausgeberschaft; Sammelband (keine besondere Kategorie)
Language:
Deutsch
Keywords:
Bundesland; Curriculum; Deutschland; Differenzierung; Digitale Medien; Empirische Untersuchung; Erhebungsinstrument; Grundschule; Grundschüler; IGLU <Internationale Grundschul-Lese-Untersuchung>; Internationaler Vergleich; Junge; Klassenführung; Kognitive Aktivierung; Leistungsmessung; Lesekompetenz; Lesetest; Leseunterricht; Leseverhalten; Leseverstehen; Mädchen; Migrationshintergrund; Motivation; Schülerleistung; Schülerleistungstest; Schuljahr 04; Soziale Herkunft; Testdurchführung; Testkonstruktion; Validität; Wohlbefinden
Abstract:
Lesekompetenz ist die zentrale Grundlage für das gesamte schulische sowie außerschulische Lernen, gesellschaftliche Teilhabe und den weiteren Lebensweg der Schülerinnen und Schüler. Sie ermöglicht es, Informationen aus schriftlichem Material zu entnehmen, Inhalte zu verknüpfen, Schlussfolgerungen zu ziehen und Inhalte, Quellen sowie Intentionen kritisch zu reflektieren. Seit nun 20 Jahren ermöglicht die Internationale Grundschul-Lese-Untersuchung (IGLU) die Beschreibung des Stands und der Bedingungsfaktoren der Schlüsselkompetenz Lesen am Ende der vierten Klassenstufe im internationalen Vergleich. Die Erhebung 2021 fand im Kontext besonderer Bedingungen statt: Es wurden Grundschulkinder in den Blick genommen, die etwas mehr als ein Jahr lang unter den Bedingungen der COVID-19-Pandemie-Schutzmaßnahmen beschult wurden. Erstmals können durch die kontinuierliche Studienteilnahme Deutschlands seit 2001 neben der wichtigen Kernfrage der internationalen Verortung der mittleren Lesekompetenz von Viertklässlerinnen und Viertklässlern in Deutschland Informationen zum Trend dieser Befunde für die Zeit von 20 Jahren dargestellt werden. Damit erlauben die Befunde von IGLU 2021 auch eine Antwort auf die drängende Frage, inwieweit es in Deutschland gelungen ist, die nach dem PISA-Schock 2000 durch die Kultusministerkonferenz formulierten Ziele für die Weiterentwicklung der Bildung in Deutschland zu erreichen. (DIPF/Orig.)
DIPF-Departments:
Lehr und Lernqualität in Bildungseinrichtungen
Methodological challenges of international student assessment
Frey, Andreas; Hartig, Johannes
Book Chapter
| Aus: Harju-Luukkainen, Heidi; McElvany, Nele; Stang, Justine (Hrsg.): Monitoring student achievement in the 21st century: European policy perspectives and assessment strategies | Cham: Springer | 2020
40524 Endnote
Author(s):
Frey, Andreas; Hartig, Johannes
Title:
Methodological challenges of international student assessment
In:
Harju-Luukkainen, Heidi; McElvany, Nele; Stang, Justine (Hrsg.): Monitoring student achievement in the 21st century: European policy perspectives and assessment strategies, Cham: Springer, 2020 , S. 39-49
DOI:
10.1007/978-3-030-38969-7_4
URL:
https://link.springer.com/chapter/10.1007/978-3-030-38969-7_4
Publication Type:
4. Beiträge in Sammelwerken; Sammelband (keine besondere Kategorie)
Language:
Englisch
Keywords:
Schülerleistungstest; Leistungsmessung; Internationaler Vergleich; Methodologie; Herausforderung; Veränderung; Schülerleistung; Heterogenität; Adaptives Testen; Befragung; Daten; Open Science; Validität
Abstract (english):
International large-scale assessments are very successful. One key factor of this success is their rigorous methodological and psychometric basis. Because education systems worldwide are subject to rapid changes, international large-scale assessments need to evolve as well. We describe five current methodological challenges that should be addressed so that large-scale assessments can continue to provide highly useful information on educational outcomes in the future. First, new or changed constructs should be adopted, and constructs with declining importance should be dropped from the assessments. Second, the heterogeneity of student performance within and between countries should be better accounted for. This can be achieved by completing the introduction of computerized adaptive testing into international large-scale assessments and making full use of computers to optimise the testing and scaling process. Third, more analytical effort should be invested in the measurement and modelling of context variables, mainly by applying latent variable.
DIPF-Departments:
Bildungsqualität und Evaluation
PISA 2018: Grundbildung im internationalen Vergleich
Reiss, Kristina; Weis, Mirjam; Klieme, Eckhard; Köller, Olaf (Hrsg.)
Compilation Book
| Münster: Waxmann | 2019
39839 Endnote
Editor(s)
Reiss, Kristina; Weis, Mirjam; Klieme, Eckhard; Köller, Olaf
Title:
PISA 2018: Grundbildung im internationalen Vergleich
Published:
Münster: Waxmann, 2019
DOI:
10.31244/9783830991007
URN:
urn:nbn:de:0111-pedocs-183155
URL:
http://nbn-resolving.org/urn:nbn:de:0111-pedocs-183155
Publication Type:
2. Herausgeberschaft; Sammelband (keine besondere Kategorie)
Language:
Deutsch
Keywords:
Leseförderung; Textverständnis; Schüler; Migrationshintergrund; Muttersprache; Außerunterrichtliche Aktivität; Soziale Herkunft; Einflussfaktor; Mathematische Kompetenz; Geschlechtsspezifischer Unterschied; Naturwissenschaftliche Kompetenz; Schulform; Methodologie; PISA <Programme for International Student Assessment>; Schülerleistung; Leistungsmessung; Lesekompetenz; Schülerleistungstest; Digitale Medien; Mediennutzung; Veränderung; Leseverhalten; Testaufgabe; Antwort; Lesen; Strategie; Selbstkonzept; Motivation; Sprachförderung; Technologiebasiertes Testen; Testkonstruktion; Konzeption; Internationaler Vergleich; OECD-LÄnder; Deutschland
Abstract:
Der nationale Berichtsband stellt die Ergebnisse der Schülerinnen und Schüler in Deutschland aus der PISA-Studie 2018 vor und setzt sie in Relation zu den Ergebnissen in anderen Staaten. Der Schwerpunkt der Erhebungen und Auswertungen liegt dabei auf der Lesekompetenz. Die Rahmenkonzeption der Lesekompetenz wurde für die PISA-Studie 2018 im Vergleich zu den vorigen Runden einer Revision unterzogen und berücksichtigt nun die sich verändernde Lesepraxis, die mit der Nutzung digitaler Medien einhergeht. Es werden leistungsbezogene Variablen genauso wie motivationale Orientierungen, Einstellungen und Verhalten erfasst, die für die Lesekompetenz wichtig sein können. Daneben wird der Beitrag der sozialen Herkunft und des Zuwanderungshintergrunds für die Lesekompetenzen untersucht. Darüber hinaus werden die Kompetenzen der Jugendlichen in der Mathematik und den Naturwissenschaften vorgestellt und diskutiert. (DIPF/Verlag).
DIPF-Departments:
Bildungsqualität und Evaluation
The many (subtle) ways parents game the system. Mixed-method evidence on the transition into […]
Dumont, Hanna; Klinge, Denise; Maaz, Kai
Journal Article
| In: Sociology of Education | 2019
39085 Endnote
Author(s):
Dumont, Hanna; Klinge, Denise; Maaz, Kai
Title:
The many (subtle) ways parents game the system. Mixed-method evidence on the transition into secondary-school tracks in Germany
In:
Sociology of Education, 92 (2019) 2, S. 199-228
DOI:
10.1177/0038040719838223
URN:
urn:nbn:de:0111-pedocs-177596
URL:
http://nbn-resolving.org/urn:nbn:de:0111-pedocs-177596
Publication Type:
3a. Beiträge in begutachteten Zeitschriften; Aufsatz (keine besondere Kategorie)
Language:
Englisch
Keywords:
Primarbereich; Sekundarbereich; Übergang; Soziale Ungleichheit; Familie; Soziale Herkunft; Sozioökonomische Lage; Reproduktion; Sozialkapital; Kulturelles Kapital; Schulwahl; Schulsystem; Gymnasium; Integrierte Sekundarschule; Befragung; Schülerleistungstest; Empfehlung; Schulnoten; Bildungsaspiration; Regressionsanalyse; Pfadanalyse; Eltern; Narratives Interview; Dokumentarische Methode; Mixed-Methods-Design; Empirische Untersuchung; Berlin; Deutschland
Abstract:
We analyze the subtle mechanisms at work in the interaction between families and schools that underlie social inequalities at the transition point from elementary school into secondary-school tracks in Berlin, Germany. We do so by combining quantitative data from a large-scale survey and assessment study (N = 3,935 students and their parents) with qualitative data from in-depth interviews with parents (N = 25) collected during the 2010-11, 2011-12, and 2012-13 school years. The quantitative analyses show that students from high-socioeconomic status (SES) families were more likely to enter the academic track than were students from low-SES families, even if they performed equally well on a standardized achievement test, had the same grades in school, and received the same track recommendation from their teachers. The qualitative analyses illustrate the many ways in which parents intervene during the transition process, with high-SES parents having particularly effective ways of getting what they want for their children. (DIPF/Orig.)
DIPF-Departments:
Struktur und Steuerung des Bildungswesens
Assessments and accountability in secondary education. International trends
Teltemann, Janna; Jude, Nina
Journal Article
| In: Research in Comparative and International Education | 2019
39188 Endnote
Author(s):
Teltemann, Janna; Jude, Nina
Title:
Assessments and accountability in secondary education. International trends
In:
Research in Comparative and International Education, 14 (2019) 2, S. 249-271
DOI:
10.1177/1745499919846174
URL:
https://journals.sagepub.com/doi/10.1177/1745499919846174
Publication Type:
3a. Beiträge in begutachteten Zeitschriften; Aufsatz (keine besondere Kategorie)
Language:
Englisch
Keywords:
Sekundarbereich; Schüler; Leistungsbeurteilung; Verantwortung; Vorkommen; Schülerleistungstest; Bildungsmonitoring; Trend; Internationaler Vergleich
Abstract (english):
International Large-scale Student Assessments are the most prominent example of internationalization processes in education. A number of studies have analysed the policy reactions to such studies, particularly to the Organisation for Economic Co-operation and Development (OECD) Programme for International Student Assessment (PISA) study. PISA and comparable projects have also raised concerns of a feared increase of assessments and accountability procedures. So far, systematic empirical evidence that could corroborate such concerns has been scarce. In this paper, we examine the prevalence of assessment and accountability practices at secondary education level as well as changes in these practices over time. We explicitly focus on changes over time by drawing on data from PISA 2000 to PISA 2015. Analyses over time are not straightforward with PISA, as the questionnaires change between survey rounds. This leads to different coverage of specific indicators over time. We present descriptive analyses for 20 OECD countries. The results show an increasing trend for the vast majority of the generated indicators, indicating that assessments and the use of assessments for purposes of accountability increased within the larger part of the OECD during the last 15 years. Likewise, more horizontal, peer-oriented evaluation procedures focusing on organizational learning gained importance. A cluster analysis based on selected indicators of 2015 revealed that there are four distinct groups of countries, which are mainly distinguished by different levels of the prevalence of assessment, accountability and evaluation practices. (DIPF/Orig.)
DIPF-Departments:
Bildungsqualität und Evaluation
Unattended consequences. How text responses alter alongside PISA's mode change from 2012 to 2015
Zehner, Fabian; Goldhammer, Frank; Lubaway, Emily; Sälzer, Christine
Journal Article
| In: Education Inquiry | 2019
38711 Endnote
Author(s):
Zehner, Fabian; Goldhammer, Frank; Lubaway, Emily; Sälzer, Christine
Title:
Unattended consequences. How text responses alter alongside PISA's mode change from 2012 to 2015
In:
Education Inquiry, 10 (2019) 1, S. 34-55
DOI:
10.1080/20004508.2018.1518080
URL:
https://www.tandfonline.com/doi/pdf/10.1080/20004508.2018.1518080?needAccess=true
Publication Type:
3a. Beiträge in begutachteten Zeitschriften; Beitrag in Sonderheft
Language:
Englisch
Keywords:
PISA <Programme for International Student Assessment>; Schülerleistungstest; Design; Veränderung; Computerunterstütztes Verfahren; Lesetest; Antwort; Text; Unterschied; Information; Relevanz; Schuljahr 09; Empirische Untersuchung; Deutschland
Abstract (english):
In 2015, the Programme for International Student Assessment (PISA) introduced multiple changes in its study design, the most extensive being the transition from paper- to computer-based assessment. We investigated the differences between German students' text responses to eight reading items from the paper-based study in 2012 to text responses to the same items from the computer-based study in 2015. Two response features - information quantity and relevance proportion - were extracted by natural language processing techniques because they are crucial indicators for the response process. Showcasing potential differential relationships, we additionally examined gender differences. Modelling effects of the round of assessment, gender, and response correctness on the response features, we analysed responses from 15-year-olds and ninth-graders in Germany. Results revealed differences in the text responses between the rounds of assessment in that students included more information overall in 2015, and the proportions of relevance varied substantially across items. As the study investigated the mode change in PISA's natural (not experimental) setting, the differences could mirror cohort trends or design changes. However, with the evidence reported, we conclude that the differences could indicate mode effects. (DIPF/Orig.)
DIPF-Departments:
Bildungsqualität und Evaluation
Kollaboratives Problemlösen in PISA 2015. Deutschland im Fokus
Zehner, Fabian; Weis, Mirjam; Vogel, Freydis; Leutner, Detlev; Reiss, Kristina
Journal Article
| In: Zeitschrift für Erziehungswissenschaft | 2019
39123 Endnote
Author(s):
Zehner, Fabian; Weis, Mirjam; Vogel, Freydis; Leutner, Detlev; Reiss, Kristina
Title:
Kollaboratives Problemlösen in PISA 2015. Deutschland im Fokus
In:
Zeitschrift für Erziehungswissenschaft, 22 (2019) 3, S. 617-646
DOI:
10.1007/s11618-019-00874-4
URN:
urn:nbn:de:0111-pedocs-176046
URL:
http://nbn-resolving.org/urn:nbn:de:0111-pedocs-176046
Publication Type:
3a. Beiträge in begutachteten Zeitschriften; Aufsatz (keine besondere Kategorie)
Language:
Deutsch
Keywords:
Schülerleistungstest; Fragebogen; PISA <Programme for International Student Assessment>; Internationaler Vergleich; Deutschland; OECD-Länder; Schüler; Problemlösen; Kooperation; Kompetenz; Schuljahr; Schulform; Computerunterstütztes Verfahren; Simulation; Technologiebasiertes Testen; Messverfahren; Qualität; Psychometrie; Item-Response-Theory; Skalierung
Abstract:
Dieser Beitrag fokussiert die Ergebnisse in Deutschland zum internationalen Vergleich kollaborativer Problemlösekompetenz bei Fünfzehnjährigen im Programme for International Student Assessment (PISA) 2015 und berichtet Ergebnisse einer Kreuzvalidierung der Skalierung. Eingesetzt wurde ein neuer computerbasierter Test, der die Schülerinnen und Schüler mit simulierten Gruppenmitgliedern Probleme lösen lässt. Daten von n = 124.994 Fünfzehnjährigen aus 51 Staaten zur kollaborativen Problemlösekompetenz wurden erhoben. Die Schülerinnen und Schüler in Deutschland weisen eine überdurchschnittliche Kompetenz auf (525 Punkte), liegen eine viertel Standardabweichung unter dem OECD-Spitzenstaat Japan (552 Punkte) und eine viertel Standardabweichung über dem OECD-Schnitt (500 Punkte). In allen Staaten weisen Mädchen höhere Werte auf als Jungen. Während der Anteil hochkompetenter Jugendlicher in Deutschland vergleichbar hoch mit den Spitzenstaaten ausfällt, erreichen 21 % nur Kompetenzstufe I oder bleiben darunter, doppelt so viele wie in Japan. Der Beitrag präsentiert zudem nationale Ergebnisse, liefert empirische Evidenz zur Qualität des Tests und diskutiert diesen kritisch. (DIPF/Orig.)
Abstract (english):
Focusing on Germany, this article presents results from the international comparison of fifteen-year-olds in collaborative problem solving and a cross validation of the scaling in the Programme for International Student Assessment (PISA) 2015. A new computer-based test was used requesting students to solve a problem jointly with simulated group members. Data from collaborative problem solving of fifteen-year-olds (n = 124,994) in 51 countries were assessed. The German mean competence level (525 points) is a quarter standard deviation above the OECD average (500 points) and a quarter standard deviation below the OECD's top performing country Japan (552 points). In all participating countries, girls outperform boys. While the percentage of top-performing students in Germany is comparable to proportions in the best-performing OECD countries, 21% of the students in Germany only reach competence level I or below, twice as many as in Japan. National results are presented as well as empirical evidence on the quality of the test, which is critically discussed. (DIPF/Orig.)
DIPF-Departments:
Bildungsqualität und Evaluation
Kompetenzdiagnostik
Frey, Andreas; Hartig, Johannes
Book Chapter
| Aus: Harring, Marius; Rohlfs, Carsten; Gläser-Zikuda, Michaela (Hrsg.): Handbuch Schulpädagogik | Münster: Waxmann | 2019
38881 Endnote
Author(s):
Frey, Andreas; Hartig, Johannes
Title:
Kompetenzdiagnostik
In:
Harring, Marius; Rohlfs, Carsten; Gläser-Zikuda, Michaela (Hrsg.): Handbuch Schulpädagogik, Münster: Waxmann, 2019 , S. 849-858
Publication Type:
4. Beiträge in Sammelwerken; Sammelband (keine besondere Kategorie)
Language:
Deutsch
Keywords:
Kompetenz; Diagnostik; Schülerleistung; Leistungsmessung; Kognitive Kompetenz; Schülerleistungstest; Testkonstruktion; Datenerfassung; Testauswertung; Interpretation; Qualität; Bewertung; Testdurchführung; Planung
Abstract:
Mit dem vorliegenden Beitrag wird das Feld der Kompetenzdiagnostik zusammenfassend dargestellt. Konkret wird dabei beschrieben, (a) was unter Kompetenzdiagnostik zu verstehen ist und welche Ziele mit ihr verfolgt werden, (b) wie Kompetenztests entwickelt und (c) wie sie angewendet werden. Das Kapitel schließt mit einem zusammenfassenden Fazit und einem Ausblick auf künftige Entwicklungsmöglichkeiten. (DIPF/Orig.)
DIPF-Departments:
Bildungsqualität und Evaluation
Bildungsmonitoring und Qualitätssicherung
Grünkorn, Juliane; Klieme, Eckhard; Stanat, Petra
Book Chapter
| Aus: Köller, Olaf; Hasselhorn, Marcus; Hesse, Friedrich W.; Maaz, Kai; Schrader, Josef; Solga, Heike; Spieß, C. Katharina; Zimmer, Karin (Hrsg.): Das Bildungswesen in Deutschland: Bestand und Potentiale | Bad Heilbrunn: Klinkhardt | 2019
36880 Endnote
Author(s):
Grünkorn, Juliane; Klieme, Eckhard; Stanat, Petra
Title:
Bildungsmonitoring und Qualitätssicherung
In:
Köller, Olaf; Hasselhorn, Marcus; Hesse, Friedrich W.; Maaz, Kai; Schrader, Josef; Solga, Heike; Spieß, C. Katharina; Zimmer, Karin (Hrsg.): Das Bildungswesen in Deutschland: Bestand und Potentiale, Bad Heilbrunn: Klinkhardt, 2019 , S. 263-298
Publication Type:
4. Beiträge in Sammelwerken; Sammelband (keine besondere Kategorie)
Language:
Deutsch
Keywords:
Bildungssystem; Qualitätssicherung; Qualitätsentwicklung; Bildungspolitik; Konzeption; Bildungsmonitoring; Schülerleistungstest; Internationaler Vergleich; Vergleichsuntersuchung; Bildungsstandards; Lernstandserhebung; Bildungsbericht; Berichterstattung; Deutschland
Abstract:
In Deutschland werden seit einigen Jahrzehnten sowohl wissenschaftliche als auch öffentliche und politische Debatten über Bildungsqualität und deren Sicherung und Entwicklung geführt. In Reaktion auf die zunächst unbefriedigenden Ergebnisse von Lernenden an deutschen Schulen in internationalen Schulleistungsstudien wie TIMSS (Trends in International Mathematics and Science Study) und PISA (Programme for International Student Assessment) und dem Informationsdefizit über die Leistungsfähigkeit des deutschen Schulsystems erfolgte eine Verschiebung von einer Input-Steuerung hin zu einer stärkeren Output-Steuerung im deutschen Bildungswesen. Die stärkere Output-Orientierung beinhaltet eine kontinuierliche Beobachtung von kurzfristigen (Output) und langfristigen (Outcome) Wirkungen und Ergebnissen von Bildungseinrichtungen, um durch zielgerichtete Veränderungen von Rahmenbedingungen und Prozessfaktoren bessere Ergebnisse zu erreichen. Ausdruck findet sie in einer Gesamtstrategie zum Bildungsmonitoring, die von der Ständigen Konferenz der Kultusminister der Länder in der Bundesrepublik Deutschland (KMK) 2006 veröffentlicht und 2015 überarbeitet wurde. Ziel ist, regelmäßig Informationen über das deutsche Bildungssystem auf der Systemebene (Monitoring im engeren Sinne) und auf der Schul- und Klassenebene (Monitoring im weiteren Sinne) zu gewinnen, aufzubereiten und bereitzustellen. Dafür sind laufende Beobachtungen der Rahmenbedingungen, Prozessmerkmale, Ergebnisse und Erträge von Bildungsprozessen mit Hilfe empirisch-wissenschaftlicher Methoden notwendig. Vor diesem Hintergrund beschreibt die KMK vier konzeptionell miteinander verbundene Bereiche: (i) die Teilnahme an internationalen Schulleistungsstudien wie PISA, TIMSS und PIRLS (Progress in International Reading Literacy Study)/IGLU (Internationale Grundschul-Lese-Untersuchung), (ii) die Verabschiedung und Umsetzung von länderübergreifenden Bildungsstandards für die Primar- und Sekundarstufe I und die Allgemeine Hochschulreife, (iii) den Einsatz von Verfahren zur Qualitätssicherung auf Schulebene (z. B. Vergleichsarbeiten) und (iv) die gemeinsame Bildungsberichterstattung von Bund und Ländern. (DIPF/Orig.)
DIPF-Departments:
Bildungsqualität und Evaluation
Response time-based treatment of omitted responses in computer-based testing
Frey, Andreas; Spoden, Christian; Goldhammer, Frank; Wenzel, S. Franziska C.
Journal Article
| In: Behaviormetrika | 2018
38894 Endnote
Author(s):
Frey, Andreas; Spoden, Christian; Goldhammer, Frank; Wenzel, S. Franziska C.
Title:
Response time-based treatment of omitted responses in computer-based testing
In:
Behaviormetrika, 45 (2018) 2, S. 505-526
DOI:
10.1007/s41237-018-0073-9
Publication Type:
3a. Beiträge in begutachteten Zeitschriften; Beitrag in Sonderheft
Language:
Englisch
Keywords:
Methode; Technologiebasiertes Testen; Antwort; Dauer; Verhalten; Item-Response-Theory; Fehlende Daten; Datenanalyse; Testaufgabe; Typologie; Medienkompetenz; Schülerleistungstest; Testauswertung
Abstract:
A new response time-based method for coding omitted item responses in computer-based testing is introduced and illustrated with empirical data. The new method is derived from the theory of missing data problems of Rubin and colleagues and embedded in an item response theory framework. Its basic idea is using item response times to statistically test for each individual item whether omitted responses are missing completely at random (MCAR) or missing due to a lack of ability and, thus, not at random (MNAR) with fixed type-1 and type-2 error levels. If the MCAR hypothesis is maintained, omitted responses are coded as not administered (NA), and as incorrect (0) otherwise. The empirical illustration draws from the responses given by N = 766 students to 70 items of a computer-based ICT skills test. The new method is compared with the two common deterministic methods of scoring omitted responses as 0 or as NA. In result, response time thresholds from 18 to 58 s were identified. With 61%, more omitted responses were recoded into 0 than into NA (39%). The differences in difficulty were larger when the new method was compared to deterministically scoring omitted responses as NA compared to scoring omitted responses as 0. The variances and reliabilities obtained under the three methods showed small differences. The paper concludes with a discussion of the practical relevance of the observed effect sizes, and with recommendations for the practical use of the new method as a method to be applied in the early stage of data processing. (DIPF/Orig.)
DIPF-Departments:
Bildungsqualität und Evaluation
Unselect matches
Select all matches
Export
1
2
3
...
5
>
Show all
(51)