-
-
Autor*innen: Höhler, Jana; Hartig, Johannes; Goldhammer, Frank
Titel: Modeling the multidimensional structure of students' foreign language competence within and between classrooms
In: Psychological Test and Assessment Modeling, 52 (2010) 3, S. 323-340
URL: http://www.psychologie-aktuell.com/fileadmin/download/ptam/3-2010_20100928/07_Hoehler.pdf
Dokumenttyp: 3a. Beiträge in begutachteten Zeitschriften; Aufsatz (keine besondere Kategorie)
Sprache: Englisch
Schlagwörter: DESI-Studie; Deutschland; Englisch als Fremdsprache; Hörverständnis; Item-Response-Theory; Kompetenz; Leistungsmessung; Leseverstehen; Mehrebenenanalyse; Modellierung; Schüler; Schulklasse; Sekundarstufe I; Sprachkompetenz; Testkonstruktion
Abstract (english): Combining multilevel (ML) analysis and multidimensional item response theory (MIRT) provides a valuable method for analyzing data of educational assessments, where clustered data (e.g., students in classes) and multidimensional constructs frequently occur. It allows to model multiple ability dimensions while simultaneously taking the hierarchical structure into account. The dimensional structure of students foreign language competence within and between classrooms was investigated by applying a ML-MIRT measurement model to data of N = 9,410 students in 427 classes who had answered three different subtests of English as a foreign language. Results were compared to a MIRT model not taking into account the multilevel structure. A markedly more differentiated correlation structure is found within classrooms compared with the between-classroom level and compared with the model without multilevel structure. Results show that by modeling the latent multilevel structure, estimation and interpretation of ability profiles can bepossible even with highly correlated ability dimensions. (DIPF/Orig.)
DIPF-Abteilung: Bildungsqualität und Evaluation
-
-
Autor*innen: Rauch, Dominique; Hartig, Johannes
Titel: Multiple-choice versus open-ended response formats of reading test items: A two-dimensional IRT analysis
In: Psychological Test and Assessment Modeling, 52 (2010) 4, S. 354-379
URL: http://www.psychologie-aktuell.com/fileadmin/download/ptam/4-2010_20101218/02_Rauch.pdf
Dokumenttyp: 3a. Beiträge in begutachteten Zeitschriften; Aufsatz (keine besondere Kategorie)
Sprache: Englisch
Schlagwörter: Bildungsforschung; Datenanalyse; Deutschland; Experimentelle Psychologie; Itemanalyse; Item-Response-Theory; Leistungsmessung; Lesefertigkeit; Lesetest; Leseverstehen; Mehrebenenanalyse; Messverfahren; Multiple-Choice-Verfahren; Textverständnis
Abstract (english): The dimensionality of a reading comprehension assessment with non-stem equivalent multiplechoice (MC) items and open-ended (OE) items was analyzed with German test data of 8523 9th-graders. We found that a two-dimensional IRT model with within-item multidimensionality, where MC and OE items load on a general latent dimension and OE items additionally load on a nested latent dimension, had a superior fit compared to an unidimensional model (p .05). Correlations between general cognitive abilities, orthography and vocabulary and the general latent dimension were significantly higher than with the nested latent dimension (p .05). Drawing back on experimental studies on the effect of item format on reading processes, we suppose that the general latent dimension measures abilities necessary to master basic reading processes and the nested latent dimension captures abilities necessary to master higher reading processes. Including gender, language spoken at home, and school track as predictors in latent regression models showed that the well known advantage of girls and mother-tongue students is found only for the nested latent dimension.
DIPF-Abteilung: Bildungsqualität und Evaluation
-
-
Autor*innen: Hartig, Johannes
Titel: Messung der Kompetenzen von Lehrpersonen mit Modellen der Item-Response-Theorie
Aus: Zlatkin-Troitschaskaia, Olga; Beck, Klaus; Sembill, Detlef; Nickolaus, Reinhold; Mulder, Regina (Hrsg.): Lehrprofessionalität, Weinheim: Beltz, 2010 , S. 295-310
Dokumenttyp: 4. Beiträge in Sammelwerken; Sammelband (keine besondere Kategorie)
Sprache: Deutsch
Schlagwörter: Datenanalyse; Item-Response-Theory; Kompetenz; Lehrer; Messung; Messverfahren; Methode; Methodik; Methodologie; Modell; Professionalisierung; Skalierung
Abstract: Modelle der Item-Response-Theorie (IRT) dienen dazu, von Antworten auf Testitems auf zugrunde liegende Merkmale zu schließen. Im Beitrag werden die Grundlagen von IRT-Modellen sowie ihre Anwendung in der Messung von Kompetenzen von Lehrpersonen dargestellt. Die Methodik wird veranschaulicht, indem verschiedene IRT-Modelle beschrieben und an Beispielen illustriert werden. Zusätzlich wird die IRT-basierte kriterienorientierte Skaleninterpretation behandelt. (DIPF/Orig.)
DIPF-Abteilung: Bildungsqualität und Evaluation
-
-
Autor*innen: Hartig, Johannes; Goldhammer, Frank
Titel: Modelle der Item-Response-Theorie
Aus: Maschke, Sabine; Stecher, Ludwig (Hrsg.): Methoden der empirischen erziehungswissenschaftlichen Forschung. Enzyklopädie Erziehungswissenschaft Online (EEO), Weinheim: Juventa, 2010 , S. 1-36
DOI: 10.3262/EEO07100111
URL: http://www.erzwissonline.de
Dokumenttyp: 4. Beiträge in Sammelwerken; Lexika/Enzyklopädie o.ä.
Sprache: Deutsch
Schlagwörter: Item-Response-Theory; Methode; Modell; Psychometrie; Skalierung
Abstract: Die Item-Response-Theorie (IRT) stellt Methoden zur Auswertung von Tests zur Verfügung, die gegenüber älteren Methoden wie der klassischen Testtheorie verschiedene konzeptuelle und forschungspraktische Vorteile haben. In diesem Kapitel sind zentrale Grundideen von IRT-Modellen sowie mögliche Anwendungsbereiche dargestellt. Darauffolgend wird eine Auswahl unterschiedlicher IRT-Modelle sowohl für zweistufige als auch für mehrstufige Antwortformate beschrieben: das Raschmodell, das zwei- und dreiparametrige logistische Modell, das Partial Credit Model und das Graded Response Model. Weiterhin werden Methoden der Schätzung der Modellparameter beschrieben und die Konzepte der Item- und Testinformation eingeführt. Abschließend werden Kriterien zur Wahl eines spezifischen Modells und die IRT-basierte kriterienorientierte Skaleninterpretation behandelt.
DIPF-Abteilung: Bildungsqualität und Evaluation
-
-
Autor*innen: Hartig, Johannes; Goldhammer, Frank
Titel: Modelle der Item-Response-Theorie
Aus: Maschke, Sabine; Stecher, Ludwig (Hrsg.) Methoden der empirischen erziehungswissenschaftlichen Forschung, Weinheim: Juventa, 2010 , S. 36
DOI: 10.3262/EEO07100111
URL: http://dx.doi.org/10.3262/EEO07100111
Dokumenttyp: 4. Beiträge in Sammelwerken; Sammelband (keine besondere Kategorie)
Sprache: Deutsch
Schlagwörter: Test; Testtheorie; Item-Response-Theory; Psychometrie; Modell; Skalierung; Empirische Forschung; Quantitative Forschung; Deutschland
Abstract: Die Item-Response-Theorie (IRT) stellt Methoden zur Auswertung von Tests zur Verfügung, die gegenüber älteren Methoden wie der klassischen Testtheorie verschiedene konzeptuelle und forschungspraktische Vorteile haben. In diesem Kapitel sind zentrale Grundideen von IRT-Modellen sowie mögliche Anwendungsbereiche dargestellt. Darauffolgend wird eine Auswahl unterschiedlicher IRT-Modelle sowohl für zweistufige als auch für mehrstufige Antwortformate beschrieben: das Raschmodell, das zwei- und dreiparametrige logistische Modell, das Partial Credit Model und das Graded Response Model. Weiterhin werden Methoden der Schätzung der Modellparameter beschrieben und die Konzepte der Item- und T estinformation eingeführt. Abschließend werden Kriterien zur Wahl eines spezifischen Modells und die IRT-basierte kriterienorientierte Skaleninterpretation behandelt.(DIPF/Orig.)
DIPF-Abteilung: Bildungsqualität und Evaluation
-
-
Autor*innen: Wittmann, Eveline
Titel: Überzeugungen über Mathematik in der kaufmännischen Bildung. Grundlegende Konzepte, theoretische Fundierung und erste empirische Befunde
Erscheinungsvermerk: Berlin: Humboldt-Univ., 2009 (Studien zur Wirtschaftspädagogik und Berufsbildungsforschung aus der Humboldt-Universität zu Berlin, 16)
Dokumenttyp: 1. Monographien (Autorenschaft); Monographie (keine besondere Kategorie)
Sprache: Deutsch
Schlagwörter: Mathematisches Denken; Einstellung (Psychologie); Kaufmännische Berufe; Mathematik; Relevanz; Berufsbildung; Selbstkonzept; Mathematische Kompetenz; Lernen; Praxisbezug; Rechnungswesen; Mathematikunterricht; Berufsausbildung; Wirtschaftspädagogik; Empirische Forschung; Einstellungsforschung; Fallstudie; Befragung; Skalierung; Itemanalyse; Deutschland
Abstract: Eine Grundüberlegung dieses Bandes ist, dass mathematisches Denken nicht nur ein wesentlicher Bestandteil kaufmännischer Aktivität ist, sondern auch für eine kompetente Berufsausübung wachsende Relevanz aufweist. Mathematisches Denken in der Alltagspraxis kaufmännischen Handelns unterscheidet sich aber einerseits durch seinen oft impliziten Charakter, andererseits durch seinen häufig fragmentarischen, situationsspezifisch bzw. kognitiv "sparsamen" Einsatz deutlich von schulmathematischem Denken. Der Band geht der Frage nach, inwieweit kompetentes berufliches Handeln, insbesondere kaufmännisches Handeln, durch mathematisches Wissen und Denken gefördert werden kann. Wie wird eine solche Relevanz von den Betroffenen eingeschätzt - Menschen in der kaufmännischen Ausbildung, z. B. in der Bankausbildung, sowie in kaufmännisch- verwaltenden Berufen? Was für ein Verständnis von Mathematik liegt dem zugrunde? Trotz einer intensiven Diskussion über mathematische Überzeugungen in der mathematikdidaktischen Forschung, die grundsätzlich auch den instrumentellen Charakter von Mathematik für berufliches Handeln thematisiert, fehlt hierzu bislang eine im Kontext beruflicher Bildung verortete, differenzierte Forschung. Das Erfordernis eines solchermaßen aktiveren Umgangs mit Mathematik kann insbesondere für die fortgeschrittene berufliche Bildung gesehen werden, etwa in den kaufmännischen Fachschulen, also in der kaufmännischen Bildung für Funktionsstellen, in denen die Subjekte kaufmännischer Bildung selbst verstärkt Ergebnisverantwortung übernehmen. Der Band legt hierzu neben einer theoretischen Fundierung auf der Basis vorliegender empirischer Befunde die Ergebnisse einer eigenen explorativen Studie im Rahmen des wirtschaftswissenschaftlichen Studiums vor.(DIPF/Autor)
DIPF-Abteilung: Steuerung und Finanzierung des Bildungswesens
-
-
Autor*innen: Blömeke, Sigrid; Schwarz, Björn; Kaiser, Gabriele; Seeber, Susan; Lehmann, Rainer
Titel: Untersuchungen zum mathematischen und mathematikdidaktischen Wissen angehender GHR- und Gymnasiallehrkräfte
In: Journal für Mathematik-Didaktik, 30 (2009) 3/4, S. 232-255
Dokumenttyp: 3a. Beiträge in begutachteten Zeitschriften; Aufsatz (keine besondere Kategorie)
Sprache: Deutsch
Schlagwörter: Mathematikunterricht; Mathematik; Didaktik; Lehramtsstudium; Mathematiklehrer; Gymnasium; Sekundarstufe I; Realschule; Hauptschule; Gesamtschule; Grundschule; Fachkompetenz; Kompetenz; Modell; Referendarausbildung; Referendar; Leistungsfähigkeit; Leistungstest; Item-Response-Theory; Itemanalyse; Vergleichsuntersuchung; Empirische Untersuchung; Deutschland
Abstract: Die international-vergleichende Studie zur Leistungsfähigkeit der Lehrerausbildung ,,Mathematics Teaching in the 21st Century" (MT21) zeigt für die deutsche Stichprobe auf, dass das mathematische und mathematikdidaktische Wissen angehender Mathematiklehrkräfte für das Gymnasium im Mittel deutlich umfangreicher ist als das angehender Lehrkräfte für Grund-, Haupt- und Realschulen. Nichtsdestotrotz werden einige Items von der Gruppe angehender deutscher Lehrkräfte für Grund-, Haupt- und Realschulen relativ häufiger gelöst als von der Gruppe der angehenden Gymnasiallehrkräfte, andere fallen ihnen in Relation zu den übrigen Items des Itempools deutlich leichter. Umgekehrt lassen sich Items finden, bei denen der Leistungsvorsprung angehender Gymnasiallehrkräfte besonders groß ist. Im vorliegenden Beitrag wird untersucht, was die beiden Item-Sets auszeichnet, die entsprechende differenzielle Itemfunktionen aufweisen. Auf diese Weise kann das besondere Leistungspotenzial sowohl angehender Lehrkräfte für Grund-, Haupt- und Realschulen als auch angehender Gymnasiallehrkräfte herausgearbeitet werden. (DIPF/Orig.)
DIPF-Abteilung: Steuerung und Finanzierung des Bildungswesens
-
-
Autor*innen: Hartig, Johannes; Höhler, Jana
Titel: Multidimensional IRT models for the assessment of competences
In: Studies in Educational Evaluation, 35 (2009) 2/3, S. 57-63
DOI: 10.1016/j.stueduc.2009.10.002
URL: http://dx.doi.org/10.1016/j.stueduc.2009.10.002
Dokumenttyp: 3a. Beiträge in begutachteten Zeitschriften; Aufsatz (keine besondere Kategorie)
Sprache: Englisch
Schlagwörter: Item-Response-Theory; Modell; Kompetenz; Fertigkeit; Leistungsmessung; Anwendungsbeispiel
Abstract (english): Multidimensional item response theory (MIRT) provides an ideal foundation for modeling performance in complex domains, taking into account multiple basic abilities simultaneously, and representing different mixtures of the abilities required for different test items. This article provides a brief overview of different MIRT models, and the substantive implications of their differences for educational assessment. To illustrate the flexibility and benefits ofMIRT, three application scenarios are described: to account for unintended multidimensionality when measuring a unidimensional construct, to model latent covariance structures between ability dimensions, and to model interactionsof multiple abilities required for solving specific test items. All of these scenarios are illustrated by empirical examples. Finally, the implications of using MIRT models on educational processes are discussed.(DIPF/Autor)
DIPF-Abteilung: Bildungsqualität und Evaluation
-
-
Autor*innen: Blömeke, Sigrid; Seeber, Susan; Kaiser, Gabriele; Schwarz, Björn; Lehmann, Rainer; Felbrich, Anja; Müller, Christiane
Titel: Differentielle Item-Analysen zur Entwicklung professioneller Kompetenz angehender Lehrkräfte während der Lehrerausbildung
Aus: Zlatkin-Troitschanskaia, Olga; Beck, Klaus; Sembill, Detlef; Nickolaus, Reinhold; Mulder, Regina (Hrsg.): Lehrprofessionalität: Bedingungen, Genese, Wirkungen und ihre Messung, Weinheim: Beltz, 2009 (Beltz Bibliothek), S. 311-327
Dokumenttyp: 4. Beiträge in Sammelwerken; Sammelband (keine besondere Kategorie)
Sprache: Deutsch
Schlagwörter: Lehramtsstudium; Berufsanforderung; Lehrerberuf; Itemanalyse; Mathematikunterricht; Konzeption; Methode; Lehrerausbildung; Mathematiklehrer; Referendar; Sekundarstufe I; Kompetenz; Empirische Untersuchung; Deutschland
Abstract: Das Kohortendesign der Studie MT21 ermöglicht es, die Entwicklung des fachbezogenen Wissens angehender Mathematiklehrkräfte vom Beginn des Studiums bis in das Referendariat hinein zu analysieren. Im Beitrag werden kohortenspezifische differentielle Itemfunktionen untersucht und daraus Schlussfolgerungen für die Gestaltung der Lehrerausbildung gezogen. Anfänger/innen fallen die Aufgaben besonders schwer, mit denen sie aus ihrer Schulzeit wenig vertraut sind. Besonders leicht fallen ihnen dagegen schulmathematische Inhalte, die in der Universität nicht mehr aufgegriffen werden, was bei fortgeschrittenen Lehrkräften zu Vergessensprozessen führen kann. Die Ergebnisse können als Beleg für Kleins These der "doppelten Diskontinuität" gelesen werden. (DIPF/Orig.)
DIPF-Abteilung: Steuerung und Finanzierung des Bildungswesens
-
-
Autor*innen: Hartig, Johannes
Titel: Messung der Kompetenzen von Lehrpersonen mit Modellen der Item-Respone-Theorie
Aus: Zlatkin-Troitschanskaia, Olga; Beck, Klaus; Sembill, Detlef; Nickolaus, Reinhold; Mulder, Regina (Hrsg.): Lehrprofessionalität, Weinheim: Beltz, 2009 (Beltz Bibliothek), S. 295-310
Dokumenttyp: 4. Beiträge in Sammelwerken; Sammelband (keine besondere Kategorie)
Sprache: Deutsch
Schlagwörter: Methodologie; Item-Response-Theory; Datenanalyse; Modell; Skalierung; Kompetenz; Lehrer; Professionalität; Methodik; Messverfahren; Messung; Methode
Abstract: Modelle der Item-Response-Theorie (IRT) dienen dazu, von Antworten auf Testitems auf zugrunde liegende Merkmale zu schließen. Im Beitrag werden die Grundlagen von IRT-Modellen sowie ihre Anwendung in der Messung von Kompetenzen von Lehrpersonen dargestellt. Die Methodik wird veranschaulicht, indem verschiedene IRT-Modelle beschrieben und an Beispielen illustriert werden. Zusätzlich wird die IRT-basierte kriterienorientierte Skaleninterpretation behandelt. (DIPF/Orig. )
DIPF-Abteilung: Bildungsqualität und Evaluation