-
-
Autor*innen: Jude, Nina; Klieme, Eckhard
Titel: Assessment im Bildungsbereich und die Frage nach den Standards
Aus: Mossbrugger, Helfried (Hrsg.): Qualitätssicherung im Bildungswesen, Frankfurt am Main: Univ., Institut für Psychologie, 2004 (Riezlern-Reader XIII. Arbeiten aus dem Institut für Psychologie der Johann Wolfgang Goethe-Universität, 3), S. 63-76
Dokumenttyp: 4. Beiträge in Sammelwerken; Sammelband (keine besondere Kategorie)
Sprache: Deutsch
Schlagwörter: Bildungswesen; Leistungsmessung; Leistungstest; Bildungsstandard; Definition; Testmethodik; Lernpsychologie; DESI-Studie; Schuljahr 09; Deutschunterricht; Englischunterricht; Deutschland
Abstract: Standards des Lehrens und Lernens im nationalen wie auch im internationalen Kontext bedürfen einer Einbettung in ein angemessenes Rahmenkonzept von Lehr-Lerntheorien sowie entsprechender Methoden von Assessment. Ein optimales Rahmenkonzept sollte dabei die Anforderungen von Seiten der fachspezifischen Curricula, der existierenden didaktischen Ansätze und aktuellen Kompetenzmodelle ebenso berücksichtigen wie die Möglichkeiten und Einschränkungen der Erfassung von Schülerleistungen durch existierende Test- und Auswertungsmethoden. Eine besondere Herausforderung ist dabei die Verknüpfung von Standards auf nationalem und internationalem Level mit dem Ziel, vergleichbare Tests sowie standardisierte Indikatoren für Kompetenzen zu entwickeln und anzuwenden. Im Bereich der Testung von Sprachkompetenz kann bspw. der "Gemeinsame europäische Referenzrahmen für Sprachen" als ein erster Schritt zum international vergleichbaren Testen angesehen werden. Dieses Rahmenkonzept formuliert Anforderungen an die kommunikativen Fähigkeiten von Sprachlernern auf unterschiedlichen Kompetenzniveaus mittels holistischer Beschreibungen für jedes Niveau. Die Herausforderung besteht darin, Testaufgaben zu entwickeln, welche die unterschiedlichen Standards und Kriterien der Kompetenzniveaus auf internationaler Ebene repräsentieren. Darüber hinaus ist auch die Anpassung an die nationalen Curricula zu gewährleisten, um entsprechende Assessments in das Systemmonitoring spezifischer Bildungssysteme integrieren zu können. Hierzu bedarf es der Entwicklung und der empirischen Validierung von Testaufgaben, die den Kompetenzniveaus der Rahmenkonzeptionen entsprechen sollen. Neben der Analyse von Reliabilität und Dimensionalität der Testinstrumente schließt dies auch die Verifizierung von Itemschwierigkeiten und Schwellenwerten der Kompetenzniveaus mit ein. Ein solches Vorgehen findet Anwendung in der DESI-Studie (Deutsch Englisch Schülerleistungen International), die mit einer bundesweit repräsentativen Stichprobe die Sprachkompetenz von Schülern der 9. Klassen in den Fächern Englisch und Deutsch erhebt. An diesem Beispiel werden die notwendigen Vorgehensweisen vorgestellt, im Rahmen eines Large Scale Assessments national entwickelte Tests auf der Basis von curricularen Standards und Lehrbuchinhalten mit internationalen Standards zu verbinden. Grundlegend ist dabei die Integration unterschiedlicher Fachdisziplinen und Methoden in der Zusammenarbeit zwischen Sprachdidaktikern und Lehrern sowie Unterrichtsforschern und Psychologen.
Abstract (english): As in many other European and North-American countries, the movement towards standards-based educational reforms has recently become quite strong in Germany. By setting standards (i.e. expected levels of student outcome) and monitoring the level of competencies which students actually achieve, policy makers want to identify strengths and weaknesses of the educational system, to increase the overall outcome level and to reduce inequalities. Educational scientists gave the advice that rather than defining performance standards directly (e.g. by setting cutoff-scores in norm referenced tests) as in many Anglo-American countries, standards should be based on models of competence which allow for a sophisticated description of competence dimensions and levels. These models shall be based on psychological theories of learning and instruction. Consequently, appropriate assessment methods have to be developed and implemented. The challenge here is the alignment between standards/competence models and (large scale) assessment. Standard testing hence has to be embedded in an adequate and specific assessment framework, focussing especially on the empirical representation of multi-dimensional competence models and profiles of abilities. Appropriate items corresponding to the postulated levels of competence have to be developed. Hypotheses concerning cognitive demands that determine item difficulty have to be tested empirically. A special challenge is the link between national and international standards, aiming for the integration of testing instruments and standardized indicators of competence. In language testing, the Common European Framework for languages (CEFL) can act as a first step towards international comparable testing. It describes the communicative abilities of language learners on different levels of competence using holistic descriptions for each level. Still the corresponding tests representing the different criteria for each level of competence have to be developed. This paper describes the steps necessary for the development of such language tests, considering different aspects of national and international standards of language teaching and learning.
DIPF-Abteilung: Bildungsqualität und Evaluation