-
-
Autor*innen: Hartig, Johannes; Jude, Nina
Titel: Empirische Erfassung von Kompetenzen und psychometrische Kompetenzmodelle
Aus: Hartig, Johannes; Klieme, Eckhard (Hrsg.): Möglichkeiten und Voraussetzungen technologiebasierter Kompetenzdiagnostik: Eine Expertise im Auftrag des Bundesministeriums für Bildung und Forschung, Berlin: BMBF, 2007 (Bildungsforschung, 20), S. 17-36
URL: http://www.bmbf.de/pub/band_zwanzig_bildungsforschung.pdf
Dokumenttyp: 4. Beiträge in Sammelwerken; Sammelband (keine besondere Kategorie)
Sprache: Deutsch
Schlagwörter: Kompetenz; Diagnostik; Bildungsstandard; Messung; Messverfahren; Testanwendung; Testmethodik; Validität; Empirische Forschung; Psychometrie
Abstract: Der Diagnostik von Kompetenzen kommt eine Schlüsselfunktion für die Optimierung von Bildungsprozessen und für die Weiterentwicklung des Bildungswesens zu. Basis für diese Diagnostik ist die Entwicklung adäquater Messverfahren. Nach einigen grundlegenden Begriffdefinitionen werden zunächst allgemeine Qualitätsanforderungen erläutert, die an Messverfahren zur Erfassung von Kompetenzen zu stellen sind. Wie auch in anderen diagnostischen Anwendungsbereichen sind auch hier Objektivität, Reliabilität und Validität zentral für die Güte der Messung und die Generalisierbarkeit der Ergebnisse. Als Voraussetzung für die Beschreibung und Bestimmung von Kompetenzniveaus und Bildungsstandards ist bei der Erfassung von Kompetenzen zusätzlich die kriteriumsbezogene Testwertinterpretation relevant. Hinsichtlich der Generierung und Auswahl der Test- und Aufgabeninhalte ist sowohl die deduktive Aufgabenauswahl als auch das Kriteriumssampling für den Bereich der Kompetenzdiagnostik geeignet. Selbsteinschätzungen in Fragebögen können nicht als geeignete Methode zur Messung von Kompetenzen betrachtet werden. Kompetenzmessungen sollten auf angemessenen psychometrischen Modellen basieren, in denen die Zusammenhänge zwischen Merkmal und Testverhalten definiert werden. Eindimensionale Modelle haben hierbei den Vorteil einer einfachen Analyse und Ergebnisinterpretation. Zudem sind sie zur Konstruktion von Kompetenzniveaumodellen geeignet, mit denen kontinuierliche Kompetenzdimensionen inhaltlich konkret beschrieben werden können und Aussagen jenseits sozialer Bezugsnormen möglich werden. Mehrdimensionale Modelle können komplexere Zusammenhänge darstellen und ermöglichen eine differenziertere Diagnostik von Teilkompetenzen. (DIPF/Autor)
DIPF-Abteilung: Bildungsqualität und Evaluation
-
-
Autor*innen: Jude, Nina; Klieme, Eckhard
Titel: Sprachliche Kompetenz aus Sicht der pädagogisch-psychologischen Diagnostik
Aus: Beck, Bärbel; Klieme, Eckhard (Hrsg.): Sprachliche Kompetenzen: Konzepte und Messung, Weinheim: Beltz, 2007 , S. 9-22
URN: urn:nbn:de:0111-opus-31423
URL: https://www.pedocs.de/frontdoor.php?source_opus=3142
Dokumenttyp: 4. Beiträge in Sammelwerken; Sammelband (keine besondere Kategorie)
Sprache: Deutsch
Schlagwörter: DESI-Studie; Schüler; Schülerleistung; Sprachkompetenz; Definition; Deutschunterricht; Englischunterricht; Diagnostik; Konzeption; Testmethodik; Deutschland
Abstract: Empirische Studien, die an einer großen Stichprobe repräsentative Leistungsdaten mit normierten Tests erfassen, ermöglichen die Überprüfung von allgemeinen fachlichen Kompetenzen und Sprachkompetenz im Besonderen. Damit stellen sie einen wesentlichen Bestandteil für die Verbesserung des schulischen Lehrens und Lernens dar (National Research Council 2001). Diese Large-Scale- Assessments auf internationalerEbene, wie das Programme for International Student Assessment (PISA) oder die Internationale Grundschul Lese Untersuchung (IGLU) sind durch ihre aktuellen Befunde zu den sprachlichen Fähigkeiten deutscher Schülerinnen und Schüler in der politischen und wissenschaftlichen Diskussion (Bos/Lankes/Prenzel et al. 2003; Deutsches PISA-Konsortium 2001; PISA-Konsortium Deutschland 2004). Sie versprechen detaillierte Ergebnisse und Rückmeldungen über Lernerfolge analle Beteiligten in Bildungssystemen sowie Aufschluss über die Entstehung von sprachlichen Fähigkeiten und mögliche Förderungsansätze. Dabei bedarf es einesAuswertungsdesigns, das nicht nur globale Einschätzungen der jeweiligen Kompetenzen ermöglicht, sondern darüber hinaus deren Differenzierung, d.h. kriteriumsorientierte Aussagen über erreichte Niveaustufen in Teilbereichen der Sprachkompetenz. Die Studie Deutsch-Englisch-Schülerleistungen-International (DESI) betrachtet in diesem Rahmen die Sprachkompetenz von Schülerinnen und Schülern als ein komplexes Phänomen, das es in seinen Facetten abzubilden gilt. Dazu gehört die Berücksichtigung verschiedener Sprachen, in diesem Fall der Verkehrssprache Deutsch und der Fremdsprache Englisch. Neben der Erhebung von Schülerleistungen in den einzelnen Teilbereichen und der Entwicklung möglicher Erklärungsansätze für sprachliche Leistung zielt das Projekt auch auf die Analyse der Struktur von Sprachkompetenz. Diese wird verstanden als interagierendes Gefüge von Teilkompetenzen in Deutsch und Englisch. Durch die Analyse struktureller Zusammenhänge können nicht nur didaktische Schwerpunkte ermittelt, sondern auch Unterschiede zwischen der Kompetenzstruktur von Verkehrs- und Fremdsprache offen gelegt werden. (DIPF/Autor)
DIPF-Abteilung: Bildungsqualität und Evaluation
-
-
Autor*innen: Jude, Nina; Wirth, Joachim
Titel: Neue Chancen bei der technologiebasierten Erfassung von Kompetenzen
Aus: Hartig, Johannes; Klieme, Eckhard (Hrsg.): Möglichkeiten und Voraussetzungen technologiebasierter Kompetenzdiagnostik: Eine Expertise im Auftrag des Bundesministeriums für Bildung und Forschung, Berlin: BMBF, 2007 (Bildungsforschung, 20), S. 49-56
URL: http://www.bmbf.de/pub/band_zwanzig_bildungsforschung.pdf
Dokumenttyp: 4. Beiträge in Sammelwerken; Sammelband (keine besondere Kategorie)
Sprache: Deutsch
Schlagwörter: Technologiebasiertes Testen; Kompetenz; Kompetenzniveau; Messung; Messverfahren; Testmethodik; Adaptation; Individuum
Abstract: Technologiebasiertes Testen eröffnet Zugang zu Kompetenzbereichen, die mit traditionellen Tests nur schwer oder gar nicht zu erheben sind. So bestehen z.B. Möglichkeiten der dynamischen Erfassung von Prozessabläufen, der Schaffung von virtuellen Testumgebungen und der Simulation lebensnaher Situationen. Computerbasierten Testverfahren ermöglichen die Integration von multimedialen und dynamischen Teststimuli wie Audiodateien, Videos oder Animationen. Es ist möglich, Testinhalte realitätsnah und authentisch zu gestalten und zugleich kontrolliert und unter vergleichbaren Bedingungen vorzugeben. Neben den Antworten auf die Testitems können zusätzlich Verhaltensdaten wie Bearbeitungsdauer oder einzelne Bearbeitungsschritte erfasst werden. Durch den Einbezug adaptiver Testroutinen können Testsituationen so gesteuert werden, dass sie dem individuellen Kompetenzniveau des Probanden angepasst werden können. Internetbasierte Test- und Itemdatenbanken ermöglichen des Weiteren die gemeinsame Nutzung und Entwicklung von Testitems bei gleichzeitiger Validierung und Aktualisierung des jeweiligen Itempools. (DIPF/Autor)
DIPF-Abteilung: Bildungsqualität und Evaluation
-
-
Autor*innen: Jurecka, Astrid; Hartig, Johannes
Titel: Anwendungsszenarien computer- und netzwerkbasierter Assessments
Aus: Hartig, Johannes; Klieme, Eckhard (Hrsg.): Möglichkeiten und Voraussetzungen technologiebasierter Kompetenzdiagnostik: Eine Expertise im Auftrag des Bundesministeriums für Bildung und Forschung, Berlin: BMBF, 2007 (Bildungsforschung, 20), S. 69-79
URL: http://www.bmbf.de/pub/band_zwanzig_bildungsforschung.pdf
Dokumenttyp: 4. Beiträge in Sammelwerken; Sammelband (keine besondere Kategorie)
Sprache: Deutsch
Schlagwörter: Technologiebasiertes Testen; Nutzung; Messverfahren; Testmethodik; Evaluation; Unterricht; Lehre; Bildungsmonitoring; Schulleistungstest; Bildungsforschung
Abstract: Im Bezug auf ein computer- und netzwerkbasiertes Assessment-System sind unterschiedliche Anwendungsszenarien in unterschiedlichen Anwendungskontexten denkbar. Zunächst werden für verschiedene prototypische Szenarien die notwendigen Server-Client-Strukturen, die benötigten Nutzerprofile sowie die Testsituationen beschrieben. In Bildungsevaluation und Lehre würde sich zum einen der Einsatz eines Assessment-Systems zur vernetzten Aufgabenentwicklung anbieten. Aufgabeninhalte, Antwortmöglichkeiten und Bewertungskriterien könnten in einer Datenbank abgelegt werden und mit der Möglichkeit versehen werden, Kommentare und alternative Varianten abzulegen. Zum anderen wäre es beim System-Monitoring im Bildungswesen möglich, Testinhalte, die auf allgemeingültigen Curricula und Bildungsstandards basieren, zentral zu entwickeln und zur Verfügung zu stellen. Für eine Überprüfung der Effektivität des Unterrichts durch die Lehrperson sowie für die Unterrichtsentwicklung kann ein netzwerkbasiertes Testsystem ebenfalls eingesetzt werden. Innerhalb der Hochschullehre wäre eine Verwendung sowohl im Kontext von Präsenzveranstaltungen als auch von Fernstudiengängen denkbar. Das System könnte sowohl zur ortsunabhängigen Prüfungsvorbereitung als auch zu Übungszwecken verwendet werden und würde eine sofortige Ergebnisrückmeldung ermöglichen. Computerbasiertes Assessment könnte im Forschungskontext in nationalen und internationalen Vergleichsstudien eingesetzt werden, so dass den Schülern die Aufgaben in computerisierter Form vorgegeben werden könnte. Die Realisierung ist mit Hilfe einer hierarchischen Struktur vorstellbar, wobei über einen zentralen Server auch erste Auswertungen der Ergebnisse erfolgen könnten. Auch rein internetbasierte psychologische Untersuchungen oder Laboruntersuchungen im Einzel- oder Gruppensetting mit entsprechenden Aufgaben wären durchführbar. Das Basissystem kann hier vor allem als flexible Alternative, Ergänzung und Erweiterung zu bereits bestehenden Techniken verstanden werden. (DIPF/Autor)
DIPF-Abteilung: Bildungsqualität und Evaluation
-
-
Autor*innen: Lehmann, Rainer H.; Seeber, Susan; Hunger, Susanne
Titel: ULME III - Ziele der Untersuchung
Aus: Lehmann, Rainer H.; Seeber, Susan (Hrsg.): ULME III: Untersuchung von Leistungen, Motivation und Einstellungen der Schülerinnen und Schüler in den Abschlussklassen der Berufsschulen, Hamburg: Behörde für Bildung und Sport, 2007 , S. 15-20
Dokumenttyp: 4. Beiträge in Sammelwerken; Sammelband (keine besondere Kategorie)
Sprache: Deutsch
Schlagwörter: Berufsausbildung; Auszubildender; Schülerleistung; Leistungsmessung; Längsschnittuntersuchung; Konzeption; Testmethodik; D-Hamburg; Deutschland
Abstract: Die "Untersuchung von Leistungen, Motivation und Einstellung der Schülerinnen und Schüler in den Abschlussklassen der Berufsschulen" (ULME III) ist Bestandteil einer umfassenden, komplex strukturierten Längsschnittstudie im beruflichen Schulwesen Hamburgs. Der Beitrag gibt Auskunft über Ziele, Struktur und Stichprobe der Längsschnittstudie sowie über das umfassende Testdesign, das sowohl die Erfassung berufsübergreifender als auch berufsspezifischer Kompetenzen einschließt. ( DIPF/Autor)
DIPF-Abteilung: Steuerung und Finanzierung des Bildungswesens
-
-
Autor*innen: Martens, Thomas; Tepe, Daniel
Titel: Idealtypische eLearning-Prozesse in der Hochschullehre. Verbindung von fachdidaktischen Lernzielen und digitalen Mediensystemen
Aus: Krämer, Michael; Preiser, Siegfried; Brusdeylins, Kerstin (Hrsg.): Psychologiedidaktik und Evaluation VI, Göttingen: V&R unipress, 2007 , S. 257-266
Dokumenttyp: 4. Beiträge in Sammelwerken; Sammelband (keine besondere Kategorie)
Sprache: Deutsch
Schlagwörter: Hochschule; Lehre; Neue Medien; E-Learning; Projektbericht; Kooperation; Gruppenarbeit; Medieneinsatz; Forschungsmethode; Testmethodik; Bremen
Abstract: Der Beitrag entwickelt eine gemeinsame Perspektive für ( medien-)didaktische Ansätze, organisatorische Strukturen und technische Möglichkeiten für den Einsatz von eLearning an der Hochschule. Denn während z.B. aus der psychologischen Fachdidaktik bestimmte Lernziele für Lehr-Lernsituation abgeleitet werden können, wie z.B. die Vermittlung von bestimmten Wissensinhalten, wird der Medieneinsatz oft über technische Funktionalitäten definiert und gesteuert. Einerster Versuch dieses Spannungsverhältnis aufzulösen, wird im vorliegenden Artikel am Beispiel des vom Bundesministerium für Bildung und Forschung ( BMBF) geförderten Projektes "eLearningIQ" der Universität Bremen aufgezeigt. Das gemeinsame Ziel der beteiligten Akteure ( aus Forschung, Lehre, Verwaltung und verschiedenen Multimedia-Zentren) besteht darin, eine Strategie zu entwickeln, die sowohl technische Möglichkeiten, organisatorische Notwendigkeiten alsauch mediendidaktische Ansprüche bündelt, um eLearning nachhaltig und sinnvoll in die Lern- und Lehrkulturen einzubinden. Dazu werden in diesem Beitrag zwei prototypische Lehr-Lernszenarien des Projekts "mobileCampus" beschrieben, die im Rahmen der Förderung durch das BMBF an der Universität Bremen erprobt, evaluiert und dokumentiert wurden. Im Szenario "Kooperation" wurde in einem Seminar der Pädagogischen Psychologie im Hauptstudium zum Thema "Blended Learning" versucht, Gruppenarbeit durch strukturelle und technische Unterstützung gezielt anzuregen und zu fördern. Im Szenario "Download" wurde in einem Seminar zu Forschungs- und Evaluationsmethoden im Hauptstudium zum Thema "Test- und Fragebogenanalyse mit probabilistischen Methoden" die Unterstützung durch die Lernplattform StudIP erprobt. (DIPF/Autor)
DIPF-Abteilung: Bildungsqualität und Evaluation
-
-
Autor*innen: Seeber, Susan
Titel: Berufsspezifische Fachleistungen in Ausbildungsberufen der Bereiche Gesundheit und Körperpflege
Aus: Lehmann, Rainer H.; Seeber, Susan (Hrsg.): ULME III: Untersuchung von Leistungen, Motivation und Einstellungen der Schülerinnen und Schüler in den Abschlussklassen der Berufsschulen, Hamburg: Behörde für Bildung und Sport, 2007 , S. 191-213
Dokumenttyp: 4. Beiträge in Sammelwerken; Sammelband (keine besondere Kategorie)
Sprache: Deutsch
Schlagwörter: Berufsausbildung; Auszubildender; Schülerleistung; Leistungsmessung; Fachkompetenz; Ausbildungsberuf; Friseur; Medizinischer Fachangestellter; Zahnmedizinischer Fachangestellter; Fachkompetenz; Grundbildung; Empirische Untersuchung; Testmethodik; D-Hamburg; Deutschland
Abstract: Die Hamburger Schulleistungsstudie ULME III umfasste - neben gewerblich-technischen und kaufmännischen Berufen - auch Jugendliche in den Ausbildungsgängen Medizinische/-r und Zahnmedizinische/-r Fachangestellte/-r sowie Friseur/-in. Im Beitrag werden die von Hamburger Berufsschullehrern in Kooperation mit dem Institut für Berufs- und Wirtschaftspädagogik der Universität Hamburg entwickelten berufsspezifischen Fachleistungstests für die drei genannten Ausbildungsberufe vorgestellt und hinsichtlich teststatistischer Gütekriterien ausgewertet. Weiterhin werden die berufsfachlichen Schülerfähigkeiten am Ende der Ausbildung ausführlich berichtet, wobei auf die Lage spezifischer Schülergruppen differenziert eingegangen wird. Die multivariaten Analysen zum Einfluss individueller Schülermerkmale auf die Entwicklung beruflicher Fachkompetenz unterstreichen die substanzielle Bedeutsamkeit allgemeiner kognitiver Grundqualifikationen im Sprach- und Leseverständnis sowie in grundlegenden Rechenfertigkeiten. (DIPF/Autor)
DIPF-Abteilung: Steuerung und Finanzierung des Bildungswesens
-
-
Autor*innen: Seeber, Susan
Titel: Berufsspezifische Fachleistungen in ausgewählten Berufen des Bereichs Wirtschaft und Verwaltung am Ende der Berufsausbildung
Aus: Lehmann, Rainer H.; Seeber, Susan (Hrsg.): ULME III: Untersuchung von Leistungen, Motivation und Einstellungen der Schülerinnen und Schüler in den Abschlussklassen der Berufsschulen, Hamburg: Behörde für Bildung und Sport, 2007 , S. 107-157
Dokumenttyp: 4. Beiträge in Sammelwerken; Sammelband (keine besondere Kategorie)
Sprache: Deutsch
Schlagwörter: Auszubildender; Kaufmännische Berufe; Verwaltungsberufe; Schülerleistung; Leistungsmessung; Fachkompetenz; Beruf; Methode; Testmethodik; Validität; Vorbildung; Empirische Untersuchung; D-Hamburg; Deutschland
Abstract: Im Rahmen der Hamburger Schulleistungsstudie ULME III wurden berufsspezifische Fachleistungen in insgesamt sieben kaufmännischen Ausbildungsberufen am Ende der Ausbildung untersucht. Die Fachleistungstests beinhalten ein relativ breit gefächertes Anforderungsspektrum, das an das schulische Curriculum des jeweiligen Ausbildungsberufs angelehnt ist. Im Beitrag werden die Struktur und Dimensionalität der Fachleistungstests, deren Zuverlässigkeit und Validitätdargestellt sowie zentrale Befunde zu den Schülerfähigkeiten herausgearbeitet. In ausgewählten Berufen gestatteten die Tests die Erstellung von Kompetenzprofilen, die über spezifische Stärken und Schwächen der angehenden kaufmännischen Angestellten Auskunft geben und Rückschlüsse auf das Verhältnis von Testperformanz und didaktischen Angeboten geben. Darüber hinaus wird dem Zusammenhang zwischen individuellen Eingangsvoraussetzungen sowie sozio-biografischen Kontextfaktoren und der Ausprägung beruflicher Fachkompetenz nachgegangen. (DIPF/Autor)
DIPF-Abteilung: Steuerung und Finanzierung des Bildungswesens
-
-
Herausgeber*innen: Klieme, Eckhard; Pauli, Christine; Reusser, Kurt; Lipowsky, Frank; Drollinger-Vetter, Barbara; Hartig, Johannes
Titel: Dokumentation der Erhebungs- und Auswertungsinstrumente zur schweizerisch-deutschen Videostudie "Unterrichtsqualität, Lernverhalten und mathematisches Verständnis" Teil 2, Leistungstests
Erscheinungsvermerk: Frankfurt am Main: Deutsches Institut für Internationale Pädagogische Forschung, 2006 (Materialien zur Bildungsforschung, 14)
DOI: 10.25656/01:3107
URN: urn:nbn:de:0111-opus-31078
URL: https://www.pedocs.de/frontdoor.php?source_opus=3107
Dokumenttyp: 2. Herausgeberschaft; Sammelband (keine besondere Kategorie)
Sprache: Deutsch
Schlagwörter: Mathematikunterricht; Kompetenz; Schüler; Schülerleistung; Leistungstest; Testmethodik; Testdurchführung; Testauswertung; Deutschland; Schweiz
Abstract: Im zweiten Band werden die im Rahmen der Studie ["Unterrichtsqualität, Lernverhalten und mathematisches Verständnis"] eingesetzten Leistungstests und die dazugehörigen Codieranwendungen dokumentiert und statistische Kennwerte der Items und Skalen vorgestellt. Im Rahmen der Studie werden fünf Leistungstests eingesetzt. Diese dienen zum einen der längsschnittlichen Ermittlung der Leistungsentwicklung der Lernenden über ein gesamtes Schuljahr, zum anderen dermikrogenetischen Erfassung der Leistungsentwicklung im Rahmen der Unterrichtseinheit zur Einführung in die Satzgruppe des Pythagoras. (DIPF/Orig.)
DIPF-Abteilung: Bildungsqualität und Evaluation
-
-
Autor*innen: Klieme, Eckhard
Titel: Kompetenzerwerb in Deutsch und Englisch. Ergebnisse der DESI-Studie
In: Schulverwaltung. Ausgabe Hessen und Rheinland-Pfalz, 11 (2006) 5, S. 137-140
Dokumenttyp: 3b. Beiträge in weiteren Zeitschriften; praxisorientiert
Sprache: Deutsch
Schlagwörter: Schülerleistung; Deutschunterricht; Englischunterricht; Schuljahr 09; Lernerfolg; Bildungsstandard; Kompetenz; Qualität; Vergleichsuntersuchung; Befragung; Testmethodik; Deutschland
Abstract: Zu Beginn und am Ende des Schuljahres 2003/2004 wurden 11.000 Schülerinnen und Schüler aller deutscher Schularten zu 15 unterschiedlichen Kompetenzen in den Fächern Deutsch und Englisch befragt; ergänzt durch Befragungen von Lehrkräften, Eltern und Schulleitungen sowie Videoaufnahmen im Englischunterricht. Die Befunde dieser DESI-Studie werden hier präsenstiert, fokussiert auf: die Entwicklung von Messinstrumenten für sprachliche Kompetenzen, Leistungsstand und Leistungsentwicklung in der neunten Jahrgangsstufe, neue Aussagen zum Lernerfolg von Schülern mit nicht-deutscher Erstsprache, Qualität des Deutsch- bzw. des Englischunterrichts, Schulqualität und Kompetenzentwicklung. Auch erschienen in: Schulverwaltung. Ausgabe Nordrhein- Westfalen, 17(2006)5, S. 144-146; Schulverwaltung. Ausgabe Baden-Württemberg, 15(2006)5, S. 116-119; Schulverwaltung. Ausgabe Bayern, 20(2006)4, S. 124-127
DIPF-Abteilung: Bildungsqualität und Evaluation