Der Lehrer stört

Die Herausforderung

Wie können individuelle Unterstützungssituationen in offenen Phasen des Unterrichts von Lehrern für Schüler so beobachtet werden, dass der Einfluss durch die Beobachtung minimiert wird, und wie können die Effekte der Unterstützung gemessen werden?

Instrumente

Basierend auf Theorien zur Lernzeitnutzung sowie zum Lehrerunterstützungsverhalten wurden für diese Untersuchung drei Kodiermanuale entwickelt und hinsichtlich der Reliabilität geprüft.

Für die Lernzeitnutzung wurde lediglich ein Merkmal erhoben. Dieses gab an, ob sich der Schüler gerade mit der gestellten Aufgabe beschäftigte, ob er organisatorische Dinge erledigte, oder ob er gerade keine auf den Unterricht bezogene Aktivitäten ausführte. In letzterem Fall wurde noch unterschieden, ob er mit der Lernaufgabe fertig war, und dann ja durchaus berechtigt keine weiteren Lernaktivitäten ausübte, oder ob er während der Bearbeitungszeit von Lernaufgaben private Tätigkeiten ausübte. Nach Versuchen hinsichtlich des Aufwands der Kodierung bei gleichzeitiger Beachtung der Intercoderreliabilität entschieden wir uns für ein time-sampling mit Einheiten von 10 Sekunden Dauer. Insgesamt wurden so 286.817 Einzelbeobachtungen des Schülerverhaltens kodiert. Aufgrund der geringen Interpretationsmöglichkeiten seitens der Kodierer lag hier die Intercoderreliabilität (Kappa) immer über 0.9.

Zur Erfassung des Lehrerunterstützungsverhaltens wurde zunächst das gesamte Event einer Unterstützung mittels event-sampling beschrieben. Erfasst wurde u.a. von wem das Unterstützungsevent ausging, sowie an wen sich die Unterstützung richtete. Zudem wurde für jede Unterstützung festgehalten, aus welchen Einzelaktivitäten eine Unterstützung bestand. Unterschieden wurden hier u.a. Erklärungen, Steuerungen des Lernhandelns, motivierendes Lehrerhandeln, Dialoge auf Augenhöhe, Erklärungen des Sinns der Aufgabe und diagnostische Aktivitäten.

Da hier sowohl die kodierten Zeiten als auch die Interpretation der jeweiligen Handlung des Lehrers variieren konnten, und somit der Interpretationsspielraum recht groß war, wurde ein Training der Kodierer eingeführt. Echte Kodierungen durften erst durchgeführt werden, wenn das Training und ein darauf basierender Test erfolgreich absolviert wurden. Im Anschluss konnte die Intercoderreliabilität (Kappa) auf einen Wert von über 0.6 (befriedigend) gesteigert werden. Insgesamt konnten 860 Unterstützungshandlungen mit 4.973 Teilaktivitäten beobachtet werden.

Für das beschriebene Untersuchungsdesign ist das Softwarepaket Mangold INTERACT nach unserer Auffassung deutlich geeignetste Werkzeug. Dies beginnt bereits mit der besonderen Form der Datenaufzeichnung, die im realen Kontext von Schulen und Klassenräumen (ohne Laborbedingungen) stattfindet. 

Die Möglichkeit der nachträglichen Synchronisation und parallelen, zu- und abschaltbaren Quellen für die Beobachtung und Kodierung (bis zu sechs HD-Videospuren und bis zu 30 Tonspuren, wobei nie alle gleichzeitig laufen) hat unser Forschungsdesign überhaupt erst ermöglicht.

Entwicklung von Kodiermanualen

Jedes der Kodiermanuale durchlief in der Entwicklung mehrere Iterationen. Dabei wurde immer wieder geprüft, welche Interpretationsspielräume noch gegeben waren, welche eliminiert werden sollten. 

Die Prüfung der Interkoderreliabilität sowie die Visualisierungsmöglichkeiten von Abweichungen zwischen den Kodierungen gleicher Aufzeichnungen leistete hierbei eine große Unterstützung.

The training inwas supported by a team of tutors and carried out flawlessly. The quality of the codings was assured by randomly comparing different codings of the same lesson. The aggregation of data was very well supported by the export functions of the software.

Auswertung

Mangold INTERACT provides comprehensive evaluation features, which are available for diverse applications. It was easy to export all data sets and import them into a relational database for the summary analysis. From there, they can easily be processed further for statistical analysis, in our case with SPSS by IBM.

Support

Es kommt immer einmal vor, dass wir uns die Frage stellen, ob wohl eine bestimmte Fragestellung oder eine spezifische Zusammenstellung von Daten mit der Software möglich ist. Mitarbeiter wenden sich dann gern an das kompetente Team von Mangold, die zum einen ein offenes Ohr für neue Fragestellungen haben, und immer mit guten Ratschlägen oder Verfahrensweisen zur Seite stehen. 

So konnten immer wieder Probleme gelöst werden, die ansonsten zu einer Einstellung des Forschungsinteresses geführt hätten. Insbesondere in der noch andauernden Zeit der Pandemie hat uns Mangold ein reibungsloses Weiterarbeiten an unseren Fragestellungen ermöglicht, obwohl dies über die erworbenen Lizenzen nicht abgedeckt gewesen wäre. Die dadurch gezeigte Flexibilität und das Entgegenkommen des Unternehmens Mangold sucht ihresgleichen.

Persönliches Feedback

Als Leiter eines Teams aus wissenschaftlichen und studentischen Mitarbeitern sowie als Betreuer von jährlich etwa 20 bis 30 Masterarbeiten liefert mir Mangold INTERACT eine Unterstützung, die ihresgleichen sucht. Über alle Phasen des Forschungsprozesses erfüllen die Funktionen der Software meine Erwartungen und gehen häufig darüber hinaus. 

Teilweise wurden Fragestellungen und deren Beantwortung durch noch unentdeckte Funktionen der Software sogar inspiriert, die dann auf der Basis des bereits vorhandenen Datenmaterials beantwortet werden konnten. 

Wir stehen jetzt kurz vor der Veröffentlichung unserer Forschungsergebnisse und erwarten, auch aufgrund der Nutzung der durch Mangold INTERACT erst möglichen Verfahren eine große Resonanz in der wissenschaftlichen Community. 

Für zukünftige Forschungsprojekte würde ich jederzeit wieder auf die Software zurückgreifen.