Search

Poor performance in international student assessment has led to calls to enhance evidence-based practice in the German educational system. Yet indications about the extent to which German practitioners use data is limited, and little is known about factors influencing data-driven school improvement. Using data from three studies and comparing schools in different circumstances, we examined the perceived usefulness and the application of 13 different sources of information that can inform teachers’ and school leaders’ practice by means of standardised questionnaires. The results showed that practitioners attributed little usefulness to a standards-based reform and consequently hardly used these data. Instead, they claimed to prefer process-oriented information sources, such as student feedback. A comparison of the different samples indicated that data use might be lower in schools in challenging circumstances. In face-to-face interviews, a considerable proportion of the interviewees mentioned little data use due to a lack of time. Furthermore, problems in recontextualising evidence and adapting it to personal needs were mentioned. Some practitioners also stated shortcomings in the quality and validity of the data, which was particularly true for findings from school inspections and standardised testing of students.

Auf Basis einer Mixed-Methods-Studie an rheinland-pfalzischen Schulen untersucht der vorliegende Beitrag die wahrgenommene Nutzlichkeit sowie die selbstberichtete Nutzung von unterschiedlichen Instrumenten der internen und externen Evaluation durch Akteure in der Schulpraxis. Dabei wird auch einem moglichen empirischen Zusammenhang mit der Schulkultur nachgegangen. Es kann auf eine schriftliche Befragung von Schulleitungsmitgliedern (n = 297) und Lehrkraften (n = 1230) zuruckgegriffen werden. Zur Exploration der Grunde fur die Nutzung bzw. Nicht-Nutzung evidenzbasierter Wissensbestande wurden erganzend an sieben Schulen insgesamt 35 leitfadengestutzte Interviews gefuhrt. Die Ergebnisse zeigen, dass Schulleitungen und Lehrkrafte gleichermasen insbesondere prozessbezogene Informationsquellen mit Bezug zur konkreten Unterrichtsebene nutzen, wahrend sie den neuen Steuerungsinstrumenten (Schulleistungsvergleiche, Lernstandserhebungen, Schulinspektionen) eine eher geringe Nutzlichkeit attestieren und diese Quellen in der Folge auch nur wenig intensiv gebrauchen. Die Evidenznutzung scheint tendenziell an familiaren und innovativen Schulen starker ausgepragt zu sein als an Schulen mit einer Schwerpunktlegung auf Wettbewerbsfahigkeit und Regelhaftigkeit.

Ein wesentliches Merkmal der Neuen Steuerung im Schulsystem der deutschsprachigen Lander stellt die Kopplung zwischen der Formulierung von Standards und der Uberprufung der Zielerreichung dar. Die ruckgemeldeten Ergebnisse sollen zum einen Bildungspolitik und -administration informieren, zum anderen sollten sie idealtypisch Qualitatsentwicklungen in Schulen anstosen. Inwiefern und unter welchen Umstanden dies gelingt, ist jedoch noch vergleichsweise wenig erforscht. Auf Basis einer Mixed-Methods-Studie in Rheinland-Pfalz geht der Artikel der Frage nach, wie auf den Bildungsstandards aufbauende Instrumente der Qualitatssicherung von Schulleitungen und Lehrkraften bewertet, rekontexutalisiert und genutzt werden. Die Analysen zeigen, dass prozessbezogene Verfahren, wie kollegiale Hospitationen oder das Schulerfeedback, als nutzlicher bewertet und intensiver verwendet werden als Instrumente der Neuen Steuerung, die vorwiegend als Kontrolle interpretiert werden. Aus den Daten wird ersichtlich, dass die Bereitstellung von Evidenzen keinen Automatismus der Nutzung nach sich zieht, sondern dass eine evidenzinformierte Schulentwicklung entsprechender Unterstutzung, beispielsweise durch padagogische Landesinstitute, bedarf.

Im westeuropaischen und angloamerikanischen Raum ist ein weitgehender Konsens daruber zu beobachten, die Leistungsfahigkeit der jeweiligen Bildungssysteme durch eine starkere Evidenzbasierung erhohen zu wollen. Insbesondere den Instrumenten der sog. Neuen Steuerung wird zugesprochen, durch eine verstarkte Rechenschaftslegung sowie die Generierung und Ruckmeldung von Daten die Effektivitat und Effizienz des Schulsystems steigern zu konnen.

Im Rahmen der Fragebogenerhebung konnte identifiziert werden, welche Informationsquellen von den befragten Schulleitungsmitgliedern und Lehrkraften als besonders nutzlich erachtet und welche vergleichsweise intensiv fur die eigene Arbeit genutzt werden. Die quantitativen Daten zeigen eine hohe Nutzung von internen, selbst durch die Schule bzw. durch einzelne Schulleitungsmitglieder oder Lehrkrafte generierten Informationen, wie bspw. kollegialen Unterrichtsentwicklungsmasnahmen oder Formen des Schulerfeedbacks.

Auch wenn dies regelmasiger Anknupfungspunkt wissenschaftlicher Studien zu schulischen Steuerungs- und Entwicklungsthemen der vergangenen Jahre ist, so stehen die PISA-Studie und die daran anschliesende Diskussion infolge des unbefriedigenden Abschneidens deutscher Schulerinnen und Schuler doch unzweifelhaft fur eine neue Ara in der Debatte uber die Struktur und die Qualitat des deutschen Schulsystems (Bromme, Prenzel & Jager 2014: 37).

Nachfolgend sollen zur Beantwortung der formulierten Forschungsfragen die Ergebnisse der Fragbogenstudie und der vertiefenden Interviewstudie zusammengefuhrt werden. Einige Befunde der Fragebogenstudie lassen sich erst vor dem Hintergrund der vertiefenden Interviews deuten, in denen Grunde fur und gegen ein evidenzbasiertes Handeln von Akteuren in der Schulpraxis herausgearbeitet werden konnten.

Zwar existiert bisher kein allgemein akzeptiertes und geteiltes Rahmenmodell zur Datennutzung von Schulen und schulischen Akteuren (Schildkamp, Karbautzki, Breiter, Marciniak & Ronka 2013: 28), doch kann in Vorbereitung auf die Entwicklung eines eigenen Rahmenmodells (Kapitel 7.1) auf einige Modelle und Theorieansatze zuruckgegriffen werden. Wie im Modell von Reusser skizziert (vgl. Abbildung 1), kann die Ruckmeldung der Ergebnisse aus der Uberprufung von Bildungsstandards als Feedback interpretiert werden, aus dem Qualitatsentwicklungen auf Schul- und Unterrichtsebene abgeleitet werden sollen.

In seiner „Neuen Theorie der Schule“ beschreibt Fend (2006) das Bildungssystem als einen institutionellen Akteur, da „naturliche“ Personen im Rahmen normativer Vorgaben und inkorporierter Regelungen zur Erfullung eines von externen Akteuren vergebenen Auftrags „zusammenhandeln“ (Fend 2006: 171). Derartige institutionelle Akteure, in denen Entscheidungsinstanzen (Organe), Entscheidungsberechtigungen (Kompetenzen) und Entscheidungen (Verfahren) geregelt sind, entstehen durch Vergesellschaftung.

Bei der Betrachtung der Rahmenmodelle zum datengestutzten Handeln in Schulen im vorangegangenen Kapitel konnten Merkmale des Datenangebots sowie Merkmale der Datenempfanger auf individueller und organisationaler Ebene als mogliche Einflussfaktoren identifiziert werden.

Die bereits dargestellten theoretischen Ansatze und empirischen Befunde sollen im Folgenden in ein Arbeitsmodell zur Datennutzung in Schulen integriert werden (Abbildung 25). Zudem werden die forschungsleitenden Fragen weiter ausdifferenziert und empirisch uberprufbare Hypothesen abgeleitet.

Die vergleichende Betrachtung der Modellansatze zur Datennutzung in Kapitel 3 hat gezeigt, dass es in den Modellen an theoretisch begrundeten und empirisch uberprufbaren Ursache-Wirkung-Zusammenhangen mangelt. Aus diesem Grunde werden in diesem Abschnitt Theorieansatze dargestellt, die geeignet erscheinen, das Verhalten schulischer Akteure zu erklaren und Hypothesen zur Nutzung respektive Nicht-Nutzung von evidenzbasierten Wissensbestanden ableiten zu konnen. Neben padagogischen Zugangen werden auch psychologische, soziologische und okonomische Ansatze einbezogen.

Im Folgenden werden Ergebnisse der Fragebogenstudie dargestellt. Dazu werden zunachst deskriptive Befunde zur Evidenzbasierung der schulischen Akteure berichtet, bevor der Zusammenhang zwischen Schulkultur und evidenzbasiertem Handeln analysiert wird.

Purpose – In Germany, principals’ working environments are data-rich for school improvement purposes in a rather low-stakes test-regime. An effective use of externally as well as internally generated data, also known as data wise leadership, is considered to be a key competence of successful principals. The purpose of this paper is to describe data use practices in German schools, especially focussing on schools facing challenging circumstances. Design/methodology/approach – The paper draws on findings from two projects funded by the German Federal Ministry of Education and Research. A standardized questionnaire study was conducted to measure the usage of available data for school improvement quantitatively. The perceived usefulness, the reflection upon, and the use of information sources by principals were measured. Moreover, semi-structured interviews with school leaders from schools in deprived areas were conducted, transcribed and analyzed by means of qualitative content analysis. Findings – The resul...