Mit der Implementation von Bildungsstandards vollzieht sich im österreichischen Bildungssystem ein Paradigmenwechsel, der in nie zuvor gesehenem Maße den Output  des Systems – d. h. die Leistungen und Kompetenzen, die im Bildungswesen erzeugt werden – in den Vordergrund rückt und zum Gegenstand von Evaluation macht.
Eine wesentliche Aufgabe kommt im Zusammenhang mit der Implementation der wissenschaftlichen Begleitforschung durch das BIFIE Graz zu, wobei in den Jahren 2010-2012 vor allem zwei Leitfragen im Zentrum der Arbeit stehen:

1. Welche Merkmale/Subprozesse der Implementation von Bildungsstandards werden positiv rezipiert und wie können solche positiven Effekte gefördert werden?
2. An welchen Punkten der Arbeit mit den Standards bzw. den Testergebnissen treten Probleme auf, und welche Veränderungen sind erforderlich, damit diese beseitigt bzw. Verbesserungen erzielt werden können?

Alle Fragestellungen und Untersuchungsansätze folgen der Grundannahme, dass Evaluation im Dienste einer verbesserten Weiterentwicklung stehen soll, d.h. das Ziel besteht darin, handlungsrelevantes Wissen für die laufende Prozessoptimierung bereitzustellen.
In diesem Zusammenhang werden sechs Bereiche näher analysiert:

• die Rezeption der Bildungsstandards und deren Implementation
• die Rückmeldemoderation
• die Ergebnisrückmeldung
• die Itementwicklungsarbeit
• die Testadministration und
• die Raterausbildung.

Vom methodischen Gesichtspunkt kommen vor allem Fragebogenerhebungen – ergänzt durch qualitative Interviews – zum Einsatz.

Derzeit geplante Erhebungen im Jahr 2010

Fragebogenerhebung zur Evaluation der Ergebnisrückmeldung und zur Erfassung des Bedarfs an Rückmeldemoderation – (Lehrer- und Schulleiterbefragung SEK I)

• Zielgruppe: Schulleiter/innen und Lehrer/innen an jenen Schulen, die an der Baselinetestung 8. Schulstufe teilgenommen haben (204 Schulen, 204 Schulleiter/innen, ca. 2000 Lehrer/innen)
• Instrumente: Fragebögen für Schulleiter/innen und Lehrer/innen zur Verständlichkeit und zur Gestaltung der Ergebnisaufbereitung sowie zum Unterstützungsbedarf bei der Interpretation der rückgemeldeten Testergebnisse (→ Bedarf an Rückmeldemoderation)
• Zeitraum: Jänner/Februar 2010
• Information Schulen/Behörden etc.: Die Information der Projektleitung im BMUKK, der Schulaufsicht sowie der Schulleitung erfolgt durch die Zentrumsleitung/Projektleitung in Graz.
• Teilnahmeverpflichtung: Die Teilnahme erfolgt auf freiwilliger Basis.
• Datenschutz: Es werden keine personenbezogenen Daten erhoben.
• Geplante Berichte: BIFIE-Report (Juni 2010)
• Auskunft: Werner Specht, Maria Grillitsch

Strukturierte Interviews zur Evaluation der Rückmeldemoderation – Ausgangslage (Befragung von Vertreter/innen der Schulaufsicht)

• Zielgruppe: Bezirksschul- und Landesschulinspektor/innen aus dem Pflichtschul- und AHS-Bereich (ca. 30 Personen)
• Instrumente: Interviews zur Erfassung der Ausgangssituation bei der Schulaufsicht (Interesse an der Durchführung von Rückmeldemoderationen, Zeitressourcen, Erfordernisse im Hinblick auf die Gestaltung der Moderatorenausbildung etc.)
• Zeitraum: Mai/Juni 2010
• Information Schulen/Behörden etc.: Die Information der Projektleitung im BMUKK und der Schulaufsicht erfolgt durch die Zentrumsleitung/Projektleitung in Graz.
• Teilnahmeverpflichtung: Die Bereitschaft zur Teilnahme wird vorab geklärt.
• Datenschutz: Die Daten der interviewten Personen werden in einer zusammenschauenden Analyse dargestellt und nicht personenbezogen ausgewertet.
• Geplante Berichte: Im Sinne der formativen Evaluation erfolgt die Ergebnisrückmeldung in Form eines schriftlichen Berichts, der vor allem an die Verantwortlichen für die Durchführung der Rückmeldemoderation/Ausbildung der Rückmeldemoderatoren ergeht (Juli 2010).
• Auskunft: Werner Specht, Maria Grillitsch

Fragebogenerhebung zur Rezeption der Bildungsstandards und deren Implementation (Lehrer- und Schulleiterbefragung VS)

• Zielgruppe: Schulleiter/innen und Lehrer/innen an jenen Schulen, die an der Baselinetestung 4. Schulstufe teilnehmen (ca. 300 Schulen, ca. 300 Schulleiter/innen bzw. 450 Lehrer/innen)
• Instrumente: Fragebögen zur Rezeption der Bildungsstandards und deren Implementation (Informationsstand zum Thema Bildungsstandards, Einstellungen gegenüber Bildungsstandards, Nutzung von Begleitangeboten, Unterstützungs- und Fortbildungsbedarf etc.: Zusatz zu den Fragebögen vom BIFIE Salzburg)
• Zeitraum: Mai/Juni 2010
• Information Schulen/Behörden etc.: Die Information der Projektleitung im BMUKK, der Schulaufsicht sowie der Schulleitung erfolgt durch die Zentrumsleitung/Projektleitung in Graz.
• Teilnahmeverpflichtung: Die Teilnahme erfolgt auf freiwilliger Basis.
• Datenschutz: Es werden keine personenbezogenen Daten erhoben.
• Geplante Berichte: BIFIE-Report (Ende 2010)
• Auskunft: Werner Specht, Maria Grillitsch

Fragebogenerhebung zur Evaluation der Ergebnisrückmeldung (Schüler- und Elternbefragung)

• Zielgruppe: Schüler/innen, die an der Baselinetestung 4. Schulstufe teilgenommen haben (und deren Eltern)
• Instrumente: Kurzfragebogen (online) zur Verständlichkeit und zur Gestaltung der Ergebnisaufbereitung
• Zeitraum: Oktober bis Dezember 2010
• Information Schulen/Behörden etc.: Die Information der Projektleitung im BMUKK, der Schulaufsicht sowie der Schulleitung und der Bundeselternvertreter/innen erfolgt durch die Zentrumsleitung/Projektleitung in Graz.
• Teilnahmeverpflichtung: Die Teilnahme erfolgt auf freiwilliger Basis.
• Datenschutz: Die Befragung erfolgt anonym, es werden lediglich indirekt personenbezogene Daten erhoben.
• Geplante Berichte: Im Sinne der formativen Evaluation erfolgt die Rückmeldung der Befragungsergebnisse in Form eines schriftlichen Berichts, der vor allem an die Verantwortlichen für die Gestaltung/Durchführung der Ergebnisrückmeldung ergeht (Februar 2011).
• Auskunft: Werner Specht, Maria Grillitsch

Strukturierte Interviews zur Evaluation der internen Testadministration (Lehrer- und Schulleiterbefragung SEK I)

• Zielgruppe: Lehrer/innen- und Schulleiter/innen der SEK I (ca. 30 Personen an 10 Schulen)
• Instrumente: Interviews zur internen Testadministration (Erwartungen, Rahmenbedingungen, Auswahl der Testleiter/innen etc.)
• Zeitraum: Oktober 2010
• Information Schulen/Behörden etc.: Die Information der Projektleitung im BMUKK, der Schulaufsicht sowie der Schulleitung erfolgt durch die Zentrumsleitung/Projektleitung in Graz.
• Teilnahmeverpflichtung: Die Bereitschaft zur Teilnahme an den Interviews wird vorab geklärt.
• Datenschutz: Die Daten der interviewten Personen werden in einer zusammenschauenden Analyse dargestellt und nicht personenbezogen ausgewertet.
• Geplante Berichte: Im Sinne der formativen Evaluation erfolgt die Ergebnisrückmeldung in Form eines schriftlichen Berichts, der vor allem an die Verantwortlichen für die Durchführung der Testadministration ergeht (Ende 2010).
• Auskunft: Werner Specht, Maria Grillitsch