Leistungsbeurteilung in der NMS

1. Leistungsbeurteilung in der NMS

2. LFLB (Leistungsfeststellung & Leistungsbeurteilung) ist in Entwicklung „Zu den bedeutsamsten aktuellen Entwicklungen im Rahmen der Weiterentwicklung von LBLF gehören das Projekt Bildungsstandards, die Initiative qibb, Bemühungen im Rahmen der ‚Neuen Mittelschule‘ und die Teilzentralisierung der Reifeprüfung.“ Nationaler Bildungsbericht Österreich 2009, Band 2, „B6: Leistungsfeststellung und Leistungsbeurteilung“ von Ferdinand Eder, Georg Hans Neuweg und Josef Thonhauser

3. Lerndesignarbeit PRÜFSTAND ZIEL Das Ziel ist das Ziel. Aufgaben& Kriterien Viele Wege führen nach Rom. Lern- & Lehr-prozessevom Ende her START

4. 3-K Orientierung für die Beurteilungspraxis 11 Kernideen

5. Kernideen zur 3-K Orientierung • Schon immer gab es eine Kluft zwischen Rechtslage und Beurteilungspraxis (s. Nationaler Bildungsbericht 2009 Band 2), die es gilt, auf allen Systemebenen wahrzunehmen und proaktiv zu überwinden. • Kompetenzen, Kriterien und Komplexitätsgrade sind im Einklang mit dem Fachlehrplan und den Bildungsstandards nach dem Prinzip „vom Ende her“ von der Lehrperson im Vorfeld des Unterrichts festzulegen. Diese Aufgabe kann insbesondere von professionellen Lerngemeinschaften,z. B. Fachteams, gut geleistet werden. • Die Lernzielformulierungen beschreiben lehrplankonform, welche Kompetenz(en) am Ende beurteilt werden. • Die Kriterien und die Komplexitätsgrade in einem Beurteilungsraster konkretisieren das Ziel in der entsprechenden Schulstufe. • Lernziele, Kriterien und Beurteilungsraster werden nach dem Prinzip der Transparenz den Lernenden im Vorfeld kommuniziert, damit alle Beteiligten die Lern- und Lehrprozesse zielgerecht gestalten können.

6. Kernideen zur 3-K Orientierung • Kriterien und Beschreibungen von Komplexitätsgraden in einem Beurteilungsraster orientieren sich an den Kriterienkatalogen der BiSta bzw. an den Diagnoseinstrumenten der IKM (Informelle Kompetenzmessung) des BIFIEs. • Aufgaben für die Leistungsfeststellung bilden das gesamte Leistungsspektrum entsprechend der jeweiligen Schulstufe ab und alle Schüler/innen bekommen die gleichen Aufgaben. • Die Notenskalen beziehen sich auf das gesamte Leistungsspektrum einer bestimmten Schulstufe. • Im Einklang mit den Beurteilungsstufen der LBVO gelten weiterhin die Faktoren „eigenständige Anwendung“ sowie „Wesentlichkeit“ für die Ermittlung der Ziffernnote (ob bei punktueller Leistungsbeurteilung oder Gesamtnote). • Die Notenskalen der 5./6. Schulstufe sowie der 7./8. Schulstufe werden nicht zueinander in Bezug gesetzt. • Personenbezogene Zuschreibungen, Vorwegnahmen und Urteile sind nicht zulässig: Beurteilung orientiert sich ausschließlich an der Sachnorm im Einklang mit den rechtlichen Rahmenbedingungen (SchUG, SchOG, LBVO, NMS-LPVO, NMS-Richtlinien).

7. Um Kompetenzen zu Beurteilen… …braucht es • Aufgaben, die das volle Spektrum an Transfer (Eigenständigkeit, Anwendung von Wissen & Können auf neuartige Aufgaben) sichtbar machen, • Kriterien, die für die Beurteilung derQualität des Ergebnisses der Handlung herangezogen werden, • Beschreibungen der Leistungen auf unterschiedlichen Qualitätsniveaus in einem Beurteilungsraster, der an den Kriterien und am Zielbild für die jeweilige Schulstufe orientiert ist.

8. Um flexibel und zielgerecht zu differenzieren… …braucht es • die Festlegung von Aufgaben, Kriterien und Beschreibungen vorher, • damit nachher Lehr- und Lernprozesse ausgehend vom Ziel, das durch sie erreicht werden soll, gestaltet werden können.

9. Leistungsbeurteilungspraxis im Überblick Von Informationsfeststellung zur Leistungsfeststellung zur Notenfindung

10. In der LBVO(s. Eder et al, https://www.bifie.at/buch/1024/b/6 ) • Leistungsfeststellung= ein Vorgang des Messens • Leistungsbeurteilung = ein Vorgang des Bewertens der gemessenen Leistungen entsprechend einer Notenskala • Zugleich scheint „Leistungsbeurteilung“ in der LBVO auch als Oberbegriff für den gesamten Prozess des Prüfens und Beurteilens in der Schule verwendet zu werden.

11. Formen der Leistungsfeststellung • Informationsfeststellungen „Feststellungen der Leistungen der Schüler, die dem Lehrer nur zur Information darüber dienen, auf welchen Teilgebieten die Schüler die Lehrziele erreicht haben und auf welchen Teilgebieten noch ein ergänzender Unterricht notwendig ist“ (§ 1 Abs. 2 LBVO) • Punktuelle Leistungsfeststellungen • Unterrichtsbegleitende Leistungsfeststellungen („Mitarbeitsfeststellung“)

12. Denkpause Wie und wann mache ich • Informationsfeststellungen? • Punktuelle Leistungsfeststellungen? • Unterrichtsbegleitende Feststellungen? • Welche werden auch benotet?

13. Ergebnis vs. Ziffernote Der Unterschied zwischen Ergebnis und Ziffernote ist wesentlich: • Das Ergebnis = der Messwert einer Leistung, die gemessen und aufgezeichnet wird („score“) • Die Ziffernote = eine qualitative Aussage über die Leistung („grade“)

14. Leistungsbeurteilungpraxis Leistungsbeurteilung umfasst 3 Praxen: • Formative Beurteilung = Informationsfeststellung • Summative Beurteilung = Leistungsfeststellung & Leistungsbeurteilung • Ermittlung Gesamtnote = Übersetzung der Leistungsergebnisse in eine Ziffernote Jede Praxis hat eigene Prozesse und Werkzeuge!

15. Denkpause Welche Werkzeuge verwende ich für: • formative Leistungsbeurteilung? • summative Leistungsbeurteilung? • Ermittlung einer Note?

16. 3 Praxen der Leistungsbeurteilung: Ziele Informationsfeststellung Ziel: Lücke zwischen Ist-Stand und Ziel zu erschließen, um sie schließen zu können (Feedbackfunktion). Das Ergebnis wird von Lernenden und Lehrenden für nächste Schritte verwendet und fließt nicht in die Benotung ein. Leistungsfeststellung & Leistungsbeurteilung Ziel: Beurteilungsrelevante Daten aufzuzeichnen bzw. Kompetenz nach Qualitätsstufen zu beurteilen. Das Ergebnis und/oder die punktuelle Note wird für die Ermittlung der Gesamtnote aufgezeichnet. Ermittlung Gesamtnote Ziel: Ergebnisse und punktuelle Noten werden in eine Gesamtnote übersetzt, um eine allgemeine Aussage über die Leistungen zu einem bestimmten Zeitpunkt zu treffen.

17. Praxisprobleme bei der summativen Beurteilung (LFLB) (s. Eder et al, https://www.bifie.at/buch/1024/b/6 ) Leistungsfeststellung & Leistungsbeurteilung 1. Die aktuelle Rechtslage unterscheidet zwischen „Feststellung“ & „Beurteilung“, was praktisch gesehen dazu führt, dass sowohl Ergebnisse („scores“) als auch Noten („grades“) in den Aufzeichnungen vorkommen. Allerdings ist die Verwendung der Beurteilungsstufen der Notenskala (s. LBVO) bei Einzelprüfungen („grading“) problematisch, weil diese zu einem bestimmten Zeitpunkt im Schuljahr bewertet werden und diese „Teilwertungen“ dann am Ende eines größeren Zeitraums (Semester bzw. Jahr) nach den gleichen Beurteilungsstufen in eine Gesamtbeurteilung überführt werden. Einerseits sind die Beurteilungsstufen bei manchen Einzelprüfungen nicht geeignet, andererseits muss die Bewertung in Form einer Note unter Berücksichtigung des Zeitpunktes im Unterricht und Anspruch der Aufgabe (Wesentlichkeit & Anwendung) vollzogen werden.

18. Denkpause • Für welche Einzelprüfungen in meiner Praxis sind die Beurteilungsstufen geeignet? • Wie übersetze ich derzeit Ergebnis (Leistungsfeststellung) in eine Note (Leistungsbeurteilung)?

19. Praxisprobleme bei der summativen Beurteilung (LFLB) (s. Eder et al, https://www.bifie.at/buch/1024/b/6 ) Leistungsfeststellung & Leistungsbeurteilung 2. Die LFLB erfolgt punktuell (Einzelprüfung) sowie unterrichtsbegleitend (Mitarbeit), wobei der Gesetzgeber die Mitarbeitsfeststellung gegenüber punktuellen Prüfungsformen deutlich priorisiert (§ 3 Abs. 1 LBVO). Es sind nur so viele punktuelle Prüfungen vorgesehen , wie dies unbedingt notwendig ist (§ 3 Abs. 4 LBVO). Der praktische Unterschied zwischen punktueller LFLB & unterrichtsbegleitender LFLB (Mitarbeit) liegt darin, dass bei punktueller LFLB Lern- und Lehrprozesse zwecks Prüfung unterbrochen werden. Hier klaffen Rechtslage & Praxis auseinander. Mitarbeit umfasst oft Verhalten (Disziplinierungsfunktion) oder nur Reproduzieren von Inhalten (z.B. Bankfragen/Handhebung) und enthält somit falsche oder mangelhafte Informationen für die Beurteilung.

20. Denkpause • Inwieweit ist meine „Mitarbeitsnote“ im Einklang mit der Rechtslage? • Was braucht es an Werkzeugen und Prozessen, um Mitarbeitsfeststellungen entsprechend dem Gesetz zu machen?

21. Praxisprobleme bei der summativen Beurteilung (LFLB) (s. Eder et al, https://www.bifie.at/buch/1024/b/6 ) Leistungsfeststellung & Leistungsbeurteilung 3. Lehrkräfte müssen bei der punktuellen LFLB zusammenfassende Prüfungsnoten geben und aus diesen Prüfungsnoten wiederum zusammenfassende Jahresnoten bilden. Weil die Beurteilungsstufen in der Notenskala bei Einzelprüfungen und auch bei der Beurteilung der Leistungen einer ganzen Schulstufe angewandt werden, muss die Lehrperson bei der Ermittlung der Note bei einer punktuellen LFLB den Anspruch einer Einzelaufgabe und bei der Vergabe einer Gesamtnote den Anspruch der Einzelprüfungen im Hinblick auf die Wesentlichkeit und Anwendung abwägen. Anders gesagt, eine Aufgabe mit niedrigem Anspruch (Wiedergabe, Reproduzieren, vertraute Aufgabe) kann maximal zu einem „Befriedigend“ führen.

22. Denkpause • Inwieweit unterscheide ich in meinen Aufzeichnungen den Anspruch der Aufgabe, damit bei einer Aufgabe, die nur maximal „genügend“ überprüft, nicht als vollwertige Leistungsfeststellung vorkommt? • Welches System brauche ich, um dieses zu berücksichtigen?

23. Praxisprobleme bei der summativen Beurteilung (LFLB) Leistungsfeststellung & Leistungsbeurteilung 4. Eine Informationsfeststellung hat so wie auch eine LFLB Feedbackfunktion und ermöglicht Aussagen hinsichtlich des Lernprozesses oder dessen Ergebnis (z. B. Rückmeldung zu gewählten Lernwegen; Analyse von prototypischen Fehlern). Das Ergebnis bzw. die Note enthält aber nicht die Rückmeldung als solche. Diese muss im Sinne einer Rückkoppelung von der Lehrperson mit relevanten, lernförderlichen Informationen ergänzt werden.

24. Denkpause • Wann und wie nütze ich Ergebnisse und Noten, um eine Rückkoppelung als Feedback zu geben? • Woraus besteht mein Feedback? emotionaler Rückmeldung? („Welldone!“) sachlicher Rückkoppelung?(„Wortschatz ist besser als letztes Mal.“) Rat?(„Du muss mehr üben.“)

25. 3 Praxen der Leistungsbeurteilung: Werkzeuge Informationsfeststellung Werkzeuge: sämtliche Vorerhebungen, Check-Tests und Aufgaben zu Teilfertigkeiten, die relevant für Ziel sind; Beurteilungsraster & Skalen, die Kriterien transparent machen. Leistungsfeststellung & Leistungsbeurteilung Werkzeuge: Aufgaben, die die erzielte Kompetenz sichtbar machen; Kriterien, Beurteilungsraster und Skalen; Aufzeichnungstabellen und Profile. Benotung Werkzeuge: Entscheidungsgrundlage für die Interpretation der Aufzeichnungen; Notenskala mit Beschreibungen.

26. 3 Praxen der Leistungsbeurteilung: Prozesse auf der Zeitschiene Ermittlung Gesamtnote

27. Kriterien-orientierte Beurteilung

28. Beispiel Kompetenzbeschreibung aus einem Kompetenzraster: Die Schülerinnen und Schüler können über Begebenheiten und Erfahrungen verständlich sowie thematisch zusammenhängend sprechen. • Welches Fach vermuten Sie? • Welche Schulstufe? • Stellen Sie sich vor, Sie müssen diese Kompetenz beurteilen. Was brauchen Sie noch? Antwort: Fach Deutsch Bildungsstandard Volksschule 4. Klasse Mögliche Kriterien: Aufgabe erfüllt Struktur / roter Faden / Nachvollziehbarkeit Wortschatz & Satzstruktur / Verwendung von Konnektoren / Variation Wirksamkeit / Spannungsaufbau

29. Beurteilungsraster (analytisch)

30. Beurteilungsraster (holistisch)

31. Werkzeug „4.0-Skala“ Die „Vier-Punkt-Null-Skala“ beschreibt Qualitätsstufen einer Kompetenz entlang entsprechender Kriterien.

32. 4.0-Skala • Was ist die 4.0-Skala?Die 4.0-Skala ist ein holistischer Beurteilungsraster, mit dem der Grad der Komplexität einer Leistung (der Grad des Transfers) festgestellt werden kann. Sie legt/stellt eine Sachnorm (kriteriale Norm) fest, damit Kompetenz orientiert an Kriterien beurteilt werden kann. • Wozu die Skala?Wie jeder Beurteilungsraster ermöglicht die 4.0 Skala eine sachliche Beurteilung von fachlicher Kompetenz, die sich auf unterschiedlichen Niveaus in der Leistung zeigt. Sie trägt zu Transparenz, Gerechtigkeit und Ehrlichkeit bei und wirkt dadurch positiv auf Lern- und Lehrprozesse. • Was ist neu an der 4.0-Skala?Sie legt einen bestimmten Wert (0 – 4 Punkte) für ein bestimmtes Leistungsniveau fest. So ist es möglich, in den Aufzeichnungen Klarheit zu schaffen und dadurch die Ermittlung von akkuraten Semester- bzw. Jahresnote zu verbessern.

33. 4.0-Skala • Ist die Skala eine neue Erfindung für die NMS?Nein. Die 4.0 Skala ist aus der Schulwirksamkeitsforschung von Marzano et al („whatworks“) entstanden, um Beurteilung möglichst wirksam zu gestalten. Kriterienorientierte Beurteilung nach Sachnorm ist grundsätzlich nicht neu und gilt für alle Schulformen (s. LBVO). • Wann und wie verwende ich die Skala?Für die Vorerhebung, um eineDifferenzierungsstrategiezubestimmen; für die Informationsfeststellung (formativ) und Mitarbeitsfeststellung (summativ) währendLehr- und Lernprozessen; für die punktuelle Leistungsfeststellung und –beurteilung (summativ). • Wann soll ich die Skala nicht verwenden?Wenn der Anspruch der Aufgabe das volle Leistungsspektrum bzw. das Kompetenzziel nicht sichtbar macht, z.B. bei einfachen Aufgaben, die nur Reproduktion erfordern, oder vertrauten Aufgaben, die Eigenständigkeit & die Fähigkeit, das eigene Wissen und Können anzuwenden, nur beschränkt überprüfen.

34. 4.0-Skala • Warum soll ich die Skala bei einfachen Aufgaben nicht verwenden?Wenn die Aufgabe einfach ist, ist es weniger sinnvoll, die Punkte (oder auch die Note) aufzuzeichnen, weil die Aufgabe nicht das volle Leistungsspektrum ermöglicht. So haben beispielsweise Vokabelprüfungen oder wiederholte Übungen der gleichen Aufgabe mit dem Ziel, eine Teilfertigkeit zu festigen, vielleicht ihren Wert als Lernaufgabe, aber nicht als Leistungsaufgabe. Auch wenn das Ergebnis perfekt ist, liefert es keine Daten zur Kompetenz, die in der Gesamtnote beurteilt werden soll.

35. 4.0-Skala • Wie soll ich denn Ergebnisse von einfachen Aufgaben aufzeichnen?Die Form ist offen. Grundsätzlich geht es hier darum, dass Sie Informationen, die Sie nicht vergessen wollen, dokumentieren, um dem Schüler/ der Schülerin eventuell Rückmeldung hinsichtlich seines/ihres Lernprozesses geben zu können. Die Bedeutsamkeit dieser Ergebnisse ist für die Ermittlung einer Semester- oder Jahresnote allerdings höchst fragwürdig , weil eine einfache Aufgabe als solche das Noten-Ergebnis auf maximal „genügend“ einschränkt – falls die Aufgabe hinsichtlich den Beurteilungsstufen der LBVO überhaupt relevant ist. Es empfiehlt sich, in den Aufzeichnungen zwischen Informations- und Leistungsfeststellung zu unterscheiden.

36. 4.0-Skala • Was ist der Unterschied zwischen der 4.0 Skala und einem Kompetenzraster?Ein Kompetenzraster beschreibt meist das Zielbild in Form eines Kann-Satzes und gibt somit Orientierung für Lernen und Lehren (s. BiSta). Diese Beschreibung ist aber nicht genug, um die Beurteilung der tatsächlichen Leistung, die ein Schüler oder einer Schülerin zu einem spezifischen Zeitpunkt in einer spezifischen Schulstufe erbringt, vornehmen zu können. Dafür braucht es Kriterien, die das Zielbild bzw. den Standard konkretisieren.

37. Beispiel: Thema DemokratieFach Geschichte, 7. Schulstufe

38. Beispiel: 3. Klasse, Körper (M)

39. Beispiel: über Vergangenes schriftlich & mündlich erzählen (E)

40. Beispiel: Argumentieren (D)

41. Wie mache ich eine Skala? • Ausgehend von einer Aufgabe, die Kompetenz sichtbar macht, legen Sie Kriterien für die Beurteilung der Kompetenz fest, z.B. Aufgabe erfüllt; Inhalt & Struktur; Sprache; Wirksamkeit. Für D,E,M sind die Beurteilungskriterien der BiSta hilfreich. • Beschreiben Sie die zu erzielende Leistung (das Zielbild) entlang der Kriterien. Wie schaut eine Leistung in dieser Schulstufe aus, wenn das Zielbild erreicht wird? Wie zeigt sich die erzielte Sprachqualität? Wie zeigt sich Inhalt und Struktur im Zielbild (=3.0)?. • Überprüfen Sie das Zielbild hinsichtlich Schulstufe und Zeitpunkt im Schuljahr. Entsprechen die Anforderungen dem Lehrplan? Ist es stimmig mit der Progression von BiSta-Kompetenzen, die zu diesem Zeitpunkt erwartet werden kann? • Beschreiben Sie entlang der Kriterien die Leistung, die unter dem Zielbild liegt, aber immer noch eigenständig erbracht wird (= 2.0). • Beschreiben Sie entlang der Kriterien die Leistung, die über das Zielbild hinaus geht (= 4.0).

42. Können Punkte in Ziffernoten übersetzt werden? Kurze Antwort: Ja, aber…… .Grundsätzliche Überlegungen: • Aufzeichnungen der Punktewerte, die einer Stufe der 4.0 Skala entsprechen, sind einzelne Ergebnisse („scores“) und machen dann Sinn, wenn die Aufgabe das volle Leistungsspektrum sichtbar macht. • Expert/innen empfehlen, nurErgebnisse (in diesem Fall Punkte) aufzuzeichnen, da eine Note als Gesamtnote für die Schulnachricht bzw. das Zeugnis dann sinnvoll ist, wenn es durch die Art der Aufzeichnungen zu keinen Verzerrungen kommt. Diese Empfehlung ist allerdings konträr zu den gesetzlichen Bestimmungen hinsichtlich Leistungsbeurteilung, die Noten in den Aufzeichnungen von manchen punktuellen Prüfungen wie die Schularbeit vorsehen.

43. Können Punkte in Ziffernoten übersetzt werden? • Da punktuelle Leistungsfeststellungen (d.h. alles, was Lehr- und Lernprozesse zwecks Beurteilung unterbricht, wie z.B. Schularbeiten als „besondere Prüfungsformen“) nach der LBVO benotet werden sollen, ist es empfehlenswert, nicht nur die Note, sondern auch die (Teil-)Ergebnisse der jeweils überprüften Kompetenzen aufzuzeichnen, damit die Gesamtnote für die Schulnachricht bzw. das Zeugnis möglichst gerecht & akkurat ermittelt werden kann. • Die Beschreibung des Zielbilds (3.0) geht davon aus, dass die Leistung dem Zielbildmindestenszur Gänze entspricht, d.h. Eigenständigkeit bei neuartigen Aufgaben und mangellose Durchführung sind gegeben.

44. Wie übersetze ich die Punkte in Noten? Die Skalastufen können wie folgt in die Beurteilungsstufen übersetzt werden:

45. Die Beurteilungsstufen im Vergleich zum Grad des Transfers Im Zeitalter der Kompetenzorientierung wird vom „Grad des Transfers“ geredet. Dieser ist stimmig mit Eigenständigkeit und Anwendung in den Beurteilungsstufen der LBVO:

46. „Für die ‚Verrechnung‘ von Leistungen zu Noten und von Einzelnoten zu Gesamtnoten bietet die Rechtslage keine praktikablen Anhaltspunkte.“ (Eder et al, 2009) Aufzeichnungen & Ermittlung einer Gesamtnote

47. Aufzeichnungen von LFLB In den Aufzeichnungen sollen folgende Informationen dokumentiert sein: • die Kompetenz bzw. das relevante Lehr-/Lernziel • Datum der Aufzeichnung • Ergebnis und/oder Note

48. Denkpause • Wie mache ich Aufzeichnungen? • Wie schauen sie aus?

49. Aufzeichnungen: Beispiel 1(Klassenergebnisse) A1 = Lesen: Plakat A2 = Hören: Greetings A3 = Interaktion: Greetings / Sich vorstellen A4 = Monologue: Sich vorstellen A5 = Hören: Sich vorstellen A6 = Schreiben: Sich vorstellen …

50. Aufzeichnungen: Beispiel 2(Schüler/inergebnisse – „Profil“) A1 = Lesen: Plakat A2 = Hören: Greetings A3 = Interaktion: Greetings / Sich vorstellen A4 = Monologue: Sich vorstellen A5 = Hören: Sich vorstellen A6 = Schreiben: Sich vorstellen