Bedömning av professionell kompetens

1. Bedömning av professionell kompetens Anders Jönsson

2. Summativ funktion Hur kan man bedöma studenters kompetens, dels för att kontrollera vad de kan, dels för att hjälpa dem utvecklas vidare? Formativ funktion

3. Vad är kompetens? Kompetens = formella kvalifikationer? Kompetens = teoretiska kunskaper? Kompetens = praktiska kunskaper? Kompetens = personliga egenskaper?

4. Vad är kompetens? Kompetens = kunskaper + färdigheter + förhållningssätt

5. Hur bedömer man kompetens? The whole process of becoming competent in any field must be divided into a very large number of very small steps, and reinforcement must be contingent upon the accomplishment of each step (Skinner, 1996/1954, p. 206).

6. Hur bedömer man kompetens? When assessing competency, it could be argued that if we want to know how well somebody can perform a certain task, the most natural thing would be to ask her to do it, and then assess her performance (Kane, Crooks, & Cohen, 1999).

7. Hur bedömer man kompetens? Bedömning Observation av prestation Omdöme på enskild uppgift Gynnas av korta, väldefinierade uppgifter med begränsat svarsutrymme Från Kane et al. (1999)

8. Hur bedömer man kompetens? Generalisering Omdöme på enskilda uppgifter Andra likartade uppgifter Gynnas av många likartade uppgifter Från Kane et al. (1999)

9. Hur bedömer man kompetens? Extrapolering Andra likartade uppgifter Mål Gynnas av närhet mellan uppgifter och mål (dvs. autencitet) Från Kane et al. (1999)

10. Hur bedömer man kompetens? Bedömning Generalisering Extrapolering Andra likartade uppgifter Mål Observation av prestation Omdöme på enskild uppgift Från Kane et al. (1999)

11. Hur bedömer man kompetens? Bedömning Generalisering Extrapolering ? ? Andra likartade uppgifter Mål Observation av prestation Omdöme på enskild uppgift Svårt att bedöma autentiska uppgifter Svårt att hinna med (och standardisera) många likartade uppgifter Från Kane et al. (1999)

12. Hur bedömer man kompetens? Bedömning Generalisering Extrapolering ? ? Utgår inte från mål eller kriterier Få (ej systematiska) observationstillfällen Andra likartade uppgifter Mål Observation av prestation Omdöme på enskild uppgift Bedömning subjektiv och godtycklig Från Hegender (2010); Jönsson & Mattsson (2011)

13. Hur bedömer man kompetens? Prov är ju åtminstone likvärdiga och rättsäkra. Annars blir det så flummigt. 

14. Hur bedömer man kompetens? Undervisning ”Backwash”

15. Hur bedömer man kompetens? Man KAN INTE formulera mål och kriterier för ett så komplext arbete. Ja, bedömningen är personlig och måste vara det i det här fallet. Vissa saker går inte att specificera på förhand. Man får diskutera och reflektera efteråt istället. 

16. Hur bedömer man kompetens? Jag vill gärna ta ansvar och utvecklas, men hur vet jag vad som krävs? Jag är inte överens med min mentor, men det är hon som sätter betyg så jag måste lista ut hur hon vill att jag ska göra.

17. Hur bedömer man kompetens? Man kan inte formulera kriterier för allt, men för viktiga kvaliteter Man kan använda flera olika bedömningsformer Språket är centralt för vårt lärande. ”Tyst kunskap” är svår att reflektera kring och vidareutveckla Kunskaper går inte att MÄTA, men de går att uppskatta 

18. Hur bedömer man kompetens? Bedömning Generalisering Extrapolering ? ? Andra likartade uppgifter Mål Observation av prestation Omdöme på enskild uppgift Bedömnings-matriser kan ge högre pålitlighet. Systematisk ”task-sampling”; IT-stöd och simuleringar Kompetens-bedömnings-program

19. Summativ funktion Hur kan man bedöma studenters kompetens, dels för att kontrollera vad de kan, dels för att hjälpa dem utvecklas vidare? Formativ funktion

20. Hur hjälper man studenterna att utveckla sin kompetens m.h.a. bedömningen? T.ex. matriser och exempel Från Wiliam & Thompson(2007)

21. Uppgift

22. Uppgift Analys av simulerade klassrumssituationer Tre uppgifter: Observation Analys Åtgärd Från Jönsson (2008)

23. Uppgift Analys av simulerade klassrumssituationer Tre uppgifter: Observation Analys Åtgärd Beskriv situationen objektivt utan förutfattade meningar Från Jönsson (2008)

24. Uppgift Analys av simulerade klassrumssituationer Tre uppgifter: Observation Analys Åtgärd Varför agerar personerna i filmen som de gör? Från Jönsson (2008)

25. Uppgift Analys av simulerade klassrumssituationer Tre uppgifter: Observation Analys Åtgärd Vad bör läraren i filmen göra? Från Jönsson (2008)

26. Uppgift

27. Uppgift Jämförelse med professionell analys Tre uppgifter: Vilka skillnader kan du identifiera? Vilka styrkor och utvecklingsbehov kan du se utifrån jämförelsen? Hur kan du stärka dina utvecklingsbehov? Från Jönsson (2008)

28. Bedöma Från Jönsson (2008)

29. Generalisera Från Jönsson (2008)

30. Matris ———————— Matris ———————— Ex. 1  Ex. 2  Ex. 3  Exempel Kommunicera förväntningar 2004 2005/06 Från Jönsson(2010)

31. Kommunicera förväntningar Från Jönsson(2010)

32. Kommunicera förväntningar + Exempel Ingenförändring Från Jönsson(2010)

33. Valida uppgifter som ger nyanserad information Från Wiliam & Thompson(2007)

34. Konstruktiv och integrerad feedback Från Wiliam & Thompson(2007)

35. Feedback på olika nivå: Uppgiftsnivå t.ex. faktafel Processnivå t.ex. hur nästa uppgift ska bli bättre Metakognitiv nivå t.ex. hur ska jag hantera den feedback jag får Personlig nivå t.ex. ospecificerat beröm Från Hattie & Timperley (2007)

36. Från Jönsson (2010)

37. Saknar utbildning Ingenkoppling till målochkriterier Endast feedback, ingen feed-forward Uttryckermaktochauktoritet Saknar strategier för att använda feedback Gestillsammans med betyg Gesför sent Från Jönsson (2010)

38. Från Pryor & Crossouard(2010)

39. ”Kamratbedömning” Från Wiliam & Thompson(2007)

40. Uppgift Bedömning av kommunikation med patient Tandläkarprogrammet

41. Bedömning Bedömning av kommunikation med patient Tandläkarprogrammet

42. Generalisera Bedömning av kommunikation med patient Tandläkarprogrammet

43. Självbedömning Från Wiliam & Thompson(2007)

44. Matris ———————— Ex. 1  Ex. 2  Ex. 3  Bedömda exempel Frågor: Var är jag nu? Starka sidor, svaga sidor? Hur ska jag göra för att bli bättre…? Kriterium 1 Mål ———————— Kriterium 2 Kriterium 3

45. Feedback 5 4 5 Från Jönsson (2008)

46. Självvärdering Från Jönsson (2008)

47. Matris ———————— Ex. 1  Ex. 2  Ex. 3  Bedömda exempel Självbedömning Jämförelse med professionell analys Tre uppgifter: Vilka skillnader kan du identifiera? Vilka styrkor och utvecklingsbehov kan du se utifrån jämförelsen? Hur kan du stärka dina utvecklingsbehov?