Agenda
• Bakgrund om VÅGA VISA
• Observationer
• Kundundersökning
• Självvärdering
• Vad leder det till?
• Starka sidor och utvecklingsområden
Skola
M ed arb
et ar e
O b s e
rv at ö re
r
Föräldrar och elever
Utvärderingssamarbetet inom VÅGA VISA
• Danderyd, Ekerö, Nacka, Salem, Sollentuna, Tyresö, Upplands Väsby och Värmdö
• Kundundersökningen omfattar fler kommuner
• Från förskola till vuxenutbildning, och även musik- och kulturskola
• Började med observationer i grundskolan 1998
”Att mäta kvalitet är dock först en fråga om elevernas rättigheter. De har rätt till det
bästa som finns tillgängligt. Det får inte vara ett lotteri (..).”
Mervyn Benford
” Skolan skall sträva efter att varje elev
tar ett personligt ansvar för sina studier och sin arbetsmiljö”
Läroplan för grundskolan
Kundundersökning
Hur väl tycker du att följande påståenden stämmer?
Självvärdering
Hur väl tycker du att följande påståenden stämmer?
Observation
Beskriv och bedöm
Föräldrar:
•Mitt barn är med och planerar sitt skolarbete
•Mitt barn uppmuntras till att ta ansvar i skolan
Elever:
•Jag är med och planerar mitt skolarbete
•Jag tar ansvar för mitt skolarbete
•Jag ger elever goda möj- ligheter till ansvar och inflytande
•Jag ser till att elever har inflytande över innehåll samt arbets- och redo- visningssätt
•Jag ser till att elever tar ansvar för det egna lär-
andet och är delaktiga i den individuella utveck-
lingsplanen
•Ansvar och reellt infly- tande över verksamheten i sin helhet, lyhördhet för idéer, former för kom- munikation
•Inflytande över innehåll och arbets- och redo- visningssätt
•Ansvar för det egna
lärandet och delaktighet i den individuella utveck- lingsplanen
Kundundersökning
• Årlig
• Första gången 2005.
• Undersökningen riktas till
– föräldrar med barn i familjedaghem, förskola,
förskoleklass samt skolår 2, 5 och 8 i grundskolan – elever i skolår 5 och 8 i grundskolan samt år 2 i
gymnasiet
– studerande i vuxenutbildning
• 89 procents svarsfrekvens 2009 i Nacka (+29% sedan
2005)
Exempel på resultat
Kundundersökning - resultat
• Föräldrar och elever i alla kommuner och för samtliga målområden är i hög grad nöjda.
• Föräldrar till barn i familjedaghem mest nöjda. Minst nöjda är fortfarande elever i år 8, trots en förbättring.
• Stora skillnader mellan olika skolors resultat
• Små skillnader mellan genomsnitt för olika målområden är skillnaderna mycket små.
• Små skillnader mellan kommunerna. Nacka och Danderyd något bättre, Upplands Väsby lägre.
Underlag för att följa upp kommunens mål
Reellt inflytande Mål‐
nivå 2009
Utfall 2009
Mål‐
nivå 2008
Utfall 2008
Trend
Förskoleverksamhet
Andel föräldrar som anser att deras barns tankar och idéer tas tillvara (%) 80 71 72 70 ↗
Förskoleklass, grundskoleutbildning och skolbarnsomsorg
Andel föräldrar som anser att deras barn är med och planerar arbetet i skolan (%) 75 64 65 64 Andel elever som anser att de är med och planerar arbetet i skolan (%) 81 82 80 81 ↗ Andel föräldrar som anser att fritidshemmets verksamhet utgår från deras barns
intressen och behov (%) 75 72 73 71 ↗
Gymnasieutbildning
Andel elever som kan påverka arbetssättet under lektionerna (%) 75 71 70 71
Vuxenutbildning
Andel elever som kan påverka arbetssättet under lektionerna (%) 75 57 60
Exempel på kommuners analys:
Allt fler förskolor har hög andel föräldrar som är nöjda med förskolans verksamhet i Nacka
0 10 20 30 40 50 60 70 80 90 100
1 4 7 10
13 16
19 22
25 28
31 34
37 40
43 46
49 52
55 58
61 64
67 70
73 76
79 82
85 88
91 94
97 10 0
10 3
2005 2006 2007 2008 2009
Observationer
• Förskolor och skolor observeras som regel vart tredje år.
• Alla enheter med samma rektor/chef observeras samtidigt.
• Pedagoger ledigt från ord tjänst under 1-2 veckor
• Lag med observatörer med olika kompetenser och från olika kommuner
• Exempel:
– Skola med 300 elever: 2 observatörer, 10 dagar
– Förskola med 50 barn: 2 observatörer, 5 dagar
Vad ger en observation?
• En kvalitativ bild som kompletterar kvantitativ statistik (kundundersökning, prov och betyg)
• Skolan får underlag i kvalitetsarbete - verktyg för utveckling
– Utifrån-perspektiv på verksamheten – Visar upp starka sidor
– Synliggör förbättringsområden
OBSERVATIONSRAPPORT
Nyholmska skolan Nacka kommun
Madeleine v. Strauss, Tyresö Margareta Persson, Värmdö Ann Gustafsson, Ekerö 13-17 mars 2006
Faktagranskning Metodgranskning Dokument
Intervjuer med barn, elever, personal, ledning
Besök i verksamhet
Över- lämnings-
möte
Nämnd, skola, tjänstemän,
föräldrar och elever
En Observatör . . .
• är väl insatt i gällande styrdokument
• är en erfaren och erkänt skicklig pedagog
• har god social kompetens
• har visat på intresse för skolutvecklingsfrågor
• har vana att uttrycka sig i tal och skrift
• har förmåga att se samband och dra slutsatser
• har mod att uttrycka vad han/hon ser
Bedömningar i observationer per kommun 2008/09
Antal obser- verade enheter
Normer och värden
Utveckling och lärande
Ansvar och
inflytande
Skola och hem
Övergån- gar, sam- verkan, omvärld
Bedöming och betyg
Styrning och ledning
Genom- snitt av samtliga
Danderyd 12 3,2 2,6 2,7 2,8 3,0 3,2 2,4 2,8
Ekerö 4 4,0 3,1 2,9 3,7 3,1 3,3
Nacka 20 3,4 3,2 3,0 3,0 3,1 2,7 3,0 3,1
Salem 4 2,5 2,7 2,9 3,0 2,0 2,6 2,8 2,7
Sollentuna 17 3,3 2,7 2,8 3,2 2,6 2,9 2,7 2,9
Tyresö 10 3,2 2,7 2,7 3,0 3,0 2,4 2,4 2,8
Upplands Väsby 16 2,8 2,8 2,7 3,1 2,5 2,3 2,9 2,8
Värmdö 14 3,1 2,8 2,6 3,0 2,8 2,7 2,7 2,8
Totalt 97 3,2 2,8 2,8 3,0 2,8 2,7 2,7 2,9
Exempel på kvalitetsutveckling med hjälp av VÅGA VISA:
I observationer följs förbättringsområden i föregående observation upp
Förbättringsområden
i tidigare rapport (2003) Nuläge:
Det är svårt att få en bild av skolans mål och strategier vad rör såväl organisation som undervisning.
Skolan har tydliga övergripande mål och visioner, som är framtagna i samarbete med föräldrar och elever.
Det är otydligt hur verksamheten ska
utvärderas Skolan har upprättat en tydlig plan för olika
utvärderingar under läsåret.
Den inre miljön Renoveringen av huvudbyggnaden är klar.
Paviljongerna kvarstår, där det ser skräpigt och slarvigt ut.
Att i undervisningen finna en balans mellan
”eget arbete”, lärarledd undervisning och laborativa arbetssätt.
Vi kunde under våra besök i klasserna se variation i undervisningen med elevaktivt eget arbete varvat med lärarledda lektioner.
Exempel på kommuners analys:
Uppföljning av tidigare observationsrapporter i Sollentuna
• 37 förbättringsområden i observationer från 2002-2004 följdes upp i observation 08/09
• 18 av hade åtgärdats helt och 10 delvis.
• Förbättringar gällde bl a underlag för utvecklingssamtal,
strukturer och rutiner i organisationen, kvalitetsredovisningar, samverkan i övergångar, mål och handlingsplaner
• Däremot har inte förbättringsområden gällande elevinflytande och pedagogisk dokumentation utvecklats i samma grad, även om utvecklingsarbete pågår på 4 enheter
Självvärdering
• Hur ligger skolan till på de olika målområdena enligt personalens bedömning?
• Genomförs 14 dagar före en observation – men kan också användas separat
• Används för att vidga bilden av skolan i samband med överlämning av observation (men själv-värderingen är inte grund för observationen)
• Individuell bedömning i digital enkät
0% 20% 40% 60% 80% 100%
Jag stö djer barn/elever/studerande att utveckla ett rikt och nyanserat sp råk
...att b li utforskande o ch självständiga ...att kunna samarb eta
…att självständigt formulera ståndpunkter och tänka kritiskt
...att se helheter och sammanhang Jag använder ett varierat arbetssätt tillsammans med
barn/elever/stud erande
Jag stimulerar b arn/elever/studerand e till utveckling och lärand e utif rån sina förutsättningar o ch b ehov
Jag d o kumenterar och följer up p
barns/elevers/studerandes utveckling o ch lärande Jag d o kumenterar och följer up p mina arb etsmetoder D en f ysiska miljön stödjer utveckling och lärande Jag följer systematiskt upp och analyserar
kunskapsresultat
Jag g er b arn/elever/studerande god återko ppling p å deras utveckling och lärand e
Mål o ch kriterier i läro p lan och kursplaner är väl kända av elever/stud erande
4 Instämmer helt 3 ej svar 2 1 Instämmer inte alls
Exempel på kommuners analys:
Hur arbetar pedagoger? - självvärderingsresultat i
Nacka
Bedömning i olika perspektiv för de 13
förskolor som observerats i VÅGA VISA under 2009 i Nacka
1,0 2,0 3,0 4,0
Norm er och
värde n
Utvec kling och läran…
Ansvar och inflyta
nde … Skola
och hem Överg
ångar, samve rkan, … Styrni ng och lednin
g
Kund‐
undersökning
1,0 2,0 3,0 4,0
Norme r och värden
Utveck ling och läran…
Ansvar och inflyta
nde … Skola
och hem Överg
ångar, samve rkan, … Styrnin g och lednin
g
Observation
1,0 2,0 3,0 4,0
Norme r och värden
Utveck ling och läran…
Ansvar och inflyta
nde … Skola
och hem Överg
ångar, samve rkan, … Styrnin g och lednin
g
Själv‐
värdering
Samband mellan bedömning i observation av utveckling och lärande och andel personal
med pedagogisk högskoleutbildning i
barngruppen, förskolor i Nacka 2009
Vad leder utvärderingen
till?
Hur stor nytta har rektorer haft av observationerna för att utveckla verksamheten?
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
100%
2008 2006/2007 före 2006
1 Ingen nytta 2
vet ej 3
4 Stor nytta
Enkätundersökning till rektorer visar att…
• Observationerna övervägande positivt. I de fall det finns
missnöje med nyttan menar rektor att den inte genomförts på ett professionellt sätt.
• Självvärderingen har inte använts i den grad som förväntats och verktyget är inte det stöd för utveckling som det skulle kunna vara.
• Kundundersökningen är ett verktyg som fungerar väl och som används i hög grad i utvecklingsarbetet.
Föräldrar om kundundersökningsresultat som underlag inför skolval
• ”Har en känsla av att den ger en rätt sann bild av hur
verkligheten är i en skola. Även om skolan skriver tjusiga
saker i sin presentation kan JämförareN visa något helt annat.”
• ”Jag jämförde skolorna vi övervägde och alla hade bra resultat. Det gjorde att jag kände mig lugn och trygg, att vilken skola vi än skulle hamna i skulle mitt barn få en bra grund.”
Höjda betyg i VÅGA VISA-kommunerna
• Grundskolebetygen för VÅGA VISA- kommunerna har ökat mer mellan 2004 och 2009 än i länet och riket.
• I vilken grad har utvärderingen i VÅGA VISA bidragit till detta?
• VÅGA VISA har lett till fokus på läroplanens målområden, och blivit ett verktyg för att utveckla mål- och resultatstyrningen i våra kommuner.
Effekter av utvärderingen i VÅGA VISA
• Underlag för kvalitetsutveckling
• Information och insyn
• Signalsystem och goda exempel
• Vi lär av varandra
• Fokus på rätt saker
Starka sidor
• Resultat i VÅGA VISA används i måluppföljning, i kvalitetsredovisningar och verksamhetsutveckling
• Den nya metodboken bedöms fungera väl
• Utbildningen för observatörer har vidareutvecklats och används mer strategiskt.
• Kundundersökningen är välfungerande och ger skolorna och kommunerna värdefullt underlag i kvalitetsarbetet.
Utvecklingsområden
• Rekrytering, utbildning av observatörer, återkoppling samt uppföljning av uppdragen avgörande för kvaliteten i
observationerna
• Längre uppdrag för observatörer.Seniorobservatörer.
• Förskolor och skolor observeras inte vart tredje år, som ambitionen tidigare varit.
• Få enheter i gymnasieskolan, vuxenutbildningen, musik- och kulturskola - ytterligare samarbetspartner här?
• Självvärderingsverktyget kan behöva utvecklas
