13.07.2015 Views

Handledning för Examinatorer - Institutet för Kvalitetsutveckling, SIQ

Handledning för Examinatorer - Institutet för Kvalitetsutveckling, SIQ

Handledning för Examinatorer - Institutet för Kvalitetsutveckling, SIQ

SHOW MORE
SHOW LESS
  • No tags were found...

Create successful ePaper yourself

Turn your PDF publications into a flip-book with our unique Google optimized e-Paper software.

<strong>SIQ</strong>KvalitetsutmärkelsenBättre Skola<strong>Handledning</strong><strong>för</strong><strong>Examinatorer</strong>


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaInnehållInnehåll ................................................................................................................................................................... 2 Introduktion till handledningen .......................................................................................................................... 3 De olika aktörerna ................................................................................................................................................. 4 <strong>SIQ</strong> har ansvar <strong>för</strong> att … .................................................................................................................................... 4 Domarkommittén har ansvar <strong>för</strong> att … ........................................................................................................... 4 Utvärderingsledare har ansvar <strong>för</strong> att … .......................................................................................................... 4 Examinator har ansvar <strong>för</strong> att … ....................................................................................................................... 5 Tre utvärderingsomgångar .................................................................................................................................... 6 Utvärderingsomgång 1 – individuell ................................................................................................................. 6 Utvärderingsomgång 2 – konsensus ................................................................................................................. 6 Utvärderingsomgång 3 – platsbesök ................................................................................................................. 6 Konsensusmöte ...................................................................................................................................................... 7 Var<strong>för</strong> är bedömningarna olika? ....................................................................................................................... 7 In<strong>för</strong> platsbesöket ............................................................................................................................................. 7 Platsbesök ............................................................................................................................................................... 8 Planering ............................................................................................................................................................. 8 Platsbesöks/Konsensusveckan .......................................................................................................................... 8 Förberedelse ....................................................................................................................................................... 8 Genom<strong>för</strong>ande av platsbesök ........................................................................................................................... 9 Avrapportering ................................................................................................................................................. 10 Regler vid platsbesök ...................................................................................................................................... 10 Att vara Examinator ............................................................................................................................................. 11 Åtagandets omfattning ..................................................................................................................................... 11 Ekonomiska villkor ........................................................................................................................................... 11 Sekretess och tystnadsplikt ............................................................................................................................. 12 Jäv och intressekonflikt ................................................................................................................................... 12 Etiska regler ...................................................................................................................................................... 12 Intyg om medverkan i Kvalitetsutmärkelsen Bättre Skola .......................................................................... 12 Att utvärdera ......................................................................................................................................................... 13 Utvärderingsunderlaget .................................................................................................................................... 13 Att utvärdera ..................................................................................................................................................... 13 Utvärdering i fem dimensioner .......................................................................................................................... 14 Bedömning av angreppssätt ............................................................................................................................ 14 Angreppssätt ................................................................................................................................................ 14 Tillämpning .................................................................................................................................................. 14 Utvärdering och <strong>för</strong>bättring ....................................................................................................................... 14 Bedömning av resultat ...................................................................................................................................... 15 Relevans/omfattning .................................................................................................................................... 15 Prestation ...................................................................................................................................................... 15 Poängsättning .................................................................................................................................................... 15 Riktlinjer <strong>för</strong> utvärderingsarbetet ...................................................................................................................... 16 Översikten ........................................................................................................................................................ 16 Arbetsgång vid utvärdering av ett delkriterium i Ledningens Analys ........................................................ 16 Vanliga frågor vid utvärdering av delkriterier ................................................................................................ 17 Riktlinjer <strong>för</strong> formuleringen av kommentarer om Styrkor och Förbättringsområden .............................. 17 Exempel på kommentarer ............................................................................................................................... 18 Procentbedömning och Poängberäkning ...................................................................................................... 19 Utvärderingsmatrisen .......................................................................................................................................... 20 Åter<strong>för</strong>ingsrapporten ........................................................................................................................................... 21 Typiskt <strong>för</strong> skolor med höga respektive låga poäng ......................................................................................... 22 Höga poäng ...................................................................................................................................................... 22 Låga poäng ........................................................................................................................................................ 22 © <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 2


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaIntroduktion till handledningenDen här handledningen innehåller stöd och riktlinjer <strong>för</strong> Examinator i Kvalitetsutmärkelsen Bättre Skola.Den beskriver aktörerna, utvärderingsomgångarna, utvärderingen och reglerna som rörKvalitetsutmärkelsen Bättre Skola.I handledningen refereras till följande begrepp:• Deltagande skola är den skola/<strong>för</strong>skola/skolverksamhet som deltar i utmärkelseprocessen.• Kontaktperson är den person som den deltagande skolan i anmälan har angivet som ansvarig <strong>för</strong>praktiska frågor, t.ex. i samband med eventuellt platsbesök.I alla kontakter mellan den deltagande skolan, examinatorerna och <strong>SIQ</strong> iakttas sträng sekretess. Se ocksåavsnittet ”Sekretess och tystnadsplikt” på sidan 13.Information om utvärderingsprocessens innehåll och uppläggning ur deltagande skolors synvinkel finns i”<strong>Handledning</strong> <strong>för</strong> Deltagande Skolor”.För mer information, kontakta <strong>SIQ</strong>Växel 031-723 17 00 Fax 031-723 17 99 e-post siq@siq.se© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 3


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaDe olika aktörernaI utvärderingsarbetet <strong>för</strong> Kvalitetsutmärkelsen Bättre Skola medverkar olika grupper av aktörer medskilda roller. Dessa är <strong>SIQ</strong>, oberoende <strong>Examinatorer</strong> och en Domarkommitté.<strong>SIQ</strong>s uppgift är att utveckla och administrera <strong>SIQ</strong>s process och modell <strong>för</strong> Kvalitetsutmärkelsen BättreSkola. <strong>Examinatorer</strong>nas uppgift är att utvärdera de deltagande skolorna.<strong>Examinatorer</strong>na är <strong>för</strong>delade på utvärderingslag om minst fyra medlemmar per lag. Lagets arbete leds aven utvärderingsledare, som utses av <strong>SIQ</strong>. Laget får i uppdrag av <strong>SIQ</strong> att utvärdera en viss skola.Arbetet följs och övervakas av Domarkommittén, vars huvuduppgift är att fatta beslut om mottagare avKvalitetsutmärkelsen Bättre Skola.<strong>SIQ</strong> har ansvar <strong>för</strong> att …• utforma regler och anvisningar <strong>för</strong> Kvalitetsutmärkelse Bättre Skola• marknads<strong>för</strong>a och administrera utmärkelsen• utse Domarkommitté, Utvärderingsledare och <strong>Examinatorer</strong>• sätta samman utvärderingslagen• utbilda <strong>Examinatorer</strong> och Domare• organisera utvärderingsprocessen• arrangera ceremonin <strong>för</strong> utdelning av utmärkelsen tillsammans med mottagande skola• arrangera Åter<strong>för</strong>ingsdag• utvärdera och <strong>för</strong>bättra utvärderingsprocessen.Domarkommittén har ansvar <strong>för</strong> att …• <strong>för</strong>vissa sig om att utvärderingsprocessen genom<strong>för</strong>s enligt fastställda regler• granska och värdera all information om de skolor som deltar i den slutliga värderingen• ta ställning till huruvida de skolor som deltar i den slutliga värderingen kan tjäna som goda<strong>för</strong>edömen och fatta beslut om mottagare av Kvalitetsutmärkelsen Bättre Skola• ta aktiv del i arbetet med att utvärdera och vidareutveckla Kvalitetsutmärkelsen Bättre Skolain<strong>för</strong> kommande årUtvärderingsledare har ansvar <strong>för</strong> att …• verka som Examinator• leda, samordna och övervaka utvärderingsarbetet i sitt lag• göra poängsammanställningar• kalla till och leda konsensusmöte• att in<strong>för</strong> konsensusmöte sammanställa lagets kommentarer och poängsammanställning• sammanställa Konsensusprotokoll• planera och <strong>för</strong>bereda platsbesök• detaljplanera, leda och genom<strong>för</strong>a platsbesök• platsbesöksrapport och platsbesöksprotokoll skrivs• rapportera till Domarkommittén• Åter<strong>för</strong>ingsrapport skrivs• sammanställa erfarenheter från utvärderingen• återrapportera muntligt till utvärderad skola.© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 4


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaExaminator har ansvar <strong>för</strong> att …• utvärdera deltagande skolas Utvärderingsunderlag och skriva Utvärderingsprotokoll• delta i konsensusmöte• delta i platsbesök• åta sig att skriva Åter<strong>för</strong>ingsrapport om så fordras• lämna synpunkter på hur kriterier, poängsättningssystem och utvärderingsprocessen kan<strong>för</strong>bättras.Programvarustöd <strong>för</strong> utvärderingenUtvärderingsprocessen <strong>för</strong> Kvalitetsutmärkelsen Bättre Skola stöds av en webbaserade programvara,ExaWeb.ExaWeb hanterar all information som produceras inom laget. Det har funktioner som ställer sammande olika examinatorernas Utvärderingsprotokoll till lagets gemensamma bruttodokument, som vidkonsensusmötet redigeras till lagets Konsensusprotokoll. De olika protokollen kan skrivas ut, liksomPoängsammanställningar. Programmet kan även hantera platsbesöksfrågor.© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 5


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaTre utvärderingsomgångarUtvärderingsomgång 1 – individuellUtvärderingsomgång 1 innebär följande:• <strong>Examinatorer</strong>na i laget gör individuellt, utan kontakt med varandra, en komplett utvärdering avUtvärderingsunderlaget, dvs. Översikt, Ledningens Analys och in<strong>SIQ</strong>ts-enkät, och noterar sinaresultat i ExaWeb.• ExaWeb sammanställer och bearbetar de olika lagens utvärderingsresultat till bruttolistor med<strong>Examinatorer</strong>nas styrkor och <strong>för</strong>bättringsområden samt platsbesöksfrågor.Utvärderingsomgång 2 – konsensusUtvärderingsomgång 2 innehåller konsensusmöte, där <strong>Examinatorer</strong>na gemensamt enas om lagetsutvärdering. Samtliga <strong>Examinatorer</strong> bör i <strong>för</strong>väg få ut en sammanställning av lagets kommentarer. (Dettas.k. Bruttodokument skapas i ExaWeb och utvärderingsledaren <strong>för</strong>delar <strong>för</strong>beredelserna in<strong>för</strong>konsensusmötet mellan lagets medlemmar).• Utvärderingsledaren kallar till konsensusmöte. Mötets mål är att <strong>Examinatorer</strong>na skall nåkonsensus, enighet, om vilka styrkor och <strong>för</strong>bättringsområden som kännetecknar den utvärderadeskolan• Konsensusmötet leder fram till ett gemensamt Konsensusprotokoll• Resultatet <strong>för</strong>s in i ExaWeb, antingen löpande under mötet eller efteråtUtvärderingsomgång 3 – platsbesökFör Kvalitetsutmärkelsen Bättre Skola genom<strong>för</strong>s platsbesök i direkt anslutning till konsensusmötet. Detinnebär att samtliga skolor får platsbesök. Ett Konsensusprotokoll från konsensusmötet skall dockfärdigställas <strong>för</strong>e platsbesöket.Innan platsbesöket, vid konsensusmötet, ska utvärderingslaget ha sammanställt de frågor de vill habesvarade, vilka delar av skolan de vill besöka, vilka dokument de vill ha tillgång till samt vilkanyckelpersoner de vill träffa.Frågor <strong>för</strong> platsbesök kan skrivas in i ExaWeb.• Efter platsbesöket möts lagmedlemmarna åter <strong>för</strong> att nå enighet om resultatet av platsbesöket ochfärdigställa Platsbesöksprotokoll• Utvärderingsledaren skickar Platsbesöksprotokoll till <strong>SIQ</strong> <strong>för</strong> Domarkommitténs beslut omvilken(-a) skola(-or) som skall erhålla Utmärkelsen• Utvärderingsledaren eller en av denne utsedd Examinator får i uppgift att färdigställaÅter<strong>för</strong>ingsrapport till skolan samt en rapport från platsbesöket.© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 6


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaKonsensusmöteSyftet med konsensusmötet är att laget skall formulera och enas om Styrkor och Förbättringsmöjligheter,samt att enas om den slutliga värderingen. Erfarenheten visar att konsensusmötet tar cirka två heldagaratt genom<strong>för</strong>a.In<strong>för</strong> konsensusmötet får alla i laget en utskrift av lagets samlade kommentarer i form av det s.k.Bruttodokumentet. För att effektivisera konsensusmötet bör Utvärderingsledaren instruera laget omlämpliga <strong>för</strong>beredelser innan mötet.Efter genomgång av varje delkriterium, och när laget är överens om kommentarerna, görs av var och en ilaget en <strong>för</strong>nyad värdering. (<strong>Examinatorer</strong>nas individuella värdering från utvärderingsomgång 1 är i dettaläge inte relevant, eftersom alla i laget fått ta del av ny information och nya synpunkter).Om spridningen av värderingarna är 20 %-enheter eller mindre anser vi att konsensus råder och laget kanbestämma ett värde inom intervallet som känns relevant. Den värdering som slutligt rapporteras frånkonsensusmötet skall göras i hela 5 %-steg.Vid en spridning på 30 %-enheter eller mer gäller råder inte konsensus. Laget går åter igenom sinakommentarer och <strong>Examinatorer</strong> med högst respektive lägst värdering motiverar sina värderingar <strong>för</strong> attslutligen få fram argument och information som kan påverka laget så att enighet kan uppnås.Företeelser som får hög värdering eller som utgör särskilt viktiga inslag i Utvärderingsunderlaget skallnoteras som platsbesöksfrågor <strong>för</strong> att kunna verifieras vid platsbesöket. Punkter där skrivningen varitsvår<strong>för</strong>stådd, och där laget tvingas till en tolkning, bör också verifieras vid platsbesöket.Var<strong>för</strong> är bedömningarna olika?Det finns en mängd orsaker till olikheter i värderingarna. Några exempel:<strong>Examinatorer</strong>na …• har varierande <strong>för</strong>väntningar beroende på deras erfarenheter och bakgrund• tolkar texten i Utvärderingsunderlaget olika• ger de bevis som finns i Utvärderingsunderlaget olika värden• har olika <strong>för</strong>måga att koppla ihop svaret med fakta som finns på andra ställen iutvärderingsunderlaget• har olika mycket tilltro till Utvärderingsunderlaget• har varierande uppfattningar om hur en fråga skall besvaras• favoriserar gärna vissa metoder fram<strong>för</strong> andra, där<strong>för</strong> att de har olika uppfattning om hur bra enmetod är, beroende på olika bakgrund• gör utvärderingen på olika sätt; vissa ser till helheten medan andra bedömer den punkt <strong>för</strong> punkt• har olika bra branschkännedom och där<strong>för</strong> ibland olika uppfattning om ett påstående är positivteller negativt• har olika <strong>för</strong>måga att se vad som inte är beskrivet; det som fattas.In<strong>för</strong> platsbesöketPlaneringen <strong>för</strong> ett lyckat platsbesök innefattar att <strong>Examinatorer</strong> redan vid skrivningen avUtvärderingsprotokoll ser till att frågor <strong>för</strong> platsbesök formuleras tillräckligt koncist och konkret. (Dettaär av extra vikt i Kvalitetsutmärkelsen Bättre Skola då platsbesöket till stor del måste <strong>för</strong>beredas innankonsensusmötet). Arbetet fortsätter på konsensusmötet då det gäller att gemensamt prioritera ochformulera de frågor som man anser viktigast.© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 7


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaPlatsbesökAvsikten med platsbesök är i <strong>för</strong>sta hand att verifiera den bild av den deltagande skolan somutvärderingslaget fått av Utvärderingsunderlaget. Dessutom utnyttjas platsbesöket <strong>för</strong> att klargöra<strong>för</strong>hållanden som i Utvärderingsunderlaget varit oklara. Det kan också finnas behov av att utredabefarade allvarliga svagheter.Tillämpning, integration, engagemang och mognad är aspekter som är svåra att värdera baserat påUtvärderingsunderlagens korta beskrivning. Dessa aspekter är lämpliga att särskilt studera vid ettplatsbesök.Ett platsbesök är beräknat att ta en till två dagar plus eventuella uppföljande möten.Iakttagelserna noteras i Platsbesöksprotokoll och Platsbesöksrapport. Justeringar av kommentarer görsockså i konsensusprotokollet <strong>för</strong> att skapa den slutliga i Åter<strong>för</strong>ingsrapporten. Dessa tre dokumentrapporteras till Domarkommittén, som därmed har möjlighet att väga in dem i totalbedömningen avskolans lämplighet att erhålla Utmärkelsen.PlaneringDen preliminära planeringen av platsbesöket görs av Utvärderingsledaren med stöd av examinatorernas<strong>för</strong>slag på platsbesöksfrågor. Utvärderingsledarna har en gemensam träff tillsammans med personer från<strong>SIQ</strong> <strong>för</strong> genomgång och redovisning av tänkt ut<strong>för</strong>ande av platsbesök. Den preliminära planen <strong>för</strong>platsbesöket skall inkludera:• vilka delar av skolan som skall besökas• datum och tidsplan• vilka nyckelpersoner som skall engageras <strong>för</strong> intervjuer och presentationer• logi och researrangemang.Skolan som skall besökas skall i samband med platsbesöket <strong>för</strong>ser utvärderingslaget med följande:• <strong>för</strong>teckning över medverkande från skolan vid de inledande och avslutande mötena• namn, titel, telefonnummer och adress <strong>för</strong> nödvändiga kontaktpersoner• karta över byggnaderna som skall besökas• organisationsschema• konferensrum <strong>för</strong> de inledande och avslutande mötena• extra konferensrum eller motsvarande till utvärderingslagets disposition som arbetsrum• fakta, information och annat som kan underlätta platsbesöket• tillgång till telefon, fax och kopiator• måltider, kaffe och <strong>för</strong>friskningar.Platsbesöks/KonsensusveckanEtt vanligt tillvägagångssätt <strong>för</strong> platsbesöks/konsensusveckan kan se ut så här:Dag 0 – samling kvällen – genomgång av Viktiga Verksamhets FaktorerDag 1 – tidig start – konsensusmöte till sena kvällenDag 2 – tidig start – konsensusmöte, <strong>för</strong>beredelser platsbesökDag 3 – tidig start – slutplanering platsbesök – eftermiddagen platsbesökDag 4 - <strong>för</strong>middagen platsbesök – eftermiddagen sammanställning av rapportFörberedelsePlatsbesöksfrågorna skall <strong>för</strong>beredas vid konsensusmötet. Laget skall då nå konsensus om vilka frågorsom skall tas upp samt prioriteten mellan dessa. Erfarenhetsmässigt är det en <strong>för</strong>del om laget dessutomavsätter tid <strong>för</strong> ett särskilt planeringsmöte i samband med platsbesöket.© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 8


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaNyckeln till ett framgångsrikt platsbesök är …• noggranna <strong>för</strong>beredelser• lagarbete samt en bra arbets<strong>för</strong>delning mellan lagmedlemmar baserat på tid, intresse ocherfarenhet• en detaljerad plan <strong>för</strong> platsbesöket som är flexibel och anpassningsbar• regelbundna möten under platsbesöket <strong>för</strong> att stämma av läget och göra justeringar i planen• en noggrann dokumentation av iakttagelser• en summering omedelbart efter platsbesöket där alla medlemmar deltar och där summeringentäcker alla medlemmars intryck• att varje Examinator betänker att man är en gäst hos den besökta skolan.Tiden medger oftast inte att alla frågor kan behandlas så ingående som man önskar. Det är där<strong>för</strong> viktigtatt laget är helt överens om vilka prioriteringar som skall göras. Gör en indelning i grupper om tvåpersoner samt <strong>för</strong>dela de frågor som skall besvaras vid platsbesöket på dessa grupper.Gruppsammansättningen bör varieras under platsbesöket.Studera speciellt:• avsnitt där skolan är ledande <strong>för</strong> att verifiera om skolan kan vara ett <strong>för</strong>edöme <strong>för</strong> andra (avsnittdär utvärderingsunderlaget är högt värderat)• <strong>för</strong>eteelser som är bärande i utvärderingsunderlaget• tillämpningen och spridningen av metoder, synsätt, arbetsformer, rutiner m.m.• saknad eller oklar information• områden som kan ha stor påverkan på bedömningen.Beakta speciellt:• Det är tillåtet att studera fakta, rapporter och dokument och att intervjua individer eller grupperav anställda. Det är också tillåtet att låta skolans representanter göra kortare presentationer avdelar av sin verksamhet liksom att gå runt och studera verksamheten• Det är tillåtet att i Kvalitetsutmärkelsen Bättre Skola intervjua exempelvis elevråd eller ett urval avelever• Otillåtna tillvägagångssätt är att intervjua utomstående i form av konkurrenter eller leverantörer.Det är inget som hindrar att man under platsbesöket kommer på nya frågor som man vill få belysta.Dessa kan då under pågående besök planeras in tillsammans med den besökta skolan.ObserveraAvsikten med platsbesöket är främst att verifieraoch klargöra innehållet i Utvärderingsunderlagen.Genom<strong>för</strong>ande av platsbesökUtvärderingsledare och <strong>Examinatorer</strong> deltar tillsammans med den deltagande skolans ledningsgrupp ochnyckelpersoner i ett inledande möte. En lämplig agenda kan vara:• Rektor hälsar välkommen och presenterar kort skolan och de medverkande• Utvärderingsledaren går kort igenom utvärderingsprocessen, avsikten med platsbesöket och deregler etc. som gäller• Utvärderingsledaren introducerar <strong>Examinatorer</strong>na och planen <strong>för</strong> platsbesöket.Kom ihåg att det är utvärderingslaget som skall styra platsbesöket – vad man vill se, vilka man vill träffa,hur lång tid man vill ägna åt olika områden etc. Det är inte den besökta skolan som skall avgöra detta.© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 9


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaMånga skolor vill t.ex. gärna ta hela laget på rundvandring. Detta är bara acceptabelt om det bedömsviktigt <strong>för</strong> platsbesöket och ryms inom den uppgjorda tidsplanen.Under besöket skall laget mötas minst två gånger per dag, och gärna cirka varannan timme, <strong>för</strong> att utbytaerfarenheter, kontrollera att planen hålls och göra eventuella kompletteringar till eller diskuteraavvikelser från planen. Det är en <strong>för</strong>del om Utvärderingsledaren i samband med dessa möten ändrarsammansättningen i tvåmannagrupperna. Arbetet med att nå konsensus efter platsbesöket underlättas avdetta.Besöket avslutas med ytterligare en kort samling med samma deltagare som i inledningsmötet.Utvärderingsledaren tackar <strong>för</strong> besöket och går därefter igenom vad som nu kommer att ske i processen,regler som gäller efter platsbesök etc. Slutligen tackar utvärderingsledaren <strong>för</strong> tillmötesgåendet och<strong>för</strong>klarar platsbesöket avslutat.Avsikten med avslutningsmötet är att tacka <strong>för</strong> det mottagande och samarbetesom laget mött under besöket samt att ge den deltagande skolan möjlighet attställa frågor om procedurer, principer etc. Inget om utvärderingen eller resultatetav platsbesöket får avslöjas.AvrapporteringPlatsbesöket avslutas med att utvärderingslaget möts <strong>för</strong> att nå konsensus om den bild man fått som enföljd av platsbesöket. Mötet hålls direkt efter att platsbesöket avslutats. Utvärderingslaget går igenom,diskuterar samt enas om sina iakttagelser fråga <strong>för</strong> fråga. Utvärderingsledaren ansvarar <strong>för</strong> att lagetssamlade bedömning och slutsatser sammanfattas i Platsbesöksprotokollet.I Platsbesöksprotokollet finns möjligheter att på delkriterie- och kriterienivå ange om platsbesöket geranledning till att ändra den poäng som laget satte vid det <strong>för</strong>sta konsensussammanträdet.Platsbesöksprotokoll skall sändas till <strong>SIQ</strong> på angiven tidpunkt.Regler vid platsbesökDen besökta skolan får inte lämna någon form av gåvor till utvärderingslaget. Utvärderingslaget fårvarken avslöja sin värdering eller funna styrkor och <strong>för</strong>bättringsmöjligheter <strong>för</strong> skolan i samband medbesöket. Skrivhjälp eller hjälp att kopiera bör inte <strong>för</strong>ekomma <strong>för</strong> att inte riskera att olämpliginformation sprids.Råd och anvisningar är ej heller tillåtna. Ingen form av konsultation får ske i samband med utvärderingeneller därefter. <strong>Examinatorer</strong>na får inte ta med sig interna dokument eller annat från platsbesöket.Offentliga verksamhets- och produktbroschyrer etc. får medtas.© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 10


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaAtt vara ExaminatorAtt delta som Examinator är ett hedersuppdrag.Den som blivit antagen och tackat ja till utbildningen till Examinator har också sagt ja till att följa deregler och åtaganden som gäller <strong>för</strong> Kvalitetsutmärkelsen Bättre Skola.Trots att respektive arbetsgivares stöd är en <strong>för</strong>utsättning, medverkar Examinatorn inte iutvärderingsprocessen som <strong>för</strong>eträdare <strong>för</strong> något <strong>för</strong>etag eller skola. Medverkan är helt baserad påpersonlig kompetens.De deltagande skolorna i Kvalitetsutmärkelsen Bättre Skola <strong>för</strong>väntar sig att en opartisk och kvalificeradutvärdering genom<strong>för</strong>s. Utifrån <strong>SIQ</strong>s allmänna uppgift är det också viktigt att utvärderingsprocessen kanfungera som en metod <strong>för</strong> att främja kvalitetsutvecklingen i Sverige. Utvärderingsprocessen utgör i sigsjälv en viktig utbildning <strong>för</strong> kvalificerade aktörer och skapar ett nätverk <strong>för</strong> framtida erfarenhetsutbyte.Åtagandets omfattningArbetsmängden (totalt utbildning, utvärdering, konsensusmöte, platsbesök) <strong>för</strong> varje Examinatorberäknas till mellan 16 och 19 dagar. Arbetsuppgifterna <strong>för</strong>delas över tiden på följande ungefärliga sätt:Aktivitet• Introduktion 1 dag• Distansutbildning 4 dagar• Internatutbildning 3 dagar• Individuell utvärdering 4 – 5 dagar• Utvärderingsledarträff (endast Utvärderingsledarna) 1 dag• Konsensusmöte inkl. prel. Åter<strong>för</strong>ingsrapport 2 – 3 dagar• Platsbesök inkl. justering av Åter<strong>för</strong>ingsrapport 2 – 2 dagarUngefärlig tids åtgångDeltagande i utbildningen innebär att Examinatorn har <strong>för</strong>bundit sig att delta i helaprocessen. Uppdraget anses slut<strong>för</strong>t i och med att åter<strong>för</strong>ingsrapporterna sänts ut till dedeltagande skolorna.Ekonomiska villkor<strong>SIQ</strong> bekostar• utbildnings- och processmaterial <strong>för</strong> utvärderingsprocessenDeltagande skola bekostar• kost och logi vid konsensusmöte/platsbesök<strong>Examinatorer</strong>na bekostar• resor till och från utbildningsdagar• kost och logi vid utbildningsdagar• resor till och från sammanträden• resor till och från platsbesök• sin egen tid© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 11


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaSekretess och tystnadspliktDe deltagande skolorna måste garanteras att uppgifterna i Utvärderingsunderlaget eller resultatet avutvärderingsprocessen inte kommer i orätta händer. <strong>Examinatorer</strong> ingår där<strong>för</strong> en <strong>för</strong>bindelse omtystnadsplikt som omfattar:• identiteten på deltagande skola(-or)• innehåll i Översikt och Utvärderingsunderlag• resultat av utvärderingsprocess• innehåll i Åter<strong>för</strong>ingsrapport och protokoll• andra uppgifter om skolor som delges Examinatorn under utvärderingsarbetet.Tystnadsplikten innebär att ovanstående endast kan diskuteras inom Domarkommittén respektive inomutvärderingslaget i samband med utvärderingsprocessen.Tystnadsplikten gäller utan tidsbegränsning.Alla handlingar skall <strong>för</strong>varas på sådant sätt att de inte är tillgängliga <strong>för</strong> obehöriga. Efter utvärderingensslut skall allt material skickas tillbaka till <strong>SIQ</strong>.Jäv och intressekonfliktFör att en rättvis och trovärdig utvärderingsprocess skall kunna genom<strong>för</strong>as måste jäv ochintressekonflikter undanröjas. Domare och <strong>Examinatorer</strong> skall endast bedöma verksamheter till vilka deinte har en nära relation. Exempel på sådana relationer är:• anställning• viktiga ägarintressen• leverantörs- eller kund<strong>för</strong>hållande, inkl. konsultuppdrag• nära släktskap med ledande befattningshavare eller viktiga ägare.Domare och <strong>Examinatorer</strong> är skyldiga att omgående informera <strong>SIQ</strong> om det finns risk <strong>för</strong> jäv ellerintressekonflikt. <strong>SIQ</strong> <strong>för</strong>behåller sig rätten att slutligt avgöra om intressekonflikt eller jäv <strong>för</strong>eligger.Etiska regler<strong>Examinatorer</strong>na <strong>för</strong>väntas medverka till att skapa ökat kvalitetsmedvetande i Sverige. Likaså <strong>för</strong>väntas<strong>Examinatorer</strong>na medverka till att sprida kunskap om Kvalitetsutmärkelsen Bättre Skola.<strong>Examinatorer</strong>na har rätt att hänvisa till sin erfarenhet från utvärderingsprocessen. (De <strong>Examinatorer</strong> somutses till utvärderingsledare får använda denna term.) Detta får ske enbart med användandet av följandefras:Examinator (Utvärderingsledare) <strong>för</strong> Kvalitetsutmärkelsen Bättre SkolaVid marknads<strong>för</strong>ing av konsulttjänster och dylikt får <strong>Examinatorer</strong>na inte utnyttja sin medverkan iutvärderingen av Kvalitetsutmärkelsen Bättre Skola på annat sätt än vad som sagts ovan.Utmärkelsens grafiska symbol får inte brukas av <strong>Examinatorer</strong>na.Domare och <strong>Examinatorer</strong> får inte acceptera gåvor eller ersättningar från deltagande skolor.Intyg om medverkan i Kvalitetsutmärkelsen Bättre Skola<strong>Examinatorer</strong>nas och Utvärderingsledarnas insatser blir offentligt erkända. Efter fullgjort uppdragerhåller de ett diplom som bevis på sina insatser i Kvalitetsutmärkelsen Bättre Skola.© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 12


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaAtt utvärderaUtvärderingsunderlagetUtvärderingsunderlaget består av Översikt, Ledningens Analys och resultat från in<strong>SIQ</strong>t.Översikten är en övergripande beskrivning av den deltagande skolans verksamhet, uppdrag och<strong>för</strong>utsättningar. Översikten ska innehålla fakta, inte omdömen.I Ledningens Analys har den deltagande skolan gjort en självutvärdering av verksamheten utifrån <strong>SIQ</strong>smodell <strong>för</strong> kundorienterad verksamhetsutveckling. Ledningen/chefsgruppen går igenom alla områden iverksamheten enligt ett malldokument, finns effektiva arbetssätt, i vilken grad tillämpas de och vilka<strong>för</strong>bättringar skall göras <strong>för</strong> att uppnå bättre resultat? Som Examinator ignoreras skolans egennivåbedömning som gjorts i slutet av varje delkriterium.in<strong>SIQ</strong>t är en webbaserad självutvärdering där medarbetare och ledare på skolan får ta ställning till ettantal påståenden om skolans sätt att arbeta och vilka resultat man upplever sig se. Enkäten hjälper ocksåskolan att skapa samsyn <strong>för</strong> hur verksamheten egentligen fungerar. in<strong>SIQ</strong>t-undersökning syftar till att tareda på medarbetarnas <strong>för</strong>ståelse av det systematiska kvalitetsarbetet.Att utvärderaArbetet börjar med en genomläsning av Utvärderingsunderlagen från pärm till pärm. Däreftergenomläses <strong>SIQ</strong>s Modell <strong>för</strong> Kundorienterad Verksamhetsutveckling (modellhäftet). Modellhäftet är ettstöd <strong>för</strong> att <strong>för</strong>stå grundtankarna i <strong>SIQ</strong>s modell. När utvärderingen sedan sker används Målbilder <strong>för</strong>skolans in<strong>SIQ</strong>t-mätning som referens tillsammans med <strong>SIQ</strong>s Grundläggande värderingar som bl.a.beskrivs i häftet <strong>SIQ</strong>s Modell <strong>för</strong> Kundorienterad Verksamhetsutveckling.Efter genomläsningarna läses Utvärderingsunderlagen och Målbilder parallellt med <strong>för</strong>slagsvisunderstrykningspenna eller liknande <strong>för</strong> att kunna göra fortlöpande noteringar och markeringar.Börja med Översikten och notera viktiga/signifikanta fakta som är relevanta <strong>för</strong> den aktuellaverksamheten och <strong>för</strong> den fortsatta utvärderingen, se sidan 6.Därefter fortsätter arbetet med utvärdering av delkriterierna. Utvärderingsunderlaget i form avLedningens Analys och resultatet från in<strong>SIQ</strong>t studeras och positiva inslag sk ”styrkor” markeras med enfärg och svaga områden sk ”<strong>för</strong>bättringsområden” med en annan färg samt ytterligare en färg <strong>för</strong>platsbesöksfrågor.Arbetet fortsätter sedan med ytterligare en genomgång där de styrkorna, <strong>för</strong>bättringsområdena ochplatsbesöksfrågorna formuleras som tydliga fullständiga meningar, se sidan 17-19.Det som är oklart eller behöver <strong>för</strong>tydligas formuleras som platsbesöksfrågor och <strong>för</strong>s in i ExaWeb.Slutligen görs en värdering i procent av hur väl ett delkriterium kan anses vara uppfyllt, se sidan 21.© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 13


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaUtvärdering i fem dimensionerVid utvärderingen formuleras organisationens styrkor och <strong>för</strong>bättringsområden <strong>för</strong> varje delkriterium.Med hjälp av Utvärderingsmatrisen kan man få fram ett procenttal som representerar hur väl delkriterietär uppfyllt.Ju mer organisationens angreppssätt genomsyras av de grundläggande värderingarna, desto positivareomdömen kommer utvärderingen att resultera i.Utvärderingsdimensionerna är Angreppssätt, Tillämpning, Utvärdering och <strong>för</strong>bättring respektiveRelevans/omfattning samt Prestation.Bedömning av angreppssättBedömning av angreppssätt görs inom dimensionerna Angreppssätt, Tillämpning, Utvärdering ochFörbättring.AngreppssättHär bedöms om angreppssätten genomsyras av de grundläggande värderingarna och om de är:• systematiska• integreradeVid bedömning ska tyngdpunkten ligga på hur verksamheten fungerar - inte på vad som görs och vemsom gör det, även om sådan information kan styrka bedömningen av ett angreppssätt. Av ett ”Hur-svar”bör man kunna se ett flöde av aktiviteter som bildar en logisk kedja.Tyngdpunkten vid utvärderingen ska ligga på HUR verksamheten fungerar. Ett fullständigt HUR-svar äruppbyggt så att Examinatorn ser ett flöde av aktiviteter som tillsammans bildar en process.I Ledningens Analys är utvärderingsunderlag är utrymmet <strong>för</strong> HUR-beskrivningar begränsat. Det innebäratt examinatorn främst letar efter <strong>för</strong>ekomsten av angreppssätt och att <strong>för</strong>ståelsen <strong>för</strong> HUR i många fallfår verifieras <strong>för</strong> de viktigaste angreppssätten vid platsbesöket.TillämpningHär bedöms när, var och hur ofta de valda angreppssätten tillämpas:• på alla varor och tjänster• i alla relevanta interna processer och aktiviteter• vid all samverkan med kunder, leverantörer, partners och samhälle• vid relevanta tillfällenFrekvensen – hur ofta – bör vara vald och motiverad av organisationen själv och det bör ingå somen del i organisationens egen utvärdering att även pröva den valda frekvensens lämplighet.Utvärdering och <strong>för</strong>bättringHär bedöms om angreppssätten och tillämpningen systematiskt:• följs upp• omsätts till lärande och <strong>för</strong>bättring© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 14


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaBedömning av resultatBedömning av resultat görs inom dimensionerna Relevans/omfattning samt Prestation.Relevans/omfattningHär bedöms om de mått som verksamheten valt att presentera är relevanta och tillräckliga <strong>för</strong> att belysade aspekter som berörs av delkriteriet, att de har kopplingar till egna strategier och mål, samt att deomfattar relevanta områden, segment och processer.PrestationHär bedöms:• härledbarhet; att resultaten är en logiskt följd av valda angreppssätt och deras tillämpning(samband mellan orsak och verkan)• nivåer; att egna resultatet jäm<strong>för</strong>s med konkurrenter och ledande organisationers resultat• trender; att resultatet <strong>för</strong>bättras över tid eller hare en stabil hög/uthållig nivåPoängsättningUtifrån de styrkor och de <strong>för</strong>bättringsområden som identifierats <strong>för</strong> respektive delkriterium görs enprocentbedömning baserat på dimensionerna enligt utvärderingsmatrisen.För delkriteriet som avser Angreppsätt används dimensionerna Angreppssätt, Tillämpning ochUtvärdering och <strong>för</strong>bättring. Inom respektive dimension bedöms de olika delarna var <strong>för</strong> sig och vägssamman till ett procenttal <strong>för</strong> dimensionen i sin helhet <strong>för</strong> delkriteriet (t.ex. består Angreppssätt avdelarna Systematik och Integration).Slutligen sammanvägs de tre dimensionerna Angreppssätt, Tillämpning samt Utvärdering och <strong>för</strong>bättringsamman till en helhetsbedömning (total %) <strong>för</strong> delkriteriet.Det sammanväga totala procenttalet <strong>för</strong> respektive delkriterium omräknas slutligen till poäng genom atttotal % <strong>för</strong> delkriteriet multipliceras med delkriteriets tilldelade poäng. Summan av alla delkriteriernaspoäng ger slutligen organisationens nivå.© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 15


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaRiktlinjer <strong>för</strong> utvärderingsarbetetÖversiktenBörja med att läsa igenom Översikten. Översikten innehåller viktiga grundbegrepp som återkommer iUtvärderingsunderlagens olika delar. Översikten ger en bild av skolan och viktiga <strong>för</strong>utsättningar <strong>för</strong>skolan som underlättar utvärderingen <strong>för</strong> externa <strong>Examinatorer</strong>. Läs sedan igenom helaUtvärderingsunderlagen så att innehållet blir bekant och lätt att söka i. Notera viktiga fakta om dendeltagande skolan, såsom t.ex:• verksamhetsidé och uppdrag• visioner och värderingar• elevernas behov, krav, önskemål och <strong>för</strong>väntningar• viktigaste varor och tjänster• process och organisationsstruktur• verksamhetens framgångsfaktorer samt hot och möjligheter• medarbetare (antal, kategorier och utbildningsnivåer).Arbetsgång vid utvärdering av ett delkriterium i Ledningens AnalysBegrunda och träng in i vad fakta i tabeller och diagram verkligen betyder, varifrån de är hämtade etc.Beakta speciellt sambanden mellan olika kriterier och hur information som Utvärderingsunderlageninnehåller stämmer överens med dessa samband. Det är annars lätt att göra ogrundade antaganden.• Läs igenom det valda avsnittet i Utvärderingsunderlagen. Gör efter hand lämpliga noteringar imarginalen• Studera resultaten från in<strong>SIQ</strong>ts-enkäten <strong>för</strong> det valda avsnittet• Studera vad som efterfrågas i delkriteriet (Målbilder in<strong>SIQ</strong>ts enkät).• Se efter vilken eller vilka av de fyra dimensionerna som skall utvärderas• Läs igenom avsnittet i Utvärderingsunderlagen som skall utvärderas en andra gång• Studera åter vad som verkligen efterfrågas i delkriteriets olika punkter• Läs åter igenom avsnittet som skall utvärderas• Se efter om alla områden, produkter och tjänster i verksamheten har täckts in• Fundera på samband med andra kriterier och andra delar av Utvärderingsunderlagen• Fundera på om avsnittet hänger samman med resten av Utvärderingsunderlagen• Formulera kommentarer om Styrkor och Förbättringsområden och skriv ner dessa i ExaWeb.Använd fullständiga meningar. Tänk på att göra kommentarerna så fylliga att det är lätt att <strong>för</strong>ståinnebörden, även efter en tid (Se även nästa avsnitt)• Bestäm vad som skall verifieras och studeras vid platsbesök• Med Styrkor och Förbättringsområden som grund tilldelas varje avsnitt med hjälp avUtvärderingsmatrisen en procentsats som visar hur väl Utvärderingsunderlagen uppfyller kriteriet• Den tilldelade procentsatsen vid den individuella utvärderingen skall vara från 0-100% i hela 10 %-steg.© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 16


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaUtvärderingen baseras på den information som finns i Utvärderingsunderlagen. Utgångspunkten är attdet som beskrivs är sant. Om det finns motsägelsefull information så gör en tolkning och undanröjoklarheterna vid platsbesöket. Gör alltid en preliminär värdering baserat på den information som finns iUtvärderingsunderlagen, och säkerställ det faktiska <strong>för</strong>hållandet vid platsbesöket.Vanliga frågor vid utvärdering av delkriterier• Svarar beskrivningen mot delkriteriets frågeställningar (målbilder i in<strong>SIQ</strong>t)?• Är fakta som beskrivs viktiga <strong>för</strong> att delkriteriet skall anses uppfyllt?• Saknas fakta som är viktiga <strong>för</strong> att delkriteriet skall anses uppfyllt?• Är angreppssätten systematiska?• Är angreppssätten integrerade?• Finns utvärdering och <strong>för</strong>bättring?• Tillämpas angreppssätten inom relevanta områden?• Med vilken frekvens tillämpas angreppssätten?• Finns stabila positiva trender?• Uppvisas goda nivåer och jäm<strong>för</strong>elser med andra skolor?• Är resultaten härledbara till tillämpningen av angreppssätten?• Kommer resultaten från alla delar av verksamheten?• Är faktakällorna lämpliga och trovärdiga?• Är fakta redovisade så att trender kan utvärderas?• Är trovärdiga och relevanta jäm<strong>för</strong>elser gjorda med skolor som är ledande inom området? Gällerdetta både produkter och processer?• Hur länge har resultaten varit bestående?Riktlinjer <strong>för</strong> formuleringen av kommentarer om Styrkor ochFörbättringsområden• Styrkor och Förbättringsområden skall motiveras utifrån frågeställningarna i delkriterierna (iin<strong>SIQ</strong>t), de Grundläggande Värderingarna, Viktiga Verksamhetsfaktorer, sambanden mellandelkriterierna samt stödorden i Utvärderingsmatrisen• Utforma kommentarerna så att den utvärderade skolan känner igen begrepp och terminologi• Skriv kompletta och <strong>för</strong>ståeliga meningar• Basera kommentarerna på fakta, inte tyckande• Använd (+) eller (-) markeringar <strong>för</strong> att markera viktiga Styrkor eller Förbättringsområden• Använd (+ +) eller (- -) <strong>för</strong> att markera det som är mycket viktigt. Använd dessa beteckningarsparsamt• Använd inte blandade kommentarer (+/-). Lös istället problemet genom att göra tvåkommentarer, en positiv och en negativ• Tänk på att den satta värderingen bör spegla <strong>för</strong>hållandet mellan mängden av (+) kommentareroch (-) kommentarer• Var noga med att notera A, B, C <strong>för</strong> delkriteriets punkt vid varje kommentar som relaterar tillmålbilderna från in<strong>SIQ</strong>t© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 17


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre Skola• Notera ett U <strong>för</strong> kommentarer som relaterar till ”Utvärdering och <strong>för</strong>bättring” och ett O <strong>för</strong>”övriga kommentarer”• Kommentarerna ska alltid skapa ett mervärde <strong>för</strong> den deltagande skolan, så att de kan användadem i sitt <strong>för</strong>bättringsarbete.Exempel på kommentarer++ Strategin <strong>för</strong> utveckling av medarbetarnas kompetens baseras på de viktigaste elevkravenoch är tydligt integrerad i skolans verksamhetsplanering.- Jäm<strong>för</strong>elser med konkurrenter visar att skolans två viktigaste konkurrenter har nöjdareelever.- Omkring två tredjedelar av medarbetarna deltar aldrig i <strong>för</strong>slagsverksamheten eller<strong>för</strong>bättringsteamen.- Det framgår inte hur kvalitetsutvecklaren stöder lärarna i kvalitets<strong>för</strong>bättringsarbetet.+ Skolan använder flera angreppssätt <strong>för</strong> att ta reda på kundernas framtida behov och krav:enkäter, djupintervjuer och kundpaneler.+ Hänsyn tas till samhällsengagemang i planeringsarbete genom att planera in ett antalsamhällsrelaterade aktiviteter.- Det framgår inte tydligt av beskrivningen vilka de viktigaste resurserna är.© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 18


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaProcentbedömning och PoängberäkningDe flesta delkriterierna efterfrågar angreppssätt, till vilken omfattning de tillämpas samt om deutvärderas och <strong>för</strong>bättras.Några delkriterier efterfrågar konkreta resultat; måttens relevans/omfattning och prestation; resultatenshärledbarhet, nivåer och trender.Delkriterium Angreppssätt Tillämpning Utvärderingoch <strong>för</strong>bättringResultat:Måttensrelevans/omfattning och prestation1.1 • • •1.2 • • •1.3 • • •1.4 • • •1.5 • • •2.1 • • •2.2 • • •3.1 • • •4.1 • • •4.2 • • •4.3 • • •4.4 • • •4.5 • • •4.6 •5.1 • • •5.2 • • •5.3 • • •6.1 •6.2 •6.3 •7.1 • • •7.2 • • •7.3 • • •7.4 • • •7.5 •Figur 1. De dimensioner som bedöms i respektive delkriterium.Utifrån de styrkor och <strong>för</strong>bättringsområden som identifierats görs <strong>för</strong> varje delkriterium med hjälp avUtvärderingsmatrisen (se nedan) en procentbedömning. Den baseras på de olikautvärderingsdimensionerna enligt Utvärderingsmatrisen; Angreppssätt, Tillämpning, Utvärdering och<strong>för</strong>bättring när det gäller delkriterier som efterfrågar angreppssätt respektive Relevans/omfattning ochPrestation <strong>för</strong> delkriterier som avser resultatredovisning.Inom respektive utvärderingsdimension bedöms de olika delarna (såsom t.ex. Systematik och Integrationnär det gäller dimensionen Angreppssätt) var <strong>för</strong> sig och sammanvägs till ett slutligt procenttal <strong>för</strong>dimensionen. Sedan sammanvägs de tre dimensionerna Angreppssätt, Tillämpning samt Utvärdering och<strong>för</strong>bättring till en helhetsbedömning <strong>för</strong> delkriteriet.För delkriterier som avser resultat bedöms Relevans/omfattning samt Prestation, på samma sätt, var <strong>för</strong>sig <strong>för</strong> att slutligen sammanvägas till en procentsats <strong>för</strong> delkriteriet.Sammanvägningen kan inte göras som en aritmetisk kalkyl, utan måst ske med en viss känsla <strong>för</strong> helhet.© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 19


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaUtvärderingsmatrisenUtvärderingen av en organisations verksamhet görs med hjälp av Utvärderingsmatrisen. Den ger medhjälp av ledord en möjlighet att hitta en nivå som motsvarar organisationens Angreppssätt, Tillämpning,Utvärdering och <strong>för</strong>bättring samt Relevans/omfattning och Prestation så som de beskrivits iutvärderingsunderlaget.Bedömning av angreppssättAngreppssättHär bedömer du omangreppssätten genomsyrasav de Grundläggandevärderingarnaoch i vilken mån deuppvisar …SystematikRutiner, metoder, system &organisation är etablerade <strong>för</strong>medvetet valda angreppsättIntegrationStöder verksamhetsplaneroch samverkar med andraangreppsättSystematiksaknasIntegrationsaknasSystematiksaknas till storadelarIntegration saknasi huvudsakDelvissystematiskaDelvisintegreradeI huvudsaksystematiskaI huvudsakintegreradeHeltäckandesystematiskaangreppssättFullständigtintegreradeDeltotal % 0 10 20 30 40 50 60 70 80 90 100TillämpningVarAngreppssätten tillämpas i bredd& djupEjtillämpadeInom någrarelevantaområdenInom flerarelevantaområdenInom de flestarelevanta områdenInom alla relevantaområdenNärAngreppssätten tillämpasAldrig Sporadiskt Ofta vidrelevanta tillfällenVid nästan allarelevanta tillfällenVid alla relevantatillfällenDeltotal % 0 10 20 30 40 50 60 70 80 90 100Utvärdering och<strong>för</strong>bättringUppföljningUppföljning genom<strong>för</strong>s avangreppssättensändamålsenlighet, tilllämpning &effektivitetUppföljningsaknasSporadiskDelvis systematiskI huvudsaksystematiskHeltäckandesystematiskuppföljningLärande och FörbättringsarbeteResultatet av uppföljning omsättstill lärande & <strong>för</strong>bättringarLärandeoch<strong>för</strong>bättringsarbetesaknasSporadiskDelvis systematiskI huvudsaksystematiskHeltäckandesystematisktlärande och<strong>för</strong>bättringsarbeteDeltotal % 0 10 20 30 40 50 60 70 80 90 100Angreppssätt Total % 0 10 20 30 40 50 60 70 80 90 100Bedömning av resultatRelevans/omfattningValda mått är relevanta ochtillräckliga <strong>för</strong> att belysa deaspekter som berörs avdelkriteriet, har kopplingar tillegna strategier och mål samtomfattar relevanta områden/segment/processerEjredovisade,ej relevantaNågra relevantaområden redovisasFlera relevantaområden ochprocesserredovisasDe flesta relevantaområden ochprocesser redovisasAlla relevantaområden ochprocesser redovisasDeltotal % 0 10 20 30 40 50 60 70 80 90 100PrestationHärledbarhetResultat är en logisk följd av valdaangreppssätt och derastillämpningHärledbarhetsaknasNågra resultatär härledbara tillangreppssättFlera resultat ärhärledbara tillangreppssättDe flesta resultatär härledbara tillangreppssättResultaten ärfullständigthärledbara tillangreppssättNivåerResultat i jäm<strong>för</strong>else medrelevanta egna målvärden ochmed ledande organisationers ochkonkurrenters resultatEjredovisadeNågra resultatvisar godanivåerFlera resultatvisar goda nivåerDe flesta resultatenvisar goda nivåerResultaten är ivärldsklassTrenderResultat <strong>för</strong>bättras över tidEjredovisadeNågra resultatvisar positivatrenderFlera resultatvisar positivatrenderDe flesta resultatenvisar stabila, positivatrender och/eller uthålligt godanivåerResultaten visarstabila positivatrender och/elleruthållig världsklassDeltotal % 0 10 20 30 40 50 60 70 80 90 100Resultat Total % 0 10 20 30 40 50 60 70 80 90 100© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 20


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaÅter<strong>för</strong>ingsrapportenSamtliga deltagande skolor erhåller åter<strong>för</strong>ing, som består av:• Ett följebrev utfärdat av <strong>SIQ</strong>• Tabell ”Sju kvalitetsnivåer”, se sidan 43 i ”<strong>SIQ</strong>s Modell <strong>för</strong> KundorienteradVerksamhetsutveckling”• Åter<strong>för</strong>ingsrapport, med uppgift om nivå enligt ”Sju Kvalitetsnivåer” (OBS! ej exakt poäng utan”nivå”)• Diagram som visar nivå per delkriterium.Åter<strong>för</strong>ingsrapporten består av två delar:En sammanfattning på 2–4 sidor:Inledning (med angivande av den nivå skolan erhåller)Utvärderingsunderlaget (generella synpunkter och kommentarer)Platsbesök (generella synpunkter och kommentarer)Viktigaste övergripande styrkor och <strong>för</strong>bättringsområden (kan exempelvis handla om angreppssätt,tillämpning, resultat samt utvärdering och <strong>för</strong>bättring)Rubriker <strong>för</strong> och kommentarer om var och en av <strong>SIQ</strong>s Grundläggande Värderingar (om det finnstillräckligt underlag; annars <strong>för</strong> de som det finns).En detaljerad åter<strong>för</strong>ing på delkriterienivå baserad på Konsensusprotokollet, som består av styrkor och<strong>för</strong>bättringsområden på punktnivå <strong>för</strong> varje delkriterium.Förutom Åter<strong>för</strong>ingsrapporten vid avslutad utvärdering så får deltagande skola också en fullständigrapport med resultaten från in<strong>SIQ</strong>t-enkäten som i detalj visar hur verksamheten fungerar enligtmedarbetarnas egen uppfattning. Denna får skolan så fort enkäten är avslutad.© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 21


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre SkolaTypiskt <strong>för</strong> skolor med höga respektive låga poängFöljande är exempel på kännetecken på skolor med höga respektive låga poäng:Höga poäng• engagerat, aktivt och synligt ledarskap• utmanande mål <strong>för</strong> verksamhetsutvecklingen• kundtillfredsställelse, jäm<strong>för</strong>elser med ledande skolor• lyhört och <strong>för</strong>utseende elevbemötande• mäter resultat i alla processer• stora investeringar i medarbetarnas kompetensutveckling.Låga poäng• osynligt, kontrollerande och styrande ledarskap• bristande kunskap om elevernas verkliga behov, krav, önskemål och <strong>för</strong>väntningar• ”kundservice baserad på klagomålshantering, reparation och felavhjälpning”• begränsad omvärldsbevakning och kännedom om andra skolor• inga jäm<strong>för</strong>elser med ledande skolor.© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 22


<strong>Handledning</strong> <strong>för</strong> <strong>Examinatorer</strong>, Kvalitetsutmärkelsen Bättre Skola<strong>SIQ</strong> är ett nationellt institut som stimulerar och bidrar till ständiga <strong>för</strong>bättringar medhelhetssyn i alla typer av verksamheter.Vi vill vara med och skapa ett Sverige där alla organisationer utvecklar ett kundfokuserat,hållbart agerande och tar tillvara människors och verksamheters fulla potential.<strong>SIQ</strong>s huvudmän är staten och Intressent<strong>för</strong>eningen <strong>Kvalitetsutveckling</strong>. Som medlemstödjer man utvecklingen och delar kunskapen om det som skapar framgång.<strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong>Fabriksgatan 10, 412 50 GöteborgTelefon 031-723 17 00 • Fax 031-723 17 99siq@siq.se • www.siq.se© <strong>Institutet</strong> <strong>för</strong> <strong>Kvalitetsutveckling</strong> <strong>SIQ</strong>, 2013-04-04 23

Hooray! Your file is uploaded and ready to be published.

Saved successfully!

Ooh no, something went wrong!