Delovno srečanje ŠRT 5/1 – 2010 (SAMO)EVALVACIJA Delovno srečanje ŠRT 5/1 – 2010 Dr. Branko Slivar Operacijo delno financira Evropska unija iz Evropskega socialnega sklada ter Ministrstvo za šolstvo in šport. Operacija se izvaja v okviru Operativnega programa razvoja človeških virov v obdobju 2007-2013, razvojne prioritete: Razvoj človeških virov in vseživljenjsko učenje; prednostne usmeritve: Izboljšanje kakovosti in učinkovitosti sistemov izobraževanja in usposabljanja.

SPREMLJANJE (SAMO SPREMLJANJE)? EVALVACIJA SAMO EVALVACIJA je postopek sistematičnega zbiranja informacij o njihovem uresničevanju z namenom sprotnega reševanja vprašanj neposredno v pedagoški praksi. presoja, vrednotenje, ocenjevaje nečesa. sistematična uporaba metod družboslovnega raziskovanja za ocenjevanje načrta, implementacije in rezultatov ter učinkovitosti projektov, politik... sistematična, kritična analiza, katere namen je lahko odločanje in strateško načrtovanje ali izpopolnjevanje. je proces zbiranja in analiziranja informacij o sebi, ki ga spodbudi šola sama, v katerem izbrani sodelujoči na sistematičen način opišejo in presodijo delovanje šole z namenom sprejemanja odločitev in pobud za izboljšanje razvoja šole

Ravni (samo)evalvacije Raven šole Raven skupin (vodstvo, predmetni aktiv, razvojni tim) Raven posameznika

Ob samoevalvaciji se po navadi pojavljajo tri temeljna vprašanja: zakaj samoevalvacija? (ugotoviti zakaj nekaj (postopek, način, ....) deluje dobro ali slabo) kako izpeljati samoevalvacijo? kako uporabiti rezultate samoevalvacije?

POTEK SAMOEVALVACIJE NAČRTOVANJE SAMOEVALVACIJE IZVEDBA IN POSTOPKI SAMOEVALVACIJE IZDELAVA POROČILA UVAJANJE UGOTOVITEV METAEVALVACIJA

NAČRTOVANJE SAMOEVALVACIJE - SE Kaj bo predmet – področje SE? Postavitev evalvacijskih vprašanj. (Katere didaktične novosti se izvajajo?) Opredelitev spremenljivk (znanje, načrtovanje, medpredmetne povezave, ….) in kazalnikov. Kdo bo vključen v SE? Katere podatke bomo zbirali in kako? Kako jih bomo analizirali? Organizacija SE , financiranje (sestanki, kdo bo izvajal SE, kdaj…, začetek in konec SE). Kaj bomo naredili z rezultati?

IZVEDBA IN POSTOPKI EVALVACIJE Določitev: Metod in tehnik (anketiranje, vodeni intervjuji, opazovanje pouka (snemanje, prisotnost v razredu), diagnostično testiranje znanja, analiza dokumentov in gradiv.) Vzorca Inštumentarija Zbiranje in analiza podatkov Časovnice

METODE NAMEN PREDNOSTI IZZIVI Vprašalniki, ankete, ček liste Ko je potrebno hitro in/ali enostavno pridobivanje velikega števila informacij na neogrožujoč način Anonimna, nizki stroški administriranja, primerjave in analiza, veliko podatkov, veliko vprašalnikov že obstaja Ne dajejo celotne slike, problematika vzorčenja, neosebni, navodila lahko vplivajo na pristranskost odgovorov Intervjuji (s posamezniki) Ko je potreben celovito razumevanje izkušenj, doživljanj posameznika, ali se naučiti več o odgovorih na vprašalnike Pridobitev celovitih in poglobljenih podatkov, razvoj medosebnih odnosov, fleksibilnost do intervjuvancev Časovno zamuden, zahtevno analiziranje odgovorov, otežena primerljivost, intervjuvar lahko vpliva na odgovore intervjuvanca Opazovanja Pridobivanje točnih informacij o tem kako nekaj deluje, predvsem proces Vpogled v proces , možnost prilagajanja dogodkom, ko se pojavijo Težave pri interpretiranju opazovanega vedenja, kompleksnost kategorizacije opazovanj, vplivanje na vedenje opazovancev, neekonomično Intervju (z več udeleženci) Raziskovanje posameznih vsebinskih področji skozi skupinsko diskusijo, izmenjava mnenj, argumentiranje… Hitro in zanesljivo pridobivanje splošnega vtisa ali pridobivanja informacij Zahtevno analiziranje odgovorov in ugotovitev, težavna časovna usklajenost 6 – 8 ljudi Študija primera Vodenje celovitega procesa razumevanja posameznega primera (posameznika) Celovit opis izkušenj posameznika v procesu Časovno zamudno, bolj je prisotna globina informacij kot širina

POROČILO Struktura poročila Način prikaza podatkov (grafi, preglednice…) Predlogi za spremembe

POZOR! Slabo pripravljena in ad-hoc samoevalvacije so nezanesljive, nepravične in brez informacijske vrednosti. Take samoevalvacije ne predstavljajo ustreznega vira na osnovi katerega bi lahko sprejemali odločitve o spremembah na ravni šole. GIGO EFEKT!

Oblikovanje, razmnoževanje in pošiljanje vprašalnika Primer Oblikovanje, razmnoževanje in pošiljanje vprašalnika Vnos podatkov in statistična obdelava odgovorov Kodiranje odgovorov Statistična obdelava

Primer – statistična obdelava Frekvenčne tabele in grafi Aritmetična sredina, standardna deviacija Procenti Križne tabele (crosstab) Razlike med skupinami (t-test) – lestvice! Korelacija – lestvice!

Ali ste z našimi absolventi zadovoljni? Križne tabele Ali ste z našimi absolventi zadovoljni? Total ne zmerno močno izjemno Velikost podjetja M Count 31 253 164 43 491 % within vel_pod 6,3% 51,5% 33,4% 8,8% 100,0% % within Ali ste z našimi absolventi zadovoljni? 77,5% 67,5% 64,1% 51,2% 65,0% V 9 122 92 41 264 3,4% 46,2% 34,8% 15,5% 22,5% 32,5% 35,9% 48,8% 35,0% 40 375 256 84 755 5,3% 49,7% 33,9% 11,1%

Razlike med skupinami Velikost podjetja N Mean Std. Deviation Ali ste z našimi absolventi zadovoljni? M 491 2,4460 ,74137 V 264 2,6250 ,78453 t-test for Equality of Means t df Sig. (2-tailed) Mean Difference Std. Error Difference   Ali ste z našimi absolventi zadovoljni? Equal variances assumed -3,099 753 ,002 -,17897 ,05775

Korelacija Odg 3 VS44 Pearson Correlation 1 ,192(**) Sig. (2-tailed) ,000 N 755 750 752 Correlations ** Correlation is significant at the 0.01 level (2-tailed). -1 do +1 0,00 do 0,20 – zelo nizka 0,20 do 0,40 nizka 0,40 do 0,70 srednje visoka 0,70 do 0,90 visoka 0,90 do 1,00 zelo visoka