1. Delovno srečanje ŠRT 5/1 – 2010
(SAMO)EVALVACIJA
Delovno srečanje ŠRT 5/1 – 2010
Dr. Branko Slivar
Operacijo delno financira Evropska unija iz Evropskega socialnega sklada ter Ministrstvo za šolstvo in šport. Operacija se izvaja v okviru Operativnega programa razvoja človeških virov v obdobju , razvojne prioritete: Razvoj človeških virov in vseživljenjsko učenje; prednostne usmeritve: Izboljšanje kakovosti in učinkovitosti sistemov izobraževanja in usposabljanja.

2. SPREMLJANJE
(SAMO SPREMLJANJE)?
EVALVACIJA
SAMO EVALVACIJA
je postopek sistematičnega zbiranja informacij o njihovem uresničevanju z namenom sprotnega reševanja vprašanj neposredno v pedagoški praksi.
presoja, vrednotenje, ocenjevaje nečesa.
sistematična uporaba metod družboslovnega raziskovanja za ocenjevanje načrta, implementacije in rezultatov ter učinkovitosti projektov, politik...
sistematična, kritična analiza, katere namen je lahko odločanje in strateško načrtovanje ali izpopolnjevanje.
je proces zbiranja in analiziranja informacij o sebi, ki ga spodbudi šola sama, v katerem izbrani sodelujoči na sistematičen način opišejo in presodijo delovanje šole z namenom sprejemanja odločitev in pobud za izboljšanje razvoja šole

3. Ravni (samo)evalvacije
Raven šole
Raven skupin (vodstvo, predmetni aktiv, razvojni tim)
Raven posameznika

4. Ob samoevalvaciji se po navadi pojavljajo tri temeljna vprašanja:
zakaj samoevalvacija? (ugotoviti zakaj nekaj (postopek, način, ....) deluje dobro ali slabo)
kako izpeljati samoevalvacijo?
kako uporabiti rezultate samoevalvacije?

5. POTEK SAMOEVALVACIJE NAČRTOVANJE SAMOEVALVACIJE
IZVEDBA IN POSTOPKI SAMOEVALVACIJE
IZDELAVA POROČILA
UVAJANJE UGOTOVITEV
METAEVALVACIJA

6. NAČRTOVANJE SAMOEVALVACIJE - SE
Kaj bo predmet – področje SE?
Postavitev evalvacijskih vprašanj. (Katere didaktične novosti se izvajajo?)
Opredelitev spremenljivk (znanje, načrtovanje, medpredmetne povezave, ….) in kazalnikov.
Kdo bo vključen v SE?
Katere podatke bomo zbirali in kako?
Kako jih bomo analizirali?
Organizacija SE , financiranje (sestanki, kdo bo izvajal SE, kdaj…, začetek in konec SE).
Kaj bomo naredili z rezultati?

7. IZVEDBA IN POSTOPKI EVALVACIJE
Določitev:
Metod in tehnik (anketiranje, vodeni intervjuji, opazovanje pouka (snemanje, prisotnost v razredu), diagnostično testiranje znanja, analiza dokumentov in gradiv.)
Vzorca
Inštumentarija
Zbiranje in analiza podatkov
Časovnice

8. METODE NAMEN PREDNOSTI IZZIVI
Vprašalniki, ankete, ček liste
Ko je potrebno hitro in/ali enostavno pridobivanje velikega števila informacij na neogrožujoč način
Anonimna, nizki stroški administriranja, primerjave in analiza, veliko podatkov, veliko vprašalnikov že obstaja
Ne dajejo celotne slike, problematika vzorčenja, neosebni, navodila lahko vplivajo na pristranskost odgovorov
Intervjuji (s posamezniki)
Ko je potreben celovito razumevanje izkušenj, doživljanj posameznika, ali se naučiti več o odgovorih na vprašalnike
Pridobitev celovitih in poglobljenih podatkov, razvoj medosebnih odnosov, fleksibilnost do intervjuvancev
Časovno zamuden, zahtevno analiziranje odgovorov, otežena primerljivost, intervjuvar lahko vpliva na odgovore intervjuvanca
Opazovanja
Pridobivanje točnih informacij o tem kako nekaj deluje, predvsem proces
Vpogled v proces , možnost prilagajanja dogodkom, ko se pojavijo
Težave pri interpretiranju opazovanega vedenja, kompleksnost kategorizacije opazovanj, vplivanje na vedenje opazovancev, neekonomično
Intervju (z več udeleženci)
Raziskovanje posameznih vsebinskih področji skozi skupinsko diskusijo, izmenjava mnenj, argumentiranje…
Hitro in zanesljivo pridobivanje splošnega vtisa ali pridobivanja informacij
Zahtevno analiziranje odgovorov in ugotovitev, težavna časovna usklajenost 6 – 8 ljudi
Študija primera
Vodenje celovitega procesa razumevanja posameznega primera (posameznika)
Celovit opis izkušenj posameznika v procesu
Časovno zamudno, bolj je prisotna globina informacij kot širina

9. POROČILO Struktura poročila
Način prikaza podatkov (grafi, preglednice…)
Predlogi za spremembe

10. POZOR!
Slabo pripravljena in ad-hoc samoevalvacije so nezanesljive, nepravične in brez informacijske vrednosti. Take samoevalvacije ne predstavljajo ustreznega vira na osnovi katerega bi lahko sprejemali odločitve o spremembah na ravni šole.
GIGO EFEKT!

11. Oblikovanje, razmnoževanje in pošiljanje vprašalnika
Primer
Oblikovanje, razmnoževanje in pošiljanje vprašalnika
Vnos podatkov in statistična obdelava odgovorov
Kodiranje odgovorov
Statistična obdelava

12. Primer – statistična obdelava
Frekvenčne tabele in grafi
Aritmetična sredina, standardna deviacija
Procenti
Križne tabele (crosstab)
Razlike med skupinami (t-test) – lestvice!
Korelacija – lestvice!

13. Ali ste z našimi absolventi zadovoljni?
Križne tabele
Ali ste z našimi absolventi zadovoljni?
Total ne
zmerno
močno
izjemno
Velikost podjetja M
Count 31
253
164 43
491
% within vel_pod
6,3%
51,5%
33,4%
8,8%
100,0%
% within Ali ste z našimi absolventi zadovoljni?
77,5%
67,5%
64,1%
51,2%
65,0% V 9
122 92 41
264
3,4%
46,2%
34,8%
15,5%
22,5%
32,5%
35,9%
48,8%
35,0% 40
375
256 84
755
5,3%
49,7%
33,9%
11,1%

14. Razlike med skupinami Velikost podjetja N Mean Std. Deviation
Ali ste z našimi absolventi zadovoljni? M
491
2,4460
,74137 V
264
2,6250
,78453
t-test for Equality of Means t df
Sig. (2-tailed)
Mean Difference
Std. Error Difference
Ali ste z našimi absolventi zadovoljni?
Equal variances assumed
-3,099
753
,002
-,17897
,05775

15. Korelacija Odg 3 VS44 Pearson Correlation 1 ,192(**) Sig. (2-tailed)
,000 N
755
750
752
Correlations
** Correlation is significant at the 0.01 level (2-tailed).
-1 do +1
0,00 do 0,20 – zelo nizka
0,20 do 0,40 nizka
0,40 do 0,70 srednje visoka
0,70 do 0,90 visoka
0,90 do 1,00 zelo visoka