1. Критеријумски тест за српски језик
Републички зимски семинар наставника српског језика и књижевности Београд, 12. јануар 2012.
Критеријумски тест за српски језик
Ана Пејић
Завод за вредновање квалитета образовања и васпитања

2. Циљ излагања:
да представи општу структуру области за предмет Српски језик (Српски језик и књижевност);
да образложи појам и сврху критеријумског теста у настави српског језика и књижевности;
да објасни структуру теста и типове задатака;
да вежбом укаже на начин избора критеријума за тестирање и на процес састављања задатака.

3. Документа
Општи стандарди постигнућа - образовни стандарди за крај обавезног образовања (НПС, 2009)
Општи стандарди постигнућа - образовни стандарди за крај првог циклуса обавезног образовања (НПС, 2011)
Општи стандарди постигнућа - образовни стандарди за крај општег средњег образовања (у току)
Образовни стандарди за крај основног образовања одраслих (почетак)

4. Структура образовних стандарда Области
Комуникација на српском језику (усмена и писана)
Говорна култура
Вештина читања и разумевање прочитаног
Писано изражавање
Знање о језику
Граматика, лексикологија, народни и књижевни језик
Знање о књижевности и књижевне компетенције
Књижевност

5. Пример конструкта: Област Вештина читања и разумевање прочитаног (1)
Аспекти читања (процеси/когнитивни циљеви)
Техника читања ћириличног и латиничног писма
Проналажење информација у тексту
Тумачење текста
Промишљање и вредновање текста
Читалачка ауторефлексија

6. Пример конструкта: Операционализација области (2)
(Anderson, 1972; Blооm, 1981; Kintsch, 1988; Ozuru et al., 2008)

7. Пример конструкта: Област Вештина читања и разумевање прочитаног (3)
Како раслојити општу компетенцију „Ученик проналази информације у тексту“?
тип текста: једноставан/сложенији/сложен текст
место информације
важност садржаних текстуалних пропозиција
тип везе питања са текстом, нпр. Моделовање тежине задатка за разумевање текста (Embretson and Wetzel, 1987)

8. Пример конструкта: Област Вештина читања и разумевање прочитаног (4)
(Завод за вредновање квалитета образовања и васпитања, 2009)

9. Критеријумски тест vs. нормативни тест
Тест оријентисан на критеријум
Тест оријентисан на норму
Испитује шта је ученик научио од онога што је претпостављено васпитно- образовним циљевима/образовним стандардима.
Испитује колико је ученик научио.
(Заснива се на психологији индивидуалних разлика -дистрибуцији знања према моделу нормалне расподеле.)
Ученици могу да се пореде међусобно, или само у односу на унапред постављен критеријум (овладао/није овладао).
Резултат на тесту има релативну вредност (норма се одређује након анализе теста).
Примена: нпр. у евалуацији наставних програма и метода рада; у селекцији кандидата; у формативном и сумативном вредновању (завршни испит).
Примена: нпр. емпиријска истраживања у процесу постављања образовних стандарда, PISA, PIRLS.
Могућност израчунавања у процентима.

10. Критеријумски тест: Шта је критеријум? (1)
Критеријум је компетенција/образовни стандард, не скор или проценат.
На пример:CJK Пореди информације из двају или више сложенијих (не)уметничких текстова да би разумео проблем.
знање
вештина
став
Индивидуалне
разлике
контекст
компетенција
Да ли је стандард остварен?
(Cito, 2009)

11. Пример:Критеријумски тест за 4
Пример:Критеријумски тест за 4. разред -пре усвајања образовних стандарда (1)
(Завод за вредновање квалитета образовања и васпитања, 2009)

12. Пример:Критеријумски тест за 4
Пример:Критеријумски тест за 4. разред -пре усвајања образовних стандарда (1)
График 1: Одређивање критеријумског прага
Завод за вредновање квалитета образовања и васпитања, 2009

13. Пример:Критеријумски тест за 7
Пример:Критеријумски тест за 7. разред –заснован на образовним стандардима (2)
Завод за вредновање квалитета образовања и васпитања, 2010

14. Пример:Критеријумски тест за 7
Пример:Критеријумски тест за 7. разред –заснован на образовним стандардима (2)

15. Пример: Критеријумски тест за 7
Пример: Критеријумски тест за 7. разред –заснован на образовним стандардима (2)
Завод за вредновање квалитета образовања и васпитања, 2010

16. Пример: Критеријумски тест за 7
Пример: Критеријумски тест за 7. разред –заснован на образовним стандардима (2)

17. Пример: Критеријумски тест за 7
Пример: Критеријумски тест за 7. разред –заснован на образовним стандардима (2)
График 2: Одређивање критеријумског прага
Завод за вредновање квалитета образовања и васпитања, 2010

18. Нормативни тест: Шта је норма? (1)
Норма је постављена мера. Нормативни тест пружа информацију у којој је мери компетенција/образовни стандард испитаника остварен у односу на друге испитанике (нпр. просек изражен у процентима).
На пример: 50% ± 20% ученика… CJK Пореди информације из двају или више сложенијих (не)уметничких текстова да би разумео проблем.

19. Пример: Нормативни тест за 4
Пример: Нормативни тест за 4. разред -пре усвајања образовних стандарда (2)
Завод за вредновање квалитета образовања и васпитања, 2007

20. Пример: Нормативни тест за средњу школу -пројекат Образовни стандарди (2)
Текст Матерњи језик Ранка Бугарског
Завод за вредновање квалитета образовања и васпитања, 2011

21. Како саставити критеријумски тест? (1)
Одредити сврху тестирања (нпр. формативно/сумативно вредновање).
Утврдити област/области (кластере) према утврђеном циљу тестирања.
Издвојити компетенције према утврђеном циљу тестирања (нпр. „поновљен“ критеријумски тест…).
Изабрати текст (обавезна лектура).
Саставити задатке (три нивоа тежине у сваком кластеру).
Извршити избор задатака (контрола квалитета: валидност, техничке одлике…).
Први принцип: Груписати задатке у домене (семантичка поља).
Други принцип: Груписати задатке према типу формата.
Спровести пробно тестирање (према могућностима).
Кориговати задатке користећи анализу одговора испитаних ученика.

22. Типови задатака (1) Отворен тип задатка Кратак одговор
(постоји више начина да ученик одговори)
Кратак одговор
Продужен одговор
Есејски одговор
Затворен тип задатка
(понуђени су одговори)
Вишеструки избор
(бира један/више тачних одговора, „да-не“ питања, повезивање, распоређивање информација из једног симболичког система у други – пример породичног стабла)

23. Задаци вишеструког избора:
Типови задатака (2)
Задаци вишеструког избора:
понуђени одговори искључују један други, али потичу из исте области/по нечему су слични;
понуђени су одговори наизглед прихватљиви;
понуђени одговори се надовезују на стабло задатка;
понуђени одговори не понављају елементе из стабла (тзв. ехо);
уједначена је дужина понуђених одговора;
понуђени одговори не садрже речи увек и никад;
понуђени одговори се не преклапају;
могућност избора једног/више тачних или прихватљивих одговора;
остали се називају ометачи (дистрактори):
Колико понуђених одговора?

24. Типови задатака (2)

25. Задаци са отвореним одговором – есејски задаци:
Типови задатака (3)
Задаци са отвореним одговором – есејски задаци:
саставити упутство за писање састава са информацијом шта се вреднује (тзв. writing prompt);
инструкција води ученика кроз процес писања: од интегрисања идеја на задату тему, преко њиховог распоређивања у тексту, формулације реченица до редиговања текста;
решење садржи критеријум за прихватљив одговор (пожељно је дати примере одговора тестираних ученика са пробног тестирања).

26. Типови задатака (3)

27. Типови задатака (3)
СЈК Препознаје основне особине кодова и конвенција непознатих не/уметничких текстова.

28. Типови задатака (3)
CJK Процењује да ли аутор сложенијег неуметничког текста износи све потребне информације и да ли исправно расуђује, те да ли даје довољне и веродостојне доказе за то што тврди.

29. Вежба: Одређивање критеријума за критеријумски тест
Задатак: (1) Одредите циљ и структуру критеријумског теста и (2) Саставите по један задатак за тест.
Материјал: (1) Образовни стандарди за крај обавезног образовања (Завод за вредновање квалитета образовања и васпитања, 2009); (2) Критеријуми компетенција Вештина читања и разумевање прочитаног и Књижевност за средњу школу и (3) текстови ван школског програма.