1. А.Б. Воронцов В.А. Львовский П.Г. Нежнов Мониторинг учебно-предметных компетенций школьников (SAM): потенциал и возможности инструментария Учебный курс «Информирование различных целевых групп о результатах оценки учебных достижений школьников» 27-30 сентября 2011 года, г. Москва

2. Образовательные модели и мониторинговые исследования Модель «обучение» ГИА, ЕГЭ TIMSS, PIRLS, PISA Модель «компетентностный подход» SAM Модель «культурное развитие» Предметное тестирование Модель «обучение и развитие» Психологическая диагностика

3. SAM - это тестовый инструмент оценки учебно-предметных компетенций, отражающих меру присвоения учащимися содержания школьных дисциплин – таких, как математика, русский язык, естествознание. Особенность SAM – сочетание: а) интегральной характеристики предметной компетенции на основе определения ее места на единой метрической шкале ; б) структурного представления компетенции на основе различения сформированности трех основных аспектов ее ориентировочной основы. Особенности SAM (School Achievements Monitoring )

4. Основание для разработки инструментария: представление об этапах присвоения предметных содержаний, опирающееся на модель «культурного развития» Л.С. Выготского Наш подход Предмет педагогической диагностики: присвоение обобщенных способов действия, кристаллизованных в знаковых структурах Единицы содержания - относительно целостные разделы предметных дисциплин Главная точка отсчета - абсолютная культурная норма

5. Уровни качества компетенций в мониторинговых исследований TIMSSPIRLSSAM знание фактов и процедур; применение понятий; решение стандартных задач; рассуждения нахождение и удержание информации; формулирование выводов интерпретация и интеграция информации анализ и оценка содержания, языка ориентация на форму способа действия ориентация на существенное отношение в основе способа действия ориентация на границы способа действия

6. Уровни присвоения культурных образцов действия Содержательно-рефлексивный Действие с пониманием – ориентация на существенное отношение, определяющее способ действия Формально-репродуктивный Действие по наличному образцу – ориентация на внешние его характеристики: правило, алгоритм Функциональный Свободное действие – ориентация на поле возможностей способа действия

7. Волна (профиль) присвоения культурных образцов действия Содержательный Формальный Функциональный Пройденная часть учебной программы

8. Предполагает освоение образцов и алгоритмов, ученик опирается на внешние характеристики действия и не обязательно понимает те существенные отношения, которые лежат за этими образцами и алгоритмами. Первый уровень – формальный

9. Предполагает понимание оснований действий, осознание существенной связи, лежащей в основе способа действия. Второй уровень – предметный

10. Предполагает удержание соответствующего смыслового поля, свободное владение способом действия и применение его в самых разнообразных контекстах Третий уровень – функциональный

11. Виды грамотности и их оценка Предметная линия Способы действияСредства действия Математическая грамотность Измерение величин прямое измерение косвенное измерение отношение между числом, величиной и единицей отношение «часть и целое» формула площади прямоугольника Естественнонаучная грамотность Процессы и их условияустановление временных отношений между событиями схема процесса схема эксперимента Языковая грамотность Слово и его значениеПостроение рядов слов и словоформ с чередующими звуками Отношение «звук-буква» Звуковая модель слова

12. Структура тестовых заданий Способ действия (задача) Задание 1.1. Задание 1.2. Задание 1.3. 1 уровень - формальный 2 уровень - предметный 3 уровень - функциональный

13. Структура теста Задача 1Задача 2Задача N … Задание 1.1 Задание 1.2 Задание 1.3 Задание 2.1 Задание 2.2 Задание 2.3 Задание n.1 Задание n.2 Задание n.3 Предмет тестирования – мера присвоения культурных средств и соответствующих им способов действия Содержательная основа теста – технологическая матрица (система средств/способов ориентировки действия в данной предметной области)

14. Выделение субтестов

15. 1.Какое получится число, если 10472 разделить на 34? 2.Рассеянный Петя переписал из учебника пример на умножение двух чисел. Первый множитель – число 7 - он записал правильно, а во втором множителе по ошибке переставил местами цифры. В результате умножения у него получилось число 147. Какой ответ должен был получить Петя, если бы он правильно переписал пример? 3.Какой самый большой результат может получиться, если в выражении AB5 + BС2 буквы заменить цифрами? Примечание: разные буквы заменяются разными цифрами. Пример по математике

16. При более высокой температуре вода испаряется быстрее. В четыре одинаковых стакана налили поровну воды разной температуры (температуру поддерживали постоянной).На рисунке показано, сколько воды осталось в двух стаканах через час Отметь примерный уровень воды в остальных стаканах. Пример по естествознанию (1-ый уровень) уровень воды

17. Три ученика выясняли, зависит ли скорость испарения воды от наличия или отсутствия ветра. Для опыта они взяли одинаковые блюдца и доверху наполнили водой при комнатной температуре. Одно блюдце оставили для сравнения. oБоря - около своего блюдца включил вентилятор. oВера - включила фен и направила на свое блюдце поток горячего воздуха. oГаля - поставила свое блюдце на сквозняке. Отметь ДВУХ учеников, которые поставили опыт ПРАВИЛЬНО Пример по естествознанию (2-ой уровень)

18. Ученики написали отчет о своем исследовании испарения воды. Отметь ДВА утверждения, которые НЕЛЬЗЯ сделать на основании этого отчета? oПри нагревании вода испаряется быстрее oПри увеличении площади поверхности вода испаряется быстрее oВода не испаряется при 20 градусах oПри 50 градусах вода будет испаряться быстрее, чем при 30 Пример по естествознанию (3-ий уровень) Утром мы налили поровну воды в три одинаковых сосуда. Температуру в каждом сосуде поддерживали постоянной. Вечером воды оказалось не поровну: ОТЧЕТ

19. Структурное представление результатов тестирования расширяет возможности их содержательной интерпретации и качественной оценки. Возможные опции использования результатов SAM

20. Оценка образовательной стратегии 3 1 2 80% 60% 40% 20% 0% 100%

21. Оценка образовательной ситуации Профили двух классов одной школы, получивших одинаковые интегральные баллы по математике 1 уровень 2 уровень 3 уровень 0 10 20 30 40 50 80 60 70 90 100 Решае мость (%) Класс 4 в Класс 4 г

22. Оценка образовательной ситуации Профили двух классов одной школы, получивших разные интегральные баллы по математике 1 уровень 2 уровень 3 уровень 0 10 20 30 40 50 80 60 70 90 100 Реша емос ть (%) 4 а 4 б

23. Оценка трудности предметного содержания Тематизм Средний первичный балл Уровень I, % Уровень II, % Уровень III, % Измерение величин Элементы геометрии

24. Оценка прогресса в обучении ШколыПрямое измерениеОпределение направлений на карте 1.1.1.2.1.3.2.1.2.2.2.3. 1 785423765221 2 874118823816 3 84341879368 4 544328644622

25. Результаты выполнения теста по математике 1 уровень 2 уровень 3 уровень 0 10 20 30 40 50 80 60 70 90 100 Реша емост ь (%) 10 классы 8 классы 6 классы 4 классы

26. Нулевая ступень: не освоен даже первый уровень. Учащиеся, находящиеся на этой ступени, выполняют менее 50% заданий 1-го уровня и практически не выполняют задания более высоких уровней. Первая ступень: освоен только первый уровень. Учащиеся, находящиеся на этой ступени, выполняют не менее 50% заданий 1-го уровня, небольшое количество заданий 2-го уровня и практически не справляются с 3-им. Вторая ступень: освоен второй уровень. Учащиеся, находящиеся на этой ступени, выполняют не менее 50% заданий 2-го уровня. При этом они легко справляются с 80% заданий 1-го уровня и делают некоторые задания 3-го уровня. Третья ступень: освоен третий уровень. Учащиеся, находящиеся на этом уровне, выполняют не менее 50% заданий 3-го уровня, легко справляются практически со всеми заданиями первого уровня и делают не менее 80 % заданий 2-го уровня. Ступени достижений: качественно-количественная характеристика

27. Сравнение классов по ступеням

28. Сравнение школ по ступеням достижений

29. Масштаб апробации инструментария Количество участников апробации 2006200720082009 2010-2011 субъектов Российской Федерации, Казахстан 1944 5 образовательных учреждений 5401530 80 учащихся (чел.)1501 150300500 2100