Специалисты УЦОКО отреагировали на требование пересмотреть результаты ВНО по истории
В Украинский центр оценивания качества образования (УЦОКО) поступило более 11 тысяч обращений от нынешних участников внешнего независимого оценивания и их родителей относительно корректности задачи № 28 сертификационной работы по истории Украины. Некоторые из них требуют причислить тестовые баллы за эту задачу всем участникам ВНО.
Об этом сообщили в УЦОКО и опубликовали публичный комментарий специалистов Центра в ответ на указанное обращение.
По мнению подписантов, программа ВНО, утвержденная в 2014 году, не может содержать законов и постановлений принятых в 2015 - 2016 годах. Имеется в виду, что Закон "О военно-гражданских администрациях" был принят в 2015 году.
Чтобы избежать двойных интерпретаций, Центр напомнил содержание задачи в форме, представленной в рабочей тетради участников внешнего независимого оценивания:
"Установите последовательность принятия документов, выдержки из которых процитированы.
А «Подтверждая приверженность Украины идеалам и принципам, которые являются общим
достоянием европейских народов... Верховная Рада Украины постановляет: Присоединиться от имени Украины к Уставу Совета Европы... »
Б «Верховная Рада Украины постановляет: 1. Ввести в действие Закон Украины" О Вооруженных Силах Украины "с момента его принятия. 2. Поручить Кабинету Министров Украины разработать предложения по общей структуре Вооруженных Сил Украины... »
В «Во исполнение Закона Украины "О военно-гражданские администрации " постановляю: 1. Образовать... Артемовске районную военно-гражданскую администрацию.., Константиновскую районного военно-гражданскую администрацию.., Ясиноватскую районную военно-гражданскую администрацию Донецкой области... »
Г «Верховная Рада Украины постановляет:... Принять Конституцию Украины... Признать утратившим силу Конституцию (Основной закон) Украины от 20 апреля 1978 с последующими изменениями и дополнениями... »
Специалисты Центра объяснили, что в задании приведены фрагменты нескольких нормативно-правовых актов и предложено расположить эти фрагменты в хронологической последовательности.
Цитируемые документы касаются следующих событий:
- Основания Вооруженных сил Украины - 6 декабря 1991 г.;
- Избрание Украины членом Совета Европы - 1995 г.;
- Принятие Конституции Украины - 28 июня 1996 г.;
- Антитеррористическая операция на востоке Украины, начавшаяся в 2014 году.
Правильно эти фрагменты надо было расположить так: Б А Н В.
Больше всего участники апеллируют к отрывку из источника, где говорится о составной антитеррористической операции (создание военно-гражданских администраций).
Специалисты УЦОКО отмечают, что выполнение этой задачи предполагает анализ источника, а не знания непосредственно его содержания. Ключевыми словами-маркерами в отрывке документа, позволяющие идентифицировать период российской агрессии на востоке Украины, являются географические названия «Артемовская.., Константиновская.., Ясиноватская... Донецкой области...» и словосочетание «военно-гражданская администрация».
Действующая Программа внешнего независимого оценивания предполагает знание фактов, связанных с событиями антитеррористической операции.
Указывается, что в учебных материалах по истории Украины для учеников 11-х классов «Революция Достоинства 2013-2014 гг. и агрессия России против Украины» изложена?? информация о вторжении российских войск на востоке Украины в 2014 г.
"Важно помнить, что в тестологии выводы о качестве задач делают на основании их психометрических показателей.
Задача № 28 имеет приемлемые психометрические показатели. Об этом свидетельствуют результаты статистической обработки ответов участников внешнего оценивания.
Так, 27% тестируемых правильно поставили фрагмент, где говорится об антитеррористической операции, на последнюю позицию в хронологической последовательности. К тому же среди тестируемых с высоким уровнем подготовки такой процент составляет 40, а среди тестируемых с низким уровнем подготовки - 19. Эти участники получили 1 балл.
И первое, и последнее событие правильно расположили в хронологическом порядке 3,9% всех участников, 7% участников с высоким уровнем подготовки и 3,1% участников с низким уровнем подготовки. Эти тестируемые получили 2 балла.
Все четыре события в правильной последовательности расположили 5,7% всех участников, 14,9% участников с высоким уровнем подготовки и 2% участников с низким уровнем подготовки. Эти тестируемые получили 3 балла.
Как видим, 36,6% всех участников убеждены, что антитеррористическая операция (создание военно-гражданских администраций) является последним событием в предложенной хронологической последовательности. А среди участников с высоким уровнем подготовки такое убеждение имеют 61,9%", - отметили специалисты Центра.
Они также обратили внимание на тот факт, что "одной из важных психометрических характеристик любого тестового задания является его корреляция (связь между результатами выполнения участником определенного задания теста и общим баллом, полученным им за весь тест). Чем сильнее такой связь, тем выше коэффициент корреляции. Упомянутое задача имеет коэффициент корреляции 0,4, а высокой в?? мировой практике считают корреляцию более 0,25. Это означает, что успешность участников в выполнении этой задачи очень сильно связана с успешностью в выполнении теста в целом. Иными словами, тестируемые, которые успешно выполнили целый тест, успешно выполнили и эту задачу, продемонстрировав свои знания и навыки анализа".
Таким образом, содержательный и статистический анализ показывает, что задача является корректной и качественной, а потому Центр не видит оснований для зачисления всем участников внешнего независимого оценивания баллов за эту задачу.