Результаты прошли обработку также по программе М'1п81;ер8 и получены статистические характеристики по заданиям теста. Основные показатели при этом: трудность задания, коэффициент корреляции и статистические согласия между баллами по заданию и уровнем подготовленности испытуемых. Было выявлено, что имеются тестовые задания с коэффициентами корреляции ниже значения 0,3. Эти задания рекомендованы к исключению из теста.
Распределение испытуемых и заданий относительно друг друга на общей метрической шкале представлена на карте переменных (рисунок). Слева находится шкала логитов (уровень подготовленности испытуемых), справа сами задания. Более трудные задания и более сильные испытуемые расположены в верхней части карты, легкие задания и менее подготовленные испытуемые -- в нижней части карты.
инструмент оценка информационный коммуникационный грамотность
Распределение на карте близко к нормальному распределению. Следовательно, тест ориентирован на данную выборку и соответствует уровню подготовленности испытуемых. Об этом говорит центрированность множества заданий относительно выборки тестируемых. Данный тест оптимален по трудности, т.е. соответствует уровню подготовленности учащихся. Следует пересмотреть тестовые задания 13 и 17, которые находятся в плохом согласии с моделью. Также, можно было рекомендовано включить несколько трудных заданий для более точного оценивания сильных испытуемых. Надежность измерений равна 0,68, что означает приемлемый результат.
Результаты экспериментальной проверки информационной модели оценки ИК-грамотности проведенной в трех форматах позволяет сделать вывод о хорошем соответствии разработанного инструмента требованиям организации и проведения оценочных мероприятий разного уровня. Апробация заданий была проведена по правилам, разработанным в Национальном центре тестирования с учетом особенностей использования инструмента оценки ИК-грамотности. В результате были получены данные о характеристиках тестовых заданий, которые позволили провести работу по корректировке и редактированию текстов заданий и внести их в базу с улучшенным качеством.
В рамках мероприятий национального масштаба, таких как ВОУД, экспериментальная проверка и итоговая оценка выпускников были осуществлены в условиях реального проведения оценочных мероприятий (мониторинг и экзамен). Увеличение количества участников сдерживалось только тем, что в обоих случаях оценка проводилась по предмету выбираемому самими участниками тестирования.
По итогам проведенной проверки можно утверждать, что инструмент готов к использованию, как в рамках мониторинга, так и в рамках итоговой аттестации. Применение разработанного первого отечественного инструмента оценки ИК-грамотности школьников станет важным элементом Национальной системы оценки качества образования и даст толчок в развитии всех направлений связанных с формированием ИК-грамотности как составной части функциональной грамотности учащихся. Инструмент не учитывает обучение по профильным направлениям в старших классах, оценивая только общее содержание естественноматематического и общественно-гуманитарного направлений. Поэтому, при его применении в условиях итоговой аттестации необходимо использовать дополнительные оценочные средства для получения полной и качественной информации об учебных достижениях и уровня сформированности ИК-грамотности выпускников общей средней школы.
СПИСОК ЛИТЕРАТУРЫ
[1] Определение требований к разработке инструментария оценки ИК-грамотности школьников // Математическое моделирование и информационные технологии в образовании и науке: материалы VII межд. научно-метод. конф. Алматы: КазНПУ им. Абая, 2015. С. 558-562.
[2] Умербаева Г., Кунакова К., Тлемисов С., Каримжан Б., Турсынбекова А., Арбабаев Э. Методика конструирования заданий для оценки информационно-коммуникационной грамотности школьников: учебно-методическое пособие / под ред. К.С. Абдиева. Астана: Национальный центр тестирования, 2016. 60 с.
ABOUT THE RESULTS OF EXPERIMENTAL TESTING OF INFORMATIONAL COMMUNICATIVE LITERACY ASSESSMENT INSTRUMENT OF SCHOOL CHILDREN
K.S. Abdiev1, G.K. Umerbaeva2, A.E. Tursinbekova2
1 “Turan” University
2 National testing center
The article presents the results of experimental testing of the assessment tool information and communication literacy of students. The audit was conducted in the framework of external evaluation of educational achievements and final certification at the secondary level. Conducted quality evaluation of developed test tasks, the main characteristics of the test. The results were processed according to the program Winsteps and the obtained statistical characteristics for the test items. Took into account such indicators as the difficulty of the task, the correlation coefficient and the statistical agreement between the scores on the task and the level of preparedness of the subjects. It is revealed that there is a test by correlation coefficients below the value of 0.3. These tasks are recommended to exclude from the test.
In the survey it was found that the skills of planning their own individual and group activities, the level of development of the primary skills of analysis and critical assessment of received information, respect for information privacy, the attitude of the equipment from each of the students formed different. The results of this work have been amended in a database ofjobs.
Key words: informational communicative literacy, assessment instrument, external assessment of educational achievements, emulators of applied programs, Computer sciences