Результаты МАТЕМ ТПУ являются высокозначимо неоднородными по школам согласно критерию Краскела-Уоллиса (рис. 3), т. е. уровень значимости различий между школами оценен как высокозначимый p<0,0005).
На основании критерия множественного сравнения выделена на правах стабильного лидера школа ИШИТР, а на правах стабильного аутсайдера - школа ИШЭ. Остальные школы занимают по успеваемости промежуточные нестабильные положения. В порядке убывания успеваемости однородные {незначимо различающиеся} группы школ ранжированы следующим образом:
,
при этом успеваемость ИЯТШ статистически значимо выше ИШПР, а ИШИТР высокозначимо выше ИШЭ;
Несмотря на неоднородность МАТЕМ по школам, для каждой школы характерно высокозначимое превышение успеваемости по ДЗ над РТ как в 1-м, так и во 2-м семестрах по критерию Манна-Уитни. Что касается динамики успеваемости МАТЕМ по школам (см. рис. 3), то на фоне общей по ТПУ динамики (см. рис. 2) исключениями являются в 1-м семестре ИШИТР (стабильность ДЗ 1 на фоне ВТо) и ИЯТШ (отрицательная слабо значимая динамика ДЗ 1 на фоне ВТо), а в 3-м семестре ИШНКБ (стабильность РТ 5 на фоне РТ 34) по критерию Вилкоксона. Видимая стабильность медианы (без учета нижнего квартиля) 5 школ (кроме ИЯТШ) во 2-м семестре (см. рис. 3) с поправкой на соответствующую отрицательную динамику среднего ранга, рассчитанную самим критерием Вилкоксона, порождает преимущественную отрицательную динамику ДЗ 2 5 школ (кроме ИЯТШ). Обсуждение В данной работе на фоне упразднения семестрового экзамена по математике на младших курсах выявлены высокозначимые различия между двумя формами оценочных мероприятий текущего контроля: классической аудиторной КТ и тестовой РТ. Еще 15 лет назад, на заре внедрения тестов в процедуру оценивания знаний в ТПУ (без учета РТ в рейтинговой системе), было проведено сравнение КР и РТ [18], оценены их достоинства и недостатки и сделан вывод об ограниченной возможности тестирования в процедуре оценивания знаний на базовом уровне "зачет-незачет" и о вспомогательной роли тестов для самоконтроля и при самоподготовке к КР и экзамену. Новый этап внедрения тестирования в ТПУ (уже с учетом РТ в рейтинговой системе на 30 %), высветил все те же недостатки и новые негативные возможности, объясняющие текущие аномальные проявления в проведенном исследовании. Например, результаты РТ 12 в сравнении с ДЗ 1 объяснить эффектом "первый блин комом" было бы проблематично, так как система тестирования в ТПУ имеет 15-летний стаж, а в последнее десятилетие эта система совершенствовалась в заочной форме обучения с использованием дистанционных образовательных технологий [21]. В итоге появляется тревожная тенденция перераспределения вклада между классической аудиторной КР и тестовой РТ формами оценочных мероприятий текущего контроля. Тревожит порочная управляемость РТ (легкая настраиваемость на нужный уровень сложности по банку задач и организации проведения тестирования для завышения результата). Так, использование единственного варианта из 20 при проведении РТ 5 для части групп привело к аномальному всплеску (более чем на порядок) числа "отл." в РТ 5 (см. рис. 1). Самое главное - непреодолимая методическая ограниченность возможности тестирования в процедуре полноценного оценивания знаний. В то же время классическая форма оценивания знаний (аудиторная КТ + экзамен) вполне может бороться со своим основным недостатком (субъективностью) посредством конфликтных комиссий. В заключение заметим, что в целях модернизации системы оценивания успеваемости студентов руководство ТПУ возвращает промежуточную аттестацию на младших курсах (в том числе и по математике) в форме экзамена с осени 2020 г. (приказ № 76-3/об от 16.03.2020). Выводы 1. Выявлены высокозначимые различия между двумя формами оценочных мероприятий текущего контроля: классической аудиторной КТ и тестовой РТ. 2. На наш взгляд, нужен компромиссный вариант: в рейтинг-лист должны входить изучение онлайн-курса, выполнение аудиторных контрольных и индивидуальных домашних работ, независимая тестовая оценка знаний студентов и экзамен. 3. При наличии эпидемиологической ситуации использование онлайн-курсов неизбежно. При этом тестирование временно может заменить выполнение аудиторных контрольных работ, но сдача устно-письменного экзамена обязательна после окончания карантина.
Литература
1. Круглова Ю.А. Проблемы повышения качества обучения в высшей школе РФ // Современное образование: содержание, технологии, качество. 2018. Т. 1. С. 197--199.
2. Долгова ЛА. Проблемы оценки качества высшего образования // Аллея науки. 2018. Т. 5, № 6 (22). С. 970--975.
3. Далингер ВА Проблемы российского математического образования в свете требований Болонской декларации // Тенденции развития науки и образования. 2019. № 48-5. С. 72-77.
4. Вечтомов Е.М. Нерешенные проблемы российского математического образования // Математический вестник педвузов и университетов Волго-Вятского региона. 2019. № 21. С. 25-36.
5. Евдокимова М.В. Реформирование высшей школы: коммерциализация и имитация образовательного процесса // Актуальные вопросы современной науки и образования: сб. ст. междунар. науч.-практ. конф. Петрозаводск, 2019. С. 135-139.
6. Никитин А.П. Имитация экзамена в вузе: факторы распространения // Педагогика. Вопросы теории и практики. 2019. Т. 4, № 3. С. 87-91.
7. Кубекова Б.С. Об экзамене и формах его проведения // Проблемы современного педагогического образования. 2019. № 63-4. С. 131-134.
8. Седых И.Ю. О проблемах приема экзаменов в современных вузах // Современная математика и концепции инновационного математического образования. 2019. Т. 6, № 1. С. 380-387.
9. Мамаева ИА., Степанова А.С. Междисциплинарные формы оценивания результатов обучения в вузе // Образовательная деятельность вуза в современных условиях: матер. междунар. науч.-метод. конф. 2019. С. 75-85.
10. Каминский А.В. Формирование сквозной системы контроля качества учебного процесса с использованием технологии компьютерного тестирования // Проблемы высшего образования. 2019. № 1. С. 191-193.
11. Ячинова СН., Вальчук Е.В. Роль тестирования в модульно-рейтинговой системе обучения // Аллея науки. 2018. Т. 2, № 2 (18). С. 719-722.
12. Шалугина Т.В., Шипицина Н.М. Достоинства и недостатки применения учебных тестов при изучении математики в вузе // Проблемы современного педагогического образования. 2019. № 63-1. С. 393-395.
13. Жирякова А.В. Тестирование как эффективная форма контроля самостоятельной работы студентов // Проблемы современного педагогического образования. 2018. № 60-1. С. 114-117.
14. Трифонов А.Ю., Михальчук АА. Сравнительный статистический анализ оценки математических знаний студентов первого курса // Известия Томского политехнического университета. 2005. Т. 308, № 5. С. 212-216.
15. Усольцева ЛА. Тестирование как метод управления образовательным процессом // Фундаментальная и прикладная наука: новые вызовы и прорывы: сб. ст. междунар. науч.-практ. конф. Петрозаводск, 2020. С. 46-50.
16. Астраханкина ЕН., Пустовая В.Д., Глазунова Е.З. Цифровизация в высшем образовании // Актуальные вопросы современной экономики. 2020. № 1. С. 50-55.
17. Седых Т.Н. Потенциальные риски и угрозы цифро- визации российского образования // Alma mater (Вестник высшей школы). 2020. № 2. С. 73-75.
18. Кузнецова И.В., Монахов В.М., Напалков С.В., Тихомиров СА Web-технологии в цифровизации математического образования // Современные Web-технологии в цифровом образовании: значение, возможности, реализация: сб. матер. V Междунар. науч.-практ. конф. 2019. С. 50-55.
19. TIBCO Software Inc. (2020). Data Science Textbook. URL: https://docs.tibco.com/data-science/textbook (дата обращения: 13.04.2020).
20. Халафян АА., Боровиков В.П., Калайдина Г.В. Теория вероятностей, математическая статистика и анализ данных: Основы теории и практика на компьютере. STATISTICA. EXCEL. М. : URSS, 2016. 317 с.
21. Михальчук АА, Арефьев В.П., Филипенко Н.М. Статистический анализ динамики результатов e-learning в вузе // Современные проблемы науки и образования. 2015. № 1-1. URL: https://science-education.ru/ru/article/view?id=19199 (дата обращения: 13.04.2020).
REFERENCES
1. Kruglova YUA. Problemy povysheniya kachestva obu- cheniya v vysshej shkole RF / / Sovremennoe obrazovanie: soderzhanie, tekhnologii, kachestvo. 2018. T. 1. S. 197--199.
2. Dolgova LA. Problemy ocenki kachestva vysshego obra- zovaniya // Alleya nauki. 2018. T. 5, № 6 (22). S. 970-975.
3. Dalinger VA. Problemy rossijskogo matematicheskogo obrazovaniya v svete trebovanij Bolonskoj deklaracii // Ten- dencii razvitiya nauki i obrazovaniya. 2019. № 48-5. S. 72-77.
4. Vechtomov E.M. Nereshennye problemy rossijskogo matematicheskogo obrazovaniya // Matematicheskij vestnik pedvuzov i universitetov Volgo-Vyatskogo regiona. 2019. № 21. S. 25-36.
5. Evdokimova M.V. Reformirovanie vysshej shkoly: kommercializaciya i imitaciya obrazovatel'nogo processa // Aktual'nye voprosy sovremennoj nauki i obrazovaniya: sb. st. Mezhdunar. nauch.-prakt. konf. Petrozavodsk, 2019. S. 135-139.
6. Nikitin A.P. Imitaciya ekzamena v vuze: faktory raspros- traneniya // Pedagogika. Voprosy teorii i praktiki. 2019. T. 4, № 3. S. 87-91.
7. Kubekova B.S. Ob ekzamene i formah ego provedeniya // Problemy sovremennogo pedagogicheskogo obrazovaniya. 2019. № 63-4. S. 131-134.
8. Sedyh I.YU. O problemah priyoma ekzamenov v sovre- mennyh vuzah // Sovremennaya matematika i koncepcii in- novacionnogo matematicheskogo obrazovaniya. 2019. T. 6, № 1. S. 380-387.
9. Mamaeva I.A., Stepanova A.S. Mezhdisciplinarnye formy ocenivaniya rezul'tatov obucheniya v vuze // Obrazovatel'naya deyatel'nost' vuza v sovremennyh usloviyah: Mater. mezhdunar. nauch.-metod. konf. 2019. S. 75-85.
10. Kaminskij A.V. Formirovanie skvoznoj sistemy kon- trolya kachestva uchebnogo processa s ispol'zovaniem tekhnologii komp'yuternogo testirovaniya // Problemy vysshego obrazovaniya. 2019. № 1. S. 191-193.
11. Yachinova S.N., Valchuk E.V. Rol' testirovaniya v modul'no-rejtingovoj sisteme obucheniya // Alleya nauki. 2018. T. 2, № 2 (18). S. 719-722.
12. Shalugina T.V., Shipicina N.M. Dostoinstva i nedostatki primeneniya uchebnyh testov pri izuchenii matematiki v vuze // Problemy sovremennogo pedagogicheskogo obrazovaniya. 2019. № 63-1. S. 393-395.
13. Zhiryakova A.V. Testirovanie kak effektivnaya forma kontrolya samostoyatel'noj raboty studentov // Problemy sovremennogo pedagogicheskogo obrazovaniya. 2018. № 60-1. S. 114-117.
14. Trifonov AYU., Mihalchuk AA Sravnitel'nyj statistich- eskij analiz ocenki matematicheskih znanij studentov pervogo kursa // Izvestiya Tomskogo politekhnicheskogo universiteta. 2005. T. 308, № 5. S. 212-216.
15. Usolceva LA. Testirovanie kak metod upravleniya obrazovatel'nym processom // Fundamental'naya i prikladnaya nauka: novye vyzovy i proryvy : sb. st. Mezhdunar. nauch.- prakt. konf. Petrozavodsk, 2020. S. 46-50.
16. Astrahankina E.N., Pustovaya V.D., Glazunova EZ. Cifrovizaciya v vysshem obrazovanii // Aktual'nye voprosy sovremennoj ekonomiki. 2020. № 1. S. 50-55.
17. Sedyh T.N. Potencial'nye riski i ugrozy cifrovizacii rossijskogo obrazovaniya // Alma mater (Vestnik vysshej shkoly). 2020. № 2. S. 73-75.
18. Kuznecova I.V., Monahov V.M., Napalkov S.V., Tihomirov S.A. Web-tekhnologii v cifrovizacii matematicheskogo obrazovaniya // Sovremennye Web-tekhnologii v cifrovom obrazovanii: znachenie, vozmozhnosti, realizaciya : sb. mater. V Mezhdunar. nauch.-prakt. konf. 2019. S. 50-55.
19. TIBCO Software Inc. (2020). Data Science Textbook. URL: https://docs.tibco.com/data-science/textbook (data obrashcheniya: 13.04.2020).
20. Halafyan AA., Borovikov V.P., Kalajdina G.V. Teoriya veroyatnostej, matematicheskaya statistika i analiz dannyh: Osnovy teorii i praktika na komp'yutere. STATISTICA. EXCEL. M. : URSS, 2016. 317 s.
Mihalchuk AA., Aref'ev V.P., Filipenko N.M. Statis- ticheskij analiz dinamiki rezul'tatov e-learning v vuze // Sovremennye problemy nauki i obrazovaniya. 2015. № 1-1. URL: https://science-education.ru/ru/article/view?id=19199 (data obrashcheniya: 13.04.2020).