Статья: Решение задач подготовки и повышения квалификации персонала энергопредприятии с помощью автоматизированного контроля знании

Внимание! Если размещение файла нарушает Ваши авторские права, то обязательно сообщите нам

Учебный план содержал 6 обязательных модулей (ядро курса) и 4 модуля по выбору обучающегося. Таким образом, реализована индивидуальная траектория обучения для каждого в соответствии с его КД. Результаты тестирования признавались успешными, если обучаемый набирал больше половины от максимально возможного количества баллов. Результаты обрабатывались по каждому модулю методами математической статистики.

Обучение по пожарной безопасности включала группу из 38 человек (сотрудники предприятий) и преподаватели Вузов в рамках повышения квалификации в этой области [15].

Методология и методика исследования. В работе применялись методы оценки функциональных возможностей исследуемых систем тестирования и методы самооценки качества обучения персонала согласно системе менеджмента качества.

В порядке самооценки качества обучения персонала предприятий в области «пожарной безопасности» в НГТУ авторами использовался процессный подход (модель управления качеством, разработанная Европейским фондом управления качеством EFQM (http://www.qmprogram.org/about). В рамках этой модели вопросы качества обучения рассматриваются с точки зрения удовлетворения потребностей заинтересованных сторон (ЗС), обучающихся, преподавателей, родителей и т.д.), а качество обучения обеспечивается за счёт постоянного мониторинга и совершенствования учебного процесса [16].

Каждый педагогический процесс характеризуется ключевыми показателями и требованиями, описывающими его исполнение, результат или влияние на итог деятельности организации в целом.

Принципы процессного подхода к управлению определяют основные правила, руководствуясь которыми можно организовать эффективное функционирование процесса, нацеленное на конечный результат, определяемое степенью удовлетворенности данным процессом или услугой заинтересованными сторонами.

Первый принцип определяет видение деятельности образовательного учреждения как совокупности процессов проектирования и реализации образовательного процесса. Именно он определяет новую культуру восприятия организации при процессном подходе.

Второй принцип процессного подхода, требующий обязательной регламентации всех этапов и мероприятий образовательного процесса, опирается на то, что регламент - это документ, описывающий последовательность операций, ответственность, порядок взаимодействия исполнителей, порядок принятия решений по улучшению образовательного процесса.

Авторами были выделены следующие три рубрики качества: рубрика «информационное содержание курса» (утверждения 1, 2, 3); рубрика «учебно-методическое сопровождение учебного процесса преподавателем» (утверждения 4,5,6) и рубрика «качество процесса электронного обучения», содержащая два критерия качества по 3 утверждения (вопроса анкеты): «качество электронной информационной образовательной среды (ЭИОС), 7, 8, 9 утверждения» и «качество электронных образовательных ресурсов, размещенных на ней (утверждения 10, 11, 12).

Результаты исследований

1. Оценка функциональных возможностей двух систем

При сравнении двух систем для автоматизированного тестирования знаний персонала выявлены некоторые принципиальные отличия.

Основным, и самым важным, является то, что DiSpace 2.0 - полноценная платформа дистанционного обучения, а программа «ГNDЮO»представляет собой только систему контроля знаний, систему тестирования. Очевидно, что эти системы были созданы для того чтобы решать разный спектр задач и поэтому имеют разные возможности.

Таблица 1 Возможности двух сравниваемых систем

ВОЗМОЖНОСТИ

DiSpace 2.0

INDIGO

Тестирование и контроль знаний всех целевых групп, включая и персонал предприятий

Тестирование и контроль знаний персонала Тестирование и контроль знаний учащихся. Проведение психологического тестирования

Определение профессионального уровня персонала

Определение профессионального уровня персонала

Проведение опросов

Проведение опросов

Организация учебного процесса в LMS, включая олимпиады и конкурсы

Организация олимпиад и конкурсов

Организация видеоконференций, вебинаров

-

Одно- и двухканальные коммуникации преподавателей и учащихся (консультации, форумы, чаты)

-

Создание базы электронных образовательных ресурсов

-

Бесспорно, образовательная среда «DiSpace 2.0» имеет гораздо больше возможностей для педагогического мониторинга и одновременной коррекции педагогического процесса. Она обеспечивает качественно новый уровень сопровождения процесса электронного обучения, где система тестирования DiTest является одним из элементов в системе управления обучением и контентом.

В свою очередь, система тестирования INDIGO разработана и используется исключительно с целью автоматизации процесса проведения тестирования и обработки результатов, и имеет более сложную и точную многоступенчатую систему тестирования и оценивания.

В таблице 2 представлен сравнительный анализ основных характеристик функциональных возможностей двух тестовых систем DiSpace 2.0 и INDIGO.

Таблица 2 Анализ функциональных возможностей систем тестирования INDIGO и DiSpace 2.0

Характеристики

INDIGO

DiSpace 2.0

1. Редактор тестов

Типы вопросов

Одиночный выбор

Да

Множественный выбор

Ассоциации

Нет

Да

Установка соответствия

Да

На восстановление последовательности

Простой и множественный вычисляемый

Нет

Редактор формул

Задания на дополнение:

А) числовой ввод - сравнение с эталоном;

Б) текстовый ввод - сравнение с эталоном

Да

Задания свободного изложения (проверяется администратором, преподавателем)

Редактор вопросов

не является модульным

модульный

Текстовый редактор поддерживает:

• произвольное форматирование

текста;

* вставку форматированного текста из документов Word;

• вставку изображений основных графических форматов, включая

анимированные GIF-изображения;

• вставку произвольного HTML

и JavaScript-кода;

* вставку таблиц;

• вставку видео файлов с возмож

ностью воспроизведения;

• вставку аудио файлов с возмож

ностью воспроизведения;

• вставку произвольных файлов

для скачивания.

• поддерживается большинством

современных браузеров;

• вставка из редактора MS Word с возможностью отмены

форматирования;

• поддержка гиперссылок;

• вставка изображений на страницу с возможностью загрузки

файлов на сервер;

• поддержка работы с таблицами;

• возможность загрузки на сер

вер произвольных файлов с последующим размещением на странице ссылки для скачивания.

Ограничение тестирования по времени прохождения

Да

Да

Ограничение времени доступа к тесту

Да

Да

Количество попыток

Регулируется

Регулируется

Настраиваемое оценивание

Задание для одного теста неограниченного числа шкал оценивания

Для каждого вопроса можно настроить определенный процент от итогового балла за правильный или не правильный ответ

Настройка перемешивания и случайной выборки вопросов

Да

Да

Импорт вопросов/тестов

Всех типов из текстовых файлов (txt)

Готовых тестов из офисных документов. Поддерживаются файлы Microsoft Word (docx).

При импорте сохраняются рисунки, формулы (Microsoft Equation, MathType), таблицы.

Копирование вопросов и групп вопросов из одного теста в другой

Да

Копирование вопросов только внутри одного теста

Возможность загрузить тест как новый

Есть возможность копирования теста

Есть возможность копирования теста

Возможность загрузить тест как дополнение к уже имеющемуся тесту

Нет

Да, удобно для компоновки тестов в один большой из нескольких отдельных

Вывод бумажной версии теста

Возможность печати или экспорта в Word

Возможность печати или экспорта в Word

Функция групповой активации/деактивации тестируемых

Да

Да

Функция персональной активации/ деактивации тестируемых

Нет

Назначение доступа отдельным обучающимся/тестируемым

Возможность пройти тест для самоконтроля

Нет

Да

Настройка навигации (запрет пропуска вопросов, запрет возврата к пройденным вопросам и т.п.)

Да

Нет

Объекты «Пояснения» (при нажатии на кнопку «Пояснение», при неправильном ответе)

Да

Нет

1. Результаты

Просмотр результатов тестирования

Общая и подробная информация в виде образа теста

По темам, по вопросам, в виде теста, с ошибками

Первичная обработка результатов

Статистика по баллам за вопросы и группы вопросов, по шкалам, по делениям, по ответам

Средний балл, карта коэффициентов, освоенных ДЕ (модулей), карта коэффициентов решаемости заданий

Шаблон результатов получаемый тестируемым

Произвольное задание шаблона результатов, который выводится пользователю после завершения тестирования

Отсутствует

Экспорт результатов в Excel

да

да

2. Удобство интерфейса

Нет стилистического однообразия, стандартные шрифты и цветовой разнобой

Стилистическое однообразие, стандартные шрифты

Таким образом, исследование показало достаточные функциональные возможности как модуля тестирования СДО DiSpace 2.0, так и системы для онлайн тестирования INDIGO.

Тем не менее есть некоторые важные отличительные особенности. В модуле «тестирование » DiSpace 2.0 педагогические измерения позволяют выявить сильные и слабые стороны теста. Ряд сформированных диаграмм показывает, какие модули (разделы) теста, либо какие конкретные вопросы, вызывали у обучающихся затруднения при ответе и, таким образом, для преподавателя появляется возможность более углубленной проработки их в учебном процессе, либо добавления информации по неосвоенным модулям в электронную среду для самостоятельного изучения (с последующим их контролем).

Науки андрогогика и акмеология постулируют, что взрослые более мотивированы и ориентированы на обучение, чем молодые обучающиеся, следовательно, в этой целевой группе возможно планирование педагогического процесса в зависимости от индивидуальной степени подготовки и потребностей в знаниях (или наличия квалификационных дефицитов).

(1) (2)

Рис. 2. Карта коэффициентов освоения теста по ДЕ (модулям) (1) и гистограмма освоения теста по ДЕ (модулям) (2)

Таким образом, электронная среда DiSpace 2.0 с размещенными на ней учебно-методическими ресурсами, одновременным контролем знаний, сроками сдачи работ, графиком учебного процесса в большей степени ориентирована на обучение, выполняя одновременно несколько функций в педагогическом процессе - учебную, информационную, контролирующую, организующую, управляющую.

Результаты оценки удовлетворенности персонала предприятий качеством обучения в СДО Dispace 2.0

Требования современного рынка труда приводят к необходимости совершенствовать методы обучения специалистов разного уровня по программам как профессионального, так и дополнительного профессионального образования. Согласно полученным данным, было выявлено: все модули программ освоены обучающимися успешно; наиболее трудными для изучения оказались модули «Теория горения и взрыва», а также «Правовые основы обеспечения пожарной безопасности в РФ» (большинство обучаемых набрали не более 60% баллов по результатам тестирования).

Для проведения самоанализа педагогической деятельности можно использовать различные методы мониторинга: наблюдение, swot-анализ, опрос. В настоящем исследовании использовался эффективный метод самооценки качества обучения - анкетирование, который позволяет оценить качество условий, процесса и результата в педагогической деятельности.

Для анализа вопросов были выделены показатели мониторинга мнений обучающихся о качестве обучения, сформированные в виде вопросов анкеты. Показатели измерялись по семантической шкале 0 1 2 3 4 5 6. «0» - неудовлетворен, «6» - удовлетворен в полной мере. Все показатели (вопросы анкеты) были сгруппированы в 3 рубрики качества, в свою очередь имеющие критерии качества, состоящие каждый из 3 вопросов.

Таблица 3. Самооценка обучения персонала по рубрикам качества в Dispace 2.0

№ п/п

Показатели

m

Рубрика 1. Информационное содержание курса

1

Актуальность

4,50

1.17

2

Практическая направленность

5,83

0.28

3

Системность (структурированность)

4,50

0.56

Рубрика 2. Учебно-методическое сопровождение учебного процесса преподавателем

4

Соответствие целей и содержания программы ожиданиям обучающихся

5,50

0.50

5

Использование активных форм обучения

4,83

0.67

6

Вовлеченность обучающихся в учебный процесс

2,73

1.22

Рубрика 3. Качество процесса электронного обучения

Критерий: Качество электронной информационной образовательной среды (ЭНОС)

7

Работа с системой тестирования

5,33

0.67

8

Простота (удобство) установления связи со всеми участниками учебного процесса участниками учебного процесса

5,67

0.44

9

Удобство интерфейса

5,50

0.67

Критерий: Качество электронных образовательных ресурсов (ЭОР)

10

Доступность (понятность)

4,17

0.56

11

Полнота

4,33

1.33

12

Удобство реализации

4,83

1.22

Проведен анализ результатов эксперимента для группы обучающегося персонала предприятий (n = 38). Рассчитывались математическое ожидание m и несмещенная оценка дисперсии S по каждому показателю. Математическое ожидание позволяет получить средние значения показателей по выборке для каждого показателя мониторинга с целью формирования устойчивых выводов и рекомендаций, а среднеквадратичное отклонение может быть использовано для характеристики разброса мнений испытуемых (степени единодушия в высказываниях и согласованности мнений).