Результаты исследования. В рамках данного исследования осуществлена опытно-экспериментальная работа по апробации предлагаемых инноваций в подготовке уполномоченным по ГО образовательных учреждений.
Опытно-экспериментальной базой для сравнительной оценки эффективности предлагаемых изменений стали Учебно-методический центр по ГОЧС Томской области (далее - УМЦ) и Курсы гражданской защиты города Томска (далее - Курсы гражданской защиты). Данные учреждения были выбраны по принципу основного направления деятельности (подготовка должностных лиц системы ГО и РСЧС), схожести учебно-материальной и методической баз, а также педагогическому стажу действующих преподавателей (более 5 лет).
Контрольная группа, созданная на базе Курсов гражданской защиты, состояла из 26 человек из числа уполномоченных по ГО образовательных учреждений г. Томска.
На базе УМЦ по ГОЧС удалось сформировать экспериментальную группу, в которую вошли уполномоченные по ГО общеобразовательных школ, техникумов, училищ, лицеев, ДЮСШ, центров развития и т.д. (41 человек).
Для объективной оценки результатов исследования создана специальная группа экспертов (табл. 2), куда вошли наиболее компетентные уполномоченные по ГО ОУ Томской области.
Т а б л и ц а 2Состав экспертной группы
|
Должность |
Коэффициент компетенций |
|
|
Уполномоченный по ГО Томского индустриального техникума |
1 |
|
|
Начальник отдела безопасности ТГАСУ |
0,75 |
|
|
Заместитель директора ОГУ «Управление по ГОЧС ПБ Томской области» |
0,75 |
|
|
Главный специалист комитета социального и ресурсного обеспечения Департамента профессионального образования Томской области (уполномоченный по ГО департамента) |
0,75 |
|
|
Уполномоченный по ГО Воронинской СОШ |
0,75 |
|
|
Заместитель главного врача детской поликлиники № 1 |
0,75 |
Компетентность экспертов определялась по следующим критериям, обеспечивающим всесторонний взгляд на систему ГО:
- профессиональная служба в вооруженных силах;
- участие в ликвидации ЧС;
- опыт педагогической деятельности;
- опыт работы уполномоченным по ГО образовательного учреждения.
Соответствие каждому критерию оценивалось в 1 балл. Итоговая оценка производилась по формуле
где K - коэффициент компетентности эксперта,
х - сумма баллов, соответствующих критериям отбора экспертов, у - общая сумма критериев. Пороговое значение для принятия в экспертную группу составило 0,75, так как этот показатель говорит о соответствии респондента минимум по трем критериям отбора.
В задачи экспертной группы входили: разработка уровней сформированности компетенций и их характеристика, а также проведение экспертной оценки результатов анкетирования на начальном и итоговом этапах эксперимента. Вопросы анкеты отражали содержание каждой профессиональной компетенции. Например, для определения способности к анализу опасностей мирного и военного времени (ПК-1) слушателю предлагалось кратко описать угрозы, характерные для места расположения его образовательного учреждения, а для определения компетенции, связанной с дозиметрическим и химическим контролем (ПК-4), требовалось описать свой опыт работы с соответствующим оборудованием.
Общее количество участников эксперимента составило 78 человек, распределенных в соответствующие группы (табл. 3).
Т а б л и ц а 3Участники эксперимента
|
Группа участников эксперимента |
Количество чел. |
|
|
Контрольная группа (КГ) |
26 |
|
|
Экспериментальная группа (ЭГ) |
41 |
|
|
Экспертная группа |
6 |
|
|
Преподаватели УМЦ по ГОЧС |
3 |
|
|
Преподаватели Курсов гражданской защиты |
2 |
|
|
Итого |
78 |
Существенную трудность при проведении исследования представлял этап разработки критериев эффективности вводимых инноваций. М.Б. Челышкова подчеркивает, что при разработке критериев сформи- рованности компетенций необходимо проработать их признаки и проявления, а также построить систему оценки [13]. Наиболее распространенными являются трех- и четырехуровневая системы оценки сформиро- ванности компетенций [14]. В работах Р.Б. Карасева и И. Н. Медведевой предлагается использовать четырехуровневую оценку профессиональных компетенций студентов [15, 16]. В свою очередь, оценка уровня сформированности компетенций опирается на уровень усвоения знаний и демонстрацию их в конкретных умениях и навыках, приобретаемых на практических (семинарских) занятиях, в научно-исследовательской и общественной работе [17].
При разработке критериев сформированности компетенций мы учитывали, что взрослый человек имеет достаточный опыт для выполнения минимального объема работы уполномоченного, заключающийся в поиске необходимого элемента нормативноправовой базы и воспроизведения документов по шаблону.
Для количественной оценки показателей установлено, что за каждый уровень сформированное™ одной компетенции начисляется соответствующее количество баллов (например, наличие 2-го уровня ПК-1 = 2 балла), а среднее значение суммы баллов в процентном соотношении будет указывать на общий уровень компетенций слушателя к деятельности уполномоченного по ГО ОУ. Таким образом, наибольшее значение количества баллов по исследуемым компетенциям (8 компетенций) составляет 32 единицы.
Процентное соотношение показателей общего уровня компетенций уполномоченного к деятельности специалиста по ГО в образовании было решено указывать в пределах:
- от 1 до 34% (низкий уровень компетенций), уровень, соответствующий опыту по ГО, получаемому в течение жизни (обучение в образовательных учреждениях, служба в ВС РФ, критические ситуации и т. д.). Специалист может ответить на вопросы в знакомой ситуации, эти вопросы сформулированы четко, предоставлена вся необходимая информация;
- от 35 до 49% (начальный уровень компетенций), подразумевает наличие опыта действий в критических ситуациях или участия в тренировках по предупреждению критических ситуаций, а также общее знакомство с системой ГО. Деятельность специалиста характеризуется умением принимать решения в простых ситуациях, интерпретировать и использовать полученную информацию из разных источников;
- от 50 до 74% (средний уровень компетенций), указывает на наличие опыта деятельности в сфере ГО образовательного учреждения, неоднократное прохождение подготовки в сфере ГО; свидетельствует о возможности обучающегося понимать проблему, устанавливать допущения, моделировать разные ситуации, осуществлять сравнение и оценку различных методов решения поступающих задач;
- от 75 до 100% (высокий уровень компетенций), свидетельствует о достаточном овладении всеми компетенциями в сфере организации системы ГО образовательных учреждений. Специалист умеет обобщать и использовать информацию, полученную в результате моделирования сложных ситуаций, осуществлять логическую аргументацию выбора решений поставленных задач и т. д.
Для получения более точных данных оценка компетенций проводилась двумя методами:
1) экспертная оценка - анкетирование;
2) тестирование - специально разработанный тест.
Вопросы, предлагаемые в анкете, формулировались так, чтобы у эксперта была возможность соотнести ответ респондента с уровнем компетенций. Например, для определения способности к анализу опасностей мирного и военного времени (ПК-1) слушателю предлагалось описать опасности мирного и военного времени, характерные для места расположения его образовательного учреждения. Далее эксперт соотносил ответ с таблицей компетенций и выставлял соответствующий балл - от 1 до 4, где 1-й уровень = 1 баллу, а 4-й уровень = 4 баллам.
Для получения данных путем тестирования испытуемому предлагалось выбрать несколько вариантов ответа на заданный вопрос. Как и в случае с анкетированием, вопросы к тесту разрабатывались в соответствии с уровнями формируемых компетенций так, чтобы существовала возможность сопоставления с результатами экспертной оценки, т. е. каждый из 8 вопросов содержал в себе 4 варианта ответов, соответственно, за каждый выбранный ответ в вопросе тестируемому начислялся 1 балл.
Таким образом, среднее значение между суммами показателей тестирования и анкетирования составили итоговые показатели сформированности проверяемых компетенций.
Так, на первом этапе эксперимента среднее значение сформированности исследуемых компетенций в исследуемых группах составило 19% (КГ), 19,3 (ЭГ), что представлено на рис. 1.
Рис. 1. Показатели сформированности уровней компетенций на начальном этапе эксперимента, %
Приведенные данные (рис. 1) показывают: слушатели в ЭГ и КГ имеют схожий начальный уровень по большинству компетенций, что обеспечивает равные стартовые позиции на пилотном этапе эксперимента.
После завершения пилотного (констатирующего) этапа эксперимента и выявления существующего уровня компетенций у основных участников эксперимента слушатели приступили к обучению по действующим программам в объеме 72 часов. При этом в содержание программы подготовки слушателей экспериментальной группы были внесены изменения в соответствии с вышеизложенными идеями заявленных методологических подходов, а именно:
1) основным ориентиром в подготовке явилось целостное формирование компетенций, а не ЗУН. Для разрешения данной задачи преподавателями- участниками образовательного процесса изучены составы экспериментальных групп по показателям: возраст, образование, место работы; проведен краткий картографический анализ потенциально опасных объектов вблизи мест работы слушателей. Полученные данные использовались в качестве примеров опасностей для конкретных образовательных учреждений в процессе индивидуальной и групповой форм работы;
2) осуществлялись выезды для анализа конкретных систем ГО учреждений, ОГБПОУ «Томский колледж гражданского транспорта» и ОГБПОУ «Томский индустриальный техникум»;
3) во время обучения проведена плановая тренировка по эвакуации из помещений УМЦ по ГОЧС с последовавшим самоанализом и общим обсуждением действий, выполняемых каждым специалистом. В первую очередь это позволило определить действительный уровень готовности личности к непредвиденным ситуациям;
4) итоговое задание выполнялось посредством разработки и защиты комплексных проектов, позволяющих оценить целостное представление личности об изучаемом предмете. В качестве основного итогового задания слушателям предлагалось разработать положение о Комиссиях по чрезвычайным ситуациям собственных образовательных учреждений.
По итогам прохождения обучения слушатели, участвующие в эксперименте, прошли повторные анкетирование и тестирование на предмет сформированных компетенций. Итоговые результаты отражены на рис. 2.
Рис. 2. Показатели уровня сформированности компетенций на итоговом этапе эксперимента, %
Согласно графику (рис. 2) наиболее эффективные результаты были получены при формировании ПК-3. На наш взгляд, этому способствовало включение экскурсионного метода - посещение экспериментальной группой защитного сооружения ГО, расположенного в одном из образовательных учреждений. Также обращают на себя внимание показатели отдельных компетенций (ПК-1 и ПК-8), демонстрирующих небольшую эффективность при внедрении компетентностно- го подхода. В первую очередь это может быть связанно с высоким уровнем теоретизации содержания учебных дисциплин, характерных для ПК-1, и сложностью модернизации образовательного процесса по темам, посвященным формированию ПК-8.
Сравнение значений на начальном и итоговом этапах эксперимента приведены в табл. 4.
Т а б л и ц а 4Сравнение средних значений уровня сформированности компетенций участников эксперимента, %
|
Группа участников эксперимента |
Среднее значение общего уровня компетенций на начальном этапе эксперимента |
Среднее значение общего уровня компетенций на итоговом этапе эксперимента |
|
|
Контрольная группа |
20,3 |
35,8 |
|
|
Экспериментальная группа |
20,2 |
46,7 |
Данные табл. 4 показывают, что значение общего уровня компетенций в КГ и ЭГ с момента начала обучения изменилось на 15 и 26% соответственно. Таким образом, показатель эффективности введения предлагаемых инноваций составил 11%.