Технология интерактивного мониторинга качества освоения студентами колледжа основной профессиональной образовательной программы

На второй стадии формирующего эксперимента (после окончания второго курса обучения были получены данные, свидетельствующие о начале положительной динамики в формировании профессиональных компетенций у студентов колледжа. Все данные также, как и на начальной стадии распределялись по трем уровням качества освоения ОПОП После анализе результатов исследования для сравнения распределений учащихся по уровням сформированности профессиональных компетенций в двух независимых выборках (экспериментальные и контрольные группы) мы получили следующие данные (Таблица 2.8.).

Таблица 2.8.

Показатели качества освоения ОПОП на втором этапе формирующего эксперимента

Очевидно, что эмпирическое значение статистического критерия оказывается в ряде случаев больше критического (7,82 для уровня значимости 0,05), а значит, это подтверждает существование различий в характеристиках сравниваемых объектов, определяемых мероприятиями, осуществляемыми в рамках экспериментальной работы.

Третий этап формирующего эксперимента, заключительный, выявил очевидное превосходство экспериментальной группы Полученные значения критерия ² _эмп, которые отражают преимущество экспериментальных групп в аспекте сформированности профессиональных компетенций, отражены в Таблице 2.9.
Таблице 2.9

Показатели качества освоения ОПОП на заключительном этапе формирующего эксперимента

Если различия в уровне формирования профессиональных компетенций обучающихся в экспериментальных и контрольных группах существенны, и связь между ними статистически значима, то, согласно критерия ² _эмп различия результатов эксперимента не могут быть объяснимы случайными причинами, а являются следствием специально организованной деятельности.

Результаты формирующего эксперимента позволила нам выявить динамику качества освоения ОПОП в экспериментальной и контрольной группах. Полученные значения представлены в Таблице 2.10 и на Рис.2.15 и Рис. 2.16

Таблице 2.10.

Динамика качества освоения ОПОП в экспериментальной и контрольной группах

Общий уровень освоения ОПОП (категория профессиональных компетенций)	Число студентов колледжа, имеющих следующие уровни освоения ОПОП
	Экспериментальные группы			Контрольные группы
	низкий	средний	высокий	низкий	средний	высокий
Начальный этап эксперимента	34	62	20	32	63	21
Промежуточный этап эксперимента	16	70	30	25	70	21
Заключительный этап эксперимента	7	62	47	17	68	31

Рис. 2.15 Динамика качества освоения ОПОП в экспериментальной группе. Число участвующих в эксперименте студентов колледжа, имеющих уровни освоения ОПОП: низкий, средний, высокий. ( Этапы мониторинга:1 этап- начальный; 2 этап - промежуточный 3 этап – заключительный)


Рис. 2.16 Динамика качества освоения ОПОП в контрольной группе. Число участвующих в эксперименте студентов колледжа, имеющих уровни освоения ОПОП: низкий, средний, высокий. (Этапы мониторинга:1 этап- начальный; 2 этап - промежуточный 3 этап – заключительный)

Окончательные данные по динамики качества освоения ОПОП в контрольной и экспериментальной группах студентов колледжа представлены наглядно на Рис. 2.15 и Рис. 2 16. Анализ диаграмм показывает, что в экспериментальных группах (Рис. 2.15) происходит положительная динамика формирования профессиональных компетенций: резкое уменьшение численности студентов с низким уровнем освоения ОПОП , и такой же резкий подъем числа студентов с высоким уровнем освоения образовательной программы. Заметим, что данная тенденция в контрольных группах студентов выражена не так сильно.

В ходе эксперимента в ГБОУ СПО Колледж индустрии гостеприимства и менеджмента № 23, г. Москва с 2009 г. по 2012 г. проводилось анкетирование оценки студентами качества обучения в ОУ. Результаты анкетирования представлены в Рис. 2.17 – 2.18.

Рис. 2.17 «Оценка студентами качества обучения в ОУ». Результаты анкетирования в 2010-11 уч. году, до внедрения в процесс обучения интерактивного мониторинга.

Рис. 2.18 «Оценка студентов качества обучения в ОУ». Результаты анкетирования в 2011-12 уч. году после внедрения в процесс обучения интерактивного мониторинга.

Например, на вопрос «Устраивает ли Вас созданная в ОУ система обучения для получения навыков, практических умений и компетенций специалиста?» 84 % респондентов ответило положительно («Да» и «Скорее Да») в 2011-12 уч. году после внедрения в процесс обучения интерактивного мониторинга. А в 2010-11 уч. году, до полноценного внедрения интерактивного мониторинга, только 74% отвечали положительно на этот вопрос (Рис. 2.3. и Рис. 2.4.).

На вопрос «Вы считаете, что в ОУ созданы все условия для обучения информационным и коммуникационным технологиям?» в 2011-12 уч. году после внедрения в процесс обучения интерактивного мониторинга 86 % студентов ответило положительно («Да» и «Скорее Да»). А в 2010-11 уч. году, до полноценного внедрения интерактивного мониторинга, только 70% отвечали положительно на этот вопрос.

На вопрос «По вашему мнению, обучение с использованием современных средств, таких как электронные учебники, презентации, дистанционное образование и др. более эффективно, чем традиционные формы?» 93 % респондентов ответило положительно («Да» и «Скорее Да») в 2011-12 уч. году после внедрения в процесс обучения интерактивного мониторинга. А в 2010-11 уч. году, до полноценного внедрения интерактивного мониторинга, на этот же вопрос отвечали положительно только 73% (Рис. 2.3. и Рис. 2.4.).

Результаты опроса демонстрируют позитивное отношение студентов к использованию на учебных занятиях компьютерного интерактивного мониторинга.

На втором этапе эксперимента 2011-2012 уч. году было проведено анкетирование студентов контрольной и экспериментальной групп в целях определения их самооценки сформированности профессиональных и общих компетенций в результате обучения. Контрольная группа обучалась по традиционной методике, экспериментальная группа обучалась с применением интерактивного мониторинга в рамках разработанной информационной среды. Результаты анкетирования представлены в Таблице 2.5. и на последующих рисунках ( Рис. 2.5 – Рис. 2.8).

Рис. 2. 20 Результаты анкетирования студентов при традиционной форме обучения и с применением интерактивного мониторинга. Самооценка сформированности профессиональных и общих компетенций. Диаграмма: Процент студентов, ответивших на вопрос: «На каком уровне, по Вашему мнению, сформированы ваши профессиональные и общие компетенции» - Частично сформированы.

Рис. 2.22 Результаты анкетирования студентов при традиционной форме обучения и с применением интерактивного мониторинга. Самооценка сформированности профессиональных и общих компетенций. Диаграмма: Процент студентов, ответивших на вопрос: «На каком уровне, по Вашему мнению, сформированы ваши профессиональные и общие компетенции» - Пока не сформированы.

Аналогичную тенденцию подтверждают данные на Рис. 2.6. и Рис. 2.7.

С другой стороны низкую самооценку (на вопрос: «На каком уровне, по Вашему мнению, сформированы ваши профессиональные и общие компетенции» - дан ответ «профессиональные компетенции пока не сформированы») дали только 4% респондентов, обучавшихся с применением интерактивного мониторинга, и 16% студентов, обучавшихся по традиционной форме обучения (Рис. 2.21.).

Проведенный педагогический эксперимент показал, что использование интерактивного мониторинга в образовательном процессе привело к значительному повышению продуктивности усвоении учебных знаний и, как следствие, к лучшему освоению ОПОП по специальности «Страховое. В целом по мере внедрения технологии интерактивного мониторинга произошло повышение удовлетворенности студентов качеством образования в экспериментальных группах, по сравнению со студентами контрольных групп с традиционными методами обучения.

Можно утверждать, что проведенный педагогический эксперимент подтвердил положения гипотезы данного исследования. Было установлено, что внедрение технологии интерактивного мониторинга привело к повышение качества обучения студентов в колледже. В ходе всей работы мы постоянно следили за тем, чтобы цели, задачи и модели интерактивного мониторинга формировались в соответствии с требованиями ФГОС СПО, чтобы интерактивный мониторинг был основан на принципах взаимодействия, активности обучаемых, опоре на групповой опыт, на взаимной оценке, самоконтроле и эффективной обратной связи.

Эксперимент убедительно подтвердил эффективность реализации технологии интерактивного мониторинга в комплексе современных способов и форм контроля: 1) компьютерных адаптивных тестов, 2) технологии виртуальных учебных фирм; 3) решения интерактивных практических заданий; 4) постоянного и систематического наблюдения за динамикой изменения в профессиональном и личностном развитии студентов колледжа.

Выводы по второй главе
В результате исследования мы пришли к выводу, что интерактивные компьютерные тесты, разработанные на научно-обоснованных методиках, обладают высокой надежностью и валидностью, и в этом они существенно отличаются в лучшую сторону от традиционных форм и методов педагогического контроля. При этом, именно адаптивные тесты полностью отвечают требования интерактивного мониторинга качества освоения ОПОП.

В ходе работы был проведен научно-педагогический анализ понятий «педагогический тест» и «тестовое задание», проанализировано современное состояние типологии и классификация тестов в образовании и их применения для целей мониторинга. Отмечено, что особое значение сейчас приобретают компьютерные адаптивные тесты, обладающие необходимыми для мониторинга характеристиками.

Компьютерная тестовая диагностика имеет целый ряд неоспоримых преимуществ перед традиционным бланковым тестированием: результаты автоматически обрабатываются компьютером; большая эффективность, надежность и точность педагогического измерения; возможность дистанционного контроля; применения инновационных интерактивных форм тестовых заданий и др.

Анализ отечественной и зарубежной практики компьютерного тестирования показывает, что инновации при разработке заданий для компьютерного тестирования включают в себя следующие взаимозависимые и взаимодополняющие направления: 1) форма заданий (с учетом компьютерного интерфейса); 2) действие обучающегося при ответе; 3) включение в структуру заданий элементов мультимедиа (графики, аудио, видео); 4) повышения уровня интерактивности, степени взаимодействия компьютера и обучающегося; 5) методы подсчета баллов за выполнения заданий и всего теста.

В главе подробно описаны и систематизированы как традиционные, так и инновационные формы компьютерных тестовых заданий: с применением технологии «hot spot» (выбор положения курсора на экране); матричные задания; на выбор из «ниспадающего меню»; задания с включением мультимедиа; интерактивные блоки заданий с разветвляющимся алгоритмом; составные задания (с привязкой к одному информационному блоку); задания на основе применения технологии «drag and drop» (перемещение графического объекта на экране); задания на перемещение объекта (объектов) по экрану; задания на конструирование объекта из элементов; задания на «заполнение в пробеле» ; задания на ввод текстовой (символьной) строки; задания на впечатывание подрисуночных надписей, пояснений к рисункам, схемам, планам, картам (технология «legend»).

Таким образом, инновационные формы тестовых заданий для компьютерного тестирования значительно улучшают качество педагогического измерения и педагогической диагностики, образовательного мониторинга. Особенно следует отметить, что все вышеперечисленные формы компьютерных заданий имеют потенциал использоваться в интерактивном режиме, то есть во время контроля обучающийся имеет возможность увидеть (ознакомиться) с правильным ответом или с ходом решения поставленной задачи.

В диссертационном исследовании была предложена модель компьютерного адаптивного теста, где каждое задание по своей сути являлось интерактивным. Предложенная модель, по сравнению с традиционной методикой подсчета баллов, имеет явные диагностические преимущества – больший диапазон шкалы оценок и, как следствие большую дифференцирующую способность задания, большую точность измерения и эффективную обратную связь, что позволяет применять ее в интерактивном мониторинге.

Основная цель проведенного педагогического эксперимента состояла в том, чтобы подтвердить гипотезу исследования и доказать эффективность использования интерактивного мониторинга качества освоения профессиональной образовательной программы студентами колледжа. Дополнительными целями экспериментальной работы являлись также апробация интерактивного мониторинга и поиск педагогических технологий и инструментов его эффективного функционирования.

В ходе опытно-экспериментальной работы были запланированы и выполнены следующие задачи: определен начальный уровень качества подготовки студентов колледжа; разработаны анкеты оценки студентами качества обучения в ОУ и самооценки сформированности профессиональных и общих компетенций; апробирован интерактивный мониторинг качества освоения профессиональной образовательной программы по специальности Страховое дело (при использовании адаптивных компьютерных тестов, интерактивных практических заданий технологии виртуальных учебных фирм); проведена обработку и анализ полученных экспериментальных данных.

Эксперимент показал, что использование интерактивного мониторинга в образовательном процессе привело к значительному повышению продуктивности усвоении учебных знаний и, в целом повышение удовлетворенности студентов качеством образования, по сравнению с традиционными методами обучения.

Эксперимент убедительно подтвердил эффективность реализации технологии интерактивного мониторинга в комплексе современных способов и форм контроля: 1) компьютерных адаптивных тестов, 2) технологии виртуальных учебных фирм; 3) решения интерактивных практических заданий; 4) постоянного и систематического наблюдения за динамикой изменения в профессиональном и личностном развитии студентов колледжа.