Коломиец Б.К. Комплексная оценка качества подготовки выпускников вузов. Методические рекомендации
Bзложен подход к разработке системы комплексной оценки качества подготовки выпускников высших учебных заведений, даются примеры средств оценки для разных специальностей и направлений подготовки. Эффективность предлагаемого подхода подтверждается многолетними экспериментами в системе высшего, а с 2002 г. и среднего профессионального образования. Система обеспечена компьютерной программой, разработанной А.Я. Мотехиной, осуществляющей обработку и анализ информации по алгоритмам, разработанным Б.К. Коломийцем.
Брошюра адресована руководителям образовательных учреждений, заведующим и преподавателям выпускающих кафедр, а также исследователям качества высшего образования; материалы могут быть использованы при разработке фондов оценочных средств качества подготовки выпускников по отдельным направлениям подготовки / специальностям высшего (а также среднего) профессионального образования как в вузах, так и в органах аккредитации / аттестации учебных заведений.
Текст представлен в авторской редакции.
СОДЕРЖАНИЕ
| ПОСТАНОВКА ЗАДАЧИ КОМПЛЕКСНОЙ ОЦЕНКИ КАЧЕСТВА ПОДГОТОВКИ ВЫПУСКНИКОВ ВУЗОВ |
| 1. Структура и технология комплексной оценки качества подготовки выпускников |
| 2. Разработка комплексных квалификационных заданий (ККЗ), выпускных квалификационных работ (ВКР) и показателей их качества |
| 3. Организация экспертизы качества ВКР и ККЗ членами ГАК |
| 4. Организация опроса (анкетирования) выпускников |
| ОЦЕНКА ВКР И ККЗ, ОБРАБОТКА И АНАЛИЗ РЕЗУЛЬТАТОВ ОЦЕНОК |
| ЛИТЕРАТУРА |
| ПРИЛОЖЕНИЯ |
| Приложение 1. Структура комплексной оценки |
| Приложение 2. Система инвариантных показателей КПВ для ВКР и ККЗ (на основе общеинтеллектуальных компетенций) |
| Приложение 3. Инвариантные показатели ВКР для всех Сп/НП |
| Приложение 4. Показатели КПВ, соответствующие задачам деятельности по специальности «Коммерция» (ГОС-2) |
| Приложение 5. Пример комплексного контрольного задания по специальности «Коммерция» |
| Приложение 6. Пример показателей КПВ, соответствующих задачам деятельности по специальности 032200 – Физика (преподаватель) (проект автора) |
| Приложение 7. Комплексное квалификационное задание по педагогической специальности – инвариантная составляющая (проект автора) |
| Приложение 8. Бланк сравнительной оценки экспертом качества ВКР (дипломных проектов, работ) по направлению подготовки |
| Приложение 9. Анкета выпускника |
| Приложение 10. Анкета руководителя/работодателя |
| Приложение 11. Определение весовых коэффициентов и свертка (агрегирование) значений показателей качества ВКР/ККЗ |
| Приложение 12. Список используемых сокращений |
ПОСТАНОВКА ЗАДАЧИ КОМПЛЕКСНОЙ ОЦЕНКИ
КАЧЕСТВА ПОДГОТОВКИ ВЫПУСКНИКОВ ВУЗОВ
Основные проблемы создания систем и средств комплексной оценки качества подготовки выпускников вузов (КПВ):
· результаты деятельности большинства Государственных аттестационных комиссий (ГАК) мало информативны – по ним нельзя судить о том, как подготовлен выпускник для решения совокупности (или системы) конкретных задач профессиональной деятельности, представленных (должны быть представлены) в квалификационных характеристиках (КХ) и в квалификационных требованиях (КТ) или требованиях к подготовке выпускника) в качестве конечных целей обучения, насколько качество их подготовки удовлетворяет требованиям соответствующих ГОС [1] (значительно более информативны Приложения к дипломам, но по ним трудно судить о конечных результатах обучения выпускника);
· почти во всех ГОС, в принципе, являющихся базой, основанием оценки КПВ (в том числе и в ГОС по техническим специальностям / направлениям подготовки (СП / НП)) нет однозначного или просто приемлемого соответствия между составом и содержанием задач в КХ и составом и содержанием КТ;
· разработка систем и средств оценки качества подготовки выпускников значительно усложняется отсутствием задач (или обобщенных задач) профессиональной деятельности (ЗПД / ОЗПД) в ГОС, КХ и КТ ко всем педагогическим специальностям, части экономических и университетских специальностей. В них перечисляются только виды деятельности без соответствующих им задач;
· в процессе итоговой государственной аттестации (ИГА), как правило, оцениваются не качество подготовки специалистов, их компетентность в решении задач и проблем профессиональной деятельности на конкретном рабочем месте, а качества подготовки выпускников в момент их окончания вуза; в то же время для обеспечения большей востребованности выпускников на рынке труда необходимо также мнение уже работающих выпускников и их руководителей о качестве их подготовки;
· в отличие от достаточно хорошего методического и технологического обеспечения разработки и использования средств оценки качества подготовки студентов по отдельным учебным дисциплинам в виде тестов (удовлетворяющих критериям валидности и надежности, как минимум), отечественные средства оценки качества подготовки выпускников такого обеспечения не имеют (хотя с 2002 г. – времени начала разработки фондов оценочных средств качества подготовки выпускников по отдельным направлениям подготовки / специальностям высшего профессионального образования (ФОС) [2-6] – ситуация в этой области значительно улучшилась); основная причина этого – значительно большая сложность оценки КПВ.
Такое состояние средств оценки качества подготовки выпускников (КПВ) вузов является одним из существенных факторов невысокой эффективности как действующих, так и проектируемых систем управления качеством высшего образования: эти системы практически оказываются без удовлетворительной обратной связи по КПВ.
Эта ситуация не может не сказаться негативно на эффективности образовательных стандартов как действующего, так и проектируемого – третьего поколения, – основывающихся на компетентностной структуре конечных целей качества подготовки выпускников: степень достижения предусмотренного ГОС уровня компетенций выпускников не сможет быть качественно оценена.
Напомним, что в ГОС второго поколения (ГОС-2) конечные цели профессиональной подготовки выпускника представлены в квалификационных характеристиках (КХ-2) и в квалификационных требованиях (КХ-2) в виде наборов ЗПД для каждого включенного в соответствующий ГОС-2 вида профессиональной деятельности и соответствующих каждой задаче КТ к уровню их решения. Такая структура ГОС-2, КХ-2 и КТ-2 наиболее полно представлена в ГОС по инженерно-техническим и экономическим специальностям.
С учетом вышеизложенного, а так же отечественной и зарубежной практики в этой области, определены следующие критерии системы и средств КПВ и принципы их разработки:
валидность – направленность на оценку степени достижения конечных целей обучения, содержащихся в КХ и КТ и полного состава ЗПД и КТ в соответствующей ООП;
надежность – достоверность, объективность оценок;
полнота оценки – полнота предметов оценки: охват оценочными средствами всей системы (или подсистемы) задач профессиональной деятельности (ЗПД) / компетенций, учет всех соответствующих этим задачам КТ;
технологичность – удобство использования, эксплуатации оценочных средств и технологии, удобство оценок, сбора и хранения полученной в системе информации;
экономичность;
соответствие современному уровню (культуре) оценки – оценивается по сравнению с лучшими примерами аналогичных отечественных и зарубежных оценочных средств и технологий оценки, их состава, структуры и содержания;
комплексность оценки – обеспечение оценки всех качеств профессиональной и общекультурной подготовки выпускника, определенных в ГОС и ОП; наличие у членов ГАК и рецензентов показателей качества ВКР, ККЗ, соответствующих ГОС и ООП по СП/НП; использование этих показателей в процессе ИГА и отзывов; наличие и использование всех, предусмотренных положением об ИГА, источников информации (отзывов рецензента и руководителя, результатов оценки государственной аттестационной комиссии) по каждому выпускнику; наличие при окончательной оценке ГАК результатов сдачи государственного экзамена (в том числе, решения выпускником ККЗ) и оценки качества ВКР, использование этих оценок с учетом отзывов руководителя и рецензента; учет мнения выпускников и их руководителей (работодателей) о качестве их подготовки в вузе; агрегирование значений оценок из всех источников информации по единым принятым в квалиметрии (А.И. Субетто) методам, представленным в работах [19, 22] в виде оригинального комплекса алгоритмов.
Принципы построения системы комплексной оценки КПВ:
· разработка оценочных средств осуществляется на основании критериальной и оценочной моделей – системной совокупности показателей КПВ и соответствующих каждому показателю шкал (или нормативов – как дихотомической шкалы);
· оценочная модель разрабатывается на основании модели специалиста (выпускника), включающей перечень компетенций - умений по решению задач профессиональной (как минимум) деятельности (ЗПД), требований к качеству (уровню) решения этих задач и уровню знаний, необходимых для решения соответствующих задач;