Развитие систем оценки качества подготовки специалистов

Вид материалаАвтореферат диссертации
Подобный материал:
1   2   3   4
В третьей главе определяется, что базисом развития систем оценки качества подготовки специалистов в содержательном, процессном и организационном планах являются технологические основы развития систем оценки качества подготовки специалистов, включающие:
  • инвариантную модель технологии комплексной оценки индивидуальных образовательных достижений;
  • базовые принципы и требования к организационно-технологическому обеспечению контрольно-оценочной деятельности;
  • модель мониторинга контрольно-оценочных процедур;
  • организационно-методический аппарат исследований динамики социально-педагогических отношений субъектов контрольно-оценочной деятельности в контексте ее развития;
  • модель блочно-модульной системы профессиональной подготовки тестологов – специалистов в области педагогических измерений.

Инвариантная модель технологии комплексной оценки индивидуальных образовательных достижений (рис. 6) представляет собой упорядоченную совокупность приёмов и способов организации сложных технологических процессов.



Рисунок 6 – Инвариантная модель технологии комплексной оценки индивидуальных образовательных достижений


Технология комплексной оценки индивидуальных образовательных достижений обучающихся и выпускников учреждений профессионального образования направлена на решение задач:
  • определения объема усвоенных знаний и количества сформированных умений, навыков, способностей и компетенций;
  • оценки уровня подготовленности как интегральной характеристики освоения профессиональных образовательных программ в целом или отдельных учебных модулей;
  • оценки квалификации на основании сравнения количества сформированных компетенций и уровня подготовленности с нормативно заданными ФГОС профессионального образования требованиями к результатам освоения профессиональных образовательных программ;
  • обеспечения достоверности получаемых результатов и удовлетворения интересов личности, государства и общества;
  • интеграции с информационными системами и технологиями оценки качества образования в целях формирования информационного пространства общероссийской и региональных систем оценки качества образования;
  • реализации государственно-общественных механизмов управления образованием;
  • обеспечения эффективного управления образовательного процесса;
  • развития систем оценки качества подготовки специалистов.

В диссертации приводится подробное описание основных компонентов инвариантной модели технологии комплексной оценки индивидуальных образовательных достижений:
  • модели динамической организационной структуры системы оценки качества подготовки специалистов, которая содержит временные (аттестуемые, экспертные, экзаменационные, аттестационные комиссии, текущая документация и т.п.) и постоянные (руководство, организаторы, тестологи, инфраструктурный комплекс, в т.ч. аппаратно-программные средства, базы данных и фонды оценочных средств) компоненты – системные интеграторы, обеспечивающие достоверность получаемых результатов;
  • модели экспертизы требований к результатам освоения профессиональных образовательных программ, определяющей разработку и экспертизу дескрипторов компетенций, способностей, знаний, умений и навыков;
  • технологической модели разработки и стандартизации КИМ, определяющей комплекс процессов по разработке, формальной, тестологической и интегральной экспертизе качества КИМ, в т.ч. по результатам апробации;
  • функционально-процессной модели комплексной оценки индивидуальных образовательных достижений, разработанной на основе механизма оценки качества подготовки выпускников учреждений профессионального образования и методологии функционального моделирования технологических операций контроля и оценки ЗУН, и оценки сформированных компетенций в алгоритмически заданной последовательности с момента начала обучения до защиты ВКР с учетом ресурсного обеспечения,

разработанных с использованием теоретических основ формирования и оценки компетенций в системе профессионального образования.

Комплекс необходимых ограничений, адресованных субъектам контрольно-оценочной деятельности, позволяющий обеспечить достоверность получаемой информации об индивидуальных образовательных достижениях, апробированных в рамках широкомасштабных экспериментов по независимой оценке качества подготовки студентов ТПУ и введения ЕГЭ в Российской Федерации, раскрывается:

в содержательном плане через базовые принципы и требования к организационно-технологическому обеспечению контрольно-оценочной деятельности и результаты исследований социально-педагогических отношений субъектов контрольно-оценочной деятельности;

в процессном – посредством мониторинга контрольно-оценочных процедур, соблюдения технологии комплексной оценки индивидуальных образовательных достижений и проведения исследований социально-педагогических отношений субъектов контрольно-оценочной деятельности.

Организационно-методический аппарат исследований социально-педагогических отношений субъектов контрольно-оценочной деятельности в контексте ее развития, апробированный в течение пятилетних исследований в рамках эксперимента по введению ЕГЭ в Российской Федерации, включает:
  • комплекс социологических методов и инструментария исследований социально-педагогических отношений;
  • организационную сетевую систему сбора необходимой для анализа информации;
  • аппаратно-программные средства автоматизации процессов сканирования и верификации распознанных символов с «машиночитаемых» анкет, и статистическую обработку результатов опросов,

что позволяет в кратчайшие сроки с минимальной погрешностью проводить массовые социологические исследования. Применение этого аппарата позволяет реализовать институциональный подход к возникающим между субъектами контрольно-оценочной деятельности социально-педагогическим отношениям в условиях ее развития. При этом, институты рассматриваются как формальные и неформальные "правила игры", определяющие качество проведения процедур и признание достоверными результатов контроля и оценки индивидуальных образовательных достижений обучающимися и членами их семей, преподавателями и администрацией образовательных учреждений, специалистами организаций – работодателей и государственных органов управления образованием.

Одним из условий обеспечения достоверности оценки качества подготовки является релевантность применения средств и приемов аналитического аппарата оценки компетенций, которое невозможно реализовать без специально подготовленных высококвалифицированных специалистов – тестологов. Основной идеей иерархической блочно-модульной системы профессиональной подготовки тестологов является непрерывность повышения квалификации и профессиональной подготовки в процессе выполнения своих профессиональных обязанностей с минимальным отвлечением на консультации и лекционные занятия с целью получения дополнительной к основной квалификации «Тестолог – специалист в области педагогических измерений», владеющих компетенциями организаторов – технологов, экспертов по оценке индивидуальных образовательных достижений, разработчиков КИМ. Массовая профессиональная подготовка тестологов на базе модели блочно-модульной системы профессиональной подготовки позволила ликвидировать специфичную для контрольно-оценочной деятельности потребность в высококвалифицированных специалистах в ТПУ и Томской области. Применение этой системы рассматривается как необходимое условие развития контрольно-оценочной деятельности, осуществляемое высококвалифицированными профессионалами – авангардом кадрового обеспечения развития систем оценки качества подготовки специалистов.

Практическое применение технологических основ развития систем оценки качества подготовки специалистов обеспечит достоверность оценки качества подготовки обучающихся и выпускников учреждений профессионального образования посредством:
  • устранения возможности несанкционированного использования КИМ;
  • эквивалентности и сравнимости результатов разных видов контроля и оценки качества подготовки за счет применения универсальной шкалы оценки индивидуальных образовательных достижений;
  • усиления контроля и надзора за проведением контрольно-оценочных процедур и использованием результатов за счет автоматизации выполнения технологических операций и участия общественности;
  • применения релевантных методик экспертного оценивания и аналитических средств обработки результатов контроля и оценивания, в т.ч. с использованием средств автоматизации.

В заключении сформулированы основные выводы исследования.
  1. Исследование проблем оценки качества подготовки специалистов позволило выявить проблемы: несогласованности требований к результатам подготовки со стороны государства и работодателей; формирования «диагностичных» целей и требований к результатам подготовки; обеспечения достоверности оценки в организационно-технологическом и экспертно-аналитическом аспектах; недостаточности научного обоснования теоретических основ формирования и оценки компетенций и технологических основ развития систем оценки качества подготовки специалистов.
  2. Определенные с учетом изменений требований к результатам подготовки, возможностей современных педагогических и информационных технологий и потребностей обучающихся типология, принципы, тенденции и механизм развития систем оценки качества подготовки специалистов являются инструментами стратегического планирования развития этих систем.
  3. Разработанный с учетом потребностей личности, государства и общества механизм формирования требований к результатам освоения профессиональных образовательных программ, выступает в роли теоретического базиса разработки иерархических комплексов дескрипторов компетенций.
  4. Разработан механизм интегральной оценки качества подготовки выпускников учреждений профессионального образования, являющийся системообразующим элементом технологии комплексной оценки индивидуальных образовательных достижений и позволяющий определять структурно-функциональный состав систем оценки качества подготовки специалистов.
  5. Разработанные технологические основы развития систем оценки качества подготовки специалистов, содержат инновационные технологические решения и ограничения контрольно-оценочной деятельности, необходимые для получения достоверной информации о качестве подготовки в контексте реорганизации организационных систем и модернизации технологии комплексной оценки индивидуальных образовательных достижений.
  6. Разработанная Концепция развития систем оценки качества подготовки специалистов как научная система принципов, целей, задач, методов и моделей развития контрольно-оценочной деятельности в системе профессионального образования определяет комплекс теоретических основ формирования и оценки компетенций и технологических основ развития систем оценки качества подготовки специалистов.
  7. Гипотеза о том, что использование актуальной и достоверной информации об индивидуальных образовательных достижениях в целях управления и обеспечения качества подготовки специалистов приведет к повышению качества профессионального образования, если будут применены концептуальные положения, определяющие развитие систем оценки качества подготовки специалистов – подтверждается актами практического использования (внедрения) результатов исследования.
  8. Результаты исследования развития систем оценки качества подготовки специалистов могут быть использованы при проведении научных изысканий и в практической деятельности при организации подготовки обучающихся в учреждениях профессионального образования, создании или модернизации систем оценки качества подготовки специалистов, формировании региональных систем оценки качества профессионального образования.


Основные положения и выводы отражены в следующих публикациях автора:

  1. Монографии и научные труды



  1. Пермяков О.Е. Методологические основы и технологии оценки индивидуальных образовательных достижений в системе профессионального образования: Монография. – М.: Федеральный институт развития образования, 2008. – 422 с.
  2. Пермяков О.Е., Иванкина Л.И., Берестнева О.Г. Современный технический университет: Философский и психолого-социологический аспекты исследования состояния и развития университета: Монография. – Томск.: Изд-во Том.ун-та, 2003. – 110 с.
  3. Пермяков О.Е., Максимова О.А. Основы технологии комплексной экспертизы качества педагогических тестов: Монография. – Томск: Изд-во ТОИПКРО, 2008. – 100 с.
  4. Пермяков О.Е., Менькова С.В. Диагностика педагогических проблем системы образования в условиях эксперимента по введению Единого государственного экзамена: Монография. – Томск: Дельтаплан, 2003. – 28 с.
  5. Пермяков О.Е., Менькова С.В. Интерсубъективность социально-педагогических измерений в условиях эксперимента по введению единого государственного экзамена (в Томской области): Монография. – Томск: Изд-во «Дельтаплан», 2005. – 60 с.
  6. Пермяков О.Е., Менькова С.В. Теоретико-информационный анализ социально-педагогической оценки ЕГЭ в Томской области: Монография. – Томск: Изд-во «Дельтаплан», 2006. – 92 с.
  7. Пермяков О.Е., Менькова С.В. Лонгитюдные социологические исследования в сфере оценки качества образования (на примере эксперимента по введению ЕГЭ в Томской области): Монография. – Томск: Лито-Принт, 2007. – 68 с.
  8. Пермяков О.Е., Солодов Г.А., Косинцев В.И. Техническая и экологическая безопасность промышленного предприятия. Анализ аварий, катастроф и их причин, подготовка руководителей производственных коллективов к действиям при авариях и аварийных ситуациях, организация и безопасная эксплуатация промышленных предприятий: Монография. – Томск: Дельтаплан, 2004. – 184 с.
  9. Пермяков О.Е., Татур А.О., Митрофанов К.Г., Новиков А.М. и др. Концепция общероссийской системы оценки качества образования. – М.: ОИЦ «Академия», 2008. – 28 с.


  1. Публикации в изданиях, включенных в реестр ВАК РФ



  1. Пермяков О.Е. Иерархическая модель социально-профессиональной компетентности и подходы к формированию требований к результатам подготовки студентов. Вестник Адыгейского государственного университета. – 2008. № 7, С. 81 – 88.
  2. Пермяков О.Е. Концептуальные кинетические модели системогенеза способностей и компетенций. Преподаватель XXI век. . – 2009. № 1, С. 45 – 50
  3. Пермяков О.Е. Методологические основы формирования иерархической классификационной модели социально-профессиональной компетентности студента. Вестник Адыгейского государственного университета. – 2008. № 8, С. 78 – 86.
  4. Пермяков О.Е. Методологические подходы к моделированию личностно-профессиональной компетентности специалиста в контексте формирования государственных образовательных стандартов нового поколения. Изд-во ТПУ. Известия Томского политехнического университета. – 2007. – Т. 310. – № 1. С. 275 – 281
  5. Пермяков О.Е. Методологические подходы к проектированию систем оценки качества образования. Известия Томского политехнического университета. – 2005. – Т. 308, № 4, 2005. – С221 – 225.
  6. Пермяков О.Е. Мониторинг качества профессионального образования с позиций кибернетики и системного анализа. Изд-во ТПУ. Известия Томского политехнического университета. – 2006. – Т. 309. – № 6. С. 222 – 227.
  7. Пермяков О.Е. Совершенствование системы качества образовательного учреждения высшего профессионального образования в контексте требований ENQA. Университетское управление: Практика и анализ, 2007. № 3(49). С. 97 ­–102
  8. Пермяков О.Е., Илюхин Б.В. Проблемы обеспечения качества приема и направления совершенствования системы конкурсного отбора поступающих в вузы Российской Федерации. Изд-во ТПУ. Известия Томского политехнического университета. – 2007. – Т. 310. – № 1. С. 269 – 275
  9. Пермяков О.Е., Максимова О.А. Процедуры комплексной экспертизы
    качества тестовых заданий и тестов при формировании банка данных // Журнал научных публикаций аспирантов и докторантов. № 4. Курск, 2008. – С. 110 –114
  10. Пермяков О.Е., Максимова О.А. Формализация экспертного оценивания качества тестовых материалов с позиции системного подхода. Вестник педагогических инноваций. Научно-практический журнал. Новосибирск: ГОУ ВПО НГПУ, № 3(7). - 2006. С. 158 – 176.
  11. Пермяков О.Е., Менькова С.В., Жадан В.А. Влияние организации балльно-рейтинговой системы на мотивацию учебно-познавательной деятельности студентов и профессиональной деятельности преподавателей. Изд-во ТПУ. Известия Томского политехнического университета. – 2006. – Т. 309. – № 6. С. 216 – 222.



  1. Авторские свидетельства, патенты, информационные карты, алгоритмы
  1. Пермяков О.Е., Шевелев М.Ю., Шевелев Ю.П. Устройство для контроля и самоконтроля знаний обучающихся. Патент на изобретение № 2260853 20 сентября 2005г.
  1. Учебные пособия, методические разработки
  1. Митрофанов К.Г., Новиков А.М., Пермяков О.Е. и др. Приложения к рекомендациям по формированию региональных систем оценки качества образования: Методическое издание. – М.: ОИЦ «Академия», 2008. – 88 с.
  2. Митрофанов К.Г., Новиков А.М., Пермяков О.Е. и др. Рекомендации по формированию региональных систем оценки качества образования: Методическое издание. – М.: ОИЦ «Академия», 2008. – 36 с.
  3. Пермяков О.Е., Борило Л.П., Князева Е.М. Анализ результатов ЕГЭ – 2004 по химии в Томской области: Учебное издание. – Томск: Дельтаплан, 2004. – 52 с.
  4. Пермяков О.Е., Борило Л.П., Князева Е.М., Ольшина О.А., Билалова А.Н. Анализ результатов ЕГЭ – 2003 по химии в Томской области: Аналитический отчет и методические рекомендации: Учебно-методическое издание. – Томск: Дельтаплан, 2003. – 44 с.
  5. Пермяков О.Е., Веретельник В.И., Сивов Ю.А., Суханова Т.В. Анализ результатов ЕГЭ – 2004 по физике в Томской области: Учебное издание. – Томск: Дельтаплан, 2004. – 68 с.
  6. Пермяков О.Е., Веретельник В.И., Сивов Ю.А., Суханова Т.В., Ольшина О.А. и др. (всего 6 чел.) Анализ результатов ЕГЭ – 2003 по физике в Томской области: Аналитический отчет и методические рекомендации: Учебно-методическое издание. – Томск: Дельтаплан, 2003. – 67 с.
  7. Пермяков О.Е., Глок Л.Э., Горлов П.И., Веснина Л.В., Свинцова А.Д. Нормативные и правовые основы проведения эксперимента по введению единого государственного экзамена в Томской области: Сборник нормативных документов. – Томск: Дельтаплан, 2002. – 176 с.
  8. Пермяков О.Е., Горлов П.И., Неверова В.В., Петров Г.С. Статистика основных результатов мониторинга качества общеобразовательной подготовки учащихся в 2003 году. Томская область: Методическое издание. – Томск: Дельтаплан, 2002. – 104 с.
  9. Пермяков О.Е., Зальмеж В.Ф., Домбровская Т.В. Анализ результатов ЕГЭ – 2004 по математике в Томской области: Учебное издание. – Томск: Дельтаплан, 2004. – 56 с.
  10. Пермяков О.Е., Менькова С.В., Медведев И.И. Компьютерные технологии в тестировании. Руководство для выполнения лабораторных работ в системе АИС «Экзамен»: Учебно-методическое пособие. – Томск: Изд-во ТПУ, 2005. – 48 с.
  11. Пермяков О.Е., Менькова С.В., Терентьева Л.В. Компьютерные технологии в тестировании. Руководство для выполнения лабораторных работ в адаптивной среде тестирования АСТ-2: Учебно-методическое пособие. – Томск: Изд-во ТПУ, 2005. – 43 с.
  12. Пермяков О.Е., Петрашова Т.Г., Уразаева Т.Т, Колпакова Л.В. и др. (всего 8 чел.) Анализ результатов ЕГЭ-2006 по английскому языку, литературе, русскому языку в Томской области: информационно-аналитический отчет и методические рекомендации: Учебно-методическое пособие. – Томск: Дельтаплан, 2006. – 112 с.
  13. Пермяков О.Е., Петрова И.В., Зальмеж В.Ф., Борило Л.П. и др. (всего 8 чел.) Анализ результатов ЕГЭ-2006 по биологии, математике, физике, химии в Томской области: информационно-аналитический отчет и методические рекомендации: Учебно-методическое пособие. – Томск: Дельтаплан, 2006. – 134 с.
  14. Пермяков О.Е., Петрова И.В., Кравченко Л.Б. Анализ результатов ЕГЭ – 2004 по биологии в Томской области: Учебное издание. – Томск: Дельтаплан, 2004. – 64 с.
  15. Пермяков О.Е., Подскребко Э.Н., Домбровская Т.В., Ольшина О.А., Билалова А.Н. Анализ результатов ЕГЭ – 2003 по математике в Томской области: Аналитический отчет и методические рекомендации: Учебно-методическое издание. – Томск: Дельтаплан, 2003. – 58 с.
  16. Пермяков О.Е., Подскребко Э.Н., Домбровская Т.В., Хмылева Т.Е., Горлова О.А. и др. (всего 7 чел.) Анализ результатов единого государственного экзамена (2002г.) по математике в Томской области: Аналитический отчет и методические рекомендации: Научно-методическое издание: – Томск: Дельтаплан, 2002. – 94 с.
  17. Пермяков О.Е., Ромашова Т.В., Ющенко О.И., Сыров В.Н. Анализ результатов ЕГЭ-2006 по географии, истории, обществознанию в Томской области: информационно-аналитический отчет и методические рекомендации: Учебно-методическое пособие. – Томск: Дельтаплан, 2006. – 96 с.
  18. Пермяков О.Е., Солодов Г.А., Косинцев В.И., Рыжков П.Ю. Подготовка руководителя производственного коллектива к действиям в аварийных ситуациях: Учебное пособие. – Томск: ИПФ ТПУ, 2000. – 220 с.
  19. Пермяков О.Е., Старикова Г.Н., Колпакова Л.В. Анализ результатов ЕГЭ – 2004 по русскому языку в Томской области: Учебное издание. – Томск: Дельтаплан, 2004. – 71 с.
  20. Пермяков О.Е., Старикова Г.Н., Малярова С.Г., Тубалова И.В., Федянина Г.И. и др. (всего 8 чел.) Анализ результатов ЕГЭ – 2003 по русскому языку в Томской области: Аналитический отчет и методические рекомендации: Аналитический отчет и методические рекомендации: Учебно-методическое издание. – Томск: Дельтаплан, 2003. – 63 с.