Методические разработки адресуются руководителям, заведующим кафедрами, преподавателям, аспирантам, студентам. © Петров А. Ю., 2009 Содержание

Вид материалаМетодические разработки

Содержание


Типология критериев диагностирования на основе нормативного
Подобный материал:
1   2   3
Раздел 3. Основные критерии эффективности исследовательской деятельности руководителя современной школы.


Для оценки процесса управления исследовательской подготовкой руководителя образовательного учреждения необходимо изучать, анализировать и оценивать результаты проводимой работы.

Определяя степень успешности исследовательской деятельности руководителя школы, ученые нередко используют методы статистики. При этом они пытаются определить уровень пяти и более высокого порядка бальными системами оценок, подвергая тем самым результаты исследований грубому приближению.

Нам представляется, что балльными оценками нельзя оперировать как точными числами и выдавать сравнение результатов исследования по бальным оценкам за строгое математическое доказательство преимуществ экспериментальных условий и методов. Вместе с тем правильное, целесообразное применение статистических методов обработки данных психолого-педагогических исследований дает возможность придавать выводам, вытекающим из результатов эксперимента, большую научную ценность и достоверность, так как они отражают действительные, объективные свойства исследуемого педагогического явления. Однако для применения статистических методов обработки результатов исследования надо подготовить описание изучаемого явления для математического анализа: выделить и четко определить величины, характеризующие исследовательский процесс, и установить способы их измерения. При этом речь идет не об эффективности исследовательской деятельности директора школы вообще, а об эффективности отдельных сторон управленческого процесса.

Как пишет А.А. Кыверялг, перевод педагогических понятий и явлений в эмпирические показатели является одной из самых сложных и ответственных процедур в исследова­нии, ибо от него зависит достоверность полученного научного знания. Самые тонкие формализованные инструменты и средства исследования дадут ошибочные результаты при недостаточной разработанности процесса перевода теоретических понятий в эмпирические. На выбор эмпирических индикаторов влияет много факторов, поэтому сам процесс не поддается алгоритмизации. Эмпирическая интерпретация, как пишут А.Я. Найн и З.М. Уметбаев, зависит от сложности объекта исследования, объема накопленных научных знаний, степени разработанности процедур анализа объекта и, наконец, способностей самого исследователя.

Процедура разработки критериев включает как минимум два этапа. Первый — построение сетки эмпирических характеристик объекта, предусматривает максимальное развертывание теоретического понятия. Здесь важно по определенным критериям выделить существенные свойства поня­тия, целостно рассмотреть все его важнейшие компоненты. Естественно, что на эмпирическую интерпретацию понятия влияет много факторов, среди которых в первую очередь надо выделить предмет исследования (в нашем случае - процесс управления исследовательской подготовкой руководителя образовательного учреждения).

Второй этап заключается в выборе значимых показателей, или индикаторов. Индикаторы — главные системообразующие признаки. Они должны репрезентативно представлять остальные признаки в качестве главнейших элементов системы анализируемого понятия.

Во всех ситуациях в процессах измерений выбирается некоторая мера — измеритель, адекватных объекту измерения. В теории педагогики таким измерителем может стать некоторая точно выработанная величина — критерий, — качественно характеризующий управленческий цикл.

Под критерием вообще подразумевается объективная количественная и качественная мера некоторого явления. В нашем случае таким явлением является «исследовательская деятельность».

В содержательном отношении, отмечает А.А. Кыверялг, к критерию предъявляются, как минимум три требования. Во-первых, он должен быть адекватен тому явлению, измерителем которого он является. Это значит, что в нем должны четко отражаться природа измеряемого явления и динамика изменения выражаемого критерием свойства. Во-вторых, критерий в теории управления должен выражаться дефиницией. Это значит, что одни и те же фактические значения различных явлений должны при применении к ним критерия давать одинаковые качественные значения. Наконец, в-третьих, критерий должен быть простым, т. е. допускать простейшие способы измерения с использованием недорогих и несложных методик, опросников и тестов.

Критерий, как отмечает В.П. Беспалько, надо отличать от характеристики и параметра. Характеристику следует понимать как некоторое содержательное описание отдельных сторон явления. При разработке критериев управления исследовательской деятельностью руководителя образовательного учреждения, мы руководствовались такими требованиями:

а) содержание форм и методов должно отражать реальную деятельность специалиста, соответствующую их функционалу;

б) содержание поведенческих критериев должно представлять собой обобщенную существенную форму проявления того или иного качества;

в) психолого-педагогические характеристики должны обладать наибольшим модальным весом, то есть иметь наибольшую значимость для специалистов образовательных учреждений нового типа;

г) личностные характеристики должны информировать руководителя о наиболее важных специфических для изучаемого возраста особенностях личности;

д) каждое исследуемое управленческое качество должно повторяться в нескольких поведенческих ситуациях.

Комплекс критериев учитывал следующие особенности личности руководителей, которые характеризовали их со стороны поведенческой саморегуляции (волевые качества); нравственной воспитанности (моральные качества); умственной активности (интеллектуальные качества); способности к эмпатии (отношение к людям).

В психологии широко используются такие понятия, как «критериально-ключевой принцип», «критерий статистический» и др.

Критериально-ключевой принцип — принцип конструирования на основе эмпирического обнаружения психо­логических признаков, позволяющих дифференцировать релевантные критериальные группы от контрольных. Ши­роко используется для конструирования психодиагностических методик (опросники эмпирические) наряду с факторно-аналитическим принципом. Понятие «критерий статистический» — показатель, сочетающий в себе: методы расчета; теоретическую модель распределения; правила принятия решения о правдоподобности нулевой или одной из альтернативных гипотез (23). Статистические критерии используются для проверки гипотез (23, с. 218):

а) о принадлежности выборки генеральной совокупности;

б) о достоверности (или отсутствии) различий между выборочными средними арифметическими, дисперсиями (в дисперсионном анализе);

в) о связи между изучаемыми признаками;

г) достоверности влияния (валидность).

В педагогике на уровне «Педагогической энциклопедии» понятие критерия педагогической деятельности не представлено.

Внимательное ознакомление с работами ряда современных отечественных исследователей проблем педагогики и образования (В.И. Кондрух, Л.М. Кустов, С.В. Кульневич, Т.Б. Лихачев, М.Г. Струнин и др.) позволяет выделить в этих работах «оценочный аспект». Это нечто общее, связанное с использованием и толкованием понятия «критерий», а именно:

а) включение в научный обиход понятия «критерий» многоаспектно;

б) использование понятия «критерий» как признака, на основании которого производится оценка.

A.M. Новиков трактует критерии научной педагогики как «научно обоснованные педагогические законы, положения, принципы, составляющие основу структурной модели, которая, будучи более или менее полно воплощенной в конкретно-исторической ситуации, являет собой конкретный педагогический гуманизм.

Эти критериальные положения порождаются как объективными обстоятельствами и существуют в качестве обязательного условия возникновения педагогики, так и субъективными, целиком зависящими от сознательной педагогической воли воспитателя...» (13, с. 37—38). А.А. Орлов полагает, что эффективность практической педагогики в значительной мере зависит от уровня профессионального мышления учителя, а критерием его эффективности является сформированность аксиологических (ценностных) ориентации самого учителя (преподавателя), поскольку:

а) педагогическая задача должна быть понята и принята;

б) аксиологическая направленность педагогического мышления требует перехода от нормативно-описательного к креативно-аналитическому типу деятельности.

Автор определяет эффективные пути формирования гуманных личностных смыслов профессии руководителя по критериям:

а) наращивания психолого-педагогических знаний;

б) их актуализации при решении познавательных и практических задач;

в) применения знаний в новых педагогических ситуациях;

г) применения знаний при усвоении опорных теоретических основ познавательных и практических умений.

А.П. Беляева в своей работе «Региональная система профессионального образования» усматривает критерии эффективности педагогической деятельности и результатов образования в уровнях сформированности методологической культуры руководителя образовательного учреждения:

а) теоретическая подготовка: усвоение методологических знаний, способствующих формированию целостного видения профессиональной деятельности; знакомство со способами разрешения противоречий; оценивание решений, основанных на научном и обыденном опыте;

б) практическая подготовка: решение педагогических задач с использованием научных знаний для отработки навыков проблемного видения; осуществление мысленного эксперимента;

в) формирование отдельных признаков методической рефлексии;

г) практическая работа в образовательном учреждении: определение исходного уровня сформированности умений, входящих в состав методологической культуры; освещение в проблемном изложении основных методологических вопросов, сопровождаемое решением системы задач, способ­ствующих: развитию навыков проблемного видения, выдвижения гипотез, рефлексирования; самостоятельная практика, побуждающая педагогов обращаться к научным знаниям, проводить фрагменты педагогического и психологического исследования, устранять конфликты с коллегами и
учениками.

Анализируя приведенные выше модели с позиции критериев личностно ориентированной методологии, В.П. Беспалько приходит к выводу о том, что в приведенных выше моделях имеет место действие двух базовых методологий: традиционной, известной со времен Я.А. Коменского как «методологии формирующего образования», и инновационной, сформировавшейся в последнее десятилетие XX века, известной как «методология личностно ориентированного образования». Это, соответственно, требует выделения разных критериальных признаков, на основании которых может быть осуществлена адекватная оценка действующей педагогической системы.

Однако, внимательное ознакомление с работами цитированных выше авторов позволяет выделить в них одно общее основание — обращение к методологии педагогического исследования. Что же касается методологических критериев эффективности исследовательской деятельности, а также критериев трактовки содержания самого понятия — «исследование», то они по мало понятным причинам остаются на обочине авторского внимания. Это положение типично для работ педагогической ориентации и объективно является источником методологической путаницы.

Применительно к исследовательской подготовке критериальная система (перечень критериев) конкретизируется на уровне педагогической деятельности по разработке средств и технологий практики прикладных педагогических исследований, которая (в соответствии с содержанием квалификационного стандарта педагогических работников) имеет уровневое строение: диагностическая деятельность; проектировочная деятельность; экспериментальная деятельность.

Критериальное поле педагогической диагностики. По мнению Е.А. Михайлычева, в настоящее время термин «диагностика» используется недостаточно корректно: методы экспериментального исследования трактуются как диагностические, хотя они не приспособлены к условиям оперативного и массового педагогического исследования.

Педагогическая диагностика должна рассматриваться как установление и изучение признаков, характеризующих со­стояние различных элементов педагогической системы и условий ее реализации (на всех уровнях); как прогнозирование возможных отклонений и предотвращения (путем педа­гогической коррекции) нарушения нормальных тенденций ее функционирования и развития.

Активно разрабатываемая в настоящее время проблематика педагогической диагностики нуждается в систематизации и оформлении в определенную теоретическую систему — теорию педагогической диагностики. Ее особенность — способность решать задачи верификации с помощью разработанных специальных средств. Здесь критериальную основу составляют:
  • системность и корректность;
  • научная обоснованность ее методики и технологий;
  • сочетание констатирующей и корректирующей функций;
  • последовательность и преемственность систем диагностики;
  • доступность диагностических методик и процедур;
  • прогностичность диагностики;
  • оптимизация средств, методов и форм организации диагностической деятельности;
  • комплексность диагностических процедур.

Общими признаками любого диагностического педагогического обследования, по мнению автора, являются:
  • включенность объекта диагностирования в педагогическую систему в качестве составного элемента или непосредственно воздействующего фактора;
  • наличие целей педагогического оценивания изучаемого объекта и (или) педагогического прогнозирования его развития и коррекции;
  • систематичность и повторяемость диагностирования как вида профессионально-педагогической деятельности, реализуемой в типичных ситуациях на определенных этапах образовательного процесса;
  • применение методик, специально разработанных и адаптированных к конкретным условиям педагогической практики;
  • доступность процедур диагностирования рядовым педагогам.

С учетом положений, сформулированных выше, критериями применения нормативного диагностического эталона являются:

а) включенность нормативного диагностического эталона в педагогическую систему в качестве ее составного элемента или непосредственно воздействующего фактора;

б) наличие целей педагогического оценивания изучаемого педагогического объекта или педагогического прогнозирования его развития и коррекции;

в) применение методик использования диагностического эталона, специально разработанных и адаптированных к конкретным условиям практики профессионального обучения и воспитания;

г) доступность процедур пользования нормативным ди­агностическим эталоном рядовым педагогом профессиональной школы.

В авторской модели приняты гипотетические формулы диагностики, включающие в качестве базового компонента процедуру сравнения фактического состояния изучаемого педагогического объекта с его нормативным состоянием, которое, как правило, идентифицируется с моделью нормативного диагностического эталона (см. табл. 1).

Отметим, что определение диагностического эталона, или нормы, сравнение фактического состояния педагогического объекта с эталоном, выявление отклонений, ограничивающих эффективность непосредственно педагогической деятельности — все это и есть диагностика в том ее по­нимании, которое представлено в известной книге немецкого исследователя и методолога педагогической диагности­ки К. Ингенкампа «Педагогическая диагностика», где автор пишет: диагностической деятельности мож­но выделить прежде всего следующие аспекты: сравнение; анализ; прогнозирование; интерпретация; доведение до сведения обучающихся результатов диагностической деятель­ности; контроль за воздействием на обучающихся различ­ных диагностических методов».


Таблица 1

Типология критериев диагностирования на основе нормативного

диагностического эталона

Критерий

Формула

Содержание

Критерий

оптимальности

Ф=Н

Фактическое состояние изучаемого объекта соответствует состоянию, которое принято рассматривать как нормативное; режим работы педагогической системы, в которую включен данный педагогический объект, оптимальное, поэтому коррекция не требуется

Критерий

продуктивности

Ф>Н

Фактическое состояние изучаемого объекта превышает требования нормативного диагностического эталона; режим работы педагогической системы, в которую включен изучаемый педагогический объект, продуктивный (инновационный, творческий); коррекция как форма вмешательства противопоказана

Критерий

риска

Ф<Н

Фактическое состояние изучаемого объекта ниже требований нормативного диагностического эталона; работа педагогической системы, в которую включен изучаемый педагогический объект, находится в режиме педагогического риска; коррекция необходима


В целом процесс диагностики развертывается как движение от внешне заданных целей концепции диагностической деятельности через диагностические средства нормативного диагностического эталона к результату диагностирования, через промежуточные результаты — сравнения, анализа и т. д.

Отметим то, что формирование целостной проектиро­вочной деятельности руководителя образовательного учреждения инновационного типа является более сложным этапом его исследовательской подготовки, который тем не менее, осуществляется успешно, если предварительно усвоено содержание диагностической деятельности.

Интерпретируя основные положения известного учебника Т. В. Корниловой «Введение в психологический эксперимента» (1997), применительно к задаче определения критериев эффективности подготовки к исследовательской деятельности, следует отметить, что специфика педагогического эксперимента связана:

а) с особенностями понимания изучаемой педагогической реальности, то есть с теоретическими построениями, в определенной степени ограничивающими понимание того, что может рассматриваться в качестве «педагогических факторов»;

б) с ориентировкой исследователя на ту методологическую проблему, которая может быть названа зависимостью получаемых данных от вмешательства в педагогическую реальность;

в) с методологическим подходом, реализуемым при планировании педагогического исследования и задающим допустимые — по отношению к собранным в эмпирической части исследования данным — схемы интерпретации и выводов о возможностях верификации или фальсификации гипотез.

Но экспериментальный метод — лишь отправная точка в использовании педагогом тех научных парадигм, которые сложились в попытках обосновать причинно-следственные зависимости на основе получения опытных данных. Экспериментальный метод выявляет особенности понимания «причинности» к так или иначе понятой педагогической реальности. Сущность экспериментального метода предстает в его нормативах как единство планирования исследования, форм экспериментального контроля и организации выводов (или контроля за выводом) при проверке причинно-след­ственных гипотез.

Важнейшим условием достоверности вывода о причинно-следственной зависимости, утверждаемой на основе анализа экспериментальных данных, является устранение конкурирующих объяснений. Иначе говоря, вывод о том, что существует причинная связь между независимой переменной (НП) и зависимой переменной (ЗП), является достоверным только тогда, когда экспериментатор (педа­гог-экспериментатор) использовал достаточный контроль для обеспечения всех видов валидности, специфичных для данного эксперимента: «конструктной», «операциональ­ной», «внешней», «внутренней».

По свидетельству Т.В. Корниловой, для многих психологических экспериментов очевидны допустимые зоны обобщения и оправдана готовность исследователей переносить полученные результаты на другие ситуации, виды деятельности, группы людей. Это позволяет осуществлять эксперименты, обладающие высокой внешней валидностью. Тако­выми являются «полевые» эксперименты, которые проводятся в условиях реально функционирующих учебных групп образовательного учреждения.

Цели проведения психолого-педагогических исследований в системе ДПО могут служить как проверке общепсихологических гипотез, для которых соответствующие «полевые» условия не более чем «фон», так и проверке специальных гипотез, предполагающих учет специфики учебной де­ятельности и общения в образовательном учреждении. Тогда переменные — «структура учебной ситуации», «личностные качества», «стиль общения» — предполагают анализ их применительно именно к выбранной предметной области.

В педагогических исследованиях наибольшее распространение получил план с неэквивалентной контрольной группой. А именно: если в эксперименте используются реально сложившиеся коллективы (учебные группы), то экспериментальные и контрольные условия нельзя считать уравненными, так как между группами возможны различия, которые могут «наложиться» на изучаемую закономерность и обусловить неверные интерпретации.

Поэтому основным критерием готовности педагога к осуществлению экспериментальной деятельности и обоснованию причинно-следственных зависимостей на основе анализа полученных опытных данных является не его «обученность экспериментированию» (последнее достигается сочетанием целей практикумов и учебных исследовательских работ), а обученность тому, как оценивать проведенные педагогические эксперименты.

Как уже отмечалось анализ и оценка экспериментального исследования осуществляется на основе адекватных критериев. При их выявлении мы учитывали, что характер выполнения исследовательских задач и заданий может быть различным (стандартным или нетрадиционным), поэтому в качестве критериев сформированности исследовательских умений выступали:

а) характер решения исследовательской задачи;

б) характер и качество выполнения курсовой и дипломной работы.

При определении показателей данных критериев мы использовали две методики:

а) пооперационный анализ (В.А. Беликов, А.П. Беляева, В.В. Воронов, А.А. Елизаров, А.Я. Найн, А.В. Усова и др.);

б) качественный анализ по выделенным признакам проявления умения (В.А. Андреев, И.К. Шалаев, В.Т. Страхин, Г.Н. Урванцев и др.).

Первая методика позволила отслеживать стандартные, ал­горитмические процедуры исследовательских действий при решении специалистами задач и заданий, а вторая — инновационные, творческие исследовательские действия. В рамках первой методики показателями сформированности умений исследовательской деятельности выступали полнота и прочность. В рамках второй методики в качестве показателей сформированности исследовательских умений были выбраны:

а) правильность применения исследовательских процедур (методов, методик);

б) рациональность выбора совокупности исследовательских действий (методов, методик);

в) выдвижение и обоснование нескольких способов решения исследовательской задачи;

г) выбор оптимального способа решения исследовательской задачи;

д) разработка нового знания (схемы, алгоритма, процедуры, методики и т. п.) решения исследовательской задачи;

е) привлечение необходимых знаний из той или иной научной области.

Кроме этого, в качестве показателей сформированности исследовательских умений мы использовали такие личностные проявления, как осознанность, активность и самостоятельность выполнения исследовательских задач и заданий, ценностные ориентации руководителя школы на овладение исследовательскими умениями, а также знания те­оретических и технологических основ исследовательской деятельности в управленческой сфере.


Использованная литература

  1. Берне Р. Развитие Я-концепции и воспитание: Пер. с англ. — М.: Прогресс, 1986. — 422 с.
  2. Гершунский Б.С. Философия образования. — М.: Фарбос, 2000. - 504 с.
  3. Гильманов С.А. Диагностика качеств творческой индивиду­альности педагога: Уч. пособие. — Тюмень: Изд-во Тюм. гос. ун-та, 1998. - 88 с.
  4. Каган М.С. Человеческая деятельность. — М.: Политиздат, 1974. - 328 с.
  5. Кеспиков В.Н. Научно-прикладное обеспечение развития образования в г. Челябинске // Развитие научно-прикладных ис­следований в образовательно-воспитательных учреждениях. — Челябинск: ЧГУ, 1992. - С. 3-4 (в соавт.).
  6. Кеспиков В.Н. Состояние и перспективы управления каче­ством образования в городской образовательной системе // Управ­ление качеством образования. — Челябинск: Управл. по делам об­раз., 1995. - С. 3-45.
  7. Кондрух В. И. Теоретические основы построения системы исследовательской подготовки преподавателя колледжа // Моно­графия. - Челябинск: Чел ГНОЦ УрО РАО, 2000. - 256 с.
  8. Коржуев А.В. Сущностный подход в педагогическом исследовании // Педагогика. - 1988. - № 2. - С. 22-28.
  9. Кустов Л.М. Организация экспериментальной педагогичес­кой деятельности в учреждениях начального профессионального образования: Учебное пособие. — Челябинск: Чел. фил. ин-та развития проф. образования МО РФ, 1995. — 120 с.
  10. Ладенко И.С. Интеллектуальные системы в целевом управле­нии. — Новосибирск: Наука, 1987. — 199 с.
  11. Найн А.А. Формирование рефлексивного мышления у студентов вуза // Учебное пособие, — Челябинск: УралГАФК, 2000 - 146 с.
  12. Никредин Г.Д., Галиев Г.Т., Кубицкий С.И. и др. Технологическое управление социальными процессами: Уч. посо­бие / Под ред. Г.Д. Никредина. — Уфа: Изд-во «Аи», 1997. — 296 с.
  13. Новиков А.М. Профессиональное образование России. Пер­ спективы развития. - М: ИЦП НПО РАО, 1997. - 254 с.
  14. Нойман Р.Ф. Алгоритмы и тесты для оценки качества образовательного процесса в современной школе // Материалы региональной научно-методической конференции педагогических работников. - Иркутск: ОИДПО, 2003. - С. 94-98.
  15. Сборник материалов Всероссийской научно-методичес­кой конференции по проблемам дополнительного профессио­нального образования в Сибирском регионе. — Омск: ОИДО, 2000. - 187 с.
  16. Сериков Г.Н., Сериков С.Г. Здоровьесбережение в гуманистическом образовании / Монография. — Екатеринбург-Челябинск: Изд-во ЧГПУ, 1999. — 247 с.
  17. Стоуне Э. Психопедагогика. Психологическая теория и практика обучения: Пер. с англ. / Под ред. Н.Ф. Талызиной. — М.: Педагогика, 1984. — 472 с.
  18. Тихонравов Ю.В. Теория управления. Учебный курс. — М.: Изд-во «Вестник», 1997. — 336 с.
  19. Шадриков В.Д. Психология деятельности и способностей человека: Учеб. пособие. — М.: Изд. корп. «Логос», 1996. — 320 с.
  20. Штокман И.Г. Вузовская лекция: Практические советы по методике преподавания учебного материала. — Киев: Виша шк., 1981. - 151 с.
  21. Шурмичина П.Л. Теоретические основы дифференциации научно-образовательных программ: Автореф. дис. ... д-ра пед. наук. — СПб.: РПУ им. А.И. Герцена, 1999 - 45 с.
  22. Штофф В.А. Роль моделей в познании. — Л.: ЛГУ, 1963. — 189 с.
  23. Щедровицкий Г.П., Розин В.М., Непомнящая Н.И., Алек­сеев Н.Г. Педагогика и логика. — М.: КАСТАЛЬ, 1993. — 415 с.