Тезисы докладов участников конференции «Новые технологии в образовании взрослых: Дни iatp на Байкале»

Вид материалаТезисы

Содержание


Типы оценок
Характер проекта/программы, как фактор, влияющий на проведение оценки
Эффективная оценка – это оценка для усовершенствования программы/проекта.
Модель оценки обучающих программ
Уровни (этапы) оценки обучающих программ
Первый уровень - оценка реакции на обу­чение.
Второй уровень - оценка знаний, умений, установок (ЗУУ).
Третий уровень - оценка влияния обучен­ных сотрудников на деятельность организации.
Четвертый уровень - оценка воздействия на сообщество
Подобный материал:
1   2   3   4   5   6   7   8   9   10

Типы оценок





I с точки зрения содержания:
  • Мониторинг
  • Оценка

II с точки зрения жизненного цикла:
  • Экспертиза
  • Промежуточная (формирующая). Например, чтобы поменять что-то в своей программе
  • Итоговая
  • Постпроектная (оценка воздействия)

III с точки зрения субъекта, проводящего оценку:
  • Внешняя
  • Внутренняя
Характер проекта/программы, как фактор, влияющий на проведение оценки



Росси и Фримен выделяют три основных вида проектов/программ:
  • инновационные (которые апробируют нечто новое),
  • расширенные (которые уже работают и потенциально применимы, например, в новых географических районах или с другой группой людей),
  • обычные (предоставляющие те же услуги, которые уже успешно предоставлялись ранее).

Необходимо помнить, что перечень основных вопросов, которые могут быть заданы во время проведения оценки, может изменяться в зависимости от вида проекта/программы. Так, для «инновационных» или «расширенных» проектов могут потребоваться ответы на такие вопросы, которые для «обычных» проектов/программ уже являются давно решенными.


Эффективная оценка – это оценка для усовершенствования программы/проекта.

Оценка как самостоятельный вид деятель­ности известна всего несколько десятилетий, и, несмотря на это, уже пользуется авторитетом. Там, где необходимо исследо­вать результаты деятельности, выяснить, до­стигнут ли достаточный уровень ее качества и эффективности, определить основные факторы успеха и причины неудач, проведение оценки - наилучший выбор.

Про­движение идеи оценки в России началось примерно в середине 90-х годов, подготовка специали­стов в этой области - позже. Сегодня в России и странах СНГ действуют более 200 экспертов по программной оценке, что явно не­достаточно; и при этом все еще есть регионы и организации, где оценка еще ни разу не прово­дилась, и мало кто из специалистов знаком с этим подходом.

Кроме того, серьезным препятствием для продвижения оценки является непонимание ее роли и места в развитии организации. У руко­водителей нередко присутствует негатив­ное отношение к внешней оценке, они воспри­нимают ее как ревизию, которая имеет только одну цель - уличить кого-то в плохой работе, выявить исключительно недостатки и просче­ты. Что касается проведения самоооценки, то здесь часто недостает не­обходимых знаний, временных, человеческих ресурсов, а главное - уверенности в необходи­мости анализа своей деятельности.

Мешает широкому использованию института мониторинга и оценки и тот факт, что представители власти (на государственном, региональном и муниципальном уровнях) настороженно относятся к данному институту, либо, декларируя возможности оценки, мало применяют ее на практике - при реализации государственных, региональных и муниципальных проектов и программ.

Еще один фактор, препятствующий рас­пространению оценки, - недостаток финансовых ресурсов, необходимых для ее проведения.

Несмотря на множество трудностей и проблем, идея оценки проектов и программ уже прочно внедрилась в нашу жизнь: создана профессиональная сеть оценщиков "Оценка программ", состоя­лись две международные конференции по оценке проектов, российскими организациями разработаны и опубликованы пособия по про­ведению оценки.

Модель оценки обучающих программ



Идея представленной здесь модели взята из теории, разработанной Дональдом Л. Киркпатриком в 1998 году (Donald L Kirkpatrick), и адаптирована в рамках проекта «Создание модельной системы оценки обучающих программ по организационному развитию некоммерческого сектора», реализованного в рамках программы Российско-Британских партнерств в 2001-2002гг. МООТиК «Интертренинг» и INTRAC. В модели представлена последовательность шагов планирования, реализации и оценки обучающих программ. Сама оцен­ка эффективности обучения проводится в четыре этапа (при этом на нулевой уровень выносится оценка потребности в обучении):

1. Оценка реакции участников на обучение.

2. Оценка усвоения знаний, умений, изменения установок участников.

3. Оценка влияния обучившегося сотрудника на деятельность организации.

4. Оценка воздействия обучившейся организации на сообщество.

Данная модель представляет собой комплексный подход к проведению и оценке обучающих программ. Чтобы максимально реализовать потенциал модели, при ее использовании должно соблюдаться основное условие: после­довательное осуществление всех этапов организации и оценки обучающих программ.

Уровни (этапы) оценки обучающих программ



Если двигаться по модели снизу вверх, можно пройти четыре этапа оценки (они расположены в центральном столбце модели) - от оценки реакции на обучение до оценки вли­яния на сообщество. Каждый уровень оценки оказывает воздействие на последующий, и по мере продвижения к верхним уровням процесс оценки становится все более сложным и требу­ет больших затрат ресурсов.

Первый уровень - оценка реакции на обу­чение. В ходе него измеряется реакция участников на конкретное обучающее мероприятие (тренинг, семинар). Оценка первого уровня проводится во время тренинга/семинара или непосредст­венно после него, обеспечивая тренеру обрат­ную связь по дизайну тренинга/семинара, его содержа­нию и проведению.

Второй уровень - оценка знаний, умений, установок (ЗУУ). Здесь измеряется изменение знаний, умений и установок участников по от­ношению к теме обучения. Оценка второго уровня предполагает сравнение ЗУУ участни­ков до прохождения обучения и после него. Иногда она проводится непосредственно после самого обучающего мероприятия, хотя предпо­чтительнее проводить ее через определенный промежуток времени, в течение которого уча­стники смогут освоить полученные ЗУУ.

Данные оценки ЗУУ показывают, насколь­ко конкретны и реалистичны были задачи тре­нинга/семинара, и каковы его результаты. Приобретение участниками обучения но­вых ЗУУ будет способствовать изменениям в их поведении.

Третий уровень - оценка влияния обучен­ных сотрудников на деятельность организации. В ходе него измеряют, насколько обученные со­трудники применяют полученные ЗУУ на практике, и как это влияет на организацию. На этом этапе необходимо сравнить определенные параметры работы сотрудников до обучения и после него. Оценка влияния на деятельность организации часто требует участия "третьих лиц" (как правило, коллег и руководителей обу­чившихся сотрудников) и может проводиться только спустя некоторое время после самого тренинга.

Результаты оценки третьего уровня дают возможность узнать, насколько правильно бы­ли определены потребности организации в обучении, и смогла ли обучающая программа удовлетворить эти потребности.

Четвертый уровень - оценка воздействия на сообщество - измеряет отсроченное влияние обучения на способность организации дости­гать своих целей. Это - самый сложный уро­вень оценки. Оценка воздействия позволяет выяснить, достигла ли организация каких-ли­бо изменений в области решения проблем сво­их клиентов, благополучателей, ради которых она существует.