Авторефераты по всем темам  >>  Авторефераты по техническим специальностям

На правах рукописи

ФИЛИЧЕВА Татьяна Алексеевна

ИНФОРМАЦИОННО-АНАЛИТИЧЕСКОЕ ОБЕСПЕЧЕНИЕ МОНИТОРИНГА КАЧЕСТВА ПРОФЕССИОНАЛЬНОЙ ПОДГОТОВКИ ГОСУДАРСТВЕННЫХ СЛУЖАЩИХ

Специальность 05.25.05 - Информационные системы и процессы

АВТОРЕФЕРАТ

диссертации на соискание ученой степени кандидата технических наук

Москва - 2012

Работа выполнена на кафедре информационных технологий в управлении Российской академии народного хозяйства и государственной службы при Президенте Российской Федерации.

Научный консультант: доктор педагогических наук, кандидат физико-математических наук, доцент Митин Александр Иванович

Официальные оппоненты: доктор технических наук Майорова Вера Ивановна кандидат технических наук Бич Михаил Геннадьевич

Ведущая организация: Национальный исследовательский технологический университет МИСиС

Защита состоится 17 апреля 2012 года в 13.00 часов на заседании диссертационного совета Д219.007.01 во ФГУП Всероссийский научно-исследовательский институт проблем вычислительной техники и информатизации (ВНИИПВТИ) по адресу: 115114, Москва, 2-й Кожевнический пер., дом 8, ауд. 2

С диссертацией можно ознакомиться в библиотеке ВНИИПВТИ.

Адрес: 115114, Москва, 2-й Кожевнический пер., дом 8, строение 1.

Автореферат разослан 15 марта 2012 г.

Ученый секретарь диссертационного совета, кандидат экономических наук П.П.Гвритишвили

ОБЩАЯ ХАРАКТЕРИСТИКА РАБОТЫ

Актуальность темы исследования. В настоящее время количество людей, занятых в сфере государственного и муниципального управления, с учетом вспомогательного персонала превышает 2 млн. (федеральные органы власти, 83 региональных администраций, более 24 тысяч муниципальных органов власти). С одной стороны, специфика современных требований, предъявляемых к уровню образования в этой сфере (даже для исполнителей), создает такое количество специалистов с высшим образованием, которого нет ни в одной отрасли промышленности. С другой стороны, возникают проблемы как интенсификации и обеспечения большей доступности обучения для широкого круга государственных и муниципальных служащих, так и повышения качества их профессионального образования.

Практика показывает, что на данный момент процент государственных и муниципальных чиновников, имеющих профильное образование, крайне незначителен. При этом коротких курсов повышения квалификации и переподготовки, которые проводятся для действующих управленцев, недостаточно. Только высшее образование дает специалисту возможность в полной мере овладеть ключевыми компетенциями.

В современном подходе к содержанию качества образования основным критерием выступает степень удовлетворенности ожиданий различных участников образовательного процесса предоставляемым образовательным учреждением образовательными услугами и степенью достижения поставленных в образовании стратегических целей, направленных на решение проблем с кадрами в регионе. Повышение требований потребителей к качеству образования закладывают основу для развития и совершенствования управления образовательным учреждением на основе использования современных информационных технологий. Развитие информационно-аналитического обеспечения призвано обеспечить гибкость такого управления, оперативность реагирования на вызовы современного рынка, как со стороны работодателей, так и со стороны потребителей образовательных услуг (общества, государства). Действия руководства образовательного учреждения могут быть эффективными и оперативными, только если они основываются на своевременной и достоверной информации.

Информатизация, пронизывая всю сферу образования, должна стать стратегическим направлением развития системы профессиональной подготовки государственных служащих (ППГС).

Настоящее диссертационное исследование посвящено разработке и внедрению подсистем информационно-аналитического обеспечения мониторинга качества профессиональной подготовки государственных служащих для оценки удовлетворенности качеством предоставляемых образовательных услуг, анализа степени достижения стратегических целей в области качества и определения направлений улучшения образовательной деятельности на основе решения экспертно-аналитических задач.

Состояние научной разработанности темы. Научно-теоретической основой представлений о принципах и подходах к развитию качества послужили работы зарубежных и отечественных исследователей (Э.Деминг, К.Исикава, Д.Харрингтон, У.Шухарт, Ю.П. Адлер, В.И. Байденко, А.А. Деркач, И.И. Дзегеленок, А.И. Субетто и др.). В ряде работ рассматриваются проблемы управления качеством образовательной деятельности, как с точки зрения объективных закономерностей управления эффективностью и качеством (Г.В.Воробьев, С.Б. Ельцов, М.Г. Круглов, Г.В.Лаврентьев и др.), так и с точки зрения показателей реализации государственных образовательных стандартов (В.А. Болотов, Н.А. Селезнева, А.И. Субетто и др.). Проблемы профессионального обучения государственных служащих, рассмотренные в ряде научных трудов (В.И. Кушлин, А.И. Митин, А.И. Турчинов, О.А.Фаллер и др.), свидетельствуют о необходимости повышения качества ППГС в соответствии с новыми требованиями, предъявляемыми к государственным служащим на современном этапе, а также с учетом основных задач федеральной программы по реформированию государственной службы.

Основной сложностью мониторинга качества профессиональной подготовки государственных служащих является слабая формализованность многих оценок качества образовательной деятельности и недостаточность стандартных мониторинговых процедур для комплексной оценки качества предоставляемых образовательных услуг. В некоторых работах (А.А. Добряков, В.И. Майорова, В.М. Милова, М.М. Поташник и др.) описываются подходы к формализации таких оценок (в основном, на базе нечетко-множественного подхода) для подготовки специалистов инженерного профиля. Однако впрямую использовать эти подходы к оценке качества подготовки государственных служащих затруднительно в силу особенностей данной предметной области (необходимость учета социальной активности, карьерного роста, обучения на послеучебной фазе). Кроме того, во всех рассмотренных работах недостаточно освещены вопросы построения соответствующих структур (схем) данных, что свидетельствует о необходимости более детального анализа как теоретических положений в целом, так и отдельных проблем в данном направлении.

Таким образом, исследования в области формализации и совершенствования процедур мониторинга качества ППГС применительно к использованию слабо формализованных показателей качества, а также аспекты разработки информационно-аналитического обеспечения мониторинга качества ППГС являются актуальными и практически значимыми.

Объект диссертационного исследования: образовательная деятельность по осуществлению профессиональной подготовки государственных служащих.

Предмет исследования: методы и модели мониторинга качества профессиональной подготовки государственных служащих для оценки удовлетворенности качеством предоставляемых образовательных услуг, анализа степени достижения стратегических целей в области качества и направлений улучшения образовательной деятельности.

Целью диссертационного исследования является разработка информационно-аналитической системы мониторинга качества профессиональной подготовки государственных служащих на основе методов решения экспертно-аналитических задач оценки качества предоставляемых образовательных услуг.

Для достижения поставленных целей можно определить следующие задачи:

1. Провести анализ основных задач мониторинга качества профессиональной подготовки государственных служащих с позиции процессного подхода, теории систем, общей теории управления, выявив закономерности в информационных потоках и основные измеряемые показатели.

2. Определить мониторинговые процедуры по оценке качества профессиональной подготовки государственных служащих с учетом количественных и качественных (неизмеряемых) показателей.

3. Спроектировать методы оценки степени удовлетворенности качеством профессиональной подготовки государственных служащих и степени достижения поставленных целей в области качества.

4. Исследовать источники снижения качества предоставляемых образовательных услуг и провести (на основании метода когнитивного моделирования) оценку рисков снижения качества профессиональной подготовки государственных служащих.

5. Разработать принципы функционирования подсистем информационно-аналитического обеспечения мониторинга качества профессиональной подготовки государственных служащих для обработки стандартизированных данных мониторинга и решения экспертно-аналитических задач оценки качества образовательных услуг.

6. Провести апробацию и внедрение информационно-аналитического обеспечения в виде экспериментального варианта информационноаналитической системы мониторинга качества профессиональной подготовки государственных служащих.

Теоретическая и методологическая база исследования. Исследование выполнено в соответствии с ключевыми положениями системного анализа, теории управления, теории принятия решений, теории и практики проектирования информационных систем. Теоретической основой исследования послужили труды российских и зарубежных ученых в области управления качеством, применения экспертно-аналитических методов к оценке качества образования, анализа данных на основе нечеткомножественного подхода. Информационную базу диссертационного исследования составили законодательные акты по образовательной деятельности, стандарты в области системы менеджмента качества (ГОСТ Р 52614.2-2006, ГОСТ Р ИСО 9004-2001 и др.), монографии, сведения, публикуемые в научных изданиях, материалы научно-практических конференций, международных форумов по рассматриваемой проблеме.

При выполнении диссертационного исследования использовались методы системного анализа, аналитические методы исследования моделей, теория нечеткого логического вывода, теория когнитивного моделирования, методы управления качеством, статистические методы.

Наиболее существенные научные результаты, полученные в ходе диссертационного исследования и содержащие научную новизну:

1. Сформулированы направления мониторинга качества образования, учитывающие специфику профессиональной подготовки государственных служащих, карьерного роста на послеучебной фазе.

2. Разработаны методы анализа данных мониторинга качества профессиональной подготовки государственных служащих, позволяющие: а) оценить степень удовлетворенности качеством профессиональной подготовки государственных служащих, выраженную в виде понятий естественного языка, на основе использования лингвистических переменных; б) определить степень достижения целей в области качества, применяя методы нечеткого логического вывода, учитывая совокупность количественных и качественных показателей, шкал оценок; в) проанализировать риски снижения качества на основе разработанной когнитивной карты, формализующей экспертные оценки.

3. Создана база знаний, формализующая экспертные оценки, которая позволяет формировать рекомендации по снижению рисков снижения качества и предложения по улучшению качества профессиональной подготовки государственных служащих.

4. Разработан и внедрен экспериментальный вариант информационно-аналитической системы мониторинга качества профессиональной подготовки государственных служащих (ИАС МК) как подсистемы общей информационной системы образовательного учреждения, который позволяет реализовать решение экспертно-аналитических задач оценки текущего состояния качества образовательных услуг и формирование рекомендаций для лица, принимающего решения (ЛПР), по повышению качества.

Теоретическая и практическая значимость. Теоретическая значимость исследования заключается в использовании новых подходов к мониторингу качества профессиональной подготовки государственных служащих и совершенствованию информационно-аналитического обеспечения образовательного учреждения. Теоретические положения и выводы могут быть использованы в учебном процессе при подготовке студентов в рамках дисциплин Информационные технологии управления, разработанные методы, модели и алгоритмы мониторинга качества профессиональной подготовки государственных служащих могут быть использованы при мониторинге качества подготовки специалистов в различных предметных областях.

Практическая значимость диссертационного исследования состоит в разработке и внедрении экспериментального варианта информационноаналитической системы мониторинга качества профессиональной подготовки государственных служащих, включенной в информационную систему Брянского филиала РАНХиГС.

Работа соответствует паспорту специальности 05.25.05 - Информационные системы и процессы (п. 1. Методы и модели описания, оценки, оптимизации информационных процессов и информационных ресурсов, а также средства анализа и выявления закономерностей в информационных потоках. Когнитивные модели информационных систем, ориентированных на человекомашинное взаимодействие.; п. 7. Прикладные автоматизированные информационные системы, ресурсы и технологии по областям применения (технические, экономические, гуманитарные сферы деятельности), форматам обрабатываемой, хранимой, представляемой информации (табличная, текстовая, графическая, документальная, фактографическая, первичная или вторичная). Аналитические, процедурные, информационные модели предметной области (системы принятия групповых решений, системы проектирования объектов и процессов, экспертные системы и др), включаемые в контур обработки информации и принятия решений.).

На защиту выносятся:

1. Методы и процедуры анализа данных мониторинга качества профессиональной подготовки государственных служащих на основе использования экспертно-аналитических методов, когнитивного моделирования, лингвистических переменных и нечеткого логического вывода.

2. База знаний, позволяющая формировать рекомендации по снижению рисков и предложения по улучшению качества профессиональной подготовки государственных служащих на основе анализа мнений экспертов предметной области.

3. Экспериментальный вариант информационно-аналитической системы мониторинга качества профессиональной подготовки государственных служащих.

Достоверность и обоснованность результатов. Достоверность теоретических положений диссертации подтверждается корректностью использования математического аппарата, полнотой моделей и методов. Достоверность практических результатов подтвердилась в ходе эксплуатации экспериментального варианта ИАС МК в Брянском филиале РАНХиГС в плане учета данных мониторинга качества образовательных услуг и объема сформированных рекомендаций по повышению качества для ЛПР.

Апробация работы. Результаты исследования докладывались на всероссийской научно-практической конференции Развитие отечественной системы информатизации образования в здоровьесберегающих условиях (Москва, 2007 г.), на международной научно-практической конференции Информационно-аналитические средства поддержки принятия решений (Москва, 2008 г.), на научно-практическом семинаре по вопросам построения единой системы качества структурных подразделений ОРАГС (Брянск, 2009 г.), на международной научно-практической конференции Единство образовательного пространства славянских государств (Брянск, 2009 г.), на Международном форуме Гарантии качества (Москва, 2009 г., 2010 г.), в рамках видеоконференции Менеджмент качества в системе образования между Орловской региональной академией государственной службы (ОРАГС, Россия) и Институтом экономики и управления ЕСОМЕN (г. Таллинн, Эстония), на V Международной научнопрактической конференции Инновационное развитие общества в условиях межкультурных взаимодействий (Сумы, 2011 г.), на конференции Ситуационные центры 2011 (ситуационные центры и лэлектронное правительство) (Москва, 2011 г.). Часть результатов диссертационного исследования были использованы при выполнении научно-исследовательской работы по теме Разработка многоуровневой системы качества Брянской области по государственному контракту №ФД-105/04 от 28.02.2008 г.

Публикации. По теме диссертационного исследования опубликовано 17 научных работ общим авторским объемом 4,3 п.л., включая 3 статьи (авторским объёмом 1,1 п.л.) в изданиях, рекомендованных ВАК для публикации результатов кандидатских и докторских диссертаций.

Структура и объем работы. Диссертационная работа состоит из введения, трех глав, заключения, списка использованных источников, включающего 124 наименования, и содержит 166 страниц основного текста, 4 приложения на 25 страницах, 59 формул, 12 таблиц, 40 рисунков.

КРАТКОЕ СОДЕРЖАНИЕ РАБОТЫ

Во введении обоснована актуальность, сформулированы предмет и объект диссертационной работы, цели, задачи, научная новизна и практическая значимость работы, а также основные положения, выносимые на защиту.

В первой главе изложены теоретико-методологические основы качества образования и основные направления мониторинга качества ППГС.

Определено понятие мониторинга качества профессиональной подготовки государственных служащих, под которым в работе понимается включенный в информационную систему образовательного учреждения дискретный во времени процесс обоснованного диагностико-прогностического слежения: а) за степенью удовлетворенности качеством образовательных услуг; б) за степенью достижения целей в области качества; в) за потенциальными причинами рисков снижения качества.

С позиции теории систем и общей теории управления предложено рассмотрение образовательной деятельности в виде целенаправленной системы с программно-целевым управлением, которая включает: объект управления, представляющий совокупность подпроцессов по реализации образовательной деятельности; субъект управления, которым является руководство образовательным учреждением (ОУ), осуществляющее деятельность, направленную на достижение целей в области качества; подсистему управления, задающую некоторую программу управления с выходными переменными цели. Определены потоки входной и выходной информации, которые измеряются в процессе мониторинга качества ППГС.

Для реализации подсистемы управления требуется разработка методов и моделей, обеспечивающих сбор, хранение и обработку данных в процессе мониторинга качества ППГС с целью повышения обоснованности выбора управляющих воздействий руководством ОУ различного уровня за счет решения экспертно-аналитических задач и применения актуальных информационных ресурсов.

Вторая глава посвящена постановке и решению ряда аналитических задач, определению степени удовлетворенности качеством профессиональной подготовки государственных служащих, степени достижения целей в области качества и метода анализа рисков снижения качества.

При описании модели мониторинга качества ППГС образовательная деятельность представлена в виде дерева. В соответствии с правилом организации образовательной деятельности вершинам дерева сопоставлены цель, процессы, подпроцессы, действия (планирование, разработка программ, реализация программ, формирование отчетности по результатам образовательной деятельности и т.д.), измерение показателей которых позволяет оценить степень достижения поставленных целей в области качества ППГС. Степень достижения глобальной цели в области качества ППГС при этом соответствует степени достижения цели в главном уровне (рис.1).

В некоторый момент t функционирования процессов ППГС, который заРис. 1. Описание вершин дерева v в момент оценки дан дискретно с учетом частоты измерений, каждая вершина дерева v с непосредственными потомками одного уровня {v1, v2,Е,vn} характеризуется своим состоянием, которое задаётся набором переменных {, , }, где - показатель степени завершенности процесса; - время, оставшееся до завершения процесса в вершине; - степень достижения цели процесса.

Показатель степени завершенности количественно определяется как доля соответствия показателям, характеризующим качество ППГС (прежде всего, лицензионным (аккредитационным)). Показатель степени завершенности какой-либо вершины текущего уровня вычисляется как сумма показателей элементов предыдущего (ниже расположенного) уровня, с учетом весового коэффициента важности, определяемого экспертным методом. Показатели, характеризующие качество ППГС (всего 21 показатель), разделены на пять групп: 1) научные и научно-педагогические кадры, 2) учебная деятельность, 3) научная деятельность, 4) финансовые показатели, 5) удовлетворенность выпускников и работодателей.

Для оценки степени достижения цели в подчиненной вершине vi вводится лингвистическая переменная Степень достижения цели процесса. Степень достижения цели в области качества ППГС в главном уровне определяется на основании значений показателей подцелей, целей процессов, подпроцессов и действий у подчиненных вершин и рассчитывается в соответствии с принципом обобщения, введенным Л. Заде.

Для решения задачи оценки качества ППГС и степени достижения показателей количественных характеристик качества ППГС используется совокупность продукций с набором правил, для формирования которых используются входные переменные t, , и выходная переменная .

Входная переменная представляет время, оставшееся до завершения процесса, с терм-множеством Т1={лопережение, по плану, лотставание}. Переменная t представляет этап выполнения процесса с терммножеством Т2={лначало, в процессе, завершение}. Переменная представляет долю соответствия показателям, характеризующим качество ППГС, с терм-множеством Т3={лполностью, более половины, соответствует, менее половины, не соответствует}. Выходной переменной является лингвистическая переменная Степень достижения цели процесса с терм-множеством Т4={лцель достигнута, высокая степень достижения цели, средняя степень достижения цели, низкая степень достижения цели, лцель может быть не достигнута}. В зависимости от степени завершения действия, подпроцесса, процесса на основании функции принадлежности термов выходной переменной выдвигается предположение о завершении процесса и степени достижения цели в области качества.

База знаний о степени достижения цели ППГС представлена совокупностью из 30 нечетких продукционных правил, например, ЕСЛИ <оценка производится на начальном этапе выполнения процесса> И <процесс выполняется в опережение плана> И <значения основных показателей больше половины> ТО <высока вероятность достижения цели процесса> и т.д.

Применение алгоритма нечеткого логического вывода Мамдани при движении по дереву степени достижения цели в области качества ППГС снизу вверх (от целей подпроцессов к целям процессов и цели в области качества) позволяет найти значения входных и выходной переменных, заданных соответствующими терм-множествами.

Следует учесть, что не каждой вершине дерева степени достижения цели ППГС может быть сопоставлен количественный показатель. В частности, удовлетворенность выпускников и работодателей качеством образовательных услуг может быть измерена только нечетко в виде понятий естественного языка (через анкетные опросы выпускников по удовлетворенности качеством образовательных услуг, анкетные опросы работодателей по удовлетворенности качеством подготовки выпускников, анкетные опросы сотрудников и профессорско-преподавательского состава по удовлетворенности качеством образовательных услуг).

Оценка удовлетворенности качеством ППГС. С целью определения субъектов удовлетворенности качеством профессиональной подготовки государственных служащих (далее - субъектов) проведена дифференциация с последующей детализацией. Все субъекты подразделяются на потребителей и сотрудников, состоящих, в свою очередь, из нескольких категорий, классифицированных по различным признакам: виду потребностей (внутренние и внешние) и ожиданий (для потребителей), по типу или характеру выполняемой работы (для персонала) и т.п.

Процесс анализа удовлетворенности качеством образовательных услуг сводится к анализу соотношения требуемого, по мнению потребителя, качества ППГС и его собственной оценки по этой же характеристике. Степень удовлетворенности выражается нечетко в виде понятий естественного языка. В связи с этим при измерении степени удовлетворенности качеством образовательных услуг наиболее целесообразным является использование лингвистических переменных. Оценка удовлетворенности субъектов качеством ППГС базируется на анализе информации, касающейся всех заинтересованных сторон ППГС, и выполняется с помощью глобального критерия K:

внеш внут сотр внеш внут сотр внеш внут сотр K , где,, Ч весовые коэффи K K K циенты важности соответствующих комплексных оценок, которые удовлевнеш внут сотр внеш внут творяют условию 1; K, K, Kсотр Ч комплексные оценки степени удовлетворенности субъектов качеством ППГС (соответственно, внутренних потребителей, внешних потребителей, сотрудников), вычисляемые с помощью комплексного иерархического критерия по формуле:

n c c c K Kk, где K c - индекс (значение) комплексного критерия k kудовлетворенности с-го субъекта удовлетворенности качеством; с = (внеш, внут, сотр) - обозначение субъекта удовлетворенности качеством ППГС (соответственно, внутренних потребителей, внешних потребителей, соc трудников); Kk - оценка (значение) k-го частного критерия на соответствующем уровне иерархии с- го субъекта удовлетворенности качеством;

k=1, 2, Е, n - обозначение уровня иерархии комплексного критерия; n - число частных критериев на k-ом уровне иерархии комплексного критерия;

c - весовой коэффициент, показывающий важность на k-ом уровне иерарk хии комплексного критерия удовлетворенности с-го субъекта удовлетворенности качеством ППГС; сумма весовых коэффициентов на каждом уровне иерархии равна единице.

Для оценки удовлетворенности по критериям, с учетом иерархии субъектов, используется семибалльная шкала (табл. 1).

Данные значения образуют термЦ множество А(Х) лингвистической переменной Удовлетворенность, представляющее множество названий лингвистических значений лингвистической переменной Х с базовой переменной u из интервала [0,1]. Функции принадлежности для каждого нечеткого подмножества, характеризующего определенное значение лингвистической переменной, определяются экспертным методом. В частности, функция принадлежности для нечеткого множества А(удовлетворен) описывается формулой вида:

0, если u ;

2u , если u ;

У (u,, , ) 1 2u , если u ;

1, если u .

где - точка перехода, то есть такое значение u U, степень принадлежности которого множеству А(Х) равна 0,5.

Введение комплексных критериев для определенияудовлетворенности субъектов качеством ППГС и глобального критерия удовлетворенности всех групп субъектов позволяет провести анализ результатов удовлетворенности качеством ППГС, определить степень соответствия качества ППГС требованиям и ожиданиям субъектов различных категорий и групп, установить приоритетные направления для улучшения деятельности ОУ.

После определения приоритетных направлений проводится планирование улучшений, которые необходимы для увеличения удовлетворенности качеством ППГС.

Для решения задачи по оценке рисков снижения качества, применяется метод когнитивного моделирования, позволяющий получить количественную оценку негативных последствий, влияющих на качество ППГС. Основу когнитивной модели составляет когнитивная карта, которая представлена в виде взвешенного графа, вершинам которого сопоставлены концепты, а ребрам - веса связей между концептами.

Данные мониторинга и процедуры извлечения знаний, проводимые аналитиками на этапе построения и модификации продукционных правил, позволяют экспертам сформировать список концептов (табл.

2) когнитивной карты для исследования возможных причин несоответствия целям в области качества ППГС (рис. 2). Значения концептов ранжированы экспертами предметной области по семибалльной шкале (табл. 3). В качестве экспертов при апробации данной модели выступили уполномоченные по качеству филиалов академии государственной службы, руководители учебно-методических отделов.

Рис. 2. Визуальное представление когнитивной карты оценки рисков снижения качества ППГС Когнитивная карта оценки рисков снижения качества ППГС является результатом установления причинно-следственных связей между концептами, влияющими на качество ППГС, с указанием для каждой связи ее характера влияния - положительного (усиливающего) или отрицательного (ослабляющего). В целях повышения наглядности на рис. 2 концепты обозначены в виде цифр, которые соответствуют приведенной нумерации в табл. 2. Вес связи указан числом со знаком вблизи стрелки. Положительное влияние представлено в виде сплошной стрелки, отрицательное - в виде пунктирной. Чем толще стрелка на рис 2, тем сильнее влияние. По дугам в смежные концепты передаются импульсы с коэффициентом усиления (ослабления), равным весу дуги, соединяющей смежные концепты.

Импульсы, одновременно пришедшие в i-ый концепт, складываются алгебраически с учетом знаков: () P ( 1), где zji - вес дуги из конz ji j P i jGi цепта j, смежного с концептом i, P ( 1) - импульс в j-ом концепте в моj мент 1; Gi - множество номеров концептов j, смежных с концептами i, и тогда значение веса связи концепта j в момент , обозначаемое Ui() определяется как: U ( ) U ( 1) P ( 1) z ji j i i jGi Таким образом, импульсы, пришедшие в вершину i-ого концепта одновременно из смежных с ней вершин, складываются алгебраически с учетом знаков.

Вес связи при оценке несколькими экспертами определялся как среднее арифметическое оценки силы i-ой связи j-ым экспертом. Для проверки согласованности оценок экспертов использован метод ранговой корреляции. Коэффициент конкордации рассчитывается по формуле Кендалла. На этапе апробации данного метода коэффициент согласованности c=0,7, следовательно, мнение экспертов можно считать в достаточной степени согласованным.

После получения моделей и их анализа для определения снижения рисков и улучшения качества ППГС выделяются наиболее проблемные показатели (факторы), риск недостижения которых достаточно велик или значения которых не соответствуют целевым. Расчет результатов моделирования позволяет получить их графическое отображение (рис. 6), которое предоставляет возможность вывести графическое отображение динамики поведения каждого концепта когнитивной модели. На основании формализации продукционных правил, которые формируются экспертами (например: ЕСЛИ <количество абитуриентов меньше установленных контрольных цифр> ТО (<активизировать проведение рекламных мероприятий> И <повысить информированность общества>) ИЛИ <повысить имидж ОУ> ИЛИ <снизить стоимость обучения> и т.д.), создается база знаний, которая позволяет формировать рекомендации по улучшению качества при принятии управленческих решений ЛПР.

Третья глава посвящена практической реализации информационноаналитической системы мониторинга качества подготовки государственных служащих, описанию разработки и внедрения экспериментального варианта ИАС МК как подсистемы общей информационной системы Брянского филиала РАНХиГС.

В целях решения данной проблемы: 1) определен состав информационно-аналитической системы мониторинга качества подготовки государственных служащих; 2) сформулирован набор структурных и функциональных требований, предъявляемых к информационно-аналитическому обеспечению мониторинга качества ППГС; 3) конкретизировано взаимодействие методов и процедур мониторинга качества ППГС в виде трех укрупненных модулей, которые отображают функциональную структуру системы (то есть производимые действия и связи между этими действиями), источники и получателей данных, взаимодействие и связи групп, лиц и подразделений (службы качества, социологической службы, экспертов, аналитиков, ЛПР), задействованных в мониторинге качества образовательной деятельности.

Схема информационно-аналитического обеспечения мониторинга качества ППГС, представленная на рис. 3, позволяет продемонстрировать взаимодействие программных инструментов подсистем ИАС МК. Основу информационного обеспечения ИАС МК составляет объединение базы знаний (в виде совокупности продукций по степени достижения целей в области качества, совокупности продукций для формирования рекомендаций по повышению удовлетворенности качеством ППГС, когнитивной карты оценки рисков снижения качества) и базы данных справочников, сведений о студентах, сотрудниках, работодателях и т.д. Более конкретно, сбор информации об удовлетворенности субъектов качеством ППГС, весов связей между концептами когнитивной модели, информации о состоянии процессов ППГС реализован с помощью модуля опросов программного продукта Битрикс: Управление сайтом, который позволяет с помощью Web-форм проводить анкетирование удаленных пользователей, сбор информации опросов, предусматривает возможность настройки системы статистики для хранения нужного объема данных, оптимальной скорости работы, возможность экспорта любых данных из модуля статистики в формат Microsoft Excel для дальнейшего анализа. Анализ данных по удовлетворенности качеством ППГС, степени достижения целей в области качества, рисков снижения качества ППГС осуществляется агрегированием программных средств Microsoft Excel, Mat Lab (инструмента Fuzzy Logic Toolbox), СУБД Microsoft Access и VBA-модулей. Формирование рекомендаций по повышению качества ППГС в виде отчетов и аналитических записок (исследуемые критерии, анализ ключевых показателей, графическое отражение результатов, рекомендации для принятия управляющих воздействий ЛПР) выполняется с применением Microsoft Excel, Microsoft Word и СУБД Microsoft Access.

Разработанный и внедренный экспериментальный вариант ИАС МК включает три подсистемы, которые реализуют соответственно процедуры оценки степени удовлетворенности качеством ППГС, оценки степени достижения цели в области качества и оценки рисков снижения качества предоставляемых образовательных услуг на основе когнитивной карты.

Рис. 3. Схема информационно-аналитического обеспечения мониторинга в рамках ИАС МК Подсистема оценки степени достижения целей в области качества благодаря использованию интеграции Microsoft Access - Microsoft Excel - Mat Lab (Fuzzy Logic Toolbox - инструмент для построения и анализа нечётких множеств) позволяет провести оценку степени достижения целей в области качества с учетом Рис. 4. Результат работы подсистемы оценки степени движения по дереву достижения целей в области качества снизу вверх, начиная с определения степени реализации подпроцессов, затем процессов и, наконец, целей в области качества. Результаты анализа степени достижения целей представляются в виде радарной диаграммы (рис.4), которая демонстрирует приближение к поставленным целям по пяти группам показателей (научные и научнопедагогические кадры, учебная деятельность, научная деятельность, финансовые показатели, удовлетворенности выпускников и работодателей).

При формировании рекомендаций по корректирующим и предупреждающим действиям для принятия решений по достижению целей в области качества ППГС осуществляется обратное движение по дереву сверху вниз от цели в области качества к целям процессов, подпроцессов и действий.

Подсистема оценки удовлетворенности качеством ППГС, реализованная с помощью Web-формы - Microsoft Access - Microsoft Excel - Microsoft Word, обеспечивает удаленное взаимодействие субъектов удовлетворенности качеством ППГС, оценку удовлетворенности качеством ППГС, а также позволяет формировать рекомендации для принятия решений по повышению удовлетворенности качеством образовательных услуг.

Подсистема оценки удовлетворенности качеством ППГС предоставляет: 1) аналитикам - информацию для подробного анализа степени удовлетворенности по семибалльной шкале с возможностью формирования отчета; 2) ЛПР - информацию по сигнальным показателям трехбалльной шкалы с возможностью более подробного просмотра степени удовлетворенности субъектов удовлетворенности качеством ППГС; 3) ЛПР - рекомендации для принятия решений по повышению удовлетворенности качеством ППГС (рис. 5).

Представленные на рис. 5 результаты работы подсистемы оценки удовлетворенности качеством ППГС по формированию рекомендации для принятия решений по повышению удовлетворенности демонстрируют представление информации о субъекРис. 5. Результат работы подсистемы оценки тах (на примере оргаудовлетворенности качеством ППГС по формированию низаций - партнеров) рекомендации для принятия решений по сигнальным показателям трехбалльной шкалы. Начиная со степени частично удовлетворен и частично не удовлетворен формируются рекомендации по повышению удовлетворенности качеством ППГС.

Подсистема оценки рисков снижения качества ППГС, реализованная с помощью интеграции Web-формы - Microsoft Access - Microsoft Excel - VBAмодуля, обеспечивает удаленное взаимодействие экспертов в области качества, задание весов концептов, позволяет провести прогноз когнитивной модели по оценке рисков снижения качества, сформировать рекомендации для ЛПР по снижению рисков и улучшению каРис. 6. Результат работы подсистемы чества ППГС. Результаты мооценки рисков снижения качества делирования представляются в табличном и графическом виде (рис.6), которое отражает поведение концептов когнитивной карты, а также в виде рекомендации по снижению рисков и улучшению качества ППГС.

В заключении подведен итог выполненных исследований и перечислены основные научные и практические результаты, полученные автором:

1. Разработаны методы и процедуры анализа данных мониторинга качества профессиональной подготовки государственных служащих (оценки удовлетворенности качеством ППГС, степени достижения целей в области качества, рисков снижения качества) на основе использования экспертно-аналитических методов, метода когнитивного моделирования, лингвистических переменных и нечеткого логического вывода.

2. Построена база знаний, позволяющая формировать рекомендации по снижению рисков снижения качества и предложения по улучшению качества профессиональной подготовки государственных служащих на основе анализа мнений экспертов предметной области.

3. Разработан и внедрен экспериментальный вариант информационно-аналитической системы мониторинга качества профессиональной подготовки государственных служащих (ИАС МК), включенный в информационную систему Брянского филиала РАНХиГС.

Основное содержание диссертации отражено в следующих публикациях:

в изданиях, рекомендованных ВАК:

1. Филичева Т.А. Анализ применения нечетко-множественного подхода к мониторингу качества образования государственных служащих // Вестник Брянского государственного технического университета. - Брянск: БГТУ, 2010. - № 1. - С. 112-118.

2. Филичева Т.А. Метод когнитивного моделирования как способ оценки рисков снижения качества профессиональной подготовки государственных служащих // Вестник Самарского муниципального института управления: теоретический и научно-методический журнал. - Самара: Изд-во Самарский муниципальный институт управления, 2011. - №4 (19). - С. 69-73.

3. Филичева Т.А., Митин А.И. К вопросу об информационном моделировании мониторинга качества профессиональной подготовки государственных служащих // Информатизация и связь, 2012 - №2 - С. 32-37.

В других изданиях:

4. Филичева Т.А. Некоторые аспекты информационных технологий в системе качества подготовки государственных служащих // Информационные и коммуникационные технологии в общем, профессиональном и дополнительном образовании: материалы Всероссийской научно - практической конференции. (г. Москва, 29-30 ноября 2007 г.). - М.: Институт информатизации образования РАО, 2007. - С. 108-111.

5. Филичева Т.А. Роль информационных технологий в государственном управлении и его кадровом обеспечении // Инновационные модели государственного и муниципального управления в контексте политических и административных процессов в России: сборник материалов межрегиональной научно - практической конференции / Под общ. ред. Т. С. Болховитиной. - Брянск: БрФ ОРАГС, 2007. - С. 425-428.

6. Филичева Т.А. Современные потребности информационного обеспечения мониторинга качества подготовки управленческих кадров // Сб. трудов Межрегиональной научноЦпракт. конференции Инфокоммуникационные технологии в региональном развитии. - Смоленск, 2008. С. 263-265.

7. Филичева Т.А. Информационные технологии в системе качества при анализе и принятии решений //Методы и технологии информатизации управленческой деятельности: Сб. научн. статей / Под общ. ред. А. Н. Данчула. - М.: Изд-во РАГС, 2008. - С. 134-138.

8. Филичева Т.А. К вопросу об информационно-аналитических методах мониторинга системы качества подготовки управленческих кадров // Инновационные модели государственного и муниципального управления: взгляд в будущее. Сборник материалов межрегиональной научно - практической конференции / Под общ. ред. Т. С. Болховитиной. - Брянск: БрФ ОРАГС, 2008. - С. 535-541.

9. Филичева Т.А. Информационные технологии как инструмент эффективного анализа системы качества подготовки управленческих кадров // Гарантии качества профессионального образования: Сборник тезисов и статей / Под общ. ред. М. Ф. Королева. - М.: РАГС, 2008. - С. 155-160.

10. Филичева Т.А. Методы и технологии информационного обеспечения мониторинга качества непрерывной подготовки государственных служащих // Единое образовательное пространство славянских государств в XXI веке: Проблемы и перспективы: Материалы III международной науч.-практ.

конф. / Под ред. В.И.Аверченкова. Ч Брянск: БГТУ; СГА, 2009. ЦТ.1. С. 209211.

11. Филичева Т.А. К вопросу о потребностях информационного обеспечения мониторинга качества подготовки управленческих кадров // Менеджмент качества в образовании. Тезисы докладов 2-й Всероссийской научно-практической конференции / Под ред. С.А.Степанова. - СанктПетербург: СПбГЭТУ ЛЭТИ, 2009. - С. 209-212.

12. Филичева Т.А. Некоторые подходы к построению информационно-функциональных моделей мониторинга качества образования // Труды Всероссийской научно-практической конференции с международным участием Информационные технологии в обеспечении нового качества высшего образования. - М.: Исседовательский центр проблем качества подготовки специалистов НИТУ МИСиС, 2010. - С. 280-285.

13. Филичева Т.А. Из опыта применения экспертно-аналитических методов при анализе результатов мониторинга удовлетворенности потребителей качеством образования // Гарантии качества профессионального образования: Сборник методических материалов, тезисов и статей участников форума: Том1 / Под общ. ред. М.Ф.Королева. - М.: РАГС, 2010. - С. 374-381.

14. Филичева Т.А. Анализ применения теории систем и общей теории управления в системе качества профессиональной подготовки государственных служащих // Гарантии качества профессионального образования / Сборник методических материалов, тезисов и статей участников форума: Том 1 / Под общ. ред. М.Ф.Королева. - М.: РАГС, 2010. - С. 337-343.

15. Филичева Т.А. Нечетко-множественный подход к мониторингу качества образования государственных служащих // Исследование и информатизация управления социально-экономическими, политическими и административными процессами: Сб. научн. статей / Под общ. ред. А. Н. Данчула.

Ц М.: РАГС, 2010. - С. 135-143.

16. Филичева Т.А. Применение метода анализа рисков на основе когнитивного моделирования как способ оценки рисков снижения качества профессиональной подготовки государственных служащих // Традиции и инновации в государственном и муниципальном управлении: Сборник материалов международной научно-практической конференции: Ч.1. - Брянск, 2010. - С. 288-296.

17. Филичева Т.А. Образовательная деятельность как сложная система с программно-целевым управлением // нновацйний розвиток суспльства за умов крос-культурних взамодй: Збрник матералв IV Мжнародно науково-практично конференц для студентв, аспрантв, науковцв: Т. . - Суми: видавничо-виробниче пдпримство Мря ТОВ, 2011. - С. 158-161.

Автореферат диссертации на соискание ученой степени кандидата технических наук Филичевой Татьяны Алексеевны Тема диссертационного исследования Информационно-аналитическое обеспечение мониторинга качества профессиональной подготовки государственных служащих Научный руководитель Доктор педагогических наук, кандидат физико-математических наук, доцент Митин Александр Иванович Изготовление оригинал-макета Филичева Татьяна Алексеевна    Авторефераты по всем темам  >>  Авторефераты по техническим специальностям