I. Исследования в управлении 8 Тема

Вид материалаДокументы

Содержание


12.5 Основные проблемы совершенствования и развития экспертных технологий
Формирование экспертной комиссии
Организация и проведение экспертиз
Получение экспертной информации.
Определение результирующих экспертных оценок.
Многокритериальные оценки
Анализ результатов экспертизы.
Компьютерные системы поддержки.
Краткие выводы
Контрольные вопросы
Подобный материал:
1   ...   20   21   22   23   24   25   26   27   ...   32

12.5 Основные проблемы совершенствования и развития экспертных технологий



Имеющийся опыт свидетельствует о возможностях существенно повысить представительность, обоснованность и, главное, достоверность суждений экспертов. В качестве «побочного эффекта» можно составить мнение о профессиональности каждого эксперта. Укажем основные проблемы совершенствования и развития экспертных технологий.

1. Формирование экспертной комиссии. Одной из центральных проблем при формировании экспертной комиссии является определение качества эксперта. При формировании экспертной комиссии необходимо предусмотреть возможность эффективного взаимодействия экспертов, входящих в её состав, с целью получения полной и адекватной оценки объекта экспертизы.

2. Организация и проведение экспертиз. Ряд работ посвящен организации и проведению экспертиз [1–5]. Это, прежде всего, работы по систематизации многочисленных разновидностей метода Делфи, касающиеся, в основном, совершенствования процедур обмена информацией между экспертами в процессе экспертизы. Дальнейшее развитие получили метод мозговой атаки, сценариев, ситуационного анализа. Для экспертизы сложных объектов, в частности для экспертизы и прогнозирования научно-технических объектов, развивались и совершенствовались такие методы, как ПАТТЕРН, методы Глушкова и Поспелова, система АСАС, различные разновидности использования метода деревьев целей и критериев и др. Разрабатывались механизмы выявления экспертных знаний и оценок. В настоящее время все большее значение приобретает проведение комплексных экспертиз при оценке сложных объектов.

3. Получение экспертной информации. Широкое распространение получили методы экспертных ранжирований и гиперупорядочений, классификаций, парные и множественные сравнения, методы Терстоуна и Черчмена-Акофа, метод векторов предпочтений и др. На данный момент разработана классификация экспертных оценок, насчитывающая свыше 70 видов. Естественно, что различные виды экспертной информации требуют как различных методов ее получения, так и различных методов обработки. К числу основных проблем относятся:

- проблема представимости экспертной информации,

- проблема единственности измерений,

- проблема адекватности.

Последняя особенно важна для определения корректных преобразований экспертной информации при расчетах результирующих экспертных оценок  результата работы экспертных комиссий. Проблема единственности измерений экспертной информации тесно связана с введением основных шкал теории измерений: шкал интервалов, разностей, отношений, порядковых шкал и т.д.

4. Определение результирующих экспертных оценок. Одной из центральных проблем обработки экспертной информации является определение результирующих экспертных оценок – результата коллективной работы экспертов. Для этой цели был введен аналог расстояния – мера близости между ранжированиями, классификациями и т.д. Это позволило разработать корректные способы определения результирующих экспертных оценок, такие, как медиана Кемени, метод строчных сумм и др. Получены результаты, определяющие целесообразность использования тех или иных видов результирующих в зависимости от характера экспертной информации. Установлена связь между методами определения результирующих экспертных оценок и принципами коллективного выбора.

5. Многокритериальные оценки. Многолетний опыт использования методов и процедур экспертного оценивания показал, что во многих случаях, хотя и не во всех, оценки объектов экспертизы экспертами оказывались более точными при использовании методов многокритериального оценивания. Развитие получили методы определения факторов, характеризующих объекты экспертизы. В частности, многомерное шкалирование, факторный анализ, статистические методы определения существенных факторов. Развивались методы оценки их сравнительной весомости, принципы принятия решений на основе оценок объектов по многим критериям, далеко не всегда сводящиеся к сверткам. Проведена систематизация и классификация принципов выбора и анализ результатов их использования при принятии решений. Применяются композиционные принципы выбора. Решаются задачи многокритериальной оптимизации, существенно использующие экспертную информацию.

6. Анализ результатов экспертизы. Полученная экспертная информация обязательно должна быть проанализирована. Получили развитие методы оценки согласованности экспертных суждений, высказанных в виде ранжирований, парных сравнений и т.д. При этом установлена связь между коэффициентами ранговой корреляции, характеризующими согласованность экспертных суждений, и упомянутыми ранее мерами близости. На основании оценки степени согласованности экспертных суждений определяются коалиции экспертов – «единомышленников». Развиваются методы оценки точности экспертных суждений. При этом большее развитие получили методы оценки сравнительной точности экспертных суждений при использовании различных критериев точности. Скорее поставлены, чем решены проблемы оценки степени конъюнктурности, конформизма и других факторов, характеризующих адекватность экспертной информации.

7. Компьютерные системы поддержки. Характерным для современного этапа использования методов экспертного оценивания является широкое применение компьютерных систем поддержки. К числу таких систем могут быть отнесены экспертные системы, позволяющие использовать знания и опыт экспертов – специалистов высокой квалификации специалистами менее высокой квалификации для решения задач, возникающих в их практической деятельности. Системы поддержки принятия решений, находящие применение в различных областях, в качестве одной из основных составляющих используют результаты экспертного оценивания. Однако наиболее важным классом компьютерных систем, позволяющих обеспечить сопровождение и поддержку непосредственно процедур получения, обработки и анализа экспертной информации, являются, с нашей точки зрения, автоматизированные системы экспертного оценивания (АСЭО). АСЭО обеспечивают технологическое сопровождение, необходимое методическое и информационное обеспечение процесса экспертного оценивания при организации и проведении экспертиз с учетом специфического характера проводимой экспертизы.


Краткие выводы

  1. Задачи системного анализа, допускающие наличие альтернативных решений, называются задачами выбора и оценивания. Метод экспертных оценок – один из популярных методов их решений.
  2. Информационное обеспечение экспертных исследований: анкетирование, метод Дельфи, «мозговой штурм» (метод «мозговой атаки»).
  3. Методами творческого решения проблем являются: методы «мозговой атаки» и «мозговой атаки наоборот», метод Гордона, метод вопросника, метод вмененных связей, эвристический метод, научный метод, метод стоимостного анализа, метод матричных структур, параметрический анализ и др.



Контрольные вопросы


1. Каковы методология и организация экспертных оценок. Состав экспертов. Какие проблемы могут подвергаться экспертному обследованию?

2. Как обеспечивается объективность и достоверность экспертных оценок? В чем заключается обработка результатов экспертного обследования?

3. Укажите основные проблемы совершенствования и развития экспертных технологий.


Рефлексия (от позднелат. reflexio – обращение назад, отражение) – форма теоретической деятельности человека, направленная на осмысление своих собственных действий и их законов; деятельность самопознания, раскрывающая специфику духовного мира человека.

Из словаря