Процедура использования метода экспертных оценок
Суть метода экспертных оценок при проведении системного анализа заключается в рациональной организации анализа проблемной ситуации, определении множества мероприятий, обеспечивающих решение проблемы, оценке степени их важности, оценке меры согласованности суждений экспертов. Процесс структуризации проблемной ситуации по каждому из направлений, обеспечивающих решение выделенной проблемы, можно представить в виде следующей последовательности этапов и процедур:
Рисунок 1 - Основные этапы экспертного оценивания.
Метод Липки
Метод Липки предполагает выполнение нескольких последовательных этапов:
1. Подготовительный этап подразумевает поиск и изучение необходимой литературы, проведение предварительных рабочих совещаний с постановками вопросов.
2. Этап интерактивного моделирования заключается в том, что разработчики собираются вместе в изолированном месте на 1-2 дня и в режиме реального времени, используя компьютерную технику, создают 1-2 модели системы, при этом оттачиваются формулировки, рассматриваются доказательства технической и экономической эффективности, ищется согласие по отнесению тех или иных технологий к обязательным или дополнительным разделам. При этом используются методы «мозговой атаки», коллективной генерации идей, построения сценариев и т.д.
3. Этап консолидации. На основании разработанной модели, с учетом высказанных мнений, обоснований, эксперты заканчивают разработку. Протокол насыщается недостающими разделами, после чего он, в установленном порядке, отправляется на утверждение. На данном этапе рационально использование элементов метода «Делфы».
1.6 Принятие решений на основании правила «квадрата»
Принятие решений о выборе технологий на основании правила «квадрата» подразумевает, что лицо, принимающее решение, испытывает воздействие нескольких различно направленных, иногда взаимоисключающих факторов, условно находясь внутри геометрической фигуры. Эта фигура состоит из четырех граней, образующих в проекции квадрат принятия решения: информационная грань (грань релевантной информации), грань анализа и моделирования, грань неспецифических воздействий, грань субъектно-объектных взаимоотношений.
Правило подразумевает несколько последовательных этапов, позволяющих принимать управленческие решения:
Первый этап включает поиск релевантной информации (relevant — «относящийся к делу»), основа принятия решения — информационная грань.
Второй этап представляет собой научный анализ информации, построение моделей — грань анализа и моделирования.
Третий этап занимает анализ среды принятия решений — грань неспецифических воздействий (социальное пространство). Принятие решения может происходить в условиях определенности (лица, принимающие решения, в точности знают результат каждого из альтернативных вариантов выбора), в условиях риска (решения, результаты которых не являются определенными, но вероятность каждого результата известна) и неопределенности (невозможно оценить вероятность потенциальных результатов).
Четвертый этап заключается в установлении обратной связи — грань субъектно-объектных взаимоотношений. Прогнозирование, измерение и оценка последствий решения или сопоставление фактических результатов с теми, которые лица, принимающие решение, надеялись получить. Устанавливаются возможные ограничения для принятия решений.
Задание
После подробного повторения лекционного материала и уяснения проблемы, нужно сформулировать и классифицировать проблемную ситуацию, сформулировать цели, критерии и ограничения задачи.
Методом «мозгового штурма» формулируется перечень мероприятий, выполнение которых, по мнению экспертов, приводит к решению проблемы, определяется система критериев по оценке мероприятий.
Каждый эксперт методом парных сравнений производит оценку критериев и с использованием бальной системы оценок ранжирует выделенные группой мероприятия. В случае, если значение коэффициента конкордации менее 0,7 , экспертам рекомендуется вернуться к обсуждению результатов индивидуального ранжирования. При этом внимание должно уделяться экспертам с минимальным значением коэффициентов компетентности.
При достижении значения коэффициента конкордации более 0,7, эксперты производят выдачу результатов экспертизы, производят их анализ и приступают к написанию отчета.
Все расчеты должны производиться при помощи программного средства.
Главные эксперты предоставляют отчет. Отчет должен содержать следующие разделы:
1) Краткое описание и классификация проблемной ситуации.
2) Формулирование целевых установок.
3) Результаты индивидуального ранжирования.
4) Результаты группового ранжирования.
5) Выводы и рекомендации.
Простые эксперты выполняют практическую часть занятия самостоятельно.
Практическая часть
Цель: освоение процедур оценивания характеристик систем управления на основе экспертных методов для случаев, когда применение других методов затруднительно или невозможно.
Метод строгой ранжировки.
1 С помощью датчика случайных чисел от 1 до 12, выбираются 6 случайных чисел а1, а2, а3 и i1, i2, i3. Затем формируется последовательность из 12 чисел следующим образом: на i1 месте слева записывается а1 , на i2 месте - а2, на i3 месте - а3. На оставшиеся места записываются в порядке возрастания числа от 1 до 12 за исключением чисел i1, i2, i3. Получаем последовательность С(1)1,....С(1)12, которую рассматриваем как набор ранжированных экспертных оценок первого эксперта. Аналогичным образом формируются еще пять наборов , где 2 j 6, которые рассматриваются как экспертные оценки еще 5 экспертов.
2 Полагаем ; d1.,......,d12 - экспертные оценки критериев.
3 Для оценки степени согласованности мнений экспертов вычислить коэффициент конкордации
Если то мнения согласованы.
Если , то мнения не согласованы.
При - согласованность средняя.