После получения новых оценок определяются новые медиана и квартили. Процедура может повторяться 3—4 раза

Лекция 14

Тема: Экспертные методы системного анализа

Метод Дельфы

План лекции:

1. Основные положения

2. Метод Дельфы

3. Опыт использования метода Дельфы

1. Основные положения

Под экспертизой обычно понимают проведение группой компетентных специалистов измерения некоторых характеристик подготовки принятия решения. Особенность такой процедуры измерения, как экспертиза, в том, что в качестве измерительных приборов выступают люди.

Причины привлечения людей для оценивания объектов просты: либо сами объекты или их характеристики субъективны, либо нет соответствующих приборов, либо объекты или их характеристики еще предстоит создать (как это имеет место при составлении прогнозов развития какой-либо мы). Классическими примерами экспертизы являются дегустация или судейство спортивных соревнований.

Перечислим некоторые причины, стимулирующие интерес экспертизе.

Для нашего времени характерна возросшая сложность процесса управления. Это объясняется как усложнением объектов управления, так и осознанием необходимости учитывать необъективные тенденции развития ситуации, но и реакцию участников событий на принимаемые решения. Другая черта принимаемых решений — отсутствие зачастую необходимой информации и четкого знания тенденции развития ситуации, экспертиза позволяет снизить риск принятия ошибочного решения.

Типичными проблемами, требующими проведения экспертизы, являются, например: определение целей, стоящих перед объектом управления; прогнозирование; разработка сценариев; генерирование альтернативных вариантов решений; разработка оценочных систем; определение рейтингов; принятие коллективных решений и другие.

2. Метод Дельфы

Является одним из наиболее перспективных методов формирования групповой оценки экспертов. Этот метод получил название от древнегреческого города Дельфы, где при храме Аполлона в IX в. До н. э. по преданиям находился Дельфийский факультет, и мудрецов, славившихся предсказаниями будущего. Метод представляет собой ряд последовательно осуществляемых процедур, направленных на формирование группового мнения экспертов. Для этого метода характерны следующие три основные черты: анонимность, регулируемая обратная связь и групповой ответ.

Анонимность предполагает использование специальных вопросников и других средств индивидуального опроса, в частности диалоговых средств ЭВМ. Т. о. метод Дельфы предполагает полный отказ от коллективных обсуждений. В методе Дельфи индивидуальные опросы проводятся в форме анкетирования. Регулируемая обратная связь осуществляется путем проведения нескольких туров опроса, причем обработка результатов каждого тура осуществляется с помощью статистических методов и результаты ее сообщаются экспертам.Применение статистических методов обработки группового ответа позволяет уменьшить статистический разброс индивидуальных оценок (снижение в знаниях неопределенности вероятностного характера) и получить групповой ответ, в котором наиболее верно отражено мнение каждого эксперта.

Следовательно, анонимность опроса позволяет ослабить влияние отдельных "доминирующих" экспертов, а регулируемая обратная связь снижает влияние индивидуальных и групповых интересов, не связанных с решаемыми задачами, Т. е. обратная связь повышает объективность и надежность групповой оценки.

Таким образом, итеративная процедура проведения опросов в несколько туров с информированием экспертов о результатах предыдущих этапов опроса и предложениями в ряде случаев обосновать свое мнение приводит к уменьшению разброса в индивидуальных ответах.

При обработке результатов опроса на каждом туре полученные экспертные оценки K_j(i = 1,п) упорядочиваются, например, в порядке убывания и определяются характеристики положения и разброса. При этом в связи с тем, что обычно используют незначительное число экспертов, вместо традиционных числовых характеристик в виде математического ожидания и среднеквадратического отклонения предпочтительно в качестве характеристик положения и разброса использовать более устойчивые—медиану и квартили.

Медиана служит характеристикой группового ответа, предпочтительный интервал квартилей — показателем разброса индивидуальных оценок. За медиану Me принимается член ряда, по отношению к которому число экспертных оценок с начала и с конца ряда (справа и слева от медианного значения) будет одинаковым .Затем определяются верхний и нижний квартили, представляющие собой интервалы, в каждый из которых попадает 25 % значений ряда. Средние квартили, расположенные слева и справа от медианы, считаются предпочтительными как характеристики разброса (Qн —Qв).

На следующем туре каждому эксперту сообщаются значения полученных характеристик. Экспертов, чьи оценки оказались в крайних квартилях, просят обосновать их мнения и причины расхождения с групповым мнением. Так как ответы экспертов анонимны, они имеют возможность пересмотреть свои мнения, данные на предыдущем туре, и при желании исправить оценки. Такая процедура позволяет всем экспертам принять в расчет обстоятельства, которые они могли случайно пропустить или которыми они пренебрегли в предыдущих турах.

После получения новых оценок определяются новые медиана и квартили. Процедура может повторяться 3—4 раза.

Такая итеративная процедура позволяет после каждого тура эффективно уменьшать разброс индивидуальных экспертных оценок. При этом средняя оценка экспертов, изменивших свое мнение, сдвигаете» по направлению средней оценки группы (медианы), а эксперты, не изменившие свои оценки, дают более точное и строгое их обоснование.

Экспериментально установлено, что при использовании метода Дельфы наличие в группе менее знающих экспертов оказывает более слабое влияние их на групповую оценку, чем при простом усреднении оценок, поскольку итерация помогает этим специалистам улучшить свои оценки за счет использования информации от более компетентных специалистов.

Метод Дельфы первоначально был предложен О. Хелмером как итеративная процедура «мозговой атаки», которая должна помочь снизить влияние психологических факторов и повысить объективность результатов. Однако почти одновременно Дельфы-процедуры стали основным средством повышения объектив­ности экспертных опросов с использованием количественных оценок при оценке деревьев цели и при разработке сценариев за счет использования обратной связи, ознакомления экспертов с результатами предшествующего тура опроса и учета этих резуль­татов при оценке значимости мнений экспертов.

Подводя итог, можно заметить, что процедура Дельфы-метода заключается в следующем:

1) организуется последовательность циклов «мозговой атаки»;

2) разрабатывается программа последовательных индивиду­альных опросов с помощью вопросников, исключающая контак­ты между экспертами, но предусматривающая ознакомление их с мнениями друг друга между турами; вопросники от тура к туру могут уточняться;

В наиболее развитых методиках экспертам присваиваются весовые коэффициенты значимости их мнений, вычисляемые на основе предшествующих опросов, уточняемые от тура к туру и учитываемые при получении обобщенных результатов оценок.

Первое практическое применение метода Дельфы к решению некоторых задач министерства обороны США, осуществленное Rand Corporation во второй половине 40-х гг., показало его эффективность и целесообразность распространения на широкий класс задач, связанный с оценкой будущих событий.

Недостатки метода Дельфы:

• значительный расход времени на проведение экспертизы, связанный с большим количеством последовательных повторе­ний оценок;

• необходимость неоднократного пересмотра экспертом сво­их ответов, вызывающая у него отрицательную реакцию, что ска­зывается на результатах экспертизы.