Методика проведения коллективной экспертизы.
Методы индивидуальных экспертных оценок, даже с их математической обработкой, не позволяют избежать субъективизма. Для преодоления этого недостатка, прибегают к проведению экспертизы, как правило, в тех случаях, когда эксперт рассматривается как хранитель большого объёма информации или нужно получить долговременные значения тех или иных показателей, значимости функции и т.д.
Методы коллективных экспертных оценок основываются на принципах выявления коллективного мнения экспертов о параметрах и перспективах развития объектов. В основе применения этих методов лежит гипотеза о наличии у экспертов умения с достаточной степенью достоверности оценить важность и значение исследуемой экспертизы.
Основные этапы проведения коллективной экспертизы:
Первый этап – формирование экспертной группы. К участникам экспертизы предъявляются следующие требования: высокий уровень общей эрудиции; глубокие знания в оцениваемой области; способность к адекватному к адекватному отображению исследуемого объекта и т.д.
Для решения задачи формирования экспертной группы необходимо выявить и стабилизировать работоспособную сеть экспертов. Создание работоспособной сети экспертов позволяет оперативно формировать группу экспертов, отвечающих условиям проводимой коллективной экспертизы.
Второй этап– определение компетентности экспертов по предлагаемым проблемам. Знание компетентности эксперта позволяет оценить его способность к экспертизе и определить средневзвешенное мнение экспертов при обработке результатов экспертизы.
Определение компетентности i-го эксперта осуществляется путём расчёта показателя компетентности: Khi= Kai+ Koi/Kamax+ Komax, где Kai- коэффициент аргументации i-го эксперта; Koi– коэффициент осведомленности i-го эксперта по обсуждаемым проблемам; Kamax– максимальное значение коэффициента осведомлённости в группе.
Третий этап – определение репрезентативности экспертной группы: P = 1/n ∑ Kki, условие репрезентативности 0,67≤ Р≤1,0
Четвёртый этап – получение индивидуальных суждений экспертов по j-ой проблеме и, в случае необходимости, их математическая обработка.
Пятый этап – определение обобщенного мнения группы экспертов по данной проблеме.
Шестой этап – оценка степени согласованности мнений экспертов с помощью коэффициента вариации. Использование показателя согласованности экспертов позволяет выявить совокупность экспертов, внутри которой согласованность достаточно высока. На основе таких данных можно косвенным образов уточнить первоначальное суждение о компетентности экспертов. Однако такой математический анализ необходимо дополнять содержательным качественным анализом. В противном случае, идя по такому пути, можно просто подогнать полученные данные под ожидаемый результат.
В настоящее время существует большее число модификаций метода коллективных экспертных оценок. Наиболее популярными являются методы: круглого стола, Дельфи, программного прогнозирования, эвристического прогнозирования и другие.
По методу круглого стола специальная комиссия, входящая в состав круглого стола, обсуждает соответствующие проблемы с целью согласования мнений и выработки единого мнения. Недосток – эксперты в своих суждения изначально ориентированы и руководствуются в основном логикой компромисса, что увеличивает риск получения искаженных результатов прогноза.
Метод «Дельфи». Суть метода заключается в том, что разрабатывается программа последовательных индивидуальных опросов с помощью анкет-вопросников, исключающих контакты между экспертами, но предусматривающих ознакомление их с мнениями друг друга между турами. С помощью метода Дельфи выявляется преобладающее суждение специалистов по какому-либо вопросу в обстановке, исключающей их прямые дебаты между собой, но позволяющей им, вместе с тем, периодически взвешивать свои суждения с учётом ответов и доводов коллег.
Методом эвристического прогнозирования называют метод получения и специализированной обработки прогнозных оценок объекта путём систематизированного опроса высококвалифицированных специалистов в узкой области науки, техники или производства. Назначение метода эвристического прогнозирования – выявление объективизорованного представления о перспективах развития узкой области науки, техники, рынка на основе систематизированной обработки прогнозных оценок репрезентативной группы экспертов.