Экспертные оценки и методы экспертного оценивания. Метод «Дельфи» и организация его проведения.

Экспертное оценивание — процедура получения оценки проблемы на основе группового мнения специалистов (экспертов). Совместное мнение обладает большей точностью, чем индивидуальное мнение каждого из специалистов. Данный метод можно рекомендовать для получения качественных оценок, ранжирования – например для сравнения нескольких проектов по их степени соответствия заданному критерию.

МЕТОДЫ ЭКСПЕР. ОЦЕНОК:

 Метод Дельфи

 Метод анализа иерархий

 Мозговой штурм

 Экспертный опрос

Сущность экспертных методов, как при решении задач исследования СУ, так и при использовании их в практике принятия решений в других областях науки, техники, управления, заключается в усреднении различными способами мнений (суждений) специалистов-экспертов по рассматриваемым вопросам.

Наиболее распространенными экспертными методами при классификации по признаку оценки предпочтений в настоящее время при принятии решений по управлению являются следующие:

• метод рангов;
• метод непосредственного оценивания;
• метод сопоставлений.

При организации экспертного оценивания, отбирают только компитентных экспертов. Компетентность — это степень квалификации эксперта в определенной области знаний.

Сущность метода Дельфи состоит в последовательном анкетировании экспертов различных областей науки, техники и формировании массива информации, отражающего индивидуальные оценки экспертов, основанные на строго логическом опыте.

Сбор и обработка индивидуальных мнений экспертов о прогнозах развития объекта исследования производится исходя из следующих принципов:

¨ вопросы в анкетах ставятся таким образом, чтобы можно было дать количественную характеристику ответам экспертов;

¨ опрос экспертов проводится в несколько этапов, на каждом последующем этапе вопросы и ответы все более уточняются;

¨ после каждого этапа всех опрашиваемых экспертов знакомят с результатами опроса;

¨ эксперты обосновывают оценки и мнения, отклоняющиеся от мнения большинства;

¨ статистическая обработка ответов производится последовательно, от этапа к этапу, с целью получения обобщающих характеристик.

Покажем, как используется метод при подготовке научно-технических прогнозов. Опрос экспертов производится в четыре этапа с промежутками в два месяца.

Этапы проведения метода «Дельфи»:

1 этап: составление перечня событий для прогноза в определенной области науки и техники.

2 этап. Экспертам направляют сводный перечень событий и просят оценить даты, когда могут произойти эти события. Эксперты приводят соображения, по которым они считают свои оценки правильными, т.е. указать причины того, почему, по их мнению, то или иное событие не должно произойти раньше или позже прогнозируемой ими даты.

3 этап.Третья анкета состоит из перечня событий, групповой медианы дат наступления события, верхнего и нижнего квартилей для каждого события, а также сводных данных (аргументов) о причинах более ранних или поздних оценок. Участники экспертизы вновь рассматривают аргументы и формулируют новые оценки по каждому событию.

4 этап. Участникам экспертизы вновь передают перечень событий, статистическое описание оценок группы и аргументы обеих сторон. Эксперты должны принять во внимание аргументы и их критику и составить новый прогноз.

Эксперимент как метод исследования систем управления. Содержание, структура, виды и особенности применения.

Экспериме́нт — метод исследования некоторого явления в управляемых условиях. Отличается от наблюдения активным взаимодействием с изучаемым объектом. Обычно эксперимент проводится в рамках научного исследования и служит для проверки гипотезы, установления причинных связей между феноменами.

Виды экспериментов:

Физический эксперимент — способ познания природы, заключающийся в изучении природных явлений в специально созданных условиях. В отличие от теоретической физики, которая исследует математические модели природы, физический эксперимент призван исследовать саму природу.

Именно несогласие с результатом физического эксперимента является критерием ошибочности физической теории, или более точно, неприменимости теории к окружающему нас миру. Обратное утверждение не верно: согласие с экспериментом не может быть доказательством правильности (применимости) теории. То есть главным критерием жизнеспособности физической теории является проверка экспериментом.

Компьютерный эксперимент

Компьютерный (численный) эксперимент — это эксперимент над математической моделью объекта исследования на ЭВМ, который состоит в том что, по одним параметрам модели вычисляются другие ее параметры и на этой основе делаются выводы о свойствах объекта, описываемого математической моделью. Данный вид эксперимента можно лишь условно отнести к эксперименту, потому как он не отражает природные явления, а лишь является численной реализацией созданной человеком математической модели. Действительно, при некорректности в мат. модели — ее численное решение может быть строго расходящимся с физическим экспериментом.

Психологический эксперимент

Психологический эксперимент — проводимый в специальных условиях опыт для получения новых научных знаний посредством целенаправленного вмешательства исследователя в жизнедеятельность испытуемого.

Мысленный эксперимент

Мысленный эксперимент в философии, физике и некоторых других областях знания — вид познавательной деятельности, в которой структура реального эксперимента воспроизводится в воображении. Как правило, мысленный эксперимент проводится в рамках некоторой модели (теории) для проверки её непротиворечивости. При проведении мысленного эксперимента могут обнаружиться противоречия внутренних постулатов модели либо их несовместимость с внешними (по отношению к данной модели) принципами, которые считаются безусловно истинными (например, с законом сохранения энергии, принципом причинности и т. д.).

Критический эксперимент

Критический эксперимент — эксперимент, исход которого однозначно определяет, является ли конкретная теория или гипотеза верной. Этот эксперимент должен дать предсказанный результат, который не может быть выведен из других, общепринятых гипотез и теорий.

53. Моделирование: основные понятия и определения. Недостатки натурных экспериментов. Классификация моделей.

Моделирование – это замещение исследуемого объекта (оригинала) его условным образом или другим объектом (моделью) и изучение свойств оригинала путем исследования свойств модели. Действительная польза от моделирования может быть получена только при соблюдении следующих условий:

· модель должна обеспечивать корректное (или, как говорят, адекватное) отображение свойств оригинала, существенных с точки зрения исследуемой стороны его поведения;

· модель должна позволять устранить проблемы, присущие проведению исследований при реальном объекте.

В организации операций с целью установления свойств и характеристик системы заключается проведение натурного эксперимента с объектом.

Натуральный эксперимент:

• Реальный (физический) объект(система)
• Средства измерений (меры, измерительные преобразователи, приборы)
• Поверка средств измерений
• Измерения величин

В зависимости от целей исследования выделяют следующие модели:

• функциональные. Предназначены для изучения особенностей работы (функционирования) системы, её назначения во взаимосвязи с внутренними и внешними элементами;
• функционально-физические. Предназначены для изучения физических (реальных) явлений, используемых для реализации заложенных в систему функций;
• модели процессов и явлений, такие как кинематические, прочностные, динамические и другие. Предназначены для исследования тех или иных свойств и характеристик системы, обеспечивающих её эффективное функционирование.