Основные типы шкал измерения.

Структура системного анализа.

При этом в процессе функционирования реальной системы выявляется проблема практики как несоответствие существующего положения дел требуемому. Для решения проблемы проводится системное исследование (декомпозиция, анализ и синтез) системы, снимающее проблему. В ходе синтеза осуществляется оценка анализируемой и синтезируемой систем. Реализация синтезированной системы в виде предлагаемой физической системы позволяет провести оценку степени снятия проблемы практики и принять решение на функционирование модернизированной (новой) реальной системы.

При таком представлении становится очевидным еще один аспект определения системы: система есть средство решения проблем.

3. Задачи системного анализа.

Декомпозиция должна прекращаться, если необходимо изменить уровень абстракции — представить элемент как подсистему. Если при декомпозиции выясняется, что модель начинает описывать внутренний алгоритм функционирования элемента вместо закона его функционирования в виде «черного ящика», то в этом случае произошло изменение уровня абстракции. Это означает выход за пределы цели исследования системы и, следовательно, вызывает прекращение декомпозиции.

4. Классификация систем.
Классификацией называется разбиение на классы по наиболее существенным признакам. Под классом понимается совокупность объектов, обладающие некоторыми признаками общности. Признак (или совокупность признаков) является основанием (критерием) классификации.

Система может быть охарактеризована одним или несколькими признаками и соответственно ей может быть найдено место в различных классификациях, каждая из которых может быть полезной при выборе методологии исследования. Обычно цель классификации ограничить выбор подходов к отображению систем, выработать язык описания, подходящий для соответствующего класса.

Основные типы шкал измерения.

Выделяют четыре этапа оценивания сложных систем.

Этап 1. Определение цели оценивания. В системном анализе выделяют два типа целей. Качественной называют цель, достижение которой выражается в номинальной шкале или в шкале порядка. Количественной называют цель, достижение которой выражается в количественных шкалах. Определение цели должно осуществляться относительно системы, в которой рассматриваемая система является элементом (подсистемой).

Этап 2. Измерение свойств систем, признанных существенными для целей оценивания. Для этого выбираются соответствующие шкалы измерений свойств и всем исследуемым свойствам систем присваивается определенное значение на этих шкалах.

Этап 3. Обоснование предпочтений критериев качества и критериев эффективности функционирования систем на основе измеренных на выбранных шкалах свойств.

Этап 4. Собственно оценивание. Все исследуемые системы, рассматриваемые как альтернативы, сравниваются по сформулированным критериям и в зависимости от целей оценивания ранжируются, выбираются, оптимизируются и т.д.

Шкалы номинального типа

В номинативной шкале отсутствуют все главные атрибуты измерительных шкал, а именно упорядоченность, интервальность, нулевая точка. Для обозначения такой шкалы также используются термины «шкала наименований» и «номинальная шкала».

Номинативная шкала используется для классификации или идентификации объектов (группировки по классам, каждому из которых приписывается число). Объекты группируются по классам таким образом, чтобы внутри класса они были идентичны по измеряемому свойству. Это самая простая шкала из тех, что могут рассматриваться как измерительные, хотя фактически эта шкала не ассоциируется с измерением и не связана с понятием «величина». Она используется только с целью отличить один объект от другого

Шкалы порядка

В порядковой шкале присутствует упорядоченность, но отсутствуют атрибуты интервальности и нулевой точки. Для обозначения такой шкалы также используются термины «ранговая шкала» и «шкала рангов».

Результатом измерений в такой шкале является упорядочение объектов. Шкала ранжирует объекты, приписывает им числа в зависимости от выраженности измеряемого свойства по некоторому признаку (в порядке убывания или возрастания). В отличие от номинативной шкалы, можно не просто определить, что один объект отличен от другого, но и что по определенному признаку один объект больше или меньше другого. То есть, шкала показывает, больше или меньше выражено свойство (измеряемая величина), но не насколько больше, или насколько меньше оно выражено, а тем более – во сколько раз больше или меньше. Порядковая шкала является наиболее распространенной в социальных и гуманитарных исследованиях

Шкалы интервалов

В интервальной шкале присутствуют упорядоченность и интервальность, но нет нулевой точки. Для обозначения такой шкалы также используется термин «шкала интервалов». В этой шкале исследуемому объекту присваивается число единиц измерения, пропорциональное выраженности измеряемого свойства. Соответствующие интервалы разных участков шкалы имеют одно и то же значение. Поэтому измерения в интервальной шкале допускают не только классификацию и ранжирование, но и точное определение различий между категориями.

Шкалы отношений

В относительной шкал присутствуют все атрибуты измерительных шкал: упорядоченность, интервальность, нулевая точка. Для обозначения такой шкалы также используются термины «шкала отношений» и «абсолютная шкала». Последний термин подчеркивает абсолютный характер нулевой точки.

Относительная шкала позволяет оценивать, во сколько раз свойство одного объекта больше (меньше) аналогичного свойства другого объекта, принимаемого за эталон, единицу. Эта шкала характеризуется всеми атрибутами интервальной шкалы и имеет фиксированную нулевую точку (0), которая не является условной, она соответствует полному отсутствию измеряемого свойства.

Шкалы разностей

Шкалы разностей применяются в тех случаях, когда необходимо измерить, насколько один объект превосходит по определенному свойству другой объект. В шкалах разностей неизменными остаются разности численных оценок свойств.

6. Основные виды показателей усреднения свойств систем.

??????
7. Виды критериев качества.

8. Критерии эффективности систем.

Эффективностью комплексное свойство процесса функционирования системы, как степень приспособленности к достижению цели. В общем случае оценка функциональных свойств систем проводится в двух аспектах: - результат функционирования (операции); - алгоритм, обеспечивающий получение результата. Результат функционирования и алгоритм, обеспечивающий его получение, оцениваются по показателям результативности, ресурсоемкости и оперативности. Результативность обуславливает еѐ получаемым целевым эффектом, ради которого функционирует система.

Математическое выражение критерия эффективности называют целевой функцией, поскольку еѐ экстримизация является отражением цели функциониро- вания системы. Отсюда следует, что формирование критерия эффективности решений тре- бует: - определить цель решения проблемы; - найти множество управляемых и неуправляемых характеристик (парамет- ров) системы; - определить показатели исхода операции.

В зависимости от типа систем и внешних воздействий операции могут быть: - детерминированными; - вероятностными; - неопределенными.

В связи с этим выделяют 3 группы критериев эффективности:

1. В условиях определенности, если критерии отражают один строго определенный исход детерминированной операции;

2. В условиях риска, если критерии являются дискретными или непре- рывными случайными величинами с известными законами распределения в веро- ятностной операции;

3. В условиях неопределенности, если критерии являются случайными величинами, законы распределения которых неизвестны.

Критерии пригодности для оценки детерминированных операций

K :("i) (y Î / ® y , iÎ< Z,R,O >) доп i j i приг d d определяет правило, по которому операция считается эффективной, если все частные показатели исхода операции принадлежат области адекватности.

Критерий оптимальности для оценки детерминированной операции K : ($i) (y Î / ® , iÎ< Z, R, O >) опт i j i опт d d d определяет правило, по которому операция считается эффективной, если все частные показатели принадлежат области адекватности, а радиус области адек- ватности оптимален. Критерий пригодности для оценки эффективности вероятностной опера- ции : ( ) ( ) эф треб дц эф дц приг K P Y ³ P Y определяет правило, по которому операция считается эффективной, если вероятность достижения цели по показателям эффективности не меньше требуе- мой.

Критерий оптимальности для оценки вероятностной операции : определяет правило, по которому операция считается эффективной, если вероятность достижения цели по показателям эффективности равна вероятности достижения цели с оптимальными значениями этих показателей.

Методика оценки эффективности систем в неопределенных операциях со- ставляет один из разделов теории принятия решений. Общие требования к показателям эффективности: - соответствие цели; - полнота; - измеряемость; - явность физического смысла; - неизбыточность; - чувствительность.
9. Этапы процедуры экспертного оценивания.

Этапы процесса экспертного оценивания.

К ним относят:

формирование цели и задач экспертного оценивания;

формирование группы управления и оформление решения на проведение экспертного оценивания;

выбор метода получения экспертной информации и способов ее обработки;

подбор экспертной группы и формирование, при необходимости, анкет опроса;

опрос экспертов (экспертиза);

обработка и анализ результатов экспертизы;

интерпретация полученных результатов;

составление отчета.

Задачу на проведение экспертного оценивания ставит заказчик). Этап формирования цели и задач экспертного оценивания является основным. От него зависит надежность получаемого результата и его прагматическая ценность. Здесь должны быть учтены следующие факторы: надежность и полнота имеющейся исходной информации, требуемая форма представления результата (качественная или количественная), возможные области использования полученной информации, сроки ее представления, имеющиеся в распоряжении руководства ресур­сы, возможность привлечения специалистов других областей знаний и многое другое. Задача оформляется в виде руководящего документа (например, решения на проведение экспертного оценивания).

Для подготовки решения и руководства всей дальнейшей ра­ботой назначается руководитель экспертизы. Он определяет сос­тав группы управления.

Подбор экспертной группы обычно производится в несколько этапов. Вначале устанавливают отрасли знаний так или иначе связанные с рассматриваемой проблемой. Затем намечается список "потенциальных" экспертов, которые по своим профессиональным качествам являются специалистами в этих областях знаний. Такой предварительный отбор может быть легко произведен на основе доступной информации о профессиональной подготовке кандидата: должность, ученое звание и степень, стаж практической деятельности, количество публикаций, участие в других экспертизах.

При этом желательно, чтобы кандидат в экспертную группу имел широкий кругозор и эрудицию. Сама же группа не должна, по возможности, состоять из представителей одной отрасли или специальности, чтобы исключить влияние ведомственных интересов и не сделать получаемые результаты тенденциозными.

10. Принципы групповой экспертизы
Методы проведения групповых экспертиз делятся на:
очные и заочные;
индивидуальные и коллективные;
с обратной связью и без обратной связи.

При очном методе проведения экспертизы эксперт работает в присутствии организатора исследования. Эта необходимость может возникнуть, если задача поставлена недостаточно четко и нуждается в уточнении, а также если задача очень сложна. Эксперт может обратиться к организатору за разъяснениями.

При коллективном методе проведения экспертизы поставленная проблема решается сообща, "за круглым столом".
При индивидуальном — каждый эксперт оценивает проблему, исходя из личного опыта и убеждений. Экспертиза с обратной связью (метод Дельфы) предусматривает проведение нескольких туров опроса и анонимное анкетирование. После каждого тура экспертные оценки обрабатываются, и результаты обработки сообщаются экспертам. Метод без обратной связи предусматривает один тур опроса при получении удовлетворительных результатов.

Методы отбора экспертов.

Методы отбора экспертов: самооценка, групповая оценка.

Самооценка происходит на основе оценки самим экспертом своих способностей в области теории вопроса, в области практической деятельности и возможности давать прогнозные оценки по данному вопросу. Затем по каждому эксперту рассчитывается коэффициент самооценки как среднеарифметическое значение оценки знаний, опыта и способностей к прогнозу. В число экспертов включают тех, у кого этот коэффициент выше 0,5. В качестве критериев задается вопрос: «Как Вы оцениваете уровень Вашей информированности в теории и практике по проблемам …?»

При отборе экспертов методом самооценки возникает проблема ее завышения. Однако, как показывает опыт, эксперты с высокой самооценкой ошибаются в своих суждениях реже других.

Коллективная (групповая) оценка применяется при формировании группы экспертов в том случае, когда они знают друг друга как специалисты. Все проводят оценку друг друга по списку. Оценка проводится аналогично самооценке – по теоретическим знаниям, в области практики и по прогнозированию процессов. Из списка отбираются специалисты, получившие наиболее высокие места или баллы. Например, из 10 оставляют в качестве экспертов пять, получивших наибольшее число первых мест по всем вопросам.

При отборе экспертов может быть использован подход «по известности». В этом случае в качестве экспертов приглашаются наиболее известные и признанные национальным или международным сообществом.

Метод мозгового штурма.

Мозговой штурм (метод мозгового штурма) – форма творческой, коллективной работы для поиска решений поставленных проблем. Этот метод широко применяется в различных сферах деятельности. Под названием «мозговой штурм» объединяют варианты коллективной работы в ходе которой создаются новые идеи или просто сопоставляются известные факты.

Мозговой штурм включает в себя следующие действия:

1. Определяется проблема, требующая решения. Проблема должна быть сформулирована ясно, точно и не допускать двусмысленного толкования.

2. Назначается (определяется) куратор сессии мозгового штурма. Для этой роли выбирается человек обладающий навыками организации коллективной работы, имеющий четкое понимание поставленной проблемы и способный быть лидером группы, выполняющей мозговой штурм. При необходимости, может назначаться отдельное лицо для ведения записей по ходу сессии (либо эти записи может делать куратор).

3. Формируется группа численностью от 5 до 8 человек, заинтересованных в решении проблемы. Для группы необходимо подбирать специалистов различного профиля. Нежелательно включать в состав команды людей, имеющих взаимное негативное отношение друг к другу, т.к. в ходе работы они будут мешать команде создавать новые идеи.

4. Участники группы располагаются так, чтобы все они смотрели в одном направлении – на флипчарт или доску. На доске пишется проблема, требующая решения. Таким образом, участники команды будут смотреть на проблему, а не друг на друга. Это позволит создать более комфортную психологическую атмосферу для работы и эффективнее провести мозговой штурм.

5. Во время сессии куратор группы должен следить, чтобы участники группы придерживались основных четырех правил мозгового штурма.

Метод Дельфы.

МЕТОД ДЕЛЬФИ - метод быстрого поиска решений, основанный на их генерации в процессе "мозговой атаки", проводимой группой специалистов, и отбора лучшего решения, исходя из экспертных оценок. Дельфийский метод используется для экспертного прогнозирования путем организации системы сбора и математической обработки экспертных оценок. Метод Дельфи. Достоинство данного метода состоит в том, что он позволяет обобщать индивидуальные мнения отдельных экспертов в согласованное групповое мнение. Метод Дельфи характеризуют три специфические особенности: 1)анонимность экспертов;2)регулируемая обратная связь;3)статистическая обработка результатов опроса и формирование группового ответа.

Анонимность экспертов заключается в том, что в ходе проведения экспертизы участники экспертной группы неизвестны друг другу и их взаимодействие в процессе опроса полностью исключено. Это достигается использованием специальных анкет, а также другими способами индивидуального опроса, например, в режиме диалога с компьютером.

Метод анализа иерархий.

Метод Анализа Иерархий— математический инструмент системного подхода к сложным проблемам принятия решений. МАИ не предписывает лицу, принимающему решение (ЛПР), какого-либо «правильного» решения, а позволяет ему в интерактивном режиме найти такой вариант (альтернативу), который наилучшим образом согласуется с его пониманием сути проблемы и требованиями к её решению В его основе наряду с математикой заложены и психологические аспекты. МАИ позволяет понятным и рациональным образом структурировать сложную проблему принятия решений в виде иерархии, сравнить и выполнить количественную оценку альтернативных вариантов решения

Анализ проблемы принятия решений в МАИ начинается с построения иерархической структуры, которая включает цель, критерии, альтернативы и другие рассматриваемые факторы, влияющие на выбор. Эта структура отражает понимание проблемы лицом, принимающим решение. Каждый элемент иерархии может представлять различные аспекты решаемой задачи, причем во внимание могут быть приняты как материальные, так и нематериальные факторы, измеряемые количественные параметры и качественные характеристики, объективные данные и субъективные экспертные оценки ^[1]. Иными словами, анализ ситуации выбора решения в МАИ напоминает процедуры и методы аргументации, которые используются на интуитивном уровне.

Следующим этапом анализа является определение приоритетов, представляющих относительную важность или предпочтительность элементов построенной иерархической структуры, с помощью процедуры парных сравнений. Безразмерные приоритеты позволяют обоснованно сравнивать разнородные факторы, что является отличительной особенностью МАИ. На заключительном этапе анализа выполняется синтез (линейная свертка) приоритетов на иерархии, в результате которой вычисляются приоритеты альтернативных решений относительно главной цели. Лучшей считается альтернатива с максимальным значением приоритета.

Коэффициент Спирмена принимает значения . Значение соответствует полному совпадению оценок в рангах двух экспертов (полная согласованность мнений двух экспертов), а значение ‑ двум взаимно противоположным ранжировкам важности свойств (мнение одного эксперта противоположно мнению другого).

Метод парного сравнения.

Этот метод представляет собой процедуру установления предпочтения объектов при сравнении всех возможных пар. При сравнении пары объектов возможно либо отношение строгого порядка, либо отношение эквивалентности.

В результате сравнения пары объектов , эксперт упорядочивает ее, высказывая либо , либо , либо . Выбор числового представления можно произвести так: если , то ; если предпочтение в паре обратное, то знак неравенства заменяется на обратный, т.е. . Если объекты эквивалентны, то можно считать, что .

На практике может применяться не только числовые представления (2.1), но и учитываться мера предпочтения объекта по сравнению с .

.

(2.1)

Мера предпочтения выражается экспертом в шкале Саати и принимает значения от 1 до 9, если объект предпочтительнее, чем объект _. В случае, когда , мера предпочтения равна 1, то есть диагональные матрицы парных сравнений всегда равны 1. Следует учитывать для матрицы парных сравнений выполняется следующее условие:

.

Это означает, что если по шкале Саати объект предпочтительней объекта _.иэта мера предпочтения равна (например, =5), то мера предпочтения -го объекта по сравнению с объектом ‑ величина обратная (то есть =1/5). Таким образом, матрица оценки мнений экспертов приобретает следующий вид

	а1	а2	…	аj	…	аn
а1	1	а12	…	а1j	…	а1n
а2	1/а12	1	…	а2j	…	а2n
…	…	…	…	…	…	…
аi	1/a1i	1/a2i	…	1/аji	…	аin
…	…	…	…	…	…	…
аn	1/а1n	1/а2n	…	1/аjn	…	1