Вопрос 55. Пилотажные исследования. Методы экспертной оценки.
Термином "пилотаж" обычно обозначают искусство управления летательными аппаратами. Но он имеет и другое значение – безупречное выполнение любых сложных операций, требующее виртуозного мастерства. В этом, более широком смысле оно используется, когда говорят о пилотажном этапе социологических исследований.
Цель данного этапа – отработка, усовершенствование исследовательского инструментария, доведение его до нужной кондиции. Необходимость в нем возникает потому, что в первом (макетном) варианте инструментов, конструируемом при разработке исследовательской программы, возможны (и даже неизбежны) погрешности, которые обязательно нужно устранить.
В анкетах, как правило, обнаруживаются вопросы, понимаемые неоднозначно людьми с разным образованием, этническим происхождением и социальным положением. В первичном сценарии телефонного опроса не удается предусмотреть всех возможных поворотов беседы с абонентами, в силу чего и этот инструмент нуждается в апробации и доработке. Кроме того, есть такие методы сбора информации (типа БОУ, фокус-группы), инструментарий которых можно сделать только опытным путем, т.е. проведя пробные вариативные дискуссии в группах с разным составом.
Пилотажный этап исследования обязателен. Его следует проводить даже в тех случаях, когда исследователи уверены в совершенстве первого варианта своего инструментария. Социальная жизнь динамична, может преподнести сюрпризы социологам даже экстра-класса. Чем меньше познано явление, ставшее предметом исследования, тем, сильнее потребность в пилотировании инструментария.
Технология пилотажного исследования предусматривает последовательное выполнение следующих операций:
• коллективное обсуждение исследователями первого варианта инструментов с целью фиксации в них сомнительных моментов, их возможных модификаций и трансформаций;
• размножение первого варианта инструментария;
• подбор специалистов, способных к качественному пилотажу инструментария;
• определение немногочисленных репрезентативных групп генеральной совокупности, обследование которых позволит усовершенствовать инструментарий;
• апробация инструментов в этих группах;
• коллективное подведение итогов пилотажа;
• внесение соответствующих корректив в первичный инструментарий, обработка его окончательного варианта;
• тиражирование итогового инструментария.
Метод экспертных оценок.
Метод экспертных оценок широко применяется в процессах получения и использования социологической информации.
Этот метод основан на достижении согласия группой экспертов, которые приглашаются для определения наиболее вероятных событий развития управляемой подсистемы в ближайшем и более отдаленном будущем.
Обычно приглашенные эксперты, специализирующиеся в различных взаимосвязанных областях деятельности, заполняют подробный вопросник по поводу рассматриваемой проблемы и записывают свое мнение о способах ее решения. Каждый эксперт затем получает свод ответов других экспертов, и его просят заново рассмотреть свой прогноз, чтобы внести в него свои коррективы. Процедура повторяется обычно три-четыре раза, пока эксперты не придут к единому мнению.
Метод экспертных оценок основан на достижения согласия в группе экспертов, которые приглашаются для определения той или иной проблемы.
В зависимости от основания классификации методы экспертных оценок можно разделить на следующие группы:
а) по характеру взаимосвязи экспертов между собой - методы очного и заочного опроса экспертов;
б) по процедуре согласования оценок - одноразовые и итеративные (многоразовые);
в) по численности экспертов - индивидуальные методы и групповые.
1 Понятие о методе экспертных оценок в социологии
В практике прикладных социологических исследований могут возникать ситуации, когда для оценки какого-либо явления трудно либо вообще невозможно выделить объект носитель проблемы и использовать его в качестве источника информации. Чаще всего такие ситуации связаны с попыткой прогнозировать изменение того или иного социального явления, процесса; с необходимостью представить состояние интересующего предмета через 1, 2, 5 и более лет или дать объективную оценку таким сторонам деятельности и качествам людей, по которым их самооценка может оказаться искаженной. Подобная информация может исходить только от компетентных лиц экспертов, имеющих глубокие знания о предмете или объекте исследования.
Широкое распространение методы опроса экспертов приобрели в 70-х годах, поскольку именно тогда была выявлена ограниченность методов экстраполирования и моделирования. Одни лишь математические модели сами по себе не могут обеспечить требуемую надежность прогнозов, особенно долгосрочных. Наиболее ограниченными оказались возможности моделирования в сфере сложных социальных процессов. Выявилась необходимость комплексной разработки социальных прогнозов путем сочетания различных методов, в том числе опроса экспертов.
Данный метод сбора информации, как видим, важен потому, что на основе авторитетного мнения он позволяет привлечь более целенаправленную аргументацию для обоснования теоретических положений и практических рекомендаций исследования .
Метод экспертных оценок - специфический социологический метод получения информации об объекте с помощью специалистов - экспертов в определенной области.
Повышение объективности результатов оценок экспертов достигается целым рядом логических и статистических процедур подбора специалистов, организации их опроса, обработки результатов экспертизы. Совокупность этих процедур и называется методом экспертных оценок.