Полевой этап исследования

Получению результатов предшествует большая работа, собственно социологическое «поле» — сбор информации, обработка, и только после этого — написание отчета. Чаще всего именно последняя стадия становится известной широкой научной общественности, и лишь отдельные фрагменты предшествующей работы попадают в поле ее зрения. Методические работы, воспроизводящие и объясняющие инструментарий исследования, его средства и способы добывания научного знания, рассчитаны, как правило, на более узкую Аудиторию профес-

Глава 10 Анализ содержания массовой коммуникации____________305

сионалов, издаются малыми тиражами, быстро становятся библиографической редкостью.

Вот почему возникает необходимость обсудить некоторые проблемы профессиональной «кухни» контент-аналитика. Это не заменит специальной работы для каждого конкретного исследователя, когда он окажется на соответствующей стадии, — скорее, это будет акцент на самом важном для данного этапа.

Формулировка задач, которые поставил перед собой исследователь, тесно увязывается в самом исследовании с теми способами получения социологической информации, которые мыслятся самим автором как наиболее адекватные. Образно говоря, социологический инструментарий — это та узда, которой сдерживается воображение социолога. Ставя перед собой определенную задачу, он должен «примерить» ее на способы решения.

Далее в рассуждениях автора должен появиться сам объект исследования: исследователь описывает этот объект — информационный источник в определенных границах его деятельности, обосновывая отбор единиц наблюдения. Следующий шаг — составление кода и инструкции к нему. Эти документы разрабатываются в тесном взаимодействии со специалистом, который будет осуществлять обработку полученной информации на ЭВМ. Чем в большей степени построение документа, на котором будет фиксироваться исходная информация, будет соответствовать правилам ввода информации в компьютер, а также правилам ее дальнейшей агрегации, тем меньше затрат вам потребуется на этой стадии.

После составления кода требуется специальная стадия — проверка кода на соотносимость результатов (reliability). Как правило, эта стадия состоит в том, что исследователь предлагает для анализа по данному коду один и тот же текст нескольким кодировщикам и проверяет, единообразно ли они используют код и насколько сходятся их результаты. (В профессиональной литературе термин «reliability» переводится также как «надежность» и «устойчивость». Существуют исследования, посвященные общим проблемам соотносимости/на-дежности)¹.

306 Часть III Социологические исследования звеньев коммуникативного процесса

Другой вариант проверки — повторно дать закодировать этот же текст нескольким кодировщикам по истечении определенного промежутка времени. Цель в данном случае та же: посмотреть на идентичность анализа, так сказать, «во времени и в пространстве».

Все необходимые поправки и изменения, которые еще можно будет предусмотреть в коде и в инструкции к нему, следует делать именно на этой стадии. Как только начнется само исследование, т. е. работа большого коллектива кодировщиков над текстами, вошедшими в выборку, поправки будут означать сбой в работе. Инструкции уже напечатаны, кодировщики проинструктированы — работу придется начинать заново.

Пока же «снимаются» все вопросы кодировщиков, оттачиваются примеры, которые должна содержать инструкция¹.

Так, в исследовании российской прессы на предмет ее отношения к лидерам и фракциям Госдумы, на которое мы уже ссылались, в инструкции приведены были примеры газетных текстов, содержащих оценку тех или иных лидеров. Позитивная оценка С. Шахрая как лидера определенной фракции: «Пока же преимущество в искусстве ведения судебного спора явно на стороне президентско-правитель-ственной команды. Во-первых, она хорошо подобрана и в ней четко распределены роли. Впереди официальные представители — Сергей Шахрай, Юрий Батурин и Олег Кутафин. Все трое — юристы со степенями, хорошо освоившие приемы публичного спора. И психологическая уравновешенность у них тоже на высоте»². Негативная оценка В. Жириновского и его фракции: «Кроме Егора Гайдара, предстоящие выборы могут принести большое разочарование и Жириновскому и его ЛДПР. Некогда мощнейшей партии сегодня симпатизирует лишь 6,6 % голосов. Очевидно, имиджу Жириновского не помог пролитый в сражении с Б. Немцовым апельсиновый сок. Да и в целом скандальностью наших людей теперь удивить крайне трудно, хотя тяга к ярким

Глава 10 Анализ содержания массовой коммуникации_______________307

Мы специально привели эти примеры — здесь установки руководителя исследования оказалось недостаточно, и некоторые кодировщики оценили второй пример как сбалансированную оценку В. Жириновского. Недаром в итоге выяснилось, что степень совпадения мнений кодировщиков в той части исследования, которая касалась фиксации оценок, равнялась 88% (76%, когда речь шла о сбалансированных оценках, 89 %, когда речь шла о позитивных оценках, 91% — нейтральная подача, 92 % — негативные оценки).

И это притом, что процент совпадения решений кодировщиков по количеству материалов и абзацев с интересующими исследователя субъектами достигал 96-94 %. Чтобы представить себе детализацию проблем в тексте инструкции, приведем начало инструкции к этому исследованию: «Кодировщик читает всю газету целиком, чтобы не пропустить упоминания интересующих исследование Субъектов/ Объектов анализа, которые перечислены на карточке для кодировки. Кодировка начинается с того, что выписывается дата и номер газетного выпуска и число материалов с упоминаниями. После того как на отдельном листке выписаны заголовки всех материалов, где встретились эти упоминания — чтобы не упустить ни одного из них — приступаем к анализу каждого из этих материалов. Для этого требуется более скрупулезное, внимательное, чем на первой стадии, чтение каждого из этих материалов». И далее подробно объясняется каждая характеристика, даются примеры, объясняются способы фиксации результатов (если обработка результатов ручная) и т. д.

Более сложная процедура оценки работы с кодом — это проверка результатов на их обоснованность (validity)'.

Общая идеология, связанная с проблемой обоснованности в социологических методах (в специальной литературе можно встретить и языковую кальку «валидность»), выражается в том, что исследователь предоставляет проверяемые доказательства, что именно, какую характеристику он измеряет.

Хрестоматийным примером в этих случаях является ссылка на такой измерительный прибор, как часы. Исправные, не останавливающиеся часы — надежный инструмент регистрации времени. Если же мы не знаем, по какому часовому поясу выверен тот или иной часовой

308 Часть III. Социологические исследования звеньев коммуникативного процесса

механизм, то его точные показания для нас бесполезны: мы не знаем, какое именно время он измеряет; эти часы, как инструмент, не обоснованы '.

Результаты анализа будут считаться обоснованными, если методика анализа замеряет в массиве текста то, что предполагалось замерять.

Американский специалист в области контент-анализа У. Даниель-сон приводит на этот счет такой пример. Допустим, вы фиксируете заметки, которые определяете как информацию о преступлениях, но действительно ли эта информация помещается в СМК для того, чтобы повествовать о преступлениях? Исследователь, отвечая на этот вопрос, должен обосновать свое определение и преступления, и заметки о таковом. Ему придется сказать, что в эту группу он относит происшествия, которые расцениваются юридическими властями или общественностью или, наконец, прессой как криминалистические по природе, а не как шалости подростков или результат паники. Иногда приходится прибегать к соображениям здравого смысла по принципу «широко известно...». Главный принцип — чтобы не было большого разрыва между категориальной сеткой и эмпирической действительностью.

Именно здесь мы должны упомянуть характеристику контент-анализа, которая еще не привлекалась нами для его описания, точнее, речь идет о следующем ограничении: анализ работает только с «открытым» (manifest) содержанием. Лассвелл употреблял этот термин по контрасту с содержанием «скрытым, подразумеваемым» (latent). «Мы расцениваем содержание как открытое, — писал он, — если слова интерпретируются так, как они понимаются большинством носителей данного языка»².

Обычно в качестве примера этой характеристики используют объяснение и на уровне здравого смысла, и в сугубо научной парадигме. Контент-анализ не может работать на значениях и смыслах скрытого, второго плана, он будет оперировать содержанием, что называется, находящимся «на поверхности».

Глава 10 Анализ содержания массовой коммуникации_____________309

Действительно, если представить множество жанров, выстроенных по мере того, насколько адекватно они воспринимаются потенциальной Аудиторией, одинаково понимаются ею, то информационная заметка из СМК окажется на одном конце, а мистическая поэма со множеством скрытых смыслов — на другом (поскольку вариабельность прочтения ее разными людьми возрастает многократно). Контент-ана-лиз работает с теми текстами, вероятность одинакового прочтения которых очень высока. И это не случайно. Содержание СМК потому (в том числе) и является массовым, что оно рассчитано на максимально возможное одинаковое его понимание. В этом его природа. И анализ содержания как методика его изучения «снимает» именно этот уровень значений. Все остальное для него — «от лукавого».

Именно поэтому и нужны тесты на обоснованность кода — что понимается разными кодировщиками под значением текста и что говорит нам об алгоритме «декодирования» этого значения предлагаемая для исследования инструкция.

Один из тестов на обоснованность результатов, который, судя по специальной литературе, использовался неоднократно, состоит в том, что исследователь, исходя из определенным образом меняющегося содержания, предсказывает, что измерение другого периода покажет точно такое же соотношение характеристик.

Полевая стадия исследования, как никакая другая, связана с такими характеристиками исследования, а значит, и его программы, как организационные его параметры — этапы исследования, сроки исполнения, способы обработки, задействованные в исследовании исполнители, финансовые затраты. Зависимость содержательных характеристик и финансовых затрат огромна. Финансирование социологического исследования никогда не бывает абстрактным — чаще всего средства адресуются конкретным проектам. В таких случаях само обоснование исследования — некоторая гарантия финансирования работы. Более того — в последнее время многие проекты защищают свое право на существование на конкурсной основе. Программа исследования тут вполне способна показать товар лицом.