Пути повышения надежности данных наблюде­ний

Это ответ на вопрос, как вести регистрацию событий и вместе с тем — как контролировать обоснованность и устойчивость информации.

Ведение записей в полевых условиях или простом бесструктурном и невключенном наблюдении — дело навыка и изобретательности исследователя. Одни пользуются кодовыми словами или обозначениями, ко­торые заносят в блокнот при первой возможности, что­бы потом расшифровать записи. Другие имитируют ка­кое-нибудь занятие, связанное с записями (наблюдатель-"стажер" на производстве может спокойно вести регист­рацию впечатлений). Третьи, обладающие очень хоро­шей памятью, все записи ведут в конце дня, пользуясь магнитофоном, а лучше — занося в память компьютера.

Независимо от способа ведения записей в процессе самого наблюдения их следует ежедневно упорядочи­вать по программе исследования и ориентирам наблюдения, разносить в карточки, фиксировать в компьютер­ном файле или в протокол описания ключевых событий, лиц. ситуаций.

Структур изо ванное наблюдение предполагает более строгие приемы ведения записей. Здесь используются бланки-протоколы, разлинованные по пунктам наблюде­ния с кодовыми обозначениями событий и ситуаций.

Приведем пример такого протокола на основе карточ­ки индикаторов наблюдения событий, происходящих во время собрания (схема 15). Наблюдатели и сотрудники ис­следовательского коллектива расчленяют зоны наблюдения (президиум, выступающий, сектор участников собрания из 15—20 человек) и по шкале времени фиксируют происхо­дящее, пользуясь кодовыми обозначениями. В протоколе (схема 16) в каждой строке делается отметка пункта номи­нальной шкалы с учетом времени. Напомним, что другой наблюдатель регистрирует по соответствующей инструкции действия ораторов, после чего можно синхронизировать ре­акции аудитории на выступления с трибуны собрания.

Частоту и интенсивность событий в данном случае регистрируют с помощью шкал ранжирования по схеме 15, графа 2, Современная техника позволяет использовать маг­нитофон, кино- или фотоаппарат, видеозаписи, обеспечиваю­щие подлинность регистрации наблюдаемого.

Надежность (обоснованность и устойчивость) дан­ных повышается, если выполнять следующие правила:

а) Максимально дробно классифицировать элементы событий, подлежащих наблюдению, пользуясь четкими индикаторами. Их надежность проверяется в пробных наблюдениях, где несколько наблюдателей регистриру­ют по единой инструкции одни и те же события, проис­ходящие на объекте, аналогичном тому, который будет изучаться.

б) Если основное наблюдение осуществляется не­сколькими лицами, они сопоставляют свои впечатления и согласовывают оценки, интерпретацию событий, ис­пользуя единую технику ведения записей, тем самым повышается устойчивость данных наблюдения.

в) Один и тот же объект следует наблюдать в раз­ных ситуациях (нормальных и стрессовых, стандартных и конфликтных), что позволяет увидеть его с разных сторон.

г) Необходимо четко различать и регистрировать со­держание, формы проявления наблюдаемых событий и их количественные характеристики (интенсивность, ре­гулярность, периодичность, частоту).

д) Исключительно важно следить за тем, чтобы опи­сание событий не смешивалось с их интерпретацией. Поэтому в протоколе следует иметь специальные графы для записи фактуальных данных и для их ис­толкования.

Пример ошибки регистрации данных наблюдения. Студент-социолог наблюдал поведение москвичей в транспорте и запи­сал в протоколе: "Муж не помог жене поднять сумку в авто­бус". Преподаватель: "Почему Вы решили, что это супруги?" — "Это было ясно по их поведению". — "В чем оно выража­лось?" — "Они обращались друг с другом на "ты". — "Также обращаются друг к другу хорошие знакомые". — "Но они как-то интимно обращались". — "Может быть это очень близкие друзья?"- "Нет, это были супруги". — "Докажите". — "Муж сказал: "...Твой отец..." — "Этого недостаточно". — "Она сказа­ла: 'Ты опять споришь!" — "Они что, ссорились?" и т. д. Препо­даватель: "Запишите: мужчина примерно таких-то лет не по­мог женщине (примерный возраст) поднять сумку в автобус, хотя в ожидании автобуса они беседовали как знакомые. Те­перь отдельно приведите все аргументы, почему Вы считаете, что это были супруги. Если имела место ссора, запишите это как наблюдаемое событие и комментируйте именно его, а поз­же можете обобщить два события и записать, что Вы наблюда­ли поведение супругов.

Все комментарии делаются на полях записи наблюдае­мых событий.

е) При включенном или невключенном наблюде­нии, выполняемом одним из исследователей, особенно важно следить за обоснованностью интерпретации дан­ных, стремясь к тому, чтобы перепроверить свои впечат­ления с помощью различных возможных интер­претаций. Например, бурная реакция собрания на выс­тупление может быть следствием одобрения, недоволь­ства по поводу высказанного оратором, реакцией на его шутку или реплику из зала, на допущенную им ошибку или оговорку, на постороннее действие во время выступ­ления... Во всех этих случаях делаются особые заметки, поясняющие протокольную запись.

ж) Полезно прибегнуть к независимому критерию для проверки обоснованности наблюдения. Данные на­блюдений "со стороны" можно проконтролировать с по­мощью интервью с участниками событий; материалы включенного наблюдения желательно проверить не­включенными по той же программе или по имеющимся документам.

Место наблюдения среди других методов сбора

данных

Наблюдение — незаменимый источник информации на стадии общей разведки по формулятивному плану. Этот этап связан с выделением особенностей изучаемо-го объекта в первом приближении, и прямой контакт с объектом принесет здесь немало неожиданных впечат-лений, которые будут стимулировать выдвижение гипо­тез и разработку более детальных процедур. Особенно полезны наблюдения при исследовании системы организации, деятельности предприятий и учреждений, т. е. относительно автономных "социальных единиц". В при­кладных исследованиях — это незаменимый метод ра­боты социолога-консультанта, который всегда начинает с комбинации наблюдения, интервью и изучения документов данной организации [276].

Простое наблюдение целесообразно также приме­нять как дополнительный метод в комплексе с другими (изучение документов, опросы).

Структурированное наблюдение может быть основ­ным методом сбора данных по описательным или объяснительным гипотезам, если объект исследования достаточно локализован. Для лабораторных эксперимен­тов этот метод — один из ведущих.

Как самодовлеющий метод наблюдение — основа для относительно узких по объему монографических ис­следований (например, массовых митингов, демонстра­ций, повседневной работы администрации, научного кол­лектива). Более распространенный способ применения этого метода — дополнение к другим источникам полу­чения информации. Так, включенное наблюдение в со­четании с последующими массовыми обследованиями (по документам, опросам) позволяет дополнить сухой, но репрезентативный материал более живыми сведениями, повысить обоснованность интерпретации данных.

В числе недостатков этого метода — указанная выше опасность включенного наблюдателя утратить объективность, становясь в позицию тех, в среде кого он действует. Но такая заинтересованность вместе с тем может быть и преимуществом, если социолог трезво оценивает ситуацию и неуклонно следует хорошо проду­манной концепции исследования.

Отмечают также субъективное воздействие на оцен­ку происходящего и стороннего наблюдателя. Достовер­ность и обоснованность суждений по впечатлению на­блюдателя, согласно некоторым данным, достигает лишь 0,5 корреляции с данными, полученными объективными способами. Имеет место "снисходительность" наб­людателя в отношении наблюдаемых, тенденция оцени­вать ситуации более положительно. Возможен и обрат­ный эффект: излишнее снижение оценок тех или иных действий, а также "ошибка усреднения", т. е. боязнь крайних суждений, и ошибка "контраста", указанная Гилфордом. Последняя состоит в том, что оценивающий других склонен судить о них по своим собственным чертам характера так, что придает им крайнее значение в сравнении с собственными чертами (слишком темпе­раментному кажется, что другие люди, напротив, излиш­не вялы, рассудительны и малоэкспрессивны). Короче говоря, личностные особенности наблюдателя определен­но сказываются на его впечатлениях. И этого не следует забывать.⁵

⁵ Негативные аспекты метода наблюдения детально описаны в . С. 237, 329—334]. О методе наблюдения см, также [170. Кн. 2].

И конечно, наблюдению не подлежат события про­шлого, многие явления и процессы массового характера, вычленение небольшой части которых делает их изуче­ние непредставительным.

В целом же при использовании методологии "жест­кого" (количественного) подхода наблюдение как метод сбора первичных данных либо наводит на гипотезы и служит трамплином, для массового обследования, либо применяется на заключительной стадии массовых об­следований для уточнения и интерпретации основных выводов.

В монографическом, многостороннем исследовании одного или немногих объектов (например, поселений) метод провоцирующего наблюдения, или метод наблюда­ющего участия, равно как и этнометодологические про­цедуры наблюдения⁶, выступают основным инструмен­том регистрации и интерпретации данных.

⁶ Подробнее см. гл. в, § 2.

В этой стра­тегии наблюдатель активно включается в ход изучае­мых событий, вступает во взаимодействие с наблюдаемыми. Наблюдение является здесь полноценной исследова­тельской методологией.

ДОКУМЕНТАЛЬНЫЕ ИСТОЧНИКИ

Документальной в социологии называют любую ин­формацию, фиксированную в печатном или рукописном тексте, на магнитной ленте, на фото- или кинопленке. В этом смысле значение термина отличается от обще­употребительного: обычно документом мы называем лишь официальные материалы.

В истории социологии известен факт, когда основой исследования послужили в основном личные докумен­ты. В начале века американский социолог У. Томас и польский — Ф. Знанецкий предприняли кропотливое изучение личных документов польских эмигрантов с тем, чтобы описать их положение в Европе и Америке. В числе использованных документов были: переписка крестьян-эмигрантов с родными, оставшимися в Польше; архивы эмигрантских газет; материалы церковно-при-ходских общин, землячеств, благотворительных обществ и судебные материалы, связанные с делами эмигрантов; наконец, уникальная автобиография одного из крестьян, написанная по просьбе исследователей и составившая около 300 страниц [371].

По способу фиксирования информации различают: рукописные и печатные документы; записи на кино-или фотопленке, на магнитной ленте. С точки зрения целевого назначения выделяются материалы, которые были провоцированы самим исследователем (к примеру, биография эмигранта в работе Томаса и Знанецкого). Эти документы называют целевыми. Но социолог имеет дело и с материалами, составленными независимо от него, ради каких-то других целей, т. е. с наличными до­кументами. Обычно именно эти материалы и называют собственно документальной информацией в социологи­ческом исследовании.

По степени персонификации документы делятся на личные и безличные. К личным относят карточки инди­видуального учета (например, библиотечные формуляры или анкеты и бланки, заверенные подписью), характери­стики и. рекомендательные письма, выданные данному лицу, письма, дневники, заявления, мемуарные записи. Важный источник изучения политической жизии — документы поименного голосования в представительных органах власти.

Безличные документы — это статистические или со­бытийные архивы, данные прессы, протоколы собраний.

В зависимости от статуса документального источни­ка выделим документы официальные и неофициальные. К первым относятся правительственные материалы, по­становления, заявления, коммюнике, стенограммы офи­циальных заседаний, данные государственной и ведом­ственной статистики, архивы и текущие документы раз­личных учреждений и организаций, деловая корреспон­денция, протоколы судебных органов и прокуратуры, финансовая отчетность и т. п.

Неофициальные документы — это многие личные материалы, упомянутые выше, а также составленные частными гражданами безличные документы (например, статистические обобщения, выполненные другими иссле­дователями на основе собственных наблюдений).

Особую группу документов (к ним мы еще вернем­ся) образуют многочисленные материалы средств массо­вой информации: газет, журналов, радио, телевидения, кино, видеоматериалы.

Наконец, по источнику информации документы раз­деляют на первичные и вторичные. Первичные состав­ляются на базе прямого наблюдения или опроса, на ос­нове непосредственной регистрации совершающихся со­бытий. Вторичные представляют обработку, обобщение или описание, сделанное на основе данных первичных источников.

Помимо этого, можно, конечно» классифицировать до-кументы по их прямому содержанию, например литера­турные данные, исторические и научные архивы, архивы социологических исследований, видеохроники обще­ственных событий.

Проблема достоверности документальной инфор­мации

Не следует смешивать надежность, подлинность са­мого документа с достоверностью сообщаемых в нем сведений.

Достоверность информации в первую очередь зави­сит от источника доступного документа. Разные источ­ники обладают своего рода заведомой степенью досто­верности сообщаемых сведений. Во всех случаях пер­вичные данные надежнее вторичных. Поэтому офици­альный личный документ, полученный из первых рук, более надежен и достоверен, чем неофициальный, без­личный и к тому же составленный на основе других документов.

При использовании вторичных документов важно установить их первоисточник. Это можно делать выбо­рочно, с тем чтобы оценить общую погрешность вторич­ных материалов.

Целевые документы, запланированные исследовате­лем, будут надежны в случае, если предусмотрены обыч­ные операции контроля, рассмотренные выше: поиск не­зависимого источника информации (для выборочного контроля), вторичные обращения к тому же источнику (устойчивость данных), тесты по известным группам.

Документалисты-историки и психологи выработали немало приемов, с помощью которых определяют сте­пень достоверности сведений, судя по самому содержа­нию документальной информации.

Первое "золотое правило" в работе с документами (да и вообще со всякой информацией) — четко разли­чать описания событий и их оценку. Мнения и оценки потенциально обладают меньшей достоверностью и на­дежностью по сравнению с фактуальной информацией. Нередко в документе отсутствует детальная характе­ристика ситуации, о которой высказано мнение или оценка. По именно конкретная ситуация дает ключ к расшифровке смысла высказанных оценок и мнений.

Далее следует проанализировать, какими намерения­ми руководствовался составитель документа, что поможет выявить умышленные или непроизвольные искажения. К примеру, автор отчета о проделанной работе, как правило, склонен обрисовывать ситуацию в благоприятном для себя свете. По если мы для сбора информации воспользу­емся, скажем, отчетами проверочных комиссий, картина будет другой. Целевая установка подобных документов предрасполагает к обнаружению как раз упущений и недостатков, негативных сторон деятельности.

Очень важно знать, каков метод получения первич­ных данных, использованный составителем документа. Всем известно, что сведения "из первых рук" надежнее, чем информация из неопределенного источника ("неко­торые утверждают, что..."), а записи по свежим впечат­лениям отличаются от описания тех же событий спустя какое-то время.

Если документ содержит статистическую группи­ровку данных, следует в первую очередь выявить ос­нование классификации. В соответствии с целью ис­следования возможны перегруппировки данных по иным основаниям.

Наконец, чрезвычайно важно хорошо уяснить об­щую обстановку, в которой составлялся документ: рас­полагала ли она к объективности (независимо от целе­вых намерений автора) или диктовала смещение инфор­мации в какую-то сторону?

Особую осторожность должен проявить исследова­тель при работе с личными документами, такими, как автобиографии, дневники, мемуары, письма и т. п. Вот несколько условий доверия к информации из личных документов [334].

(а) Можно верить сообщениям, если они никак не затрагивают интересы автора документа; или (б) нано­сят определенный ущерб автору; (в) видимо, достоверны те сведения, которые в момент "регистрации автором были общеизвестны; (г) достоверны детали событий, не­существенные с точки зрения автора документа, а также (д) сведения, к которым автор относится недоброжела­тельно. Проверка подлинности документа, анализ мо­тивов, побуждений, условий его составления, целевой ус­тановки автора, ситуации, в которой он действовал, ха­рактера его окружения — вот те факторы, от кото­рых зависит достоверность информации из личных до­кументов.

Традиционный (классический) анализ документов в отличие от простого ознакомления с ними или прочте­ния для приобретения нового знания — это именно ме­тод исследования, которое, как всякое научное исследо­вание, предполагает выдвижение определенных гипотез, тщательное изучение существа анализируемого материа­ла, логики текста, обоснованности и достоверности при­водимых сведений. Этот анализ "стремится как бы до конца проникнуть в глубь документа, исчерпать его со­держание. Традиционный анализ есть анализ интенсив­ный" [218. С. 290]. Добавим, что огромную роль играют здесь опыт исследователя, глубина его знаний по пред­мету и интуиция.