Нормативные предписания разработчикам и пользователям психодиагностических методик.

Развертывание практической работы психологов в различных сферах производства, медицины, образования, требующих примене­ния психодиагностических методик, остро ставит вопрос о норма­тивном регулировании подобной практики. Речь идет о системе конк­ретных требований к разработчикам и пользователям методик.

До недавнего времени практическое и исследовательское при­менение методик плохо разграничивалось, это замедлило выработку свода нормативных предписаний (стандартов) к практическому ис­пользованию тестов и нестандартизованных процедур. Требуется коренным образом изменить такое положение, когда нормативное регулирование отстает от реальной практики: нормативное регулирование должно сопровождаться выработкой такой системы правил, которая бы опережала практику, задавала ей ориентиры, пер­спективы на будущее. Ниже приведен возможный проект некото­рой разумной, с точки зрения авторов, системы правил и ориенти­ров на будущее[4].

Требования к психодиагностической литературе и методи­ческим материалам. Разработчик и пользователь методик взаимо­действуют между собой прежде всего посредством методической ли­тературы. Стандартные требования к оформлению руководства, ме­тодических указаний, писем и другой методической литературы при­няты в качестве директивных документов обществами психологов ряда стран.

Целесообразно различать круг требований к документам раз­ного типа: 1) к исследовательской литературе, публикуемой в на­учных журналах, сборниках и монографиях, 2) к обзорно-анали­тическим руководствам и справочным изданиям, освещающим процедурные и количественные, а также содержательно-теорети­ческие аспекты применения какой-то методики или какого-то класса методик, 3) к «подручным методическим материалам», непосред­ственно инструктирующим пользователя в применении методики и содержащим стимульный материал, инструкции, тексты заданий, ключи, нормы, правила интерпретации, 4) к популярным издани­ям по психодиагностике.

1. Научные сообщения. Должны освещать: теоретические осно­вания методики (концепт и методический прием), способы разра­ботки и эмпирического обоснования, исследовательские данные о репрезентативности, надежности, валидности шкалы тестовых по­казателей (коэффициенты корреляций, регрессионные и факторные веса). Для читателей в научном сообщении могут быть даны «об­разцы» отдельные примеры тестовых заданий, позволяющие про­иллюстрировать принципы, на которых построена методика. В на­учных сообщениях не должны освещаться: для методик с профес­сиональными ограничениями («п-методик») - полный текст заданий ключи, тестовые нормы, детальные инструкции по проведению и интерпретации. Обо всей этой информации автор научного сообще­ния должен говорить лишь косвенно, используя ссылки на распрос­траняемую среди специалистов «инструктивную» литературу В на­учном сообщении могут быть приведены исчерпывающие описания методик, знание которых (и их возможное применение) непрофес­сионалами не может принести ущерба конкретным людям или пси­ходиагностическому потенциалу самой методики Этот класс мето­дик предлагается условно обозначить термином «открытые методи­ки» («о-методики»).

Автор научного сообщения имеет право определить статус разра­ботанной им методики как открытой методики, но любые модифика­ции или адаптации методики, уже определенной как профессиональ­ная «п-методика», должны освещаться в научных сообщениях в соот­ветствии с указанными требованиями. ^:

2. Справочно-методические издания. В этих изданиях могут быть приведены инструктивные материалы, включая текст заданий (воп­росов ключи, нормы, но при одном принципиальном условии: изда­нию придается статус издания для специалистов, обеспечивающий ему распространение среди читателей, имеющих необходимую пси­хологическую подготовку. Авторский коллектив такого издания лич­но отвечает перед Обществом психологов за распространение тира­жа этого издания по назначению.

3. Инструктивные документы. Содержат описание методики, обеспечивающее ее адекватное использование в точном соответ­ствии со стандартами: предмет диагностики, сфера применения, контингент испытуемых, процедура применения. Описание обяза­тельно должно снабжаться подробными сведениями о процедуре разработки методики и полученных при этом данных о надежнос­ти и валидности. Приведенные тестовые нормы должны сопровож­даться однозначным описанием выборки стандартизации и харак­тера диагностической ситуации в обследовании: добровольное участие испытуемых, бескорыстно сотрудничающих с психологом в_: целях помощи исследованию («научное сотрудничество»), участие платных испытуемых («платное участие»), использование методи­ки в ходе запроса испытуемого на получение консультативной по­мощи («ситуация клиента»), использование методики в ходе при­нудительного (сплошного) административного обследования («си­туация экспертизы»).

Справочно-методические издания и инструктивные документы должны периодически (с определенным интервалом, зависящим от типа методики) пересматриваться, так как условия применения мето­дик со временем неизбежно меняются, а следовательно, изменяются психометрические свойства.

В справочных и инструктивных материалах должны быть одно­значно сформулированы требования к профессиональному статусу пользователя методики.

Инструктивные документы должны пройти объективные испыта­ния на однозначность указанных в них предписаний: пробная группа пользователей методики (теста) должна направлять автору докумен­та копии протоколов по результатам обследования, на основании ко­торых автор должен обеспечить идентичность стандартов авторского варианта методики и тех характеристик методики, которые выявля­ются при ее использовании. Последнее требование имеет принципи­альное значение для методик, предполагающих значительное учас­тие «экспертной» оценки (инструкции к контент-анализу, к интерпре­тации результатов проективной техники, полустандартизованного интервью и т. п.).

Процедуры подсчета тестовых баллов и интерпретации должны быть описаны с однозначной ясностью, позволяющей получать иден­тичные результаты при обработке одинаковых протоколов разными пользователями.

Предпочтительно включение и использование пользователями тестов локальных тестовых норм (по сравнению с не специализиро­ванными по популяции).

4. В популярных изданиях авторы-психологи не имеют права раз­глашать профессиональную тайну: описывать смысл диагностичес­ких приемов, знание которых испытуемыми существенно вредит валидности методики.

Требования к методикам

Целесообразно придерживаться разных требований к психодиаг­ностическим методикам разного типа.

1. Измерительные методы (тесты) должны удовлетворять сле­дующим требованиям:

а) должны быть однозначно сформулированы цели, предмет и область применения методики. Предмет, диагностический конструкт (концепт), должен быть сформулирован в теоретических понятиях и соотнесен на теоретическом уровне с системой релевантных концеп­тов. Должна быть четко выделена область применения, под которой подразумевается особая социальная среда или сфера общественной практики (производство, медицина, семейная жизнь и т. п.), контин­гент испытуемых (пол, возраст, образование, профессиональный опыт, должностное положение). Должны быть конкретизированы цели ис­пользования результатов: для прогноза успешности профессиональ­ной деятельности, для психологического вмешательства, для приня­тия правовых, административных решений, для прогноза стабильно­сти коллектива и т. п.;

б) процедура проведения должна быть задана в виде однозначно­го алгоритма, пригодного для передачи лаборанту, не имеющему спе­циальных психологических знаний, или ввода в компьютер, исполь­зуемый для предъявления заданий и анализа ответов;

в) процедура обработки должна использовать статистически обо­снованные методы подсчета и стандартизации тестового балла (по статистическим или критериальным тестовым нормам). Выводы (ди­агностические суждения) на основе тестового балла должны сопро­вождаться указанием на вероятностный уровень статистической дос­товерности этих выводов;

г) тестовые шкалы должны быть проверены на репрезентатив­ность, надежность и валидность в заданной области применения. Другие разработчики и квалифицированные пользователи должны иметь возможность повторить стандартизационные исследования в своей области и разработать частные стандарты (нормы);

д) процедуры, основанные на самоотчете, должны быть снабже­ны средствами контроля за достоверностью, позволяющими автома­тически отсеивать недостоверные протоколы;

е) головная методическая организация определенного ведомства (области применения) должна вести банк данных, собранных по тесту, и производить периодическую коррекцию всех стандартов методики.

2. Экспертные методы:

а) данный пункт повторяет содержание пункта а) для тестов. До­полнение: инструкции по применению снабжаются указанием на тре­буемую квалификацию экспертов, их необходимое количество для получения надежных данных по методу независимых оценок;

б) инструкции по применению должны пройти специальные ис­пытания на однозначность их выполнения экспертами по отношению к некоторому эталонному набору данных (текстов, рисунков, звуко-или видеозаписей и т. п.);

в) процедура обработки результатов должна включать в себя та­кое документирование промежуточных этапов обработки, которое позволило бы перепроверить конечный результат другому эксперту;

г) пользователи-разработчики должны иметь возможность вос­произвести нормативное исследование по измерению экепертжж со­гласованности на эталонном наборе данных;

д) головная организация должна вести банк данных, обеспечивая подготовку пользователей и их переподготовку (в соответствии с пе­ресмотренными стандартами методики).

Любая методика, неудовлетворяющая перечисленным выше тре­бованиям, не может считаться профессиональной психодиагностичес­кой методикой. Методики должны проходить аттестацию в рамках головных методических организаций в обязанности- которых входит / составление библиотек «аттестованных психодиагностических мето­дик». Вся инструктивная литература по методикам, не прошедшим аттестацию, не может считаться пригодной для применения в практи­ческой психологии. Это не исключает возможность применения не­аттестованных методик в исследовательских целях.

Требования к пользователям

К пользователям, являющимся профессиональными психологами, и к пользователям-непсихологам предъявляются разные требования. Пользователь-психолог:

а) должен знать и применять на практике общие теоретико-ме­тодологические принципы психодиагностики, владеть основами диф­ференциальной психометрики, должен следить за текущей методи­ческой литературой по психодиагностике, самостоятельно вести кар­тотеку и личную библиотечку методик, применяемых в заданной об­ласти;

б) отвечает за решения, принимаемые на основе тестирования, обеспечивая их соответствие репрезентативности и прогностической валидности методики. Он предупреждает возможные ошибки, допус­каемые непрофессионалами, не знакомыми с ограничениями в исполь­зовании того или иного теста;

в) пользуется преимущественным правом по сравнению с непро­фессионалами на проведение психодиагностики в заданной области, на использование протоколов в соответствии с профессионально-эти­ческими принципами и интересами психологии. Он пользуется пре­имущественным правом получения методических материалов, в том числе приобретения их в качестве индивидуальной профессиональ­ной собственности.

Психолог обеспечивает необходимый уровень надежности диаг­ноза, применяя параллельные стандартизованные и нестандартизо­ванные методики, а также метод независимых экспертных оценок;

г) в подборе методик в комплексную программу обследования не руководствуется субъективными предпочтениями и предубеждения­ми в оценке методик, а исходит из требования максимальной эффек­тивности диагностики: максимум надежности при минимуме затрат;

д) параллельно с использованием методик ведет научно-методи­ческую работу, анализируя по собранным данным эффективность применения методики в заданной области. Ведение такой научно-ме­тодической работы входит в основной круг обязанностей психолога, работающего и в исследовательских, и в лечебных учреждениях. В этой работе психолог поддерживает оперативные контакты с голов­ной методической организацией, передавая ей копии протоколов (для накопления банков данных) и получая инструктивные методические материалы;

е) обеспечивает тщательное соблюдение всех требований для про­ведения стандартных методик обследования. Подсчет баллов, интер­претация, прогноз делаются в строгом соответствии с методическими указаниями. Психолог не имеет права отклоняться от стандарта в использовании методики, принятого на определенный период. Все рекламации и предложения по использованию методики психолог направляет в методический центр и требует их учета при очередном пересмотре методики;

ж) обеспечивает конфиденциальность психодиагностической ин­формации, полученной от испытуемого на основе «личного доверия». Психолог обязательно предупреждает испытуемого о том, кто и для чего может использовать эту информацию. Психолог не имеет права скрывать от испытуемого то, какие решения могут быть вынесены на основе психологической диагностики;

з) психолог хранит профессиональную тайну: не передает лицам, не уполномоченным вести психодиагностическую практику, инструк­тивных материалов, не раскрывает перед потенциальными испытуе­мыми секрет той или иной психодиагностической методики, на кото­ром основана его валидность;

и) обязательно рассматривает наряду с наиболее вероятной и аль­тернативную диагностическую гипотезу (интерпретацию данных), применяя в психодиагностике принцип, аналогичный принципу «пре­зумпции невиновности» в судопроизводстве;

к) сообщает в региональные или центральные органы Общества психологов о всех замеченных им где-либо нарушениях нормативных (процедурных и этических) принципов психодиагностики. Психолог уполномочен лично препятствовать некорректному и неэтичному при­менению психодиагностики.

Требования к психологу:

1. Психолог должен уметь квалифицированно разбираться с пси­хометрической документацией в методической литературе по психо­диагностике, должен знать, какие психометрические характеристики теста должны указать его разработчики, в какой степени эти психо­метрические характеристики соответствуют типу теста, с одной сто­роны, и актуальной задаче, для которой его требуется использовать, с другой. Например, в тех случаях, когда требуется использовать тест для прогноза со значительным упреждением, а сведений о проверке прогностической валидности не получено, тест не может считаться готовым для решения данной задачи.

2. Психолог должен правильно определить, в какой мере извест­ные тестовые нормы по требующейся методике применимы в его си­туации с учетом контингента испытуемых и типа диагностической си­туации, существует ли ситуация «внутрикультурного переноса» и нуж­на ли рестандартизация тестовых норм. При необходимости психолог должен уметь самостоятельно практически произвести рестандартизацию, построив и проанализировав распределение тестовых баллов.

3. Психолог должен уметь самостоятельно собирать данные, прово­дить корреляционную обработку и измерять эмпирическую валидность -эффективность методики по отношению к заданному критерию. При необходимости психолог должен уметь самостоятельно конкретизиро­вать операциональные индикаторы критериальной информации.

4. Психолог должен уметь самостоятельно определять появление слишком высокой погрешности в результатах, утрату методикой не­обходимого уровня надежности, при этом проверять свою гипотезу статистически.

5. Психолог обязан вести двойную документацию: все копии про­токолов он должен быть готов передать в головную методическую организацию (научно-академическую или отраслевую) для пополне­ния общего банка данных и совершенствования психометрических характеристик методики. Все модификации, вносимые в методику (формулировку инструкции, отдельных вопросов, последовательность предъявления), психолог должен согласовывать с головной методи­ческой организацией, так как самодеятельное введение на местах раз­нообразных частных модификаций влечет за собой утрату психомет­рической чистоты получаемых результатов, не ускоряет, а замедляет создание модификаций, адаптированных к специфическим условиям и обладающих необходимыми психометрическими свойствами. Тща­тельное соблюдение заданных методических стандартов — необходи­мый атрибут психометрической культуры психолога.

6. Психолог должен уметь самостоятельно выявлять и измерять уровень мотивационных искажений, обусловливающих фальсифика­цию тестовых данных испытуемыми, должен уметь корректно отсеи­вать недостоверные протоколы, статистически фиксировать достиже­ние приемлемого уровня достоверности для массовых результатов в групповой психодиагностике.

7. Психолог должен овладевать приемами сложного количествен­ного подсчета косвенных тестовых показателей, а также интегральных показателей, требующих агрегирования многообразной числовой ин­формации. Он должен уметь поставить задачу программисту (или психологу-психометристу) для проведения расчетов на компьютере.

Психолог-психометрист должен уметь:

1. Самостоятельно планировать и осуществлять все этапы по пси­хометрическому конструированию или адаптации психодиагностичес­ких методик: проверку надежности и валидности на уровне отдель­ных пунктов теста, отсев ненадежных и невалидных пунктов, пост­роение и анализ распределения тестовых баллов, составление мате­матических уравнений для прогнозирования или «решающего правила» для распознавания.

2. Организовывать хранение и обработку психодиагностических данных на компьютере, владеть навыками работы на компьютере в рамках стандартных операционных систем, знать структуру исполь­зуемых в психодиагностике баз данных и уметь управлять базами дан­ных.

3. Организовать работу психологов-психодиагностов по ведению документации к используемым методикам, по соблюдению методи­ческих стандартов, по сведению и интеграции результатов в общие банки психодиагностической информации.

4. Вести картотеку методик в рамках заданной области (отрасле­вой психологической службы), тщательно иерархизируя методики по уровню психометрической обеспеченности, вести библиотеку мето­дических материалов и методических рекомендаций по использова­нию стандартизованных методик.

В заключение отметим, что развивающаяся психодиагностичес­кая практика неизбежно расширит приведенные здесь перечни тре­бований.