Надежность отдельных пунктов теста

Ретестовая надежность отдельных пунктов. Надежность теста обеспечивается надежностью пунктов, из которых он состоит. Чтобы повысить ретестовую (диахронную) надежность теста в целом, надо отобрать из исходного набора пунктов, такие пункты, на которые испытуемые дают устойчивые ответы при первом и повторном тестировании. Для оценки надежности – устойчивости отдельных пунктов теста используются данные двукратного обследования выборки стандартизации. Для измерения устойчивости ответов на тот или иной пункт теста удобно воспользоваться 4-х клеточной таблицей сопряженности:

		Тест 1
		да	нет
Тест 2	да	a	b
нет	c	d

а – количество испытуемых ответивших «да» на данный пункт при первом и втором тестировании,

b – количество испытуемых ответивших «нет» на данный пункт при первом и втором тестировании,

с – количество испытуемых ответивших «да» на данный пункт при первом и «нет» при втором тестировании,

d – количество испытуемых ответивших «нет» на данный пункт при первом и «да» при втором тестировании.

Для дихотомических пунктов (типа «решил – не решил», «да – нет») надежность удобно измерять с использованием коэффициента фи-корреляции:

Значимость фи-коэффициента определяется с помощью критерия хи-квадрат:

n – число испытуемых.

Вычисленное значение критерия хи-квадрат сравнивается с табличным значением, которое определяется при α=0,05 и числе степеней свободы df=1.

Пригодными для включения в тест считаются такие пункты, которые имеют статистически значимый фи-коэффициент, имеющий величину не менее 0,5. Фи-коэффициент удобен тем, что он еще позволяет одновременно оценивать степень оптимальности данного пункта по силе или трудности. Он тем меньше, чем сильнее частота ответов «да» отличается от частоты ответов «нет».

Одномоментная надежность отдельных пунктов теста. Если тест предназначен для измерения динамичных быстро меняющихся психологических качеств, чтобы повысить его надежность, следует из исходной пилотажной батареи пунктов отбросить те, которые плохо согласованы с остальными. Вначале по результатам проведенного обследования выделяются две группы испытуемых:

1) «высокая» группа – 27% испытуемых, набравших наибольшие суммарные баллы,

2) «низкая» группа – 27% испытуемых, набравших наименьшие суммарные баллы.

Согласованность пункта с целым тестом также оценивается с помощью четырехклеточной корреляции, которая имеет следующий вид:

	Высокая гр.	Низкая гр.
да	a	b
нет	c	d

а – количество испытуемых ответивших «да» на данный пункт из высокой группы,

b – количество испытуемых ответивших «нет» на данный пункт из низкой группы,

с – количество испытуемых ответивших «нет» на данный пункт из высокой группы,

d – количество испытуемых ответивших «нет» на данный пункт их низкой группы.

Для оценки величины надежности каждого пункта в этом случае рассчитывается его коэффициент фи-корреляции по приведенной ранее формуле или по более упрощенной формуле:

где:

P_i – количество ответов «верно» («да») плюс количество ответов «неверно» («нет») на i-тый пункт теста;

P_i = a + b;

N* – сумма всех элементов таблички;

N* = п · 0,54,

где п – численность всей выборки.

Если 2a – P_i < 0, то числитель в формуле выглядит так:

2а – Pi + 1.

При включении в экстремальную группу 1/3 выборки N* = 0,66 · n.

Проверить статистическую значимость вычисленных значений коэффициента j. Определить граничное значение значимого (по модулю) фи-коэффициента. Например, при выборке n=100 испытуемых и α=0,01:

.

Если пункт получает незначимый фи-коэффициент, то его обычно исключают из батареи.

Пункты, получившие высокие коэффициенты корреляции, рассматриваются как надежные, остальные пункты либо переформулируются, либо исключаются из теста.

Данный анализ иногда позволяет уточнить ключ для пункта. Если пункт получает значимый положительный коэффициент фи-корреляции, то ключ определяется величиной +1. Если пункт получает значимый отрицательный коэффициент фи-корреляции, то ключ определяется величиной -1.