Понимание вопросов и изменчивость ответов

 

Еще одно препятствие на пути к признанию достоверности тех результатов, которые мы получаем с помощью личностных опросников, – изменчивость ответов. Имеющиеся в литературе данные свидетельствуют о том, что от 11 до 35 % испытуемых изменяют свои ответы при повторном исследовании. Столь значительный показатель изменчивости, как известно, считается признаком недостаточной надежности (в данном случае речь идет о ретестовой надежности) психодиагностической методики*. Что же приводит к изменению результатов при повторном тестировании?

 

* Здесь не имеются в виду те случаи, когда изменчивость обусловлена изменением личности, так как ретестовая надежность определяется корреляцией между исследованиями, проведенными с незначительным интервалом.

 

Одним из первых исследований, обращенных к анализу изменчивости ответов, была работа Л. Голдберга(Goldberg, 1963). Он создал теоретическую модель, описывающую процессы, происходящие при ответе испытуемого на вопросы. Модель связывает изменчивость ответов с неясностью вопроса и предоставляет возможность определить степень этой неясности. Основной элемент модели – личностная черта, образующая некоторый психологический континуум. При этом допускается, что каждый человек имеет свое место на континууме черты. Модель построена по отношению к так называемым монотонным вопросам*, касающимся данной черты.

 

* Под монотонностью понимается, во-первых, то, что вопрос допускает как положительный, так и отрицательный ответ, во-вторых, вероятность утвердительного вопроса возрастает по мере усиления выраженности данной черты и наоборот.

 

Предполагается, что испытуемый, отвечая на вопрос:

1) представляет континуум черты, т. е. признает существование различной интенсивности, степени выраженности той или иной черты у разных людей;

2) понимает так называемую границу вопроса на континууме черты, т. е. испытуемый определяет такую точку на континууме, что направо от нее располагается ответ «да», налево – «нет»;

3) отдает себе отчет в том, какое место он занимает на континууме, т. е. подразумевается, что испытуемый понимает, в какой степени он как личность обладает определенной психологической характеристикой;

4) отвечает «да», когда определяет свое место на континууме вправо от границы вопроса, и «нет» – в противоположном случае.

Последнее, 4-е условие выражает практический, рабочий смысл первых трех. Оно описывает, каков ответ испытуемого в зависимости от того, где он определяет границу вопроса (2-е условие) и на каком месте континуума он видит себя (3-е условие). Для вывода количественного показателя неясности допускается, что распределение черты в популяции является нормальным с вариацией, равной 1.

Изменчивость ответа означает, что не удовлетворяется одно из вышеуказанных условий, наиболее существенные из которых – 2-е и 3-е, ибо 2-е условие соответствует в модели понятию неясности вопроса, а 3-е – трудности вопроса.

Неясность вопроса, психологически выступающая в виде неуверенности, сомнения, определяется в модели Голдберга через широту так называемой полосы неясности. Поясним это. Разные испытуемые могут выбрать различные места на континууме черты в качестве границы вопроса. Возникает некоторое распределение таких границ. Выбранные точки и образуют «полосу нерешительности», неспособности принять однозначное решение. Эта область отождествляется с полосой неясности, определяемой точками границ вопроса при повторном исследовании. Широта этой полосы называется показателем неясности, или амбдекс – по терминологии Голдберга. Понятно, что чем шире полоса, тем более неясен вопрос.

Трудность вопроса понимается как сложность оценки себя (своей личности) по отношению к предполагаемой психологической черте. По терминологии модели, трудность выражается в том, что чем ближе к своему месту на континууме черты испытуемый усматривает границу вопроса, тем труднее для него ответить на этот вопрос.

Понятия неясности и трудности вопроса по сути эмпирически неразличимы, так как при повторном обследовании одной и той же группы лиц мы получаем только два независимых параметра: процентную величину ответов «да» и процент изменения ответов с «да» на «нет» (или наоборот). Таким образом, в своей модели Голдберг сосредоточивает внимание на проблеме неясности вопроса и использует два параметра для описания положения полосы неясности. Один из них описывает место среднего участка этой полосы, другой – ее ширину.

Показатель неясности (амбдекс) связывает эмпирические данные, предстающие в виде: процента ответов «да» в двух исследованиях и процента изменений ответов. Процент ответов «да» (средний для двух исследований) позволяет определить на континууме черты приблизительное положение центрального участка полосы неясности. Располагая этими данными и величиной процента изменений ответов, можем определить широту полосы неясности. Она будет равна ширине отрезка с уже известным центром, над которым поле под нормальной кривой равно проценту лиц, изменивших свои ответы. Геометрическое представление модели Голдберга отражает рис. 5.3.

 

Рис. 5.3. Модель по Голдбергу

 

E – среднее сходство, согласованность ответов (заштрихованное поле под кривой); A – ambdex, или показатель неясности; Х _Е – шкальная оценка (Е – центиль вопроса на континууме черты), отсекающая под кривой поле, равное средней согласованности ответа в двух исследованиях; f (X_E) – ордината нормальной кривой, построенная в точкеX: х ₁ и х ₂ – точки на континууме, для которых: х ₂ -х ₁ = А, а также х ₂- Х_Е = Х _Е - х ₁ = β = А/ 2. Средний процент изменений ответа (показатель нестабильности вопроса), принимаемый равным полю под нормальной кривой между Х _Е и β и Х _Е+ β, обозначается I. Если принимаем I = Af (X _E), то А= .

 

Таким образом, стабильность ответов, согласно модели, будет связана: с выбором испытуемым на континууме черты места, далекого от определенной им границы вопроса; с определением границы вопроса на краях континуума черты. Изменчивость ответов соответственно связана:

• с неясностью вопроса;

• с трудностью вопроса;

• с нерешительностью испытуемого (нерешительность понимается как отсутствие четкого, однозначного мнения по определению границы вопроса, а тем самым связывается с неясностью его содержания для испытуемого).

Психометрический парадокс

 

Как известно, для определения диагностической ценности вопросов (утверждений), их дискриминативной силы обычно используется статистическая процедура анализа заданий. С помощью обычно применяемого j -коэффициента устанавливается связь между ответом испытуемого на данный вопрос и его результатом по всей шкале, в которую этот вопрос включен. Не менее диагностически важен параметр вопроса – стабильность ответа на него при повторном исследовании. В ходе исследований было обнаружено, что вопросы с высоким j -коэффициентом («хорошие») характеризуются нестабильностью ответов. В свою очередь неизменность ответов при повторном тестировании обнаруживается у вопросов с низким j -коэффициентом («плохих»).

Еще в работах 1940-х гг. было показано, что вопросы, которые позволяют дифференцировать больных неврозом от других больных или здоровых, ненадежные, т. е. мала вероятность получения того же самого ответа при повторном обследовании. В то же время с помощью вопросов, определяемых как надежные, различения изучаемых групп не достигалось или оно было неудовлетворительным (Eisenberg, 1941).

Итак, вопросы (утверждения), имеющие высокий показатель дискриминативности, неустойчивы по отношению к повторяемости результата, и наоборот, стабильность ответа часто отмечается у тех вопросов, которые обладают низкой дискриминативностью, Явление это получило название психометрического парадокса (Goldberg, 1963; Nowakowska, 1975), который не может быть объяснен без психологического анализа процесса формирования ответов на вопросы личностных шкал.

Наиболее детально психометрический парадокс обсуждался в работах Марии Новаковской (Nowakowska, 1975), на которых мы и остановимся подробнее. Голдберг (Goldberg, 1963) рассматривает психометрический парадокс как определенную зависимость между постоянством и вариабельностью ответов на вопросы. При этом изменчивость ответов находится в функциональной связи с величиной s Фергюсона (показатель, определяемый соотношением между фактическим числом различий и их максимально возможным числом). Исходя из этого, М. Новаковская считает, что в данном случае следует говорить о s -парадоксе. Показатель s не отражает эффективности вопроса относительно всего теста или его дискриминативной силы, определяемой с помощью величины j. Предметом анализа М. Новаковской является j -парадокс. Она считает, что психометрический парадокс присущ исключительно исследовательскому инструментарию гуманитарных наук, ибо вопросы, оставаясь формально неизменными, подтверждены семантическим (психологическим) преобразованиям как в интер-, так и в интраиндивидуальном планах.

Интериндивидуальная изменчивость имеет две причины: различия в выраженности измеряемой черты у разных испытуемых и различия в понимании значения вопросов. Интраиндивидуальная изменчивость обусловлена вариабельностью значения, трудностью принятия решения об ответе и флуктуацией выраженности черты. Правда, последний источник изменчивости можно не учитывать, так как период между повторными исследованиями обычно краток.

Для психологической интерпретации психометрического парадокса Новаковская предлагает различать три детерминанты ответов: выраженность черты у обследуемого, значение, придаваемое вопросу, и степень легкости принятия решения об ответе. Она подчеркивает также необходимость дифференциации однозначных вопросов от многозначных, которые в известном смысле могут быть уподоблены проективным стимулам.

М. Новаковская считает возможным различать два типа психометрического парадокса и исходит из нижеследующих гипотез для их объяснения.

Парадокс типа А возникает при вопросах, поддающихся различному истолкованию, а также в том случае, когда трудно принять решение об ответе (согласно М. Новаковской, лица с высокой выраженностью измеряемой черты, приписывая вполне определенное значение вопросу, легко принимают решение об ответе). В этом случае вопросы обладают высокими показателями j и s, но значительной вариабельностью. Например, «Ваше настроение обычно хорошее?» (в одном из вариантов опросника на определение нейротизма).

Парадокс типа В возникает при однозначных вопросах – таких, для которых легко подобрать ответ. Сюда же должны быть отнесены односторонние диагностические вопросы, т. е. те, для которых только один вариант ответа диагностически значим. Эти вопросы будут характеризоваться незначительной дискриминативной силой при слабовыраженной вариабельности (значение s также невелико). Например: «Часто ли вам снится, что вы оказались в пасти крокодила?» (в одном из вариантов опросника для определения уровня тревожности). Вопрос является диагностически односторонним, поскольку из ответа «да» мы можем заключить о наличии тревожности, а из ответа «нет» мы не можем сделать никакого вывода. Примером вопроса, обладающего малой вариабельностью и дискримина-тивной силой, приближающейся к нулю (при высоком значении s), на который легко ответить, может быть следующий: «Вы курите?».

Ясно, что чем больше в методике вопросов, дающих парадокс типа В, тем больше надежность, определяемая коэффициентом корреляции между результатами повторных исследований. Однако одновременно снижается дискриминативная сила вопросов. Хотя М. Новаковская и считает, что практически все вопросы вызывают психометрический парадокс (типа A или В), возможны и «идеальные» случаи. Например, вопрос: «Часто ли вы чувствуете себя по утрам измученным, разбитым?» (в одном из вариантов опросника для определения нейротизма) – вариабельность низкая, значения j и s высоки. Психометрический парадокс не возникает.

Исследователь, зная о существовании психометрического парадокса, может регулировать вариабельность ответов путем подбора вопросов с соответствующими параметрами.