Стандартизация, надежность и валидность теста

Надежность теста. Если тест проводить много раз, то среднее значение будет характеристикой «истинной» величины параметра. Под надежностью теста принято понимать устойчивость результатов к воздействию случайных факторов, внешних и внутренних. Наиболее часто проводится оценка ретестовой надежности. Чем теснее коррелируют результаты начального и повторного (обычно отсроченного на несколько месяцев) проведения теста, тем он надежнее.

Тест считается надежным, если коэффициент корреляции результатов составляет не менее 0,75.

Валидность теста. Валидность означает пригодность теста измерять то свойство, для измерения которого он предназначен. Чем больше на результат выполнения теста или отдельного задания влияет измеряемое свойство и чем меньше другие переменные, тем тест валиднее.

Тест валиден (и надежен), если на его результаты влияет лишь измеряемое свойство. Тест невалиден (и ненадежен), если результаты тестирования определяются влиянием нерелевантных переменных.

Существуют следующие виды валидности теста.

Очевидная валидность. Тест считается валидным, если у испытуемого складывается впечатление, что он измеряет то, что должен измерять.

Конкретная валидность (конвергентная – дивергентная валидность). Тест должен хорошо коррелировать с тестами, измеряющими конкретное свойство либо близкое ему по содержанию, и иметь низкие корреляции с тестами, измеряющими заведомо иные свойства.

Прогностическая валидность. Тест должен коррелировать с отдаленными по времени внешними критериями.

Содержательная валидность. Тест должен охватывать всю область изучаемого поведения.

Конструктная валидность. Предполагает полное описание измеряемой переменной, выдвижение системы гипотез о связях ее с другими переменными, эмпирическое подтверждение (неопровержение) этих гипотез.

Стандартизация теста заключается в приведении процедуры оценок к общепринятым нормативам. Стандартизация предполагает преобразование нормальной или искусственно нормализованной шкалы первичных оценок в шкальные оценки. Тестовые нормы, полученные в ходе стандартизации, представляют собой систему шкал с характеристиками распределения тестового балла для различных выборок. Они не являются «внутренними» свойствами теста, а лишь облегчают его практическое применение.

Требования к разработке, проверке и адаптации тестовых методик

Адаптация теста – это комплекс мероприятий, обеспечивающих адекватность теста в новых условиях применения. Выделяют следующие этапы адаптации тестов:

Психологическая диагностика — наука о конструировании методов оценки, измерения, классификации психологических и психофизиологических особенностей людей, а также об использовании этих методов в практических целях.

Можно выделить две функции психологической диагностики — научную и практическую.

Первая характеризует ее как научно-исследовательскую область и представляет собой деятельность по конструированию психодиагностических методик. Поскольку их используют в практических целях, к ним предъявляются особые требования, связанные с повышением точности и объективности показателей, они разрабатываются по определенным правилам и проверяются по ряду критериев.

В первую очередь это делается для того, чтобы оценить их качество и практическую полезность, пригодность для решения прикладных задач.

См. методичка Садова.

Требования, предъявляемые к тестам:

 

К тестам, как методам точной психодиагностики предъявляется ряд особых требований. Это:

· Социокультурная адаптированность теста – соответствие тестовых заданий и оценок особенностям культуры, сложившимся в обществе, где данный тест используется, будучи заимствованным в другой стране.

· Простота формулировок и однозначность тестовых заданий – в словесных и иных заданиях теста не должно быть таких моментов, которые могут по-разному восприниматься и пониматься людьми.

· Ограниченное время выполнения тестовых заданий – полное время выполнения заданий психодиагностического теста не должно превышать 1,5-2 часов, т. к. сверх этого времени человеку трудно сохранить свою работоспособность на достаточно высоком уровне.

· Наличие тестовых норм для данного теста – репрезентативные средние показатели по данному тесту, - т. е. показатели, представляющие большую совокупность людей, с которыми можно сравнивать показатели данного индивида, оценивая уровень его психологического развития.

Норма теста – средний уровень развития большой совокупности людей, похожих на данного испытуемого по ряду социально – демографических характеристик.

Особые требования, предъявляемые к психодиагностическим методикам:

Для уверенности в достоверности результатов психодиагностических исследований необходимо, чтобы используемые психодиагностические методы были научно обоснованы, т. е. отвечали ряду требований.

Такими требованиями являются

· Валидность – “полноценность”, “пригодность”, “соответствие”. Есть несколько разновидностей валидности.

· Валидность теоретическая – определяется по соответствию показателей исследуемого качества, получаемых с помощью данной методики, показателям, получаемым с помощью других методик. Теоретическую валидность проверяют по корреляциям показателей одного и того же свойства, получаемым при помощи различных методик, опирающихся или исходящих из одной и той же теории.

· Валидность эмпирическая – проверяется по соответствию диагностических показателей реальному поведению, наблюдаемым действиям и реакциям испытуемого. По критерию эмпирической валидности методику проверяют путем сравнения ее показателей с реальным жизненным поведением людей.

· Валидность внутренняя - означает соответствие содержащихся в методике заданий, субтестов, суждений и т. п. общей цели и замыслу методики в целом. Она считается внутренне не валидной, когда все или часть вопросов, заданий или субтестов измеряют не то, что требуется от данной методики.

· Валидность внешняя – примерно то же, что и эмпирическая валидность, но тут речь идет о связи между показателями методики и наиболее важными внешними признаками, относящимися к поведению испытуемого.

Валидность методики проверяется и уточняется в процессе ее достаточно длительного использования.

Критерии валидностьи:

· Поведенческие показатели – реакции, действия и поступки испытуемого в разных жизненных ситуациях.

· Достижения испытуемого в различных видах деятельности: учебной, трудовой, творческой и др.

· Данные о выполнении различных контрольных проб и заданий.

· Данные, полученные от других методик, валидность которых или связь с данной методикой считаются достоверно установленными.

· Надежность – характеризует возможность получения с помощью данной методики устойчивых показателей. Надежность психодиагностической методики можно установить двумя способами:

· путем сравнения результатов, получаемых по этой методике разными людьми

· путем сравнения результатов, получаемых по одной и той же методике в различных условиях.

· Однозначность методики – характеризуется тем, в какой степени получаемые с ее помощью данные отражают изменения именно и только того свойства, для оценки которого данная методика применяется.

· Точность – отражает способность методики тонко реагировать на малейшие изменения оцениваемого свойства, происходящие в ходе психодиагностического эксперимента. Чем точнее психодиагностическая методика, тем тоньше с ее помощью можно оценивать градации и выявлять оттенки измеряемого качества, хотя в практической психодиагностике не всегда требуется очень высокая степень точности оценок.