Удобной формой представления наблюдаемых результатов выполнения теста служит матрица, т.е. прямоугольная таблица, сводящая воедино профили ответов учеников и профили заданий теста (рис. 2.9).
| Испытуемые | Задания
| Индивидуальный балл (X,) |
* 
| 
| 
|
| Количество правильных ответов на задание (Ri) | 
| 
|
Рис. 2.9. Матрица наблюдаемых результатов выполнения теста
В матрице представлены ответы N учеников на п заданий теста. Справа от матрицы, в вертикальном столбце, содержатся индивидуальные баллы учеников Xi (i - I, 2,..., N), которые получаются суммированием единичек по горизонтали в каждом профиле ответов W испытуемых группы. Сложение единичек в столбцах по профилям ответов на п заданий теста позволяет получить числа Rj (j=1, 2,..., п), соответствующие количеству правильных ответов на каждое задание теста.
С помощью матрицы можно выполнить ряд расчетов (см. гл. 5), интерпретация результатов которых позволяет сделать важные выводы относительно тестовых баллов учеников и качества заданий теста. Характер выводов зависит от того, насколько продвинулся педагог в своей работе над тестом. Если тест далек по своим показателям от требований критериев качества, то истинные баллы учеников получить нельзя. В этом случае использование теста носит исключительно исследовательский характер и все выводы направлены на повышение качества отдельных заданий и всего теста. Если же работа над тестом в основном завершена то все усилия педагога направлены на получение истинных баллов учеников по наблюдаемым результатам выполнения теста, а оценки характеристик теста предназначены для подтверждения его качества и перепроверки отдельных оценок параметров заданий.
ЭТАПЫ ВАЛИДИЗАЦИИ ТЕСТА
В работе по созданию теста можно выделить четыре основополагающих этапа, нацеленных на повышение его валидности.
Первый этап носит в основном теоретический характер, так как он целиком связан с выделением на концептуальном уровне переменной измерения.
Второй этап прагматического характера посвящен работе по созданию заданий, содержание которых должно обеспечить оценку испытуемых по выделенной переменной измерения.
Третий этап предназначен для проверки заданий на репрезентативной выборке учеников с целью удаления невалидных заданий из теста. Выполнение этапа позволяет сделать первые шаги по улучшению качества содержания теста, а также получить первые выводы о примерном содержании теста и о его ожидаемых качественных характеристиках.
Четвертый этап непосредственно предваряет момент использования, он посвящен работе с выборкой учеников и заключается в удалении несостоятельных профилей испытуемых из матрицы наблюдаемых результатов выполнения теста.
В заключение хотелось бы подчеркнуть тот факт, что в содержании раздела полностью отсутствует какой-либо математический аппарат. Выполнение рекомендованных процедур вполне по силам педагогам либо группам педагогов, занимающимся созданием тестов. Оно не отнимет много времени и сил, зато позволит существенно продвинуться вперед по пути создания качественного теста.
