Оценка качества тестов (КИМ) – также основная задача ЕГЭ. Качество включает оценку валидности, надежности тестов, эти два фактора – важнейшие характеристики тестовых испытаний.
Надежность отражение методики, точности измерения, устойчивости результатов повторного тестирования (при воздействии случайных факторов). Испытуемый должен получать знания в при тестировании, обучаться на ошибках, анализируя свои результаты испытаний (а, возможно, и чужие - если они общедоступны, разумеется).
Надежность теста измеряется обычно стандартной ошибкой (чем ниже она – тем выше надежность). Согласно классике тестологии тестовый балл представим как сумма балла «знаний» и балла «угадывания». Коэффициент надежности измеряется отношением среднеквадратичных отклонений по этим типам баллов. Чем ближе оно к 1 – тем выше надежность. Если этот коэффициент – в [0,9;0,99], то у теста отличная надежность; в [0,8;0,89] – хорошая; в [0,7;0,79] – удовлетворительная.
Для тестов текущего контроля необходим уровень от 0,8, для тестов итоговой аттестации (например, ЕГЭ) – от 0,9.
При оценке необходимо быть осторожным при выборе самих заданий (теста), выборе критериев (методов, алгоритмов) оценки надежности.
|