|
Согласованность оценок экспертов касается принятия одинаковых решений по оцениваемым вариантам. Как известно, на ЕГЭ работу вручную (т.е. группу «С») проверяют два эксперта из комиссии, а если такие оценки не совпадают, - то подключается и третий эксперт (обычно председатель комиссии по предмету).
В тестировании согласованность относится к решениям по двум тестам или двум предъявлениям одного же теста. Если результаты по каждому предъявлению одинаковы, то и решения по ним – согласованы.
Какие факторы влияют на согласованность оценок? Их пять основных:
· статистическая независимость тестовых баллов;
· длина теста (число заданий);
· порог баллов в распределениях сырых оценок;
· мощность выборки (генерализуемость оценки);
· схожесть (подобие) распределений оценок (по двум тестам или формам).
Если эти условия выполнены – можно анализировать согласованность оценок.
|
