Особенности оценивания качества обучения
Традиционно экзамен или зачет, проводящийся с помощью системы автоматизированного тестирования, состоит в том, что экзаменуемому задается определенное количество вопросов независимо от того, насколько хорошо или плохо он на них отвечает. Количество набранных баллов при использовании теста такого рода зависит от количества правильных ответов. При этом делается естественное предположение – чем выше качество знаний, тем на большее количество вопросов экзаменуемый отвечает правильно. Такая форма тестирования распространена и используется весьма успешно, однако в применении к конкретному испытуемому количество заданных вопросов может оказаться больше или меньше, чем необходимо для получения адекватной оценки качества его знаний. На практике сложно подготовить тест с вопросами одинаковой степени сложности: в тесте фиксированной длины могут быть вопросы, которые для определенного человека окажутся слишком легкими, и вопросы слишком трудные для него. И в этом случае верные ответы на легкие вопросы и неправильные ответы на трудные вопросы не придадут такому тесту должной степени валидности.
Гораздо лучше, если бы нелинейная тестирующая система могла определять тот уровень сложности вопросов, на котором у экзаменуемого начинают возникать проблемы. Этот уровень мог бы как определить оценку (для экзаменатора), так и выявить сложные места (для экзаменуемого). Целесообразность подобного контроля, адаптирующегося к возможностям обучаемого, следует также из необходимости оптимизировать традиционное тестирование. Для каждого педагога очевиден тот факт, что для обучаемых с хорошей подготовкой легкие задания просто неинтересны, и, наоборот, трудные задания снижают мотивацию к обучению у имеющих относительно слабую подготовку.
Новым шагом в этом направлении стал САТ (англ, computer adaptive test – компьютерный адаптивный тест). Это тест, в который заложена приспособляемость к возможностям экзаменуемого. Принцип тестирования с использованием САТ состоит в следующем: при выполнении одного и того же адаптивного теста экзаменуемые с высоким и низким уровнями подготовки получат совершенно разные наборы вопросов: первому будут предложены сложные вопросы, а второму – легкие. Если в итоге доли правильных ответов у обоих даже совпадут, то первый наберет большее количество баллов, так как он отвечал на более сложные вопросы.