Содержаниезаданий и всего теста в целом должно удовлетворять определенным требованиям: 1) полнота отображения материала учебной программы; 2) соответствие теста требованиям Образовательного стандарта по дисциплине; 3) соответствие содержания теста знаниям и умениям, на проверку которых тест направлен; 4) качество содержания тестовых заданий.
Главными параметрами тестов должны быть надежность и валидность. Надежность - устойчивость результатов теста, получаемых при его применении. Валидность - пригодность теста, т.е. способность качественно измерять то, для чего он создан по замыслу авторов. Определение надежности и валидности тестов проводится путем статистической обработки результатов массового тестирования по различным группам испытуемых.
Продолжительность тестирования зависит от форм, количества и трудности заданий. Например, для выполнения простого тестового задания закрытой формы с выбором одного элемента из предложенных достаточно 10-15 секунд; на выполнение тестирования по заданию Единого государственного экзамена или при поступлении в вуз отводится не более 180 минут.
Основные требования к программному обеспечению компьютерного тестирования сводятся к следующему.
Современная контролирующая система должна быть построена на основе общих принципов, не зависящих от вида дисциплины и содержания тестов, то есть должна быть универсальной. Каждый предметник может наполнять ее содержательную часть по своему усмотрению.
Контролирующая система должна иметь возможность обеспечить создание тестов, проведение тестирования, и подведение итогов тестирования в соответствующей базе данных.
Компьютерной программой должна быть предусмотрена невозможность доступа тестируемых к правильным ответам теста.
Компьютерная программа должна обладать возможностью настройки на проведение тестирования с применением различных режимов тестирования и типов вопросов, случайной выборки заданий, ограничения времени тестирования и т.д.
Отдельные тесты в тестовых заданиях (вариантах) могут быть различной степени сложности. Выбор формы и степени сложности тестовых заданий зависит от вида, цели и задач тестового контроля знаний учащихся. В среднем на решение одного теста должно затрачиваться около 2-3 минут. Время диагностического тестирования может быть в пределах 5-7 минут, текущего – 15-20 минут, итогового – 2-3 часов.