Следует подчеркнуть также важность оценки трудности теста. Нередко составители теста путают трудность тестов со сложностью измеряемого им интеллектуального процесса. Задание или тест, требующее простого воспроизведения, может быть очень трудным из-за не корректно поставленного вопроса или большого объема элементарных операций. С другой стороны, тест, требующий интерпретации данных или применения принципов решения может быть простым, потому что сами принципы или методы решения хорошо известны.
Тесты должны обладать следующими свойствами:
1) валидность (адекватность, обоснованность);
2) определенность (общепонятность);
3) надежность;
4) практичность;
5) простота в использовании;
6) прогностическая ценность.
Валидность теста отражает, что именно должен измерить тест и насколько хорошо он это делает; показывает, в какой мере тест измеряет то качество (свойства, способности и т.п.), для оценки которого он предназначен. Не обладающие валидностью тесты не пригодны для практического использования. Выделяют три типа валидности: