Тесты можно рассматривать с разных точек зрения: как элемент контроля и как элемент обучения.
Примером теста как элемента контроля является тест обученности – это совокупность заданий, ориентированных на определение уровня усвоения определенных аспектов содержания обучения [1].
Важнейшими критериями диагностических тестов обученности являются:
– действенность теста: полнота, всесторонность проверки, пропорциональность представления всех элементов изучаемых знаний, умений. В качестве синонима термина «действенность» часто используются понятия валидность, показательность, представительность, репрезентативность. Неотъемлемым условием действенности теста является четкая и ясная постановка вопроса в пределах освоенных знаний. Если тест выходит за пределы освоенного содержания или же не достигает этих пределов, превышает запроектированный уровень обучения, то он не будет действенным для тех обучающихся, которым он адресован.
– надежность теста: характеризуется стабильностью, устойчивостью показателей при повторных измерениях с помощью того же теста или его равноценного заменителя. Количественно этот показатель характеризуется вероятностью достижения запроектированных результатов. Надежность теста повышается при увеличении количества тестовых заданий. Чем выше тематическое, содержательное разнообразие тестовых заданий, тем ниже надежность теста. Это следует понимать так: тест, нацеленный на проверку усвоения конкретной темы, всегда будет более надежным, чем тест, направленный на проверку всего раздела (курса), охватывающий значительное количество материала – закономерностей, концепций, фактов.
|
|
Надежность тестов обученности значительно зависит от трудности их выполнения, которая в свою очередь определяется соотношением правильных и неправильных ответов на тестовые вопросы. Включение в состав тестов таких заданий, на которые все обучающиеся отвечают правильно или же, наоборот, неправильно, резко снижает надежность теста в целом.
– дифференцированность теста: способность теста отделить тех, кто усвоил материал на необходимом уровне, от тех, кто заданного уровня не достиг. Для определения дифференцированности теста применяются такие статистические параметры, как индекс дифференциации и коэффициент дифференциации.
При составлении тестов необходимо руководствоваться следующими правилами:
– однозначность заданий: тестовые задания не должны допускать произвольного толкования;
– однозначность ответов: должна быть исключена возможность формулирования многозначных ответов;
– соответствие изученному: нельзя включать ответы, неправильность которых на момент тестирования не может быть обоснована учащимися;
– подбор дистракторов: неправильные ответы должны конструироваться на основе типичных ошибок и должны быть правдоподобными;
– уникальность: вопросы не должны повторять формулировок учебника.
После того как тест составлен, должна проводиться апробация. На основе статистических параметров определяются задания, которые не являются тестовыми, такие задания должны отбраковываться. Процесс совершенствования теста не должен заканчиваться апробацией. Необходимо постоянно отслеживать качество тестовых заданий, обращая особенное внимание на вновь добавленные. Для анализа тестовых заданий могут использоваться следующие статистические параметры:
|
|
1) Среднеквадратичное отклонение (СКО): измеряет разброс баллов, полученных испытуемыми при ответе на конкретное задание теста. Если все пользователи отвечают на вопрос одинаково, то разброс баллов, характеризуемый этим параметром, будет равен нулю (СКО=0). Это свидетельствует о том, что такое задание не является тестовым и, следовательно, должно отбраковываться.
2) Индекс дифференциации (ИД): является грубым индикатором способности конкретного тестового задания отделить более успешных испытуемых от менее успешных. Этот параметр может принимать значения между +1 (все испытуемые из сильной группы ответили правильно, а из слабой – неправильно) и -1 (все испытуемые из сильной группы ответили неправильно, а из слабой, напротив, – правильно). Отрицательные значения индекса свидетельствует о том, что слабые испытуемые отвечают на данный вопрос лучше, чем сильные. Такие тестовые задания должны отбраковываться. Фактически они уменьшают точность всей процедуры тестирования.
3) Коэффициент дифференциации (КД): другой способ измерения способности конкретного задания разделять сильных и слабых испытуемых. Коэффициент дифференциации – это коэффициент корреляции между множеством значений ответов, полученных испытуемыми при выполнении конкретного задания, с результатами выполнения ими теста в целом. Этот параметр также может принимать значения между +1 и -1.
Положительные значения соответствуют заданиям, которые действительно разделяют хорошо и слабо подготовленных учеников, в то время как отрицательное значение коэффициента свидетельствует о том, что плохо подготовленные ученики отвечают на данное задание в среднем лучше, чем хорошо подготовленные. Такие задания с отрицательным значением коэффициента дифференциации не являются тестовыми, так как не отвечают требованиям задачи тестирования по оценке уровня подготовленности испытуемых. Таких заданий следует избегать.
|
|
Преимущество коэффициента дифференциации по сравнению с индексом дифференциации состоит в том, что первый использует информацию от всей совокупности учеников, а не только критические верхние и нижние трети этой совокупности. Таким образом, этот параметр может быть более чувствителен для того, чтобы обнаруживать эффективность измерительной способности тестовых заданий.
Самым ярким примером теста обученности может быть любой тест с одной попыткой, после прохождения которого ученик получает итоговую оценку. Если же кроме балла отобразить ученику все варианты ответов, разграничив цветом правильные и неправильные, то у него появится возможность обдумать, где он ошибся, почему ошибся, почему именно этот ответ правильный. Он думает и анализирует – он обучается.
Можно использовать и другой способ настройки теста с целью дать учащимся возможность обдумать и проанализировать ход выполнения теста, исправить ошибку. Для этого можно не показывать правильность/неправильность всех вариантов ответа, а отобразить только ответ ученика и баллы за него. При этом дать возможность пройти тест несколько раз, перемешивая как сами вопросы, так и варианты ответов.
Таким образом, можно дать следующее определение обучающего теста: oбучающий тест – это совокупность заданий, ориентированных на определение уровня усвоения небольших по объему аспектов содержания обучения, которые предполагают предоставление ученику возможности анализа и, возможно, исправления своих ошибок.
Система управления обучением Moodle предоставляет широкий спектр возможностей для построения тестов различного рода:
– настраиваемое количество попыток прохождения теста;
– настраиваемые временные задержки между попытками;
– выбор метода оценивания (в случае нескольких попыток): высшая/низшая оценка, первая/последняя попытка;
– перемешивание как самих вопросов в тесте, так и вариантов ответов;
– обучающий режим: студент сможет ответить на вопрос несколько раз в рамках одной попытки. Возможно начисление штрафных баллов за каждый неправильный ответ;
– настраиваемый режим просмотра результатов: что (свой ответ, баллы, комментарии, все ответы, общий комментарий ко всему тесту) и когда (сразу после попытки, позже, но до того как тест будет закрыт, после того как тест будет закрыт) сможет увидеть студент;
– настраиваемые комментарии ко всему тесту в зависимости от полученной оценки;
– настраиваемые комментарии для каждого варианта ответа;
– настраиваемый комментарий для каждого вопроса;
– конструирование теста на основе случайного выбора вопросов из категорий.
При построении курса обучения его можно насытить небольшими обучающими тестами различного рода (тест самоконтроля, тренинг). Основной характеристикой таких тестов должна быть возможность анализа и, возможно, исправления своих ошибок учеником. Для этого необходимо:
– дать студенту возможность несколько раз пройти тест;
– в зависимости от того, насколько вы хотите помочь ученику в поиске ошибки, настроить режим просмотра результатов. Чем больше информации вы ему дадите, тем легче ему будет разобраться, в чем именно он ошибся. Чем меньше – тем больше ему надо будет подумать самому;
– для каждого дистрактора добавить комментарий, который будет выводиться ученику, если он выберет именно этот вариант ответа.
Некоторые варианты заданий с использованием элемента курса «Тест»