Различные аспекты диагностического тестирования уже освещались при рассмотрении конкретных вопросов. Напомним, что слово «тест » английского происхождения и на языке оригинала означает «испытание», «проверка». Тест обученности – это совокупность заданий, сориентированных на определение (измерение) уровня (степени) усвоения определенных аспектов (частей) содержания обучения. Правильно составленные тесты обученности должны удовлетворять ряду требований.
Они должны быть:
- относительно краткосрочными, т. е. не требовать больших затрат времени;
- однозначными, т. е. не допускать произвольного толкования тестового задания;
- правильными, т. е. исключать возможность формулирования многозначных ответов;
- относительно краткими, требующими сжатых ответов;
- информационными, т. е. такими, которые обеспечивают возможность соотнесения количественной оценки за выполнение теста с порядковой или даже интервальной шкалой измерений; удобными, т. е. пригодными для быстрой математической обработки результатов; стандартными, т. е. пригодными для широкого практического использования – измерения уровня обученности возможно более широких контингентов обучаемых, овладевающих одинаковым объемом знаний на одном и том же уровне обучения.
Тесты обученности, или, как их еще называют, школьные тесты, – это всего лишь одна из разновидностей психологических и педагогических испытаний для диагностирования различных сторон развития и формирования личности. Если в основу классификации тестов положить различные аспекты (компоненты) развития и формирования человеческих качеств, то она будет выглядеть следующим образом:
1. Тесты общих умственных способностей, умственного развития.
2. Тесты специальных способностей в различных областях деятельности.
3. Тесты обученности, успеваемости, академических достижений.
4. Тесты для определения отдельных качеств (черт) личности (памяти, мышления, характера и др.).
5. Тесты для определения уровня воспитанности (сформированности общечеловеческих, нравственных, социальных и других качеств).
Применение тех или иных тестов будет наиболее эффективным и обеспечит надежные выводы лишь при условии правильного их сочетания со всеми другими группами тестов. Поэтому тестовые испытания всегда имеют комплексный характер. Делать общие выводы, например, об уровне развития обучаемых на основе применения лишь тестов обученности было бы непростительной ошибкой. Когда ставится задача диагностирования обученнсти в связи с достижениями и развитием личности, нужно применять соответствующие виды тестовых заданий и предписанные им методики измерения, не забывая о локальном характере диагностирования.
При разработке тестов важно, насколько они соответствуют запроектированным целям обучения, образования, развития обучаемых. Важнейшими критериями диагностических тестов обученности являются:
- действенность (валидность, показательность),
- надежность (вероятность, правильность),
- дифференцированность (различимость).
Действенность теста по своему содержанию близка к требованию полноты, всесторонности проверки, пропорционального представления всех элементов изучаемых знаний, умений. Термин «действенность» имеет, как минимум, два синонима – валидность (от англ, valid — имеющий значение, ценный) и показательность, представительность, трактуемые так же, как репрезентативность. Всегда имеется в виду, что составитель теста обязан тщательно изучить все разделы учебной программы, учебные книги, хорошо знать цель и конкретные задачи обучения. Лишь тогда он сможет составить тесты, которые будут действенными для определенной категории обучаемых.
Четкая и ясная постановка вопроса в пределах освоенных знаний – неотъемлемое условие действенности теста. Если тест выходит за пределы освоенного содержания или же не достигает этих пределов, превышает запроектированный уровень обучения, то он не будет действенным для тех обучаемых, которым он адресован. Усвоение математики, скажем, в специализированном физико-математическом лицее нельзя диагностировать с помощью тех тестов, которые предназначены для общеобразовательной школы.
Действенность теста определяется статистическими методами. Величина 0,7-0,9 свидетельствует о высокой действенности тестов обученности. Если же коэффициент корреляции достигает 0,45-0,55, то действенность теста считается удовлетворительной, при более низких значениях она считается неудовлетворительной.
Степень надежности характеризуется стабильностью, устойчивостью показателей при повторных измерениях с помощью того же теста или его равноценного заменителя. Количественно этот показатель характеризуется вероятностью достижения запроектированных результатов (правильностью значений). Грамотно составленные и апробированные тесты обученности позволяют достичь коэффициента надежности 0,9. Установлено, что надежность теста повышается при увеличении количества тестовых заданий.
Установлено также, что чем выше тематическое, содержательное разнообразие тестовых заданий, тем ниже надежность теста. Это следует понимать так: тест, нацеленный на проверку усвоения конкретной темы, всегда будет более надежным, чем тест, направленный на проверку всего раздела (курса), охватывающий значительное количество материала – закономерностей, концепций, фактов. Происходит это именно потому, что содержательное разнообразие последнего выше.
Надежность тестов обученности значительно зависит от трудности их выполнения. Трудность определяется по соотношению правильных и неправильных ответов на тестовые вопросы. Включение в состав тестов таких заданий, на которые все обучаемые отвечают правильно или же, наоборот, неправильно, резко снижает надежность теста в целом. Наибольшую практическую ценность имеют задания, на которые правильно отвечают 45-80% обучаемых.
Характеристика дифференцированности (различимости) связана с использованием таких тестов, где нужно выбирать правильный ответ из нескольких возможных альтернатив. Если, скажем, все учащиеся безошибочно находят правильный ответ на один вопрос и также дружно не могут ответить на другой, то это сигнал для совершенствования теста в целом. Его необходимо дифференцировать, сделать различимым. Иначе подобные задания не помогут отделить тех, кто усвоил материал на необходимом уровне, от тех, кто заданного уровня не достиг.
Практически дифференцируют тесты по результатам статистического анализа, сравнивая результаты выполнения теста в целом с результатами выполнения отдельных заданий. Если коэффициент корреляции между ответами на конкретные задания и на тест в целом больше 0,5, то это свидетельствует о достаточной дифференцированности теста.
Кроме рассмотренных критериев используется и показатель эффективности теста. Тест, обеспечивающий при прочих равных условиях большее количество ответов за единицу времени, считается более эффективным. Например, за 10 мин тестирования от учащихся можно получить и 5, и 8, и 10 ответов при использовании различных методик составления тестовых заданий.
При подготовке материалов для тестового контроля необходимо придерживаться таких основных правил:
1. Нельзя включать ответы, неправильность которых на момент тестирования не может быть обоснована учащимися.
2. Неправильные ответы должны конструироваться на основе типичных ошибок и должны быть правдоподобными.
3. Правильные ответы среди всех предлагаемых ответов должны размещаться в случайном порядке.
4. Вопросы не должны повторять формулировок учебника.
5. Ответы на одни вопросы не должны быть подсказками для ответов на другие.
6. Вопросы не должны содержать «ловушек».
Тесты обученности применяются на всех этапах дидактического процесса. С их помощью эффективно обеспечивается предварительный, текущий, тематический и итоговый контроль знаний, умений, учет успеваемости, академических достижений.
Предварительный контроль. Успех изучения любой темы (раздела или курса) зависит от степени усвоения тех понятий, терминов, положений и т.д., которые изучались на предшествующих этапах обучения. Если информации об этом у педагога нет, то он лишен возможности проектирования и управления в учебном процессе, выбора оптимального его варианта. Необходимую информацию педагог получает, применяя пропедевтическое диагностирование, более известное педагогам как предварительный контроль (учет) знаний. Последний необходим еще и для того, чтобы зафиксировать (сделать срез) исходный уровень обученности. Сравнение исходного начального уровня обученности с конечным (достигнутым) позволяет измерять «прирост» знаний, степень сформированности умений и навыков, анализировать динамику и эффективность дидактического процесса, а также сделать объективные выводы о «вкладе» педагога в обученность учащихся, эффективности педагогического труда, оценить мастерство (профессионализм) педагога.
Если известны входные и выходные характеристики системы, проблемы ее оптимизации считаются во многом решенными. Собрать максимальный объем информации о входных характеристиках обученности и оценить их в количественных показателях удается с помощью тестирования, которое осуществляется с помощью специально разработанных для этой цели заданий.
Текущий контроль. Он необходим для диагностирования хода дидактического процесса, выявления динамики последнего, сопоставления реально достигнутых на отдельных этапах результатов с запроектированными. Кроме собственно прогностической функции текущий контроль и учет знаний, умений стимулирует учебный труд учащихся, способствует своевременному определению пробелов в усвоении материала, повышению общей продуктивности учебного труда.
Обычно текущий контроль осуществляется посредством устного опроса, который все время совершенствуется: педагоги все шире практикуют такие его формы, как уплотненный, фронтальный, магнитофонный и др. Тестовые задания для текущего контроля (их количество обычно не превышает 6-8) формируются так, чтобы охватить все важнейшие элементы
знаний, умений, изученные учащимися на протяжении последних 2-3 уроков. Длительность выполнения теста не должна превышать 10-12 мин. Некоторые педагоги предлагают проводить такое тестирование через каждые два урока на третий, но все определяется конкретными особенностями и потребностями. После завершения работы обязательно анализируются допущенные обучаемыми ошибки. Для ускорения анализа используются образцовые тесты с правильными ответами, очень важно достичь при этом осознания каждым обучаемым причины возникновения ошибок. Если текущий контроль осуществляется с помощью автоматизированных устройств (ЭВМ, тренажеров, перфокарт и т. д.), то необходимо обратить внимание на предотвращение возможности запоминания неправильных ответов.
Тематический контроль. Составление тематического тестового задания требует кропотливого и тщательного труда. Ведь речь идет не просто о проверке усвоения отдельных элементов, а о понимании системы, объединяющей эти элементы. Значительную роль при этом играют синтетические, комплексные задания, объединяющие вопросы об отдельных понятиях темы, направленные на выявление информационных связей между
ними. Для тематического тестового контроля лучше всего использовать готовые тестовые задания, разработанные профессионалами службы педагогического тестирования. Последняя начинает свое функционирование в системе Минобразования РФ.
Итоговый контроль. Осуществляется во время заключительного повторения в конце каждой четверти и учебного года, а также в процессе экзаменов (зачетов). Именно на этом этапе дидактического процесса систематизируется и обобщается учебный материал. С высокой эффективностью могут быть применены соответствующим образом составленные тесты обученности. В школьной практике используются различные варианты итоговых тестов обученности. Эффективными оказались тестовые карточки для проведения выпускных (вступительных) экзаменов, подкрепляемые различными техническими приспособлениями для ускорения проверки. Главное требование к итоговым тестовым заданиям одно – они должны соответствовать уровню национального стандарта образования. Все большее распространение получают технологии итогового тестирования с применением компьютеров и специализированных программ. Компьютерная программа «Ордана» для тестовой поддержки нашего курса является примером такой технологии.
Для технической поддержки тестирования используются специальные средства, которые подразделяются на две большие группы. К первой относятся устройства (приспособления) для индивидуальной проверки – перфокарточки различных видов, матрицы, учетные карточки и т. п.
Вторую группу составляют средства группового контроля – автоматизированные классы (контрольно-обучающие комплексы), реализующие идеи программированного обучения. Именно сочетанием эффективного управления познавательным процессом и систематизированным тестированием обученности (обеспечением оперативной обратной связи) и достигается существенное повышение качества дидактического процесса. Современные быстродействующие компьютеры позволяют реализовать совершенные в диагностическом отношении тесты.
Тесты обученности все больше проникают в массовую практику. Ныне кратковременный опрос всех учащихся на каждом уроке с помощью тестов используют почти все педагоги. Преимущество такой проверки в том, что одновременно занят и продуктивно работает весь класс и за несколько минут можно получить срез обученности всех учащихся. Это вынуждает их готовиться к каждому уроку, работать систематически, чем и решается проблема эффективности и необходимой прочности знаний. При проверке определяются прежде всего пробелы в знаниях, что очень важно для продуктивного самообучения. Индивидуальная и дифференцированная работа с обучаемыми по предупреждению неуспеваемости также основывается на текущем тестировании.
Естественно, не все необходимые характеристики усвоения можно получить средствами тестирования. Такие, например, показатели, как умение конкретизировать свой ответ примерами, знание фактов, умение связно, логически и доказательно выражать свои мысли, некоторые другие характеристики знаний, умений, навыков диагностировать тестированием невозможно. Это значит, что тестирование должно обязательно сочетаться с другими (традиционными) формами и методами проверки. Правильно действуют те педагоги, которые, используя письменные тесты, дают возможность обучаемым устно обосновывать свои ответы.