Тестирование
Тестирование — широко распространенный вид контроля знаний. Он используется по многим дисциплинам многих специальностей, как технических, так и гуманитарных. Тестирование позволяет оперативно и достаточно точно определить уровень знаний учащихся и применяется с целью промежуточной аттестации учащегося и решения вопроса о его допуске к зачету или экзамену. Использование тестирования, с одной стороны, повышает качество подготовки учащегося, с другой стороны, облегчает труд учителя, так как к экзамену допускаются учащиеся, показавшие по результатам тестирования наличие некоторого минимума знаний. Использование тестирования в качестве итоговой аттестации, по нашему мнению, не целесообразно, так как ответы на вопросы теста жестко фиксированы и не позволяют (или с большими трудностями позволяют) выявить связи данного вопроса с другими вопросами данной (или смежной) дисциплины.
Преимущества использования тестирования:
оперативность получения сведений о знаниях учащегося,
объективность полученных результатов,
возможность получения статистических данных об успеваемости каждого учащегося и группы учащихся,
возможность получения сведений о динамике успехов (или о снижении результатов) учащихся, возможность определения тем и вопросов, слабо освоенных учащихся.
К недостаткам тестирования следует отнести:
трудности формулировки вопросов теста, составления нескольких однозначных и точных ответов на поставленный вопрос,
определения качественного состава и количества вопросов, входящих в один тест,
оценки результатов тестирования в силу неодинаковости (по значимости и сложности) вопросов, входящих в один тест,
сложности идентификации и аутентификации тестируемого учащегося.
Структуризация тестов
Одним из наиболее трудоемких этапов в разработке тестов является этап составления заданий. Тест должен полностью отражать контролируемый материал, не содержать избыточных заданий, соответствовать целям тестирования. Поэтому сначала нужно конкретизировать предметную область: разбить ее на отдельные темы, подтемы и т. д. до понятий, входящих в тему. Уровень конкретизации может быть разным в зависимости от уровня изложения материала, поэтому одна и та же тема может быть представлена различным набором подтем, понятий (назовем их учебными элементами). Затем устанавливаются связи между элементами: один элемент может использоваться при определении другого, элементы могут быть связаны по своим свойствам или особенностям и т. п. Таким образом, вся предметная область покрывается сетью учебных элементов, которые связываются между собой.
Технология разработки теста
Разработка теста начинается с введения, в котором описывается проблемная ситуация при контроле знаний по изучаемой дисциплине, наличие педагогических тестов, их достоинства и недостатки, адекватность реальной ситуации и проблемы применения. Далее излагаются цели, которые ставятся при разработке и применении данного теста, и задачи, решаемые при достижении поставленных целей. Затем описывается предполагаемый контингент для тестирования, время и условия применения теста.
Необходимо отметить, что в состав теста включают только те задания, которые выражают его системные свойства. Согласно этим свойствам задания должны быть краткими по форме и четкими по содержанию. Они должны отличаться друг от друга по сложности и располагаться в тесте в порядке ее возрастания. Задания, имеющие определенный порядковый номер в тесте, должны обладать заданной дифференцирующей способностью (т. е. способностью отсекать заданный процент испытуемых), которая аппроксимируется моделью нормального закона распределения. Задания должны удовлетворять свойству предметной чистоты, обычно выявляемому посредством корреляционного анализа. Для группировки заданий по степени близости в кластеры (группы) используют математический аппарат кластерного анализа.
Наибольшее распространение на практике получили четыре основные формы тестовых заданий.
Исторически первой является форма заданий, где есть готовые ответы, из которых обычно один бывает правильным, а остальные — неправильные. Задания такой формы стали применяться с начала 20-х гг. и получили название закрытых. Инструкция к выполнению заданий этой формы: «обвести кружком (или ввести в компьютер) номер правильного ответа». Тестовые задания закрытой формы могутиметь два и более варианта ответов. С точки зрения достаточно малой вероятности угадывания и психологической обоснованности ограничения числа вариантов оптимальными мы считаем задания с четырьмя или пятью вариантами ответов.
В качестве примера приведем задание закрытой формы с пятью вариантами ответов:
Поверхность жидкости в цилиндрическом сосуде, вращающемся вокруг вертикальной оси, имеет форму:
1) гиперболоида;
2) сферы;
3) эллипсоида;
4) параболоида;
5) конуса.
Если до начала 80-х г.г. задания закрытой формы были самыми распространенными, то затем большую популярность приобретают также задания открытой формы с инструкцией «дополнить». Отвечая на каждое задание, испытуемый дописывает (вводит в компьютер) ответ в месте прочерка посредством добавления одного или нескольких ключевых слов, после чего предположение приобретает утвердительную форму.
Например: Самым легким щелочным металлом является…
В заданиях данной формы широко применяется идея «фасета», т. е. составление обладающих одинаковой мощностью параллельных заданий.
Например: Священная книга {мусульман, христиан, иудеев, ...} называется
Третьей формой тестовых заданий являются появившиеся сравнительно недавно задания с инструкцией «установить соответствия». Суть их заключается в необходимости сопоставить элементы одного множества элементам другого множества с вдвое большей мощностью. При этом каждому элементу первого множества соответствует один и только один элемент второго. Например, задание такой формы по курсу русской литературы XIX в. может иметь вид:
АВТОР
1. А.С. Пушкин
2. Л.Н. Толстой
3. Н.В. Гоголь
ПРОИЗВЕДЕНИЕ:
А. «Мертвые души»
Б. «Горе от ума»
В. «Война и мир»
Г. «Евгений Онегин»
Д. «Отцы и дети»
Ответ: 1 ,2 ,3
В строке «ответ» после каждой цифры испытуемый ставит соответствующую букву. Задание считается выполненным верно, если все соответствия в нем установлены правильно.
Наконец, четвертая форма тестовых зданий — это задания на установление правильной последовательности, служащие для проверки знания последовательности действий, процессов, операций, суждений, вычислений и т. п. В качестве инструкции можно использовать фразу: «Установить правильную последовательность ...», которая в том илиином виде может входить в формулировку задания. Указанные действия нумеруются, а в ответе проставляется код, характеризующий их правильную последовательность.
Например: Установить правильную последовательность стадии очистки сточных вод:
1) механическая;
2)химическая;
3) биологическая;
4)термическая.
Ответ: __,___,___
Полученные задания должны пройти внутреннюю экспертизу, на предметную и лингвистическую корректность, в результате чего одни из них удаляются, другие корректируются, а третьи заново вводятся в тест.
Характеристики тестовых заданий и результатов тестирования
Рассмотрим характеристики, которые будут использоваться в модели тестирования. Будем использовать следующие характеристики тестовых заданий:
форма задания;
варианты ответов;
степень правильности каждого варианта ответа;
сложность задания.
Форма задания
Существуют четыре формы тестовых заданий:
1) задания с выбором варианта ответа, которые делятся на три подгруппы: задания с выбором одного правильного варианта ответа (одновариантные задания),задания с выбором нескольких правильных вариантов ответа (многовариантные задания), задания с выбором наиболее правильного варианта ответа;
2) задания открытой формы;
3) задания на установление соответствия;
4) задания на установление правильной последовательности.
Варианты ответа
Варианты ответа указываются для заданий с выбором варианта ответа, заданий на установление соответствия и заданий на установление правильной последовательности. Они могут указываться и для заданий открытой формы, если оценка правильности ответа определяется путем сравнения с эталонами, а не преподавателем и не интеллектуальным разбором ответа.
Степень правильности каждого варианта ответа
Степень правильности может указываться одним из трех способов:
1) оценкой «правильно» или «неправильно» (1 или 0);
2) количеством баллов, полученных обучаемым за выбор данного варианта. Может измеряться целым или дробным числом. Обычно берутся числа из интервала [0, 1];
3) с использованием нечеткой математики.
Оценка правильности ответа
Тестирование проводится по методу «вопрос — ответ», когда обучаемому последовательно предлагаются тестовые задания, а он должен отвечать на них. После ответа на каждое задание производится оценка правильности ответа. Предлагается данную оценку давать в нечетком виде по той же шкале, что используется для оценки степени правильности вариантов ответа. Для каждой формы заданий используется свой алгоритм оценивания. Рассмотрим эти алгоритмы.
Задания с выбором одного правильного варианта ответа или наиболее правильного варианта ответа.
Поскольку может быть выбран только один вариант ответа, то в качестве оценки правильности ответа на все задание берется степень правильности выбранного варианта ответа.
Задания с выбором нескольких правильных вариантов ответа.
Здесь оценка правильности ответа на вопрос задания может осуществляться следующим способом.
За правильный ответ на вопрос обучаемый получает 1 балл, за неправильный — 0 баллов. При этом под правильным ответом понимается точный выбор всех, без исключения, правильных ответов. В случае хотя бы одного ошибочного выбора или невыбора хотя бы одного правильного варианта ответ на задание в целом считается неправильным, и обучаемый получает 0 баллов.