КОМПЬЮТЕРНОЕ ТЕСТИРОВАНИЕ

Здесь мне хотелось бы высказать свои мысли по поводу использования компьютеров при контроле уровня освоения учебного материала. Коротко данное действие будем называть тестированием. На самом деле технология тестирования больших групп людей имеет более чем полувековую историю. Вначале тестирование подразумевало испытание больших контингентов людей с целью выявить их способности и наклонности за разумное время, включающее процедуру опроса и обработку результатов. Теперь принято строго разделять тестирование способностей (abilities) и учебных достижений (achievements). Нас будет интересовать в основном второй вариант (педагогическое тестирование).

Любой тест состоит из нескольких тестовых заданий, имеющих определенную форму и решающих строго определенную дидактическую задачу. Исторически первыми были тесты на выявление способностей (скрытых параметров). Они и определили первые самые распространенные формы тестовых заданий, названные открытыми и закрытыми. В открытых заданиях испытуемый может вводить ответ в произвольной форме, вписывая в специальный бланк слово, сочетание слов, число, формулу и т.д. В закрытых заданиях как правило ставится символ около выбранного элемента. Технология тестирования на первых этапах была завязана на автоматизацию процесса проведения и обработки при большом количестве испытуемых. Качество тестирования определялось после его завершения и многократного применения (апостериорная эффективность, валидность и т.д.).

Технология педагогического тестирования стала применяться при так называемом программированном обучении и опиралась во многом на опыт тестирования способностей. Использовались тестовые задания тех же форм, которые постепенно развивались с учетом специфики педагогических задач. Закрытые задания стали подразделяться на задания с одним или несколькими правильными ответами, на установление соответствия двух групп логических элементов, на установление правильной последовательности элементов (например, операций в алгоритмах). Для выбора формы задания, обеспечивающей решение поставленной дидактической задачи, требовалось определить эффективность задания до его применения (априорную). Такой методики не существовало до сих пор. Для ее разработки потребовалось сконструировать модель «серого» студента и «серой» группы студентов, к которой можно мысленно применять тестирование с разными заданиями.

Опираясь на результаты теоретических исследований и педагогической практики, можно сформулировать некоторые требования к тестовым заданиям.

  1. Задание должно достоверно определять уровень освоения данного элемента учебного материала. Одно задание контролирует один элемент учебной информации (утверждение). Если задание выполнено, то с заданной степенью достоверности мы гарантируем освоение материала на заданном уровне и на более низких уровнях. Если задание не выполнено, то с заданной достоверностью следует констатировать, что студент не освоил материал на данном уровне. Не должно быть заметной вероятности не выполнить задание для подготовленного студента (освоившего данный элемент на заданном уровне).
  2. Задание можно повторно задавать студенту, если он его выполнил неверно, причем достоверность оценки не должна значительно снижаться.
  3. Задание должно приближаться по форме и технологии выполнения к исторически сложившемуся варианту устного или письменного контроля знаний с участием преподавателя.
  4. Выполнение задания не должно сопровождаться предъявлением и запоминанием ложной информации (ключевое требование).
  5. В задании не должно быть излишней информации, затрудняющей его выполнение.
  6. Задание должно содержать любые элементы, входящие в состав контролируемого утверждения (любые символы, элементы формул, графические элементы).
  7. Программные средства должны обеспечивать разработку таких заданий преподавателями в диалоговом режиме без знания языков программирования.
  8. Должна существовать возможность компоновать тест из одной или нескольких баз заданий по различным алгоритмам, в частности, с заданного номера в заданном количестве подряд или в случайном порядке.

 Возможно появление и других требований, но и указанные не всегда выполняются в большинстве существующих систем, обеспечивающих разработку элементов e-Learning.

Большинство указанных требований выполнено в системе TESTUM, основанной на заданиях с конструированием ответов из набора логических элементов, которые не встречаются в известных системах.

В курсе физики большинство утверждений, входящих в ядро курса имеет вид определений физических характеристик, законов и соотношений, куда входят символы этих характеристик, алгоритмов их применения и т.д. Поэтому логическими элементами являются слова, словосочетания, математические символы, включая символы векторов, тензоров, производных, интегралов и т.д. В заданиях указанного типа в предлагаемом наборе для выбора не содержатся ложные элементы, что соответствует полному выполнению требования 4.

В предложенном варианте задание не содержит вопроса, что обеспечивает выполнение требования 5. Задание выглядит, как контролируемое утверждение, часть элементов которого пропущена (вакантные места) и заменена спецсимволом. Остальная часть включает предъявляемые элементы. Элементы для выбора и вставки группируются в специальном месте на экране (например, в таблице со специальным фоном).

Выполнение задания связано с формированием (конструированием) требуемого утверждения в определенном месте на экране. В ходе выполнения студент заполняет вакансии выбранными элементами и как бы конструирует (произносит по словам и печатает) ответ. Такая технология отвечает выполнению требования 3. Выполнить задание можно только умея воспроизвести его содержание (или, списав со шпаргалки, что можно легко предотвратить). Поэтому такое задание можно многократно предлагать студенту, если он не сразу освоил материал на заданном уровне, что отвечает требованию 2.

Наконец, меняя соотношение между количеством предъявленных и скрытых элементов, можно изменить сложность задания. Для контроля, имеет ли студент представление о данном утверждении, можно скрыть 2 – 3 элемента при 6 – 10 предъявленных. Для контроля знания (2 уровень) можно предъявить только идентификатор (название) данного элемента и скрыть все остальные, предложив полностью построить требуемое утверждение (закон, формулу). Для контроля навыка можно предложить решить простую задачу. Сначала исследовать ее условие, затем сконструировать основной закон, формулу ответа в общем виде и числовое значение ответа. Для контроля каждого шага дается свое тестовое задание, а время выполнения ограничивается. Результат выполнения бинарный. Таким образом, выполняются требования, изложенные в первом пункте. Модель среднего «абсолютно серого» студента позволяет провести числовые оценки качества работы отдельных заданий и теста в целом.

Остальные требования относятся к инструментальной системе. Разработанный вариант TESTUM использует возможности стандартного редактора Word, которые все хорошо известны и специальное дополнение, написанное на языке VBA и позволяющее реализовать основные пункты требований.

Отдельные элементы требований выполнены в системе Тестум на CD, предназначенной для подготовки и допуска к выполнению лабораторных работ в виртуальном практикуме по физике (распространяется организацией «Физикон» с  2004 г.).

Comments