Прямоугольник, у которого все стороны равны называется ___________.
Приведем пример вопроса с нарушенным принципом однозначности ответа:
Площадь треугольника вычисляется по формуле _________.
При выполнении данного задания могут быть получены несколько правильных ответов, что при технологии тестирования недопустимо.
К тем принципам, которые уже известны, следует добавить несколько общих логических принципов, характерных не только для заданий открытой формы, но и других.
1. Принцип логической определенности содержания задания. Смысл его можно определить так: задание является логически определенным, если оно способно продуцировать у знающих испытуемых правильный ответ и если содержание и форма задания помогают организовать мыслительный процесс нахождения такого ответа.
Нарушением принципа логической определенности являются примеры:
Первая социал-демократическая партия была создана в _____. (Где или когда?)
В схеме абсолютных приоритетов также выполняется маскирование: на время обслуживания каждого запроса вводится … обслуживания запросов с равным или более низким приоритетом. (контрольное тестирование АСТ специальности 230104 по дисциплине "Операционные системы")
Правильный ответ – маскирование вряд ли при такой постановке вопроса сможет указать хоть один из испытуемых.
2. Вариативность (фасетность)содержания задания. ФАСЕТ – это форма записи нескольких вариантов одного и того же задания. Применение фасета позволяет в процессе контроля исключить списывание и другие искажения, известные из опыта проведения экзаменов, зачетов и др. традиционных форм проверки знаний. Идея фасета ассоциируется с известной практикой создания нескольких вариантов одинаково трудных заданий для проведения контрольных работ. Принцип фасетности является главным при композиции профессионально разрабатываемых тестовых заданий; он позволяет создавать сразу несколько вариантов одного и того же задания, а, следовательно, вариантов теста.
Ток силой {i}, проходя по проводнику {r} за время {t} секунд выделяет ____ джоулей тепла.
В этом задании имеется 3 символьных фасета, позволяющих в машинном варианте подставить любые комбинации допустимых значений силы тока, сопротивления и времени для проверки умения применять закон Джоуля-Ленца. Такие же фасеты можно сделать для проверки знаний всех физических законов и умений их применять для выполнения лабораторных и практических работ.
3. Принцип параллельности включает в себя 3 понятия, связанных между собой отношением кумулятивности:
– параллельность заданий (или вариантов заданий) по содержанию;
– параллельность по содержанию и форме;
– параллельность по содержанию, форме и по трудности заданий.
Параллельность заданий по содержанию достигается использованием принципа фасетности и применением 4 принципа – обратимости.
4. Принцип обратимости. На примере:
Операция нахождения производной функции называется_____
Обратное:
Дифференцированием называется операция нахождения_____
Задания, построенные по принципу обратимости, можно использовать в текущем и итоговом контроле знаний.
При применении обратимых заданий возникает вопрос выбора лучшего варианта для итогового тестирования. При осуществлении такого выбора полезно обсудить педагогические и психологические соображения и аргументы, опробовать все варианты на параллельных выборках и только после этого выбирается то задание, которое в большей степени обладает свойствами тестового задания для данного теста.
Если обратимые утверждения находятся в одном тесте, может возникнуть тавтология и испытуемые могут найти ответ на один вопрос из формулировки другого.
Если испытуемые хотя бы немного ориентируются в учебном материале, то в случае тавтологии ответ для одного задания они найдут из содержания другого.
Некоторые педагоги считают задания открытой формы лучше заданий с выбором одного ответа из нескольких, но это мнение спорно [2]. Например:
Фалес – это первый ... философ.
Правильные варианты ответа: греческий;
Не каждый испытуемый, глядя на этот вариант задания, сообразит, что от него требуется. Для этого вначале нужно уяснить смысл задания – о каком свойстве идет речь, на какой вопрос требуется ответить. (Ведь это предложение и без вставленного ответа уже имеет смысл). В такой ситуации лучше задание с выбором:
Фалес – это первый ... философ.
– греческий
– римский
– арабский
– египетский
Из двух заданий открытой и закрытой формы, выясняющих одно и то же, лучшей, в данном случае, является закрытая форма.
6. Краткость. Точность и легкость понимания растут по мере уменьшения словесного состава фразы и увеличения ее бессловесной подпочвы. Чем меньше слов, тем меньше недоразумений. Зачастую из вопроса опускаются слова "называется", "является" и т. п., что не затрудняет понимания.
7. Принцип неотрицательности. В основе задания не рекомендуется использование отрицательных частиц, а также определение понятия через перечисление элементов, не входящих в него. Характерные примеры приводит В.С. Аванесов:
Банки не ставятся на _______. (позвоночник)
Однако банки не ставятся не только на позвоночник, но и на многие другие части тела.
Точкой называется то, что не имеет _____.
По определению Евклида "Точкой называется то, что не имеет частей".
В этом задании нарушено логическое правило: определение не должно быть отрицательным. Испытуемые будут правы, если напишут, что точка не имеет длины, ширины, высоты, веса, запаха, вкуса и много чего еще.
5. Принцип логической соразмерности объема определяющего понятия объему определяемого.
Характерная особенность содержания заданий открытой формы в том, что они иногда порождают несколько правильных, но логически несоразмерных ответов, что нежелательно с точки зрения однозначной оценки и технологичности контроля.
Первым космонавтом был _____
Автор ожидал ответ "Гагарин", но наряду с этим от некоторых испытуемых получил ответы "русский человек", "мужчина", "советский гражданин" и другие, которые с разных сторон характеризуют Гагарина. Полученные ответы нельзя оценить как неправильные, но их трудно приравнять к ожидавшемуся правильному ответу. Такие ситуации недопустимы, так как при компьютерном тестировании ответ сравнивается с эталоном посимвольно.
Выход из подобной ситуации подсказывает логика. Для сужения объема искомого понятия задание лучше сформулировать: "ФАМИЛИЯ ПЕРВОГО КОСМОНАВТА". Таким образом, в задание вносится необходимое уточнение, что позволяет уменьшить объем понятия за счет уточнения содержания, после чего испытуемый дает только один правильный ответ
С точки зрения композиции задания открытого типа должны содержать обязательные элементы:
1. Инструкция для испытуемых. Это может быть фраза "дополнить", а также более конкретные инструкции: "указать в именительном падеже", "указать с точностью до сотых", "указать через пробел (запятую)" в том случае, если предполагается ввести два слова, "указать дату в формате ДДММГГГГ" (или только год).
2. Содержательная основа заданий. С помощью заданий открытой формы удобно проверять знание названий, фактов, свойств, признаков, дат, причинно-следственные отношений.
Положительный электрод называется ____
3. Ответы к заданиям. Во всяком тестовом задании заранее определяется, что однозначно считается правильным ответом на заданный вопрос.
Например:
Увеличение числа слоев ядра ОС ведет к некоторому замедлению его работы за счет межслойного взаимодействия, а уменьшение – … расширяемость и логичность системы.
Ответ автора (контрольное тестирование АСТ специальности 230104 по дисциплине "Операционные системы") – ухудшает, а вполне возможны и множество других вариантов, например, снижает, усложняет и т.д. В данном случае необходимо либо предусмотреть в качестве эталонных ответов все синонимы (что при богатстве русского языка невозможно), либо не давать задания открытого типа на слова общего характера.
В большинстве случаев ответы к заданиям открытой формы испытуемые пишут в конце задания. Допустимы случаи, когда ответы ставят не в самом конце тестового утверждения. Чем ближе пропуск к началу предложения, тем хуже понимается смысл задания. Поэтому пропуск для ответа лучше делать как можно ближе к концу предложения.
Задания открытой формы применяются там, где нужно исключить вероятность получения правильного ответа посредством угадывания и тем самым повысить качество педагогического измерения. Задания открытой формы, поэтому, являются более трудными как для испытуемых, так и для создателей теста. От создателей они требуют тщательной проработки, учета множества правил, а от испытуемых – конкретных знаний.
К заданиям закрытого типа относятся задания нескольких видов: альтернативных ответов (АО), множественного выбора. Тестовые задания закрытого типа предусматривают различные варианты ответа на поставленный вопрос: из ряда предлагаемых выбираются один или несколько правильных ответов, выбираются правильные (или неправильные) элементы списка и др. Это задания с предписанными ответами, что предполагает наличие ряда предварительно разработанных вариантов ответа на заданный вопрос. Неправильный, но правдоподобный ответ в американской тестовой литературе называется словом дистрактор, от английского глагола to distract – отвлекать.
Если к заданиям задаются готовые ответы на выбор (обычно один правильный, а остальные неправильные), то это задания с выбором одного правильного ответа. Следование закону исключения третьего налагает логический запрет на применение таких ответов, как "правильного ответа нет", "все ответы правильные" или "все ответы неправильные", которые в практике еще встречаются.