4. Апробация теста (кафедра, преподаватель).
5. Окончательное формирование комплекта тестовых заданий по учебной дисциплине (автор-разработчик).
6. Для компьютерного тестирования дополнительно:
- обеспечение ввода теста в формат программы;
- организация и проведение апробации теста с его последующей корректировкой;
- занесение тестовых заданий в базу тестов.
IV. Общие подходы к разработке тестовых заданий
Технология составления теста
Тест по учебной дисциплине представляет собой сформированный в определенной последовательности перечень тестовых заданий, количество и состав, которых зависит от целей тестирования. Дидактическое содержание теста определяется целью тестирования и предметной областью дисциплины.
Технология создания теста по учебной дисциплине предполагает несколько последовательных этапов:
1. Постановка целей и задач предмета и форм педагогического контроля. Объем часов учебной дисциплины определяет целесообразность тестирования и количество тестовых заданий. Минимальное число тестовых заданий для вариативности теста (определяется преподавателем или зав. кафедрой).
2. Определение целей тестирования:
- обучение студентов (самостоятельный тренинг);
- текущий контроль знаний студентов (диагностика усвоения, отдельных тем и разделов);
- рубежный контроль знаний студентов;
- итоговый контроль знаний студентов (по всей программе учебной дисциплины);
- контроль остаточных знаний (по одной дисциплине, циклу дисциплин).
3. Анализ содержания учебной дисциплины, систематизация материала, выделение функциональной и логической структур (структурно-логическая схема дисциплины), информационное насыщение каждого из разделов учебной дисциплины (преподаватель).
4. Разработка тестовых заданий (преподаватель).
5. Экспертиза содержания и формы заданий (рецензирование) и корректировка.
6. Разработка четкой понятийно-терминологической структуры курса – тезауруса – проверяемых в тестах понятий, структурированных по темам и разделам учебной дисциплины. Такая разработка является самостоятельным методическим материалом и входит в УМК.
7. Формирование тестов в соответствии с поставленными учебными задачами. Определение объема (количества тестовых заданий) в тесте и времени его выполнения.
8. Разработка методики тестирования, определение и расчет показателей оценки. Составляется элементарная шкала: количество тестовых заданий предъявленных к выполнению соотнесено с количеством правильных ответов. Определяется диапазон положительной оценки. Количество правильных ответов для получения зачета, оценки хорошо, отлично и т.д.
9. Разработка инструкций для пользователей (преподавателей и студентов).
Основными элементами тестового задания являются:
1. Инструкция к тестовым заданиям определяет перечень действий студента при прохождении тестирования. Она должна быть адекватна форме и содержанию задания («укажите правильный ответ (ответы)», «установите соответствие», «определите правильную последовательность», «введите правильный ответ»). Форма инструкции должна соответствовать форме задания.
2. Задание (содержательная часть). Нижеперечисленные рекомендации к формулировкам тестовых заданий составлены на основе разработок специалистов Центра тестирования РФ [6].
Тестовые задания могут быть четырех форм:
1. Задания с выбором одного или нескольких правильных ответов.
2. Задания на установление соответствия.
3. Задания на установление правильной последовательности.
4. задания открытой формы, т. е. без указания ответов.
Используемая терминология не должна выходить за рамки основных учебников и нормативных документов.
Содержательная часть задания не должна включать элементы инструкции.
Содержательная часть задания формулируется в логической форме высказывания, а не в форме вопроса; в ней не должны быть двусмысленные и неясные формулировки, вводные фразы, двойное отрицание, оценочное суждение, выясняющее субъективное мнение испытуемого.
Все повторяющиеся слова должны быть исключены из ответов и вынесены в содержательную часть задания.
Число тестовых заданий с отрицанием должно быть минимальным. При этом частица «не» выделяется жирным шрифтом.
При составлении задания могут быть использованы следующие приемы:
– Фасет (грани одного явления, предмета).
Этот прием позволяет создавать несколько вариантов в одном задании. Все
элементы фасета должны принадлежать к одной дидактической единице. Этот прием широко используется для создания тестовых заданий в целях самоконтроля.
Например:
Исполнение федерального бюджета возложено на:
1) органы федерального казначейства:
2) финансовые органы;
3) органы регионального казначейства.
– Импликация, т.е. задания представляются в логической форме условной
связи, т.е. имеют логическую форму суждения «Если... то». Этот прием широко используется для установления причинно-следственных связей.
Например: Если в процессе исполнения бюджета происходит снижение
объема поступлений доходов, то вводится режим:
1)сокращения расходов;
2)блокировки расходов;
3)финансирования расходов путем зачета денежных средств.
– Краткость, т.е. содержание задания формулируется как можно короче и
яснее. В нем не должно быть лишних слов и знаков, тем самым добиваются
максимальной ясности смысла задания.
Например: Федеральный бюджет 2008 г.
1) дефицитен;
2) профицитен;
3) сбалансирован.
Рекомендации к заданиям с выбором ответа
1. В тексте задания должна быть устранена всякая двусмысленность или неясность формулировок;
2. Основная часть задания формулируется очень кратко, не более одного предложения из семи-восьми слов;
3. Задание должно иметь предельно простую синтаксическую конструкцию;
4. В основную часть задания включается как можно больше слов, оставляя для ответа 2 – 3 ключевых слова для данной проблемы;
5. Все ответы к одному заданию должны быть примерно одной длины, либо в некоторых заданиях правильный ответ может быть короче других;
6. Из текста должны быть исключены все ассоциации, способствующие выбору правильного ответа с помощью догадки;
7. Частота выбора одного и того же номера места для правильного ответа в различных заданиях должна быть примерно одинакова;
8. Основная часть задания должна быть освобождена от всякого иррелевантного для данной проблемы материала;
9. Из ответов исключаются все повторяющиеся слова за счет ввода их в основной текст заданий;
10. В ответах не рекомендуется использовать слова «все», «ни одного», «никогда», «всегда», «ни один из перечисленных», «все перечисленные», т.к. в отдельных случаях они способствуют угадыванию правильного ответа;
11. Из числа неправильных должны исключаться ответы, вытекающие один из другого;
12. Из числа тестовых должны исключаться задания, содержащие оценочные суждения или мнения испытуемого по какому-либо вопросу;
13. Все варианты ответов должны быть равновероятно привлекательны для испытуемых;
14. Ни один из вариантов ответов не должен являться частично правильным, превращающимся при определенных дополнительных условиях в правильный;
15. Основная часть задания формулируется в форме утверждения, которое обращается в истинное или ложное высказывание после подстановки ответов;
16. Ответ на одно задание не должен служить ключом к правильным ответам на другие задания теста, т.е. не следует использовать дистракторы из одного задания в качестве ответов к другим заданиям теста;
17. Если задание содержит среди прочих альтернативные ответы, не следует сразу после правильного приводить альтернативный ответ, так как внимание отвечающего обычно сосредотачивается только на этих двух ответах;
18. Все ответы должны быть параллельны по конструкции и грамматически согласованы с основной частью задания теста.
3. Ответы к заданию. В содержательной части и в ответах необходимо исключить слова «большой, небольшой, много, мало, меньше, больше, часто, всегда, редко, никогда и т.п.».
Все варианты ответов должны быть грамотно согласованы с содержательной частью задания, однообразны по содержанию и структуре, равнопривлекательны. Между ответами необходимы четкие различия. Правильный ответ однозначен и не должен опираться на подсказки.
Среди ответов должны отсутствовать ответы, вытекающие один из другого.
В варианты ответов нельзя включать формулировки «все перечисленное выше», «все утверждения верны», «перечисленные ответы не верны», так как такие ответы нарушают логическую конструкцию тестового задания или несут подсказку.
Формы заданий определяют основные требования к формулировке ответов:
1). Задания с выбором одного или нескольких правильных ответов
Задания первой формы имеют три варианта ответа:
а) выбор одного правильного ответа;
б) выбор наиболее правильного (полного) ответа;
в) выбор нескольких правильных ответов.
2). Задания с выбором одного правильного ответа
Принципы подбора ответов:
Противоречивость применяется при создании заданий с двумя ответами, в
одном из ответов используется частица «не». Ответы подбираются так, чтобы второй отрицал первый.
Например: Источниками финансирования дефицита бюджета кредиты ЦБ:
1) являются;
2) не являются.
Противоположность – этот принцип может проявляться в 3 вариантах:
Первый вариант – три возможных состояния:
Например: Бюджет РТ в 2008 г. принят с__________
Основными методическими требованиями к составлению тестовых заданий являются: