При нормативно-ориентированном подходе возникает вопрос об истинной оценке результата каждого ученика, поэтому эмпирически устанавливаются нормы (система показателей, отражающих результаты выполнения теста большой группой испытуемых).
Нормативно- и критериально-ориентированные тесты отличаются по целям создания, методике отбора содержания, характеру распределения эмпирических результатов тестирования и методам их обработки, критериям качества тестов и тестовых заданий, а, главное, по интерпретации результатов испытуемых.
Критериально-ориентированные тесты необходимы, прежде всего, для определения учебных достижений при сравнении с требованиями, которые заложены в стандартах по различным предметам.
Требования к тестам как измерительному инструменту содержат требования к расчету показателей качества тестов и требования к их оснащению. Такими показателями качества являются надежность и валидность тестового инструментария.
А.А. Анастази определяет надежность теста как «согласованность показателей, полученных у тех же самых испытуемых при повторном тестировании, тем самым тестом, или эквивалентной ее формой» [2, с. 35].
Надежность теста является одним из критериев качества теста и показывает, насколько точно измеряет данный тест изучаемое явление. Следовательно, термин «надежность» имеет два значения: во-первых, если тест надежный, он при повторном выполнении дает близкие результаты; во-вторых, он обеспечивает высокую точность измерений.
Стандартный набор данных о тесте, предназначенных для широкого употребления, обязательно должен включать сведения о мере ее надежности.
Исследования В.С. Аванесова, Дж. Гласcа, А.Н. Майорова, Е.А. Михайлычева, М.Б. Челышковой, Н.М. Розенберга и ряда других авторов приводят к выводу о том, что надежность теста является характеристикой того, в какой степени полученные в результате тестирования различия между испытуемыми является отражением различий в свойствах испытуемых и в какой мере являются отображением случайных ошибок. Н. Гронлуд отмечает: «Если балл, полученный учеником в результате теста по оценке результатов, будет соответствовать той оценке, которую они получили бы при повторном прохождении того же теста или идентичного с ним по форме, то данная оценка считается высоко надежной… Чем длиннее тест, тем более надежными и адекватными будут результаты» [3, с. 205].
Вторым важным показателем качества теста является валидность (от англ. valid – пригодный). «Проблема валидности возникает в процессе разработок и практического применения теста, когда ставится задача установить соответствие между степенью выраженности интересующего свойства личности и методам его измерения. Чем валиднее тест, тем лучше отображается в нем то качество (свойство), ради измерения которого он создавался» [2, с. 47].
Для определения подходов к процессу валидизации теста и валидности в трудах ученых используется большое количество терминов. Одним из наиболее распространенных терминов является «содержательная валидность», необходимость которой не отрицают вышеназванные тестологи и определяют ее как характеристику репрезентативного содержания теста по отношению к запланированным для проверки знаний и умений. По мнению И.А. Анастази, сфера распространения валидности по содержанию – это тесты учебных достижений, особенно критериально-ориентированные тесты по усвоению материала и навыков. Если тест позволяет проверить все то, что авторами было задумано в спецификации, он считается валидным относительно контролируемого содержания курса. Полнота выходит на первый план именно при создании критериально-ориентированных тестов. Помимо этого, повышению содержательной валидности способствует независимая экспертиза.
Анализ трудов теоретиков-тестологов позволяет сделать следующие выводы:
- тесты отличаются от других средств контроля (контрольных работ, диктантов и др.) тем, что проходят процесс научного обоснования качества, который предполагает оценку соответствия характеристик тестов двум важнейшим критериям: надежности и валидности;
- при оценке надежности и валидности не следует полагаться на единственную формулу, а надо пользоваться совокупностью методов, ориентированных на особенности разрабатываемого теста;
- любые оценки надежности и валидности выступают не как истина в последней инстанции, а лишь как правдоподобные утверждения, имеющие ту или иную степень достоверности;
- повышению точности и созданию качественных тестов способствует стандартизация процедуры предъявления теста;
- современная теория тестов позволяет повысить точность измерений и качество педагогических тестов.
При создании тестов важен выбор модели педагогического тестирования – схемы предъявления тестовых заданий и оценивания результатов тестирования.
2.2 Технология разработки тестовых заданий
Педагогический тест (тест успеваемости) - система заданий специфической формы, которая позволяет качественно оценить структуру и измерить уровень знаний, умений и навыков.
Интерес к тестированию – как методу педагогического контроля в последнее время заметно вырос. Но составление тестов, их применение должно происходить на основе модернизации учебного процесса. Одной из эффективных форм такой модернизации может стать внедрение тестовой системы контроля качества подготовки учащихся.
Вопрос использования тестов как средства педагогического контроля, разработан достаточно хорошо. В.С.Аванесов, Л.В. Апатова, Ю.А. Белый, В.П. Беспалько, В.А. Горбанев, В.Г. Глушков, В.В. Зиновьев, И.В. Колесник, Е.А. Криксунов, Г.И. Лернер, В.П. Левин, А.Н. Майоров, Н.Н. Петрова, В.Б. Пятунин, И.А. Раппопорт, С.Р. Сакаева, В.И. Сиротин, Ю.А. Симагин, В.А. Станкевич, Н.В.Тельтевская и многие другие посвятили данной проблеме свои работы.
Тем не менее, вопрос о функциях, методике разработки тестовых заданий и шкалы оценивания освещены фрагментарно.
Государственный стандарт общего среднего образования в скором будущем предполагает сопровождение учебной программы заданиями в тестовой форме для диагностики качества результатов обучения. Образовательные стандарты и способы оценки их достижения являются ключевыми моментами, определяющими качество образования и процедуры его оценки и диагностики. Тестирование стало широко применяться как средство оценки знаний при итоговой аттестации выпускников и при вступительных экзаменах в высшие учебные заведения.
Можно выделить следующие достоинства тестирования знаний учащихся:
- объективность и воспроизводимость оценки, за счет разработанного эталона - образца правильно и последовательно выполненных действий обучаемого;
- оперативное получение результатов проверки;
- эффективное использование учебного времени (проверка знаний всей группы учащихся занимает 15-20 минут);
- полный охват всей группы обучаемых, что способствует более высокой накопляемости оценок;
- оперативное выявление упущений в работе каждого учащихся, группы в целом и самого учителя;
- возможность автоматизировать процесс контроля;
- возможность проведения контроля и проверки его результатов другим лицом (учителем, не ведущим занятия в группе);
- удобное использование для самопроверки учащихся.
Изучение различных тестов позволяет выявить в них ряд содержательных и структурных недостатков:
- меньше проявляются обучающие функции контроля: закрепление (повторение) информации, развитие речи;
- возможность угадывания ответов при контроле с помощью выборочных тестов;
- некоторые учебные элементы предметов, отнесенных к гуманитарным, тестировать неудобно.
Поэтому тестовую форму контроля следует применять в сочетании с другими традиционными и нетрадиционными методами контроля.
Структурными компонентами педагогического теста являются: тестовое задание – задача в тестовой форме, предназначенная для выполнения, к которой помимо содержания предъявляются требования тестовой формы и эталон – образец полного и правильного выполнения действия, служащий для сравнения достигнутого уровня с планируемым.
В зависимости от того, какой признак положен в основу классификации теста, тестовые задания можно различать:
1. По целям: с элементами обучения и контролирующие.
2. По характеру требуемых действий: задания-воспроизведения знаний, анализа признаков понятий, выполнения определенных действий (вычисления, сопоставления, логического заключения и т.д.).
3. По характеру ответа: открытые или закрытые.
4. По месту, занимаемому в учебном процессе - исходного уровня подготовки, текущего контроля, рубежного или итогового контроля.
5. По уровню усвоения: тесты I-го уровня на опознание, узнавание и различение; тесты II-го уровня – воспроизведение информации об объекте по памяти; III-го уровня, требующие решать типовые задачи; IV-гo уровня - творческого применения полученных знаний.
6. По виду: словесные, числовые, знаковые, зрительно-пространственные (схемы, таблицы, графики, рисунки и др.).
7. По структуре ответа: с ответом «да»- «нет», на окончание мысли, с выбором верного ответа, на сравнение или сопоставление, на объяснение понятий, на количественное соотношение фактов и др.
8. По средствам: бланковые, предметные (конструктивные), с использованием технических средств, практические (в форме лабораторных работ).
9. По уровню стандартизации контроля: стандартизированные или нестандартизированные.
10. По принципу подбора содержания теста к конкретной группе обучаемых: адаптивные или неадаптивные.
11. По конструкции программы контроля: независимые друг от друга или «тесты-лестницы».
12. По характеру контроля: индивидуальные или массовые (фронтальные).
13. По функциям проверки: констатирующие, диагностирующие и прогностирующие.