Тест = Задание + Эталон.
Формулировка задания в соответствии с рассмотренными выше параметрами качества усвоения деятельности и наличие эталона (то есть полного и правильного решения теста, в котором выделены существенные операции теста), составляет основную специфику теста как средства объективного контроля качества знаний учащихся. Из эталона устанавливается общее число существенных операций теста — м, а по ответу испытуемого — число правильно выполненных им существенных операций п, после чего подсчитывается коэффициент усвоения — Ку = п/м. Основным в построении тестов является создание адекватного задания и соответствующего ему эталона. Поскольку тесты создаются для проверки уровня усвоения заданного содержания обучения, то очевидно, что они также различаются по уровням усвоения.
Тесты первого уровня, в соответствии с понятием первого уровня усвоения, должны проверять качество узнавания учащимся ранее изученного учебного материала. Это тесты на узнавание. Они содержат одновременно и задание, и ответ, а от учащегося требуется узнать их соответствие. По форме различают три типа тестов первого уровня: опознание, различение и классификация.
Заданиями тестов на опознание являются простые, естественные вопросы типа: «Является ли педагогика наукой о педагогических системах?» Возможные ответы: «да» или «нет». Эталон: «да». Число существенных операций в этом тесте: м = 1, одна операция, так как для ответа надо выполнить одно действие — сделать один выбор между «да» и «нет».
На примере этого теста приведем требования к созданию педагогически корректного теста:
1. Задание теста должно быть содержательно валидным, то есть построено на содержании, которое учащемуся должно быть известно из предшествующего обучения.
2. Задание теста должно быть функционально валидным, то есть тест должен проверять то, для" чего его используют.
Так, приведенный выше тест первого уровня на опознание функционально валиден, поскольку он требует действия узнавания и в нем самом содержится ответ. Тест превратится в функционально не валидную пробу для первого уровня, если к содержанию теста добавить, казалось бы, естественный вопрос: «Почему?» В этом случае тест превращается в тест второго уровня, так как требует воспроизведения некоторой информации по памяти, без подсказки, обязательной для тестов первого уровня.
3. Задание теста должно быть простым, то есть содержать одну задачу данного уровня. Так, в предыдущем примере добавление вопроса «Почему?» нарушает сразу два требования к тесту: его функциональную валидность и его простоту.
Рассмотрим теперь под углом зрения приведенных выше требований другие виды тестов успешности усвоения.
Задание теста на различение обладает некоторой искусственной формой, не часто встречающейся в реальной обстановке. Задание теста содержит как вопрос, так и варианты ответов для выбора. Между вопросом и выбором ответа никаких действий, кроме прямого выбора, производить не требуется. Вот пример такого теста: «Укажите какой из приведенных коэффициентов является коэффициентом уровня усвоения: а) Ку; б) Ка; в) Кн?»
Эталон: а) да, б) нет; в) нет.
Число операций теста: м = 3, поскольку оценивается каждая альтернатива. Тест валиден по всем, приведенным выше требованиям: 1. Информация о Ку усвоена ранее; 2. В тесте содержится решение (соотнести Ку и его название), его надо лишь узнать; 3. Тест простой.
Задание теста на классификацию представляет собой задачу на сопоставление взаимно соответственных элементов. К примеру:
«Укажите соответствие понятий и их обозначений»
| 1. Уровень усвоения | 1/Н |
| 2. Число УЭ | 2/О |
| 3. Автоматизация | 3/б |
| 4. Осознанность | 4/t |
Эталон: 1-3/; 2-1/; 3-4/; 4-2/.
Число операций в тесте классификации для удобства подсчетов принимается равным числу соотнесений: м = 4, хотя на самом деле учащийся многократно сканирует предлагаемые варианты ответов.
Как легко убедиться, этот тест также отвечает всем требованиям, предъявляемым к тестам первого уровня.
Тестами второго уровня усвоения проверяется умение учащегося воспроизводить усвоенную информацию по памяти без внешней подсказки и решать на этой основе типовые задачи. Типовой задачей считается такая задача, условия которой допускают непосредственное применение усвоенных алгоритмов, правил или формул для ее разрешения.
Различают три разновидности тестов второго уровня: тесты-подстановки, тесты конструктивные и типовые задачи.
Тесты подстановки требуют от учащегося дополнить высказывание, представленное в любой форме: речевой, символической, графической, материальной и пр. при наличии намека на число элементов ответа.
Речевая форма: «Педагогика это наука о... системах».
Эталон: педагогических, м = 1.
Символическая форма: «Дополните формулу: Ку = —».
Эталон: п/м; м = 2.
Графическая форма: «На графике покажите этап обучения и этап самообучения».
Эталон: 0—0,7 этап обучения; 0,7—1,0 этап самообучения.
Число операций м = 2.
Материальная форма (при изучении техники): «Укажите недостающий элемент (элементы) в конструкции».
Эталон: элементы; м — число элементов.
Конструктивные тесты требуют от учащихся воспроизведения информации по памяти без намеков и подсказок. Вот как будут выглядеть приведенные выше тесты-подстановки в конструктивном виде:
«Что такое педагогическая наука?»
Эталон: «Педагогическая наука это теория педагогических систем».
Подчеркнутое в эталоне это существенные операции теста, поэтому м = 3.
«Напишите формулу для подсчета коэффициента усвоения».
Эталон: Ку = п/м. В тесте м = 4, а именно: воспроизведение и расстановка всех элементов формулы Ку; п; /; м. Заметьте: знак деления — тоже операция.
«Начертите графики процессов обучения и самообучения».
Эталон: график в 1) координатах «б-Т»; 2) кривая процесса усвоения; 3) обозначение участка обучения (Ку = 0-0,7); 4) обозначение участка самообучения (Ку = 0,7-1,0). Число операций м = 4.
«Из деталей данного набора соберите механизм».
Эталон: собранный механизм из «м» деталей. Число операций равно м.
Тесты типовые задачи требуют от учащегося воспроизведения известного правила действия и применения его для получения искомого результата.
Например: «Учащийся выполнил батарею тестов первого уровня, состоящую из 10 тестов с 4 вариантами ответа в каждом тесте? и даны 32 правильных ответа. Каков Ку этого ученика?»
Эталон: 1) Ку = п/м; 2) м = 10×4 = 40; 3) Ку = 32/40 = 0,8.
Число операций м = 3.
Второй пример: «Поставьте оценку данному учащемуся по 12-балльной шкале».
Эталон: 1) по табл. 3, на первом уровне, при Ку = 0,8, оценка 2 балла. Число операций м = 1.
Тесты третьего уровня это нетиповые задачи, которые требуют от учащегося эвристической деятельности, то есть преобразования исходных условий и, часто, поиска дополнительных данных для подведения задачи под типовой алгоритм. Например: «Учащийся выполнил тест второго с Ку = 0,6. Какую оценку ему поставить по 12-балльной шкале?»
Эталон: 1) Учащийся не усвоил предмет на втором уровне; 2) Надо провести его тестирование на первом уровне; 3) На основании величины Ку по первому уровню решить вопрос об оценке. Число операций в тесте м = 3.
Тесты четвертого уровня это проблемы, никем ранее не исследованные и решение которых никому не известно, поскольку его просто еще нет. Тесты четвертого уровня не имеют эталона по причине их проблемности. В качестве заместителя эталона может быть использовано мнение компетентных независимых экспертов или проверка решения независимым исследователем. В качестве примера теста четвертого уровня по педагогике можно предложить следующую проблему: «Предложите экспресс-метод (или тест) для группирования школьников в гомогенные классы по их способностям». Выше мы предложили решать эту проблему путем длительного (с детского сада до конца начальной школы) наблюдения деятельности, успешности ее и предпочтений учащегося к изучаемым предметам, для ответа на вопрос о его врожденных доминантных способностях. Надежный экспресс-метод или тест пока никем и нигде не создан, а поэтому и эталона пока нет. В учебной обстановке могут быть использованы псевдотесты четвертого уровня для выделения наиболее одаренных учащихся. В качестве таких тестов и эталонов к ним могут быть использованы уже решенные проблемы, заведомо неизвестные учащимся.
Коль скоро выше был применен термин «псевдотесты», то на нем следует остановиться несколько подробнее. В приведенном выше описании тестов их различение основано на особенностях деятельности, которую выполняет учащийся для решения проблемы, содержащейся в тесте. Так, в тестах первого уровня это деятельность по узнаванию ранее усвоенного УЭ при повторной встрече с ним. В тестах второго уровня — деятельность по воспроизведению по памяти ранее усвоенной информации. В тестах третьего уровня это деятельность по реконструкции (преобразованию) ранее усвоенной информации и переносу ее в новые условия деятельности. Наконец, в тестах четвертого уровня это деятельность по развитию ранее усвоенной информации и созданию новой информации о деятельности с известными УЭ или открытие новых УЭ.
В отличие от показанного различения тестов по виду деятельности, в практике создания сотен и тысяч разнообразных тестов многими авторами и организациями, даже такими уважаемыми и мощными гегемонами на рынке тестирования, как американский ETS (Educational Testing Service) и заполонивший всю Америку SAT-тест (College Entrance Examination Board Scholastic Aptitude Test), различение тестов строится на основе их внешнего вида. Так, если в конце теста дано несколько ответов для выбора, то такие тесты относят к тестам различения (multiple или single choice tests), хотя задача, поставленная в тесте, может относиться ко второму или даже третьему уровню усвоения. В батарее тестов сосуществуют, таким образом, рядом тесты разных уровней, а оцениваются их решения одинаково, что на самом деле означает отсутствие всякой объективной оценки. Вот примеры таких псевдотестов первого уровня из батареи тестов SAT: