Вместе с тем подготовка тестового материала есть не более чем начало работы, поскольку сами по себе оценочные баллы несут весьма значимую информацию об объеме усвоенного и необходимости коррекции. Кроме того, информацию о том или ином тестовом вопросе в банке заданий нельзя считать достаточно полной до тех пор, пока в него не поступили позднейшие данные о результатах решений.
Банки задач могут использоваться для тестирования знаний и умений по различным предметам не только в рамках школы, но и гораздо более широко. Весьма вероятно, что их реальный потенциал, выходящий за рамки школьных учреждений, по-настоящему может быть оценен только при наличии налаженных коммуникаций. Не приходится сомневаться в том, что решение проблем связи приведет к повышению значимости программ типа банков задач.
В традиционном диагностическом наборе существует по крайней мере четыре стадии, где применение компьютера принесет несомненную пользу. Это оценка теста, анализ баллов, регистрация и составление текстовых оценочных записей. Имеющиеся сегодня в школах оборудование позволяет эффективно осуществлять некоторые из этих функций. Кроме того, можно надеяться, что недалеком будущем мы сможем с большим основанием доверять компьютеру при подготовке к тестированию.
Обычно тестовый материал, который выдается учащемуся, предварительно вычитывается и корректируется, особенно если это экзаменационный тест. Программа «редактор» способна не только выполнять все перечисленные функции, запоминая и печатая по заданному формату вопросы и задания, но, кроме того, модифицировать хранящуюся в памяти машины задачу, сводить различные задачи в одну тестовую батарею, редактировать тест без необходимости полной переработки.
Использование компьютера обещает немалый выигрыш времени и усилий при оценке ответов и анализе результатов. Учитель может очень быстро оценить готовую тестовую работу при помощи особого трафарета, который накладывается на каждый лист по очереди. Компьютер способен выполнить ту же самую операцию после вывода информации через клавиатуру.
Значительны преимущества использования компьютера для анализа данных. Наличие прямого доступа к машине обеспечивает учащемуся быструю обратную связь. При этом учитель и ученик получает исчерпывающую диагностическую информацию без всяких дополнительных нагрузок на учителя, связанных с оценкой, контролем и анализом выполненной работы. Наконец, благодаря компьютеру появляется возможность получения точной регистрации всего процесса выполнения теста, которая может быть либо присоединена к уже имеющейся информации об отдельном учащемся или целом классе, либо, по желанию, сохранена для дальнейшего сравнения и анализа.
В простейшем случае такая информация примет форму оценки, суммы баллов за решение конкретной задачи или серии заданий. Можно составит и несколько более сложную программу, которая принимает ответы пользователя. В этом случае пакет, сравнивая поступившую информацию с той, которая исходит от учителя или содержится в предыдущих ответах, обеспечивает учителя и ученика ценной с точки зрения обучения информацией. Эти сведения укажут на сильные и слабые стороны школьника, помогут правильно выбрать направление последующей работы. Если он работал с программой общего характера, она отошлет его за советом к учителю, более конкретные программы предложат обратиться к соответствующим задачам или страницам учебника.
В дополнение к перечисленным возможностям компьютер позволяет целенаправленно группировать вопросы и задания в одну тестовую батарею и соответственно, получать заранее структурированную информацию. Так, одна серия задач или вопросов может касаться проверки уровня сформированности конкретного навыка или умения или усвоения части школьной программы по какому-то предмету, другая- выявления объема фактического знания в той или иной области. Машина без труда составит перечень выявленных причин, приводящих к появлению ошибок или отставания в каждой конкретной предметной области.
Информация об успешности совершаемых действий может быть получена учителем и учащимся в той форме, которая устраивает их в наибольшей степени: ученику выдается распечатка с текстом, в котором содержится оценка его работы и четкие указания на ошибки; учитель получает сводку суммированных данных для анализа, сведенных в таблицу /2/.
4.4 Система самопроверки.
Требования к системе самопроверки
1. Главное требование к системе самопроверки знаний (самоконтроля) заключается в том, что тестовых вопросов должно быть много. Много настолько, чтобы совокупность этих вопросов по своему содержанию охватывала весь материал учебника (естественно, тот фактический материал, который обучающийся должен усвоить). Кстати, эти же вопросы могут быть использованы для экзаменационного тестирования. Естественно, для проведения экзамена все вопросы не нужны, а требуется только выборка в случайном порядке определенного их количества. Чем больше элементов содержит вопросная база изучаемой дисциплины, тем более вероятно, что экзаменационная выборка будет иметь более равномерный характер.
2. Вопросы должны подаваться испытуемому в случайном порядке. Это исключит возможность механического запоминания обучаемым последовательности вопросов.
3. Вопросы не должны начинаться с номера или какого-либо символического обозначения. Испытуемый должен каждый раз читать вопрос и осмысливать его, т.е. запоминать вопрос по смыслу, а не по порядку его следования или символу, его обозначаемому.
4. Варианты возможных ответов должны даваться испытуемому также в случайном порядке
5. Должен проводиться учет времени, затраченного на ответы, причем должны быть установлены ограничения на это время. Учет времени- один из способов борьбы со шпаргалкой: если вопросов много, то для поиска ответа на очередной вопрос нужна либо очень большая шпаргалка, либо целиком бумажный учебник. Но такой поиск ответа займет очень много времени, и, следовательно, общий итог по времени может оказаться отрицательным. Чтобы иметь положительный результат самопроверки, нужно давать ответы не только правильно, но и достаточно быстро. Практика показывает, что среднее достаточное время для ответа на один вопрос- 1 минута.
6. Поскольку речь идет о тестовой системе внутри одного учебника, то целесообразно всю совокупность вопросов распределить по темам, чтобы обучающийся мог проверить уровень усвоения им учебного материала после изучения каждой темы (а также организовать рубежный контроль знаний). Кроме того, распределение вопросов по темам оказывается весьма полезным при построении экзаменационной или зачетной системы- оно позволяет равномерно охватить все темы учебника меньшим количеством вопросов, чем их имеется в системе самопроверки.
7. В тестовую систему должна быть включена оценка степени правильности ответа на каждый заданный обучающемуся вопрос. Это требование очень часто встречается в штыки под тем предлогом, что компьютер не должен выставлять отметки, что машина не может определить уровень знаний человека и т.п. Все эти возражения не могут быть опровергнуты, тем более что речь идет не об отметках всех школьном и институтском понимании, а о степени правильности ответа на каждый вопрос в целом. Предлагается определять эту степень, во-первых, формально и, во-вторых, в процентах. Вспомним ситуацию, в которой бывал почти каждый: идет экзамен, вы только что ответили на вопросы билета, но ответили не очень хорошо, и преподаватель, выставляя вам отметку, пытается вспомнить, какие формальные ошибки вы допустили во время ответа (на первый вопрос не ответили вообще, на второй – ответили лишь на половину, на третий – ответили полностью). Но при этом преподаватель так же находится под впечатлением от вашей внешности, вашей манеры поведения, вашего умения говорить и даже запаха мыла, которым вы пользуетесь, что безусловно, отразится на отметке, которую вы получите якобы за уровень ваших знаний. Компьютер же тщательно подсчитает количество формальных ошибок, сделанных вами в процессе работы с тестовой системой, и определит этот результат в процентах. При этом ваши внешние данные не произведут ни какого впечатления. На этом можно возразить, что такая оценка равносильна школьной отметке по десятибалльной системе. Что и, по существу это так и есть, но формальная оценка, которую дает тестовая система, является не окончательной, а промежуточной. Окончательную оценку ставит преподаватель, ориентируясь на формальную оценку системы (для отличной отметки не обязательно ответить на все вопросы на 100!%), на результаты рубежного контроля, на степень важности данной дисциплины в текущем курсе обучения, на время, затраченное на ответы, и многое, многое другое. На формальную оценку система все же должна сделать.
8. Компьютерный тест должен быть простым в использовании. Желательно, чтобы представление вопросов на экране было спроектировано дизайнером, о возможные действия обучающегося при ответе были продуманы эргономистом. В любом случае на экране должен быть минимум управляющих кнопок, и инструкции-подсказки по действиям обучающегося должны появляться только в нужное время в нужном месте, а не присутствовать на экране постоянно загромождая его.
9. Тестовые вопросы и варианты ответов на них должны быть понятными по содержанию. Впрочем, это их качество зависит не столько от разработчиков системы самопроверки, сколько от авторов содержательной части учебников и тестовых вопросов.
Типы тестовых вопросов
Тестовый вопрос требует от обучающегося только знания того или иного факта, изложенного в учебнике; ответ на тестовый вопрос может быть дан «сразу» (в одно действие) путём выбора его из предложенных вариантов ответа.