Результаты анализа статистических данных и экспертных оценок выполнения заданий с развернутым ответом показывают, что в среднем 1/3 испытуемых не только приступают к выполнению заданий части 3, но и выполняют – полностью или частично – как минимум одно задание из восьми предложенных.
В то же время из года в год отмечается некоторый рост числа экзаменуемых, полностью выполняющих задания с развернутыми ответами. Показательным является то, что подавляющее большинство испытуемых не только приступают к выполнению задания-эссе (задания С9), но и дают результативные ответы.
Анализ статистических данных показывает, что в целом задания части 3 выступают адекватным средством выявления уровня подготовки учащихся, а разработанные критерии, в свою очередь, являются надежным инструментом оценивания ответов экзаменуемых.
На основании изложенного выше можно сделать вывод о достаточной проработанности и эффективности общих подходов к системе оценивания выполнения всех заданий с развернутым ответом.
В то же время анализ работы экспертов по проверке и оценке ответов экзаменуемых выявил ряд проблем, связанных с оцениванием выполнения отдельных заданий с развернутым ответом.
Проблемы, в основном, сводятся к тому, что ответы экзаменуемых подчас не укладываются в спроектированные разработчиками заданий критерии оценки. Это связано с рядом факторов:
- спецификой социально-гуманитарного знания (многозначностью ряда понятий, многообразием аспектов социальных явлений и связей между ними);
- особенностями отдельных типов заданий, требующих приведение иллюстративного материала из различных источников – учебной литературы, СМИ, собственного социального опыта;
- неповторимым индивидуальным стилем изложения материала каждым выпускником.
Указанные факторы делают невозможным предъявление в критериях всего возможного спектра ответов учащихся. Перед экспертом каждый раз встает задача определения соответствия приводимого в ответе конкретизирующего материала требованиям и условию задания.
Тексты, включенные в КИМ ЕГЭ, обладают следующими основными характеристиками:
· тематически связаны с изученным содержанием, отражают, уточняют или расширяют его;
· поднимают социально значимую проблему;
· содержат завершенную, доступно изложенную авторскую точку зрения.
Каждый вариант экзаменационной работы включает один или два фрагмента источника – носителя социальной информации, общим объемом авторского текста до 250-300 слов. Если предъявляются два текстовых фрагмента, то они содержательно связаны друг с другом и предполагают возможность их сравнительного анализа, выделения общих и различных идей, положений.
При оценке ответов экзаменуемых или еще на этапе предварительного ознакомления с заданиями и критериями их оценивания необходимо внимательно прочитать текст и разобрать задания к нему (в ряде случаев целесообразно отметить в тексте соответствующие фрагменты).
К текстовому фрагменту поставлены четыре вопроса – задания, которые в совокупности с фрагментом источника образуют составное задание, своего рода мини-тест.
Каждый из четырех вопросов (заданий) к документу имеет свое назначение в экзаменационной работе и направлен на проверку определенной группы умений.
Первое задание из четырех, входящих в мини-тест, направлено на выявление осознанности восприятия и точности воспроизведения информации, содержащейся в тексте в явном виде.
Второе задание - это, как правило, задание на преобразующее воспроизведение и интерпретацию текста без привлечения контекстных знаний (формулирование заголовка, определение основной идеи текста, сходных или различных положений двух представленных фрагментов и т.п.).
Третье задание чаще всего требует привлечения дополнительного материала, оно нацеливает на характеристику текста или его отдельных положений в связи с изученным курсом, на интерпретацию содержания текста с опорой на собственные знания.
Четвертое задание может быть направлено на использование полученных из текста знаний в другой ситуации, собственную аргументацию и формулировку оценочных суждений относительно позиций, заявленных в тексте (или сформулированных в вопросе к нему).
При детальном рассмотрении характера вопросов-заданий к текстам можно выделить некоторые их модели.
1) Задания, направленные на осмысление фрагмента во всей его полноте, выявление контекста документа («Можно ли на основании приведенного фрагмента утверждать, что наиболее важным автор считает эмпирический уровень науки? Свой вывод обоснуйте»);
2) Задания на раскрытие смысла отдельной части документа, сложного положения текста («Как вы понимаете мысль о том, что образование способствует совершенствованию и укреплению правового государства?»);
3) Задание на правильную интерпретацию авторского положения («Можно ли на основании приведенного фрагмента утверждать, что…? Свой вывод обоснуйте»);
4) Задания, требующие установления прямой связи с обществоведческим курсом («На основе знаний курса и авторского текста назовите три фактора, влияющие на производительность труда»; «Опираясь на текст документа и знание курса, укажите, какие из проблем экологии человека являются естественными, а какие стали следствием научно-технической революции»);
5) Задания, требующие подтвердить или проиллюстрировать определенную авторскую мысль примерами, фактами жизни человека и общества («Подтвердите тремя примерами вывод автора о том, что чем выше уровень промышленного развития страны, тем сильнее развито в ней разделение труда»);
6) Задания, выводящие экзаменуемых на анализ явлений современности («Опираясь на определения различных обществ, данные в тексте, объясните, в каком обществе живет современная российская молодежь»).
7) Задания, требующие выражения своего собственного мнения и его аргументации («Возможно ли, на ваш взгляд, в обозримом будущем преодоление контрастов между «богатыми» и «бедными» странами? Приведите два аргумента в подтверждение своей позиции»).
Для оценки правильности и полноты ответов разработаны специальные критерии. Каждому заданию соответствуют свои критерии проверки и оценки ответа. Именно они делают возможной объективную оценку работы проверяющими ее экспертами. В критериях предлагаются возможные формулировки ответов или даются общие подходы, «ключи» к оценке ответов экзаменуемых. Вместе с этим указывается, что допускаются иные, отличные от данных в критериях, формулировки, не искажающие смысл правильного ответа.
Первые два вопроса-задания оцениваются в 2 балла, два последующих – в 3 балла. Таким образом, за выполнение мини-теста с текстовым фрагментом (правильную и полную формулировку ответов на все четыре вопроса-задания) экзаменуемый может получить 10 баллов.
Полный правильный ответ по заданиям С1 и С2 оценивается двумя баллами, частично правильный – одним баллом. По заданиям С3 и С4 полному правильному ответу присваивается три балла, в значительной степени правильному – два балла, частично правильному – один балл.
Поскольку часть заданий обращена только к тексту, направлена на проверку понимания текста, умения получить содержащуюся в тексте информацию, их система оценивания содержит эталон правильного ответа. Критерии ориентируют эксперта на поиск названных в эталоне позиций в ответе экзаменуемого.
Данная часть заданий непосредственно опирается на содержание текста, во многих случаях требуя приведения цитат или близкого к тексту пересказа определенных фрагментов содержания. Это обстоятельство необходимо учитывать при оценивании рассуждений экзаменуемого, не связанных напрямую с содержанием текста. При любом, даже самом высоком качестве рассуждений, отсутствие их непосредственной связи с текстом не позволяет засчитать их как верные.
Выполнение другой части заданий, в количественном отношении преобладающей, проверяется по критериям, содержащим лишь «ключ» и примеры возможных элементов правильного ответа.
Приводим фрагмент мини-теста – текст и два задания к нему, иллюстрирующие каждую из обозначенных выше групп заданий. К каждому из заданий приводятся примеры ответов из работ экзаменуемых.
Пример 4. Фрагмент мини-теста.
«Все виды материальной и духовной деятельности человека производны от труда и несут в себе его главную черту – творческое преобразование действительности, а в итоге и самого себя. <…>