Пример задания с незаконченной формулировкой:
The boy in the bedroom...
A. called his mother because it was dark.
B. could not sleep because of the storm outside.
C. was glad that the soldiers had come.
D. was glad because his father had gone away.
В приведенном примере под формой одного задания (вопроса) реально спрятаны три:
- Почему мальчик позвал мать?
- Почему мальчик не мог уснуть?
- Почему мальчик радовался?
При этом, существует строгое требование – в задании должен быть только один вопрос. Нарушение этого требования стало возможно благодаря незаконченности формулировки.
3. Формулировка должна быть простой. Мы проверяем понимание некоторого явления – не формулировки задания. В заданиях на понимание прочитанных или прослушанных текстов нужно избегать коннотативно окрашенной лексики, при этом также необходимо обращать внимание на:
- употребление вокабуляра (нейтральная базовая лексика)
- длину задания (минимальная достаточность для соблюдения требования законченности формулировки)
- синтаксическую сложность (избегание сложных предложений)
- употреблений отрицаний (по возможности, избегать, при необходимости использовать – выделять аспект отрицания)
- ссылки (например, в виде местоимений – стараться использовать имена собственные, особенно в случаях, когда существует возможность отнесения местоимения не к задуманному объекту).
- Задания должны быть локально не зависимы. Нельзя, использовав имя собственное в формулировке одного задания, заменять его местоимением в формулировке следующего задания.
4. Задания не должны пересекаться (выполнение одного не должно зависеть от выполнения другого).
Нельзя, например, спросив «Какой марке автомобиля отдает предпочтение автор?», в следующем задании спрашивать «Какие достоинства видит автор в этом автомобиле?». Ответившие неверно на первый вопрос, будут обречены на неверный ответ и в следующем задании.
Требования к формулировке вариантов ответа:
1. Должен быть только один правильный ответ, дистракторы должны быть доказуемо неверны.
2. Необходимо обращать внимание на согласованность вариантов ответа и вопросов.
Пример несогласованности:
What is the writer’s opinion about violence on TV?
A. He considers it dangerous for young people’s development.
B. He is not interested in this phenomenon.
C. He never watches television.
D. It is a fact that it has increased crime.
В приведенном примере только один ответ (А) согласован с вопросом, что является своеобразной подсказкой (остальные не относятся ко мнению автора).
3. Варианты ответов должны:
·- быть правдоподобны и параллельны
·- быть просто сформулированы
·- быть легко различимы между собой
·- быть понятны независимо друг от друга
4. Варианты ответов не должны:
·- быть слишком радикальными (следует избегать слов только, всегда, никогда, все и т.п.)
·- выделяться за счет
· длины (лучше, если они будут приблизительно одной длины)
· точности или полноты формулировки (одна более точная или полная)
· эха (дословного повтора текста)
· пересекаться (быть взаимно исключающими)
· содержать подсказки к другим заданиям.
5. Слова – задания должны четко указывать требования и соответствовать объему предполагаемого ответа.
Для формулировки заданий с вариантами ответов подходят: Mention, Indicate, How…, What…, Where…, What/Which…, When… . Для более развернутых ответов: Explain, Describe, Deduce, Prove, Illustrate
* Применение заданий с развернутым ответом (в нашем случае заданий в разделах «Письмо» или «Говорение») связано с необходимостью использования экспертной оценки (иными словами творческое задание по письму и устное выступление должны быть оценены членами жюри).
Использование экспертного оценивания снижает надежность. Но причины погрешности связаны не только с оценивающими ответ. Помимо них факторами, влияющими на формирование погрешности оценивания, являются:
Формулировка задания
Система (схема) оценивания
Задания, требующие свободного ответа, нацелены на выявление способностей интегрировать, формулировать и выражать мысли и позволяют учащимся проявить творчество и оригинальность.
Формулировки задания должны давать учащемуся возможность проявить те качества, которые составители намерены контролировать, а составителям контролировать и оценивать именно эти качества.
Формулировка задания является стимулом для высказывания (устного или письменного) и должна обеспечивать интенционально-целевую направленность высказывания. Так, грамотно сформулированная тема сочинения является стимулом для выражения и организации собственных мыслей испытуемым, синтеза знаний, использования информации для решения проблемы, выражения чувств литературными средствами по определенной теме, иными словами, дает возможность проверить сложные познавательные умения в заданных тематических рамках. То же самое касается и устных контрольных процедур.
Принципиальное значение для объективной оценки является применение унифицированной системы критериев и схем оценки для всех работ (см. Критерии оценивания конкурсов "Письмо" и "Говорение").
Критерии оценки орфографии и пунктуации, грамматических ошибок, почерка и т.п. должны быть отделены от критериев оценки содержания ответа. Необходимо обязательно определить, какой вес, какие ошибки будут иметь.
В условиях олимпиад необходима экспресс тренировка членов жюри, направленная, главным образом, на согласование их позиций по отношению к предложенным схемам оценивания.
* Требования, предъявляемые к текстовому материалу тестирования:
ИСТОЧНИКИ
· следует избегать источников, в которых вряд ли могут содержаться приемлемые тексты (например, профессиональная документация и т.п.)
· источники, текстовое содержание которых может поставить в более выгодные условия определенные группы учащихся (например, по культурным, гендерным или возрастным признакам)
ПРИЧИНЫ ДЛЯ ОТКАЗА ОТ ТЕКСТА
- слишком многое основано на локальных реалиях, понимание текста зависит от степени знакомства с ними;
- неприемлемая тема (война/ смерть/ политика/ вероисповедания);
- тема, не входящая в круг возрастных интересов группы, на которую ориентирован тест;
- слишком высокий уровень сложности (наличие большого количества низкочастотной лексики);
- технические или стилистические недостатки текста;
- низкое качество оригинального текста при использовании репринта.
Проверку адекватности выбранного текстового материала и разработанных к нему заданий можно сделать на основания следующего контрольного опросника:
ТЕКСТ:
· Доступна ли и приемлема тема?
· Адекватен ли уровень сложности?
· Достаточен ли его объем для формулирования необходимого количества заданий?
· Есть ли подходящий заголовок?
ЗАДАНИЯ:
· Достаточное ли количество заданий составлено?
· Насколько равномерно они распределены относительно содержания текста?
· Достаточный ли языковой диапазон они охватывают?
· Не оказалось ли взаимозависимых заданий?
· Есть ли запасные задания?
· Удалось ли избежать идеосинкратических заданий?
ИНСТРУКЦИИ И КЛЮЧИ:
· Проверены ли формулировки инструкций?
· Предоставлен ли пример выполнения задания и оформления ответа на него?
· Предоставлены ли ключи для проверки выполнения заданий?
Олимпиада не должна подменять собой школьный экзамен. Задания должны быть направлены на то, чтобы выявить не тех, кто хорошо успевает в школьных занятиях, а тех, кто помимо этого по-настоящему увлечен предметом и стремится овладеть дополнительными умениями и навыками, свидетельствующими о желании как можно глубже ознакомиться с языком и культурой стран изучаемого языка.
4.2. Образцы олимпиадных заданий [2]
4.2.1. Понимание письменного текста (Reading)
Part 1
Read the text and do the task that follows.
Culture, Logic, and Rhetoric
Logic, which is the basis of rhetoric, comes from culture; it is not universal. Rhetoric, therefore, is not universal either but varies from culture to culture. The rhetorical system of one language is neither better nor worse than the rhetorical system of another language, but it is different.
English logic and English rhetoric, which are based on Anglo-European cultural pattern, are linear – that is, a good English paragraph begins with a general statement of its content and then carefully develops that statement with a series of specific illustrations. A good English paragraph may also use just the reverse sequence: it may state a whole series of examples and then summarize those examples in a single statement at the end of the paragraph. In either case, however, the flow of ideas occurs in a straight line from the opening sentence to the last sentence. Furthermore, a well-structured English paragraph is never digressive. There is nothing that does not belong to the paragraph and nothing that does not support the topic sentence.
A type of construction found in Arabic and Persian writing is very different. Whereas English writers use a linear sequence, Arabic and Persian writers tend to construct a paragraph in a parallel sequence using many coordinators such as and and but. In English, maturity of style is often judged by the degree of subordination rather than by the degree of coordination. Therefore, the Arabic and Persian styles of writing, with their emphasis on coordination, seem awkward and immature to an English reader.
Some Asian writers, on the other hand, use an indirect approach. In this kind of writing, the topic is viewed from a variety of angles. The topic is never analyzed directly; it is referred to only indirectly. Again, such a development in an English paragraph is awkward and unnecessarily vague to an English reader.
Spanish rhetoric differs from English rhetoric in still another way. While the rules of English rhetoric require that every sentence in a paragraph relate directly to the central idea, a Spanish-speaking writer loves to fill a paragraph with interesting digressions. Although a Spanish paragraph may begin and end on the same topic, the writer often digresses into areas that are not directly related to the topic. Spanish rhetoric, therefore, does not follow the English rule of paragraph unity.
In summary, a student who has mastered the grammar of English may still write poor papers unless he/she has also mastered the rhetoric of English. Also, the student may have difficulty reading an essay written by the rules of English rhetoric unless he/she understands the “logical” differences from those of his/her native tongue.
For items 1-5, choose the answer (A, B, C, or D) which fits best according to the text.
1. The author’s aim is to prove that
A. rhetoric is culturally specific.
B. foreign learners of English should acquire the rules of English rhetoric.
C. Asian and Spanish writers ignore English rhetoric.