- индивидуальная самостоятельная работа по выбору ученика;
- разделы, выделенные для самостоятельного изучения.
2) определить нормативные баллы на все задания и задачи учебного предмета (или правила начисления баллов);
3) установить минимальное количество баллов по каждому виду учебной деятельности, которое должен набрать ученик в ходе обучения;
4) составить свод правил и положений, на основе которых будет производиться оценивание – рейтинговый регламент;
5) на основе программных средств организовать учет успеваемости обучающихся и расчет их рейтингов;
6) в конце четверти выставить общую оценку за работу, представляющую собой сумму рейтинговых оценок за отдельные модули [5, с. 38].
Прежде чем представить общую схему организации рейтинговой системы, стоит сказать, что рейтинговая шкала значительно более чувствительна, чем балльная (например, пятибалльная), она представляет собой частный случай ранговой шкалы (см. рис.1). Это позволяет использовать ее для организационных и управленческих решений. Например, в одной из негосударственных школ было принято решение о дифференциации оплаты за обучение детей в зависимости от их успехов, выражаемых рейтингами. В результате одни родители наиболее способных детей были освобождены от оплаты совсем, а родителям детей, создающих наибольшие проблемы и требующих особого усиленного внимания, пришлось доплачивать. В другой негосударственной школе решили ежегодно отчислять 10 учащихся из 300 обучающихся, занимающих нижние строки рейтингового списка, а на их места принимать 10 новичков "с улицы", предоставляя последним счастливый шанс [4, с. 47].
Рис.1 Виды оценочных шкал
Рейтинговая система по ряду признаков имеет большое сходство с количественной шкалой, но, что важно, таковой не является. Рейтинг – это действительное число. Но получается оно либо путем опроса субъективных мнений экспертов, как рейтинги политических деятелей, либо путем набора очков (пунктов, баллов).
Рейтинговая система обладает ни с чем не сравнимой гибкостью. Можно, например, иметь ее отдельно по каждому предмету, а можно общую. В список оцениваемых достижений могут быть включены и неучебные – важные на данный период для статуса или развития школы.
Рассмотрим более детально, как строится рейтинговая система, но сначала необходимо ознакомиться с техникой построения рейтинговых шкал. Пусть требуется ранжировать m объектов E1, E2, …, Em и для этого привлечены n экспертов. Это значит, что каждый эксперт должен выдать упорядоченную последовательность данных объектов по степени выраженности оцениваемого свойства, присвоить каждому из объектов ранг от 1 до m. Обозначим r1к ранг, который присваивает первому объекту k-тый эксперт, r2к – ранг, который этот же эксперт присваивает второму объекту, и так далее. Например, запись r23 =1 означает, что второму объекту третий эксперт присвоил ранг 1. в результате опроса экспертов получается матрица из m строк и n столбцов (см. таблицу).
Эксперт Объект | 1 | … | k | … | n |
E1 | r11 | … | r1к | … | r1п |
E2 | r21 | … | r2к | … | r2п |
… | … | … | … | … | … |
Em | rm1 | … | rmк | … | rmп |
Но суждения носят оценочный характер и отражают ценностные установки самого эксперта. Здесь велик соблазн для эксперта принять (самому) и представить (другим) свои внутренние критерии в качестве объективных [11, с. 78]. На оценки и суждения экспертов обычно оказывают влияние факторы, которые нельзя отнести к числу научных аргументов: авторитет и заслуги коллег, ранее высказавших суждение; эмоциональная окраска утверждений оппонента и т.п. [20, с. 56]. Поэтому, прежде чем работать с матрицей дальше, следует провести проверку на согласованность экспертных оценок внутри рабочей группы. Для этого найдем суммы Ri по каждой строке:
Ri= ri1+…+ riк+…+ riп
Выберем среди этих сумм наибольшую Rmax и наименьшую Rmin. Вычислим размах: ΔR=Rmax – Rmin. Согласованность экспертных оценок считается достаточно высокой, если ΔR= m >
. В противном случае требуется более точная и трудоемкая дополнительная проверка по дисперсии. С вероятностью 90% между экспертными оценками имеется достаточная согласованность, еслиD>(0,22m+0,50)
,где
= – среднее арифметическое, а D= – дисперсия.Формула применима для количества оцениваемых объектов от трех до двадцати.
Если согласованность экспертов достигнута, то дальнейшая процедура проста: объекту с наименьшей суммой рангов присваивается ранг 1, следующему – ранг 2 и т.д. Объект с наименьшей суммой рангов получает итоговый ранг m.
Рассмотрим это в конкретных числах. Предположим, что в конкурсе на оригинальное решение логических задач претендуют на победу 4 ученика: А, Б, В, Г. Жюри из пяти учителей-математиков должно присудить им места и награды. Для этого каждый член жюри указывает место, которое он считает нужным присудить каждому из победителей. В итоге получены следующие оценки:
Ученик | Член жюри | Ri | ||||
1 | 2 | 3 | 4 | 5 | ||
А | 3 | 3 | 3 | 3 | 3 | 15 |
Б | 4 | 4 | 2 | 4 | 4 | 18 |
В | 2 | 1 | 1 | 2 | 2 | 8 |
Г | 1 | 2 | 4 | 1 | 1 | 9 |
Находим теперь:
Rmax = R2 =18;
Rmin= R3=8;
ΔR=Rmax – Rmin=10.
Условие ΔR= m >
в нашем случае имеет вид 10> и не выполняется. Значит, нужна более точная оценка, для чего вычислим нужные значения параметров: = = =12,5;D=
= =23.Условие согласованности в числах имеет вид 23>(0,22·4+0,50)·12,5 и выполняется (23>17,25). Следовательно, согласованность оценок жюри обеспечена. Поэтому можно ранжировать победителей по суммарным рангам.
Таким образом, первое место присуждено ученику В, второе – ученику Г и так далее:
Ранг | Ученик |
1 | В |
2 | Г |
3 | А |
4 | Б |
Если экспертные оценки в группе не согласованны (не выполняется критерий по дисперсии), то следует переформировать группу экспертов и повторить процедуру. При этом может меняться число экспертов. Заметим, что критерий по размаху очень жесткий. Например, если 3 эксперта по 4 объектам дали одинаковые оценки, то Rmax =12, Rmin=3, ΔR=9 и условие 9>
не выполняется, то есть оценки не согласованны. Но если то же самое сделали 4 эксперта, то Rmax =16, Rmin=4, ΔR=12 и 12> , следовательно, их оценки согласованны [3, с. 43].Вернемся к рейтинговой системе. Независимо от того, какой вариант выбран – общая шкала или попредметная, необходимо составить список всех оцениваемых учебных действий, то есть от того, за счет чего ученик сможет набирать очки. Задача составления такого списка не так проста, как может показаться на первый взгляд. Ее можно совместить с процедурой ранжирования, когда каждый эксперт приводит оцениваемые действия уже упорядоченным списком, но при таком варианте будет слишком много элементов списка, не имеющих полного комплекта оценок. В результате невозможно применить процедуры проверки на согласованность. Поэтому сначала надо получить максимально полный список, опросив учителей и добавив новые предложения к уже имеющимся. Затем следует ранжировать полученный список, применяя полученную выше процедуру. Для этого создается экспертная группа из наиболее профессионально компетентных, опытных учителей. В случае, если не удается добиться согласованности оценок, можно изменить ее состав либо исключить из списка оцениваемых действий те, по которым разброс экспертных оценок слишком велик.