– метод парных сравнений, используемый экспертами при высказывании мнений, позволяет полнее реализовать их возможности и не требует высокой квалификации, так как упрощается сама процедура высказывания суждений в связи с сопоставлением только двух объектов без непосредственного числового выражения приоритетов;
Название | Методика расчета | Диапазон критериальных значений | Экономический смысл |
1. Коэффициент согласованности Кендалла (W) | , где S – сумма квадратов откло-нений всех экспертных оценок по каждому показателю от среднего арифметического значения рангов; n – число экспертов; m – число оцениваемых показателей (т. е. объектов экспертизы) | W = 0 – указывает на факт несогласованности мнения экспертов, а также на неадекватность; W = 1 – соответствует полной согласо-ванности; 0,4≥W≤0,6 – качество экспертного решения считается удовлетворительным; 0,7≥W ≤0,9 – высоким | Оценивает согласованность экспертных мнений |
2. Коэффициент конкордации (Кк) | Ккi = 1 - КОi; КОi = ; , где КОi– коэффициент разброса мнений; – среднеквадратическое откло-нение от коэффициента значи-мости i-го показателя после группповой оценки; –индии-видуальная экспертная оценка значимости i-го показателя; - значимость i-го показателя после групповой оценки по формуле средней арифметической; m – число экспертов | Кк = 0 – указывает на факт несогласованности мнения экс-пертов, а также на неадекватность; Кк = 1 – соответствует полной согласованности; 0,7≥Кк ≤0,9 – качество экспертного решения считается удовлетворительным; Кк≥ 0,95– высоким |
Окончание табл. 6.7
Название | Методика расчета | Диапазон критериальных значений | Экономический смысл |
3. Коэффициент чувствительности (Кчув) | Кчув = ; = ; , где – среднеквадратическое отклонение чувствительности метода; – удельный вес значимости i-го показателя в системе; – средний удельный вес значимости одного показателя в системе; n – число показателей в системе | Кчув = 0 – означает отсутствие чувствительности метода; Кчув = 1 – соответствует абсолютной чувствительности метода; 0,7≥ Кчув ≤0,9 – означает удовлетворительную чувствительность метода; Кчув ≥ 0,95– соответствует высокой чувствительности метода | В обобщенном виде показывает диапазон отклонений, полученных оценок значимости в ту или другую сторону от базисного (среднего) уровня значимости объектов |
4. Коэффициент точности (Кточ) | Кточ = ; , где – среднеквадратическое отклонение точности метода; – удельный вес значимости i-го показателя, определенный методом, который условно принят за эталонный | Кточ = 0 – означает отсутствие точности метода; Кточ = 1 – соответствует абсолютной точности метода; 0,7≥ Кточ ≤0,9 – означает удовлетворительную точность метода; Кточ ≥ 0,95– соответствует высокой точности метода | Характеризуется степенью достоверности процедуры, с которой метод позволяет не только выявить приоритетные отношения объектов, но и соизмерить интервалы различий между ними |
Рис. 6.2 Схема методики определения коэффициентов значимости объектов в системе методом расстановки парных приоритетов
– путем определения коэффициентов приоритетов и итеративных вычислений при обработке результатов достигается приближение субъективных индивидуальных оценок к объективному значению групповой экспертной оценки, отражающей предельно «истинную» значимость объекта в системе;
– достаточно высокая степень чувствительности процедуры метода к варьированию влияния частных показателей на комплексный позволяет не только выявить приоритетные отношения объектов, но и соизмерить интервалы различий между ними;
– высокая согласованность экспертов при высказывании суждений.
К индивидуальным методам экспертных оценок, помимо вышеперечисленных также относят следующие психологические (творческие) методы.
Прием аналогии (или метод ассоциации идей и аналогий) представляет собой использование подобного ранее известного решения (т. е. перенос опыта) для ответа на конкретный аналитический вопрос.
Прием инверсии – это применение системы решения «наоборот», т. е. использование метода от противоположного, что дает возможность отказаться от традиционных решений.
Прием контрольных вопросов имеет целью с помощью наводящих вопросов подвести к решению поставленной задачи. В зарубежной практике нашел широкое распространение вопросник А. Осборна, включающий девять групп вопросов (например, что можно в объекте преобразовать, что надо сделать наоборот, на какой объект похож данный объект, что можно скопировать и др.).
Обобщая вышеизложенное, следует отметить, что основная проблема применения экспертного оценивания – это снижение риска субъективности суждений экспертов. Для обеспечения объективности конечного результата возможно использование групповой экспертной оценки, которая позволяют повысить уровень объективности оценок благодаря использованию суждений некоторого числа специалистов с применением при этом определенных процедур приведения индивидуальных мнений к единому.
Наиболее распространенными в практике методами являются: метод среднеарифметической или средневзвешенной величины, метод медианы, правило большинства, сравнительные суждения, последовательные интервалы и т. д. (см. рис. 6.1), а также метод, разработанный американской корпорацией РЭНД и получивший свое название от г. Дельфы, который был известен в Древней Греции своими прорицателями-оракулами – метод Дельфи (или метод мозгового штурма).
Сущность последнего заключается в проведении опроса экспертов в несколько туров. При этом в первом туре эксперты не афишируют свои ответы, а во втором и последующих турах объясняют, почему они изменили или не изменили свое мнение. Между очередными опросами экспертов информируют о результатах предыдущих этапов опроса, сообщая им средние и крайние мнения. В результате этого, а также взаимного обмена информацией, эксперты пересматривают свое мнение, и их ответы носят все более устойчивый характер, что и служит для основания прекращения опроса. При этом при использовании метода Дельфи следует соблюдать несколько следующих правил:
– эксперты должны быть из разных областей знаний,
– между экспертами допускается любая форма должностного подчинения,
– устанавливается регламент на время и количество высказываний,
– обязательное подведение итогов в конце совещания его председателем,
– перерыв между первым и вторым этапом двойной мозговой атаки должен продолжаться не более одного дня.
В ходе групповой экспертной оценки необходимо осуществить оценку качества экспертных решений, что осуществляется с помощью ряда критериев, методика расчета которых систематизирована в табл. 6.7.