Для проведения первого тура экспертам предлагаются вопросы. Ответы должны быть представлены в виде количественных оценок на поставленный вопрос. Ответ должен быть обоснован экспертом.
Аналитическая группа проводит статистическую обработку полученной от всех экспертов информации. Для этого рассчитывается среднее значение исследуемого параметра, средневзвешенное значение исследуемого параметра, определяется медиана как средний член общего ряда чисел, полученных от экспертов и область доверительности. Область доверительности целесообразнее рассчитывать через показатель квартиль. Значение квартиля равно ¼ разницы между максимальной и минимальной оценок ряда. Сама область доверительности будет равна как минимальная оценка минус значение квартиля, максимальная оценка плюс значение квартиля.
Эксперты должны обязательно познакомиться с результатами и выводами аналитиков, после чего проводится второй (очередной) тур. Эксперты по результатам представленных расчетов могут увидеть, как корреспондируется их мнение с мнением всей группы экспертов. Они могут изменить свои мнения или оставить прежними, но в этом случае выдвинуть контраргументы в свою пользу. При этом строго соблюдается принцип анонимности. Таким образом проводится 2-3 тура. В итоге получаем довольно точную групповую оценку.
Пример № 2: Проблема – оценить уровень спроса на товар А в 2003 году. Приглашены 10 экспертов. Каждый эксперт получил анкету с описанием товара и предполагаемого рынка сбыта. Экспертам предложено дать себе индивидуальную самооценку в баллах в диапазоне от 0 до 10. Уровень спроса предлагается оценить в % (процентах) в диапазоне от 0 до 100.
Каждый эксперт работает самостоятельно и анонимно. После 1-го тура от экспертов были получены следующие результаты:
| номер эксперта | коэффициент самооценки | уровень спроса -индивидуальная оценка эксперта |
| 1 | 10 | 90 |
| 2 | 8 | 100 |
| 3 | 10 | 75 |
| 4 | 7 | 80 |
| 5 | 8,8 | 90 |
| 6 | 10 | 100 |
| 7 | 6,6 | 80 |
| 8 | 8,5 | 80 |
| 9 | 7,4 | 60 |
| 10 | 9,9 | 80 |
Аналитическая группа проводит следующий расчет:
Среднегрупповая самооценка равна = (10+8+…+9,9) : 10 = 8,61
Среднее значение спроса (простая оценка) равна ( 90+100+…+80) :10 =83,5%
Медиана в данном случае при четном числе экспертов рассчитывается как среднеарифметическое значение между серединными оценками и будет равна Ме = (80+80):2=80 [замечание: оценки экспертов по уровню спроса располагаются по возрастанию]
Область доверительности рассчитается следующим образом:
Определяется минимальная оценка из набора экспертизы – 60%;
максимальная оценка -100%.
Квартиль будет равна (100-60):4=10%.
Следовательно, нижняя граница доверительной области будет равна 60+10=70%,
верхняя граница будет равна 100-10=90%.
область применения | ||||||
| 60 | 70 | 75 | 80 | 90 | 100 | оценка экспертов |
| 80 | ||||||
| 80 | ||||||
| 80 | ||||||
Рис. Область доверительности
Все полученные результаты предлагаются на рассмотрение экспертам. Если эксперты считают целесообразным откорректировать свое мнение, то они передают свои коррективы аналитической группе. И аналитическая группа рассчитывает новые результаты по тому алгоритму, который был рассмотрен выше.
Итоговое обобщенное мнение является основой для прогноза по уровню спроса на данный товар А.
При использовании метода «Дельфи» следует учитывать следующее:
1. Группы экспертов должны быть стабильными и численность их должна удерживаться в благоразумных рамках.
2. Время между турами опросов должно быть не более месяца.
3. Вопросы в анкетах должны быть тщательно продуманы и четко сформулированы.
4. Число туров должно быть достаточным, чтобы обеспечить всех участников возможностью ознакомиться с причиной той или иной оценки, а также и для критики этих причин.
5. Должен проводиться систематический отбор экспертов.
6. Необходимо иметь самооценку компетенции экспертов по рассматриваемым проблемам.
7. Нужна формула согласованности оценок, основанная на данных самооценок.
Метод Дельфи применим практически в любой ситуации, требующей прогнозирования, в том числе если для принятия решения недостаточно информации.
Существует несколько модификаций метода Дельфи, в которых основные принципы организации экспертизы имеют много общего. Различия связаны с попытками усовершенствовать метод за счет более обоснованного отбора экспертов, введения схем оценки их компетентности, улучшенных механизмов обратных связей и т.п. Для удобства обработки информации все модификации, как правило, предполагают возможность выражения ответа в виде числа, количественной оценки.
Но у него есть недостатки - например, субъективность мнений специалистов, участвующих в опросе, он не позволяет сталкивать в споре мнения экспертов и на него затрачивается много времени.
Некоторые недостатки метода Дельфи связаны с нехваткой времени, которое отведено эксперту на обдумывание проблемы. В этом случае эксперт может согласиться с мнением большинства, чтобы уйти от необходимости объяснения, в чем заключается отличие его решения от остальных вариантов. Эти недочеты устраняются совершенствованием организации экспертиз путем создания автоматизированных систем обработки результатов опроса. Техническая реализация такой системы основана на использовании ЭВМ с внешними терминалами (дисплеями). ЭВМ обеспечивает представление вопросов экспертам (общающимся с ней через их персональные дисплеи), сбор и обработку результатов ответов, запрос и выдачу аргументации и другой необходимой информации для подготовки ответов.
Кроме того, некоторые специалисты считают, что «предположение о том, чтобы те, кто резко расходится с мнением большинства, обосновали свою точку зрения, может привести к усилению эффекта приспособления, а не уменьшить его, как это было задумано». Но все же многие ученые утверждают, что метод Дельфи превосходит «обычные» методы прогнозирования, по крайней мере, при разработке краткосрочных прогнозов.
Метод Дельфи впервые был описан в «Докладе об изучении долгосрочного прогнозирования» американской корпорации «Рэнд» в 1964 г. Объектами исследования явились: научные прорывы, рост населения, автоматизация, исследование космоса, возникновение и предотвращение войн, будущие системы оружия. За истекший период круг прогнозируемых процессов с помощью метода Дельфи значительно расширился, но несомненно, что наибольшее применение этот метод нашел в областях, связанных с научно-техническим прогрессом.
В частности, в нашей стране данный метод применялся для определения основных направлений научных исследований в области средств вычислительной техники и прогнозирования их характеристик, для оценки перспектив развития отраслей. В последнем случае с помощью данного метода могут быть решены следующие задачи:
- определение сроков выполнения работ от выдачи технического задания на работу до начала эксплуатации объекта;
- определение приоритетных направлений развития предприятий отрасли (по технологии производства, важнейшим экономическим характеристикам — объему производства, числу занятых, объемам фондов и т.п.);
- определение критериев оценок значимости научных разработок и др. От метода Дельфи по организации работы экспертов принципиально отличается метод, получивший название «мозговой штурм», который также называют методом «мозговой атаки», методом коллективной генерации идей. Этот метод подразумевает получение решения как продукта коллективного творчества специалистов в ходе заседания-сеанса, проводимого по определенным правилам, и последующего анализа его результатов. Его сущность состоит в том, что при обосновании прогноза дифференцированно решаются две задачи:
- генерирование новых идей в отношении возможных вариантов развития процесса;
- анализ и оценка выдвинутых идей.
Обычно все специалисты в ходе заседания разделяются на две группы, состоящие из одних и тех же или разных представителей так, что одна группа генерирует идеи, а вторая — их анализирует. При этом в ходе заседания запрещается высказывать любые критические оценки ценности идеи; приветствуется выдвижение как можно большего их количества, поскольку предполагается, что вероятность появления действительно ценной идеи повышается с увеличением их общего числа; поощряется свободный обмен мнениями, т.е. высказанные мысли должны подхватываться и развиваться и т.п. Ходом заседания руководит беспристрастный ведущий. Его задача состоит в том, чтобы направлять развитие дискуссии в нужное русло, к достижению заданной цели, не сбиваясь на беседу, соревнование в остроумии и т.п. В то же время он не должен навязывать участникам дискуссии свое мнение, ориентировать их на определенный способ мышления.
Для России формулирование целей и отработка методов отбора приоритетов государственной научно-технологической политики имеет особое значение. Хотя составление комплексных прогнозов научно-технического развития страны и мира в СССР началось еще в начале 1970-х годов, основными ориентирами для них служили интересы оборонного сектора и партгосаппарата. В настоящее время цели развития безусловно расширились, но соответствующая им процедура выбора приоритетов не разработана, не согласована, не имеет нормативной базы и традиций. В этих условиях при выборе приоритетов и получении соответствующей финансовой и правовой поддержки могут возобладать смещенные и узкие интересы ведомств, ВПК, регионов или чьи либо иные, в то время как интересы государства в целом не будут приниматься в расчет. В этих условиях отработка процедуры выбора приоритетов и изучение опыта других стран крайне важны.