Методы экспертных оценок

Метод Дельфи

Сущность метода Дельфи состоит в последовательном анкетировании экспертов различных областей науки, техники и формировании массива информации, отражающего индивидуальные оценки экспертов, основанные на строго логическом опыте. Данный метод предполагает использование серии анкет, в каждой из которых содержаться информация и мнения, полученные из предыдущей анкеты.

Область применения метода: прогноз развития науки и техники, будущих открытий и изобретений, для которых нет достаточной теоретической базы в момент составления прогноза, а также составление картины будущего мира, долгосрочного прогнозирования, изучения ряда экономических и социальных проблем.

Сбор и обработка индивидуальных мнений экспертов о прогнозах развития объекта исследования производится исходя из следующих принципов:

•вопросы в анкетах ставятся таким образом, чтобы можно было дать количественную характеристику ответам экспертов;

•опрос экспертов проводится в нескольких этапов, на каждом последующем этапе вопросы и ответы все более уточняются;

•после каждого этапа всех опрашиваемых экспертов знакомят с результатами опроса;

•эксперт обосновывают оценки и мнения, отклоняющие от мнения большинства;

статическая обработка ответов производится последовательно, от этапа к этапу, с целью получения обобщающих характеристик.

Опрос экспертов производится в четыре этапа с промежутками в два месяца. Разумеется, еще до первого этапа должны быть проведены подготовительные мероприятия с экспертами.

Первый этап. Выдается анкета (лично, по почте, с помощью ЭВМ и др.), собираются ответы, обрабатываются, каждый эксперт знакомится с результатами.

Второй этап. Результаты опроса наносятся на шкалу, определяется медианное значение, квартили и экспертам предлагается скорректировать свою оценку, чтобы вписаться в интервал между квартилями. При изменении мнения или отказе от изменения требуется объяснить свое решение.

Под медианой понимается такое значение прогнозируемого признака, которым обладает центральный член ряда, составленного в порядке возрастания значений признака. Под модой понимается наиболее часто встречающееся в ранжированном ряду значение прогнозируемого признака.

Квартилем называется значение прогнозируемого признака, которым обладают члены ряда под номером, представляющим ¼ всего ряда (нижний квартиль) и ¾ от всего ряда (верхний квартиль). Аналогично определяются децили.

Предположим, что от экспертов получено какое - либо число оценок. Эти оценки упорядочиваются, скажем, в порядке убывания. За медиану принимается средний член ряда (при нечетном числе экспертов), по отношению к которому число оценок с начала и с конца ряда будет одинаковым.

При четном числе экспертов медиана равна среднему из значений оценок двух центральных экспертов. В нашем случае - нечетное число экспертов 11, медиана будет совпадать с оценкой N ₆ (рис.2). Затем определяются верхний и нижний квартили, т.е. интервалы Q ₁ M_e и Q ₃ M_e . Величины этих квартилей в первом приближении равны значениям оценок ряда в интервале, равном 25% от начала и 25% от конца ряда. Таким образом, медиана и квартили образуют на оси ряда четыре интервала, среди которых два средних и считаются наиболее предпочтительными. Полученные таким образом показатели принимаются за характеристики распределения оценок: медиана служит характеристикой группового ответа, а предпочтительный интервал квартилей - показателем разброса индивидуальных оценок.

Рис.2. Медиана и квартили в методе Дельфи

Каждому эксперту сообщаются значения этих характеристик. Экспертов, чьи оценки оказались в крайних квартилях, просят их мотивировать, т.е. обосновать причины расхождения с групповым мнением. Эксперты могут приводить любые аргументы или возрождения, такие же, какие они приводят во время дискуссии. Разница заключается лишь в том, что эти аргументы анонимны. Они могут пересмотреть свои мнения и при желании исправить оценки.

С полученными обоснованиями знакомят остальных экспертов, не указывая при этом, чьи они. Такая процедура позволяет всем экспертам принять в расчет обстоятельства, которые они могли случайно пропустить или которыми пренебрегли во время первого и второго этапа.

Третий этап. Всем экспертам представляются все экспертные оценки и вся аргументация (с сохранением анонимности). Участники экспертизы рассматривают аргументы и формулируют новые оценки по каждому событию. Если их новая оценка не попала в интервалы между квартилями, полученными на втором этапе опроса, то их просят обосновать свою точку зрения. Оценки суммируются, рассчитываются новые медианы и новые квартили, составляются новые прогнозы.

Если ответы экспертов перестают изменяться, это является сигналом к прекращению опроса.

Четвертый этап. Участникам экспертизы вновь передают перечень событий, статическое описание оценок группы и аргументы обеих сторон. Эксперты должны принять во внимание аргументы и их критику и составить новый прогноз. Организатор рассчитывает медианы и квартили дат каждого события. На этом заканчивается работа экспертов.

С помощью статических методов группового ответа уменьшается статический разброс индивидуальных оценок и получается групповой ответ, в котором правильно отражено мнение каждого эксперта.

Разработан ряд модификаций метода Дельфи. В этих модификациях изменяются многие элементы методики, используемой в классическом методе Дельфи, но принцип группового ответа соблюдается.

Особенности метода:

• полный отказ от личных контактов экспертов и коллективных обсуждений;

• многотуровая процедура опроса экспертов (обычно четыре этапа);

• обеспечение экспертов информацией, обмен информацией при сохранении анонимности, аргументации и критики;

• обоснование ответов экспертов по запросу организаторов.

Плюсом данного метода является достаточно точное решение, а минусом – дороговизна метода.