Метод Дельфи: экспертные оценки

Метод Дельфи — это способ получить согласованную экспертную оценку через серию анонимных опросов с обратной связью между раундами. Экспертов опрашивают независимо, чтобы никто не давил на других статусом или напором; затем показывают обобщённые результаты и аргументы, после чего эксперты могут пересмотреть свои оценки в следующем раунде. Так за несколько итераций мнения сходятся к устойчивому диапазону — без совещания, где сильнее не тот, кто прав, а тот, кто громче. Метод разработали в корпорации RAND в середине XX века для военного прогнозирования, и с тех пор он применяется везде, где решают в условиях неопределённости.

Что такое метод Дельфи

В основе — три принципа, которые отличают его от обычного совещания экспертов.

• •Анонимность. Эксперты не знают, кто как ответил. Это убирает давление авторитета: оценка младшего специалиста весит столько же, сколько оценка мэтра, и оценивается по содержанию, а не по погонам.
• •Итеративность с обратной связью. Опрос идёт в несколько раундов. После каждого участникам показывают сводку ответов группы, чтобы они могли учесть чужую логику и при желании поправить свою оценку.
• •Статистическая сводка. Итог — не «победившее» мнение, а обобщённый показатель: медиана оценок и разброс. Так виден и центр согласия, и остаточные разногласия.

Цель — не заставить всех согласиться, а получить взвешенную коллективную оценку, очищенную от групповых искажений. Метод исходит из того, что в вопросах без точных данных группа независимых экспертов ошибается меньше, чем один даже очень сильный специалист, — но только если её мнения собраны правильно.

Как проходят раунды

Где применяют

Метод Дельфи работает там, где нет статистики для расчёта, но есть люди, разбирающиеся в вопросе.

• •Прогнозирование. Технологические тренды, сроки появления инноваций, развитие рынка на горизонте, где экстраполяция данных не работает, потому что данных о будущем нет.
• •Оценка рисков и вероятностей. Насколько вероятно наступление события, которое ещё не случалось и по которому нет частотной статистики.
• •Стратегические развилки. Куда двинется отрасль, какие сценарии наиболее правдоподобны. Хорошо стыкуется со сценарным планированием: Дельфи помогает оценить правдоподобие сценариев.
• •Согласование экспертных норм. Когда нужно выработать общую оценку сложности, трудозатрат или приоритета среди специалистов, склонных спорить.

В управлении проектами есть упрощённая версия — «покер планирования» для оценки трудозатрат, где команда независимо оценивает задачи, а потом обсуждает расхождения. Это Дельфи в миниатюре.

Отдельная область — согласование решений в совете или экспертной комиссии, где статусные различия особенно мешают. Когда в комнате сидят собственник, наёмный директор и приглашённый эксперт, живое голосование неизбежно искажается субординацией: мало кто открыто возразит первому лицу. Заочный анонимный сбор оценок уравнивает голоса и вытаскивает на поверхность разногласия, которые иначе остались бы невысказанными, но реальными.

Как подобрать экспертов

Качество метода Дельфи определяется не процедурой, а составом экспертов — это его самое слабое место. Несколько ориентиров.

• •Разнообразие важнее звёздности. Группа из специалистов с разным углом зрения точнее однородной команды признанных авторитетов: последние часто разделяют общие слепые зоны и дружно ошибаются в одну сторону.
• •Реальная компетенция, а не должность. Берите тех, кто действительно понимает вопрос и получает по нему обратную связь, а не тех, у кого выше статус.
• •Достаточное число. Слишком мало экспертов — и оценка держится на паре мнений; слишком много — и обработка становится неподъёмной. Обычно разумный диапазон — от восьми до пары десятков.
• •Независимость. Эксперты не должны быть связаны общими интересами или подчинением: иначе анонимность формальна, а оценки скоррелированы.

Плюсы метода

• •Гасит групповые искажения. Анонимность убирает давление авторитета, стадность и боязнь возразить начальнику — главные враги честной оценки на живом совещании.
• •Даёт голос каждому. Тихий, но точный эксперт не будет заглушён напористым. Оценка весит по содержанию.
• •Разъединяет во времени и пространстве. Экспертов не нужно собирать в одной комнате — опрос идёт заочно, можно привлечь географически разбросанных специалистов.
• •Показывает не только ответ, но и разброс. Устойчивое разногласие — ценный сигнал: значит, вопрос действительно неопределённый, и это надо закладывать в решение.

Ограничения и ошибки

Метод не волшебный, и его слабости надо знать.

• •Долго и трудоёмко. Несколько раундов с обработкой между ними занимают время. Для срочного решения метод не годится.
• •Качество зависит от экспертов. «Мусор на входе — мусор на выходе»: если подобрали слабых или однобоко мыслящих экспертов, красивая процедура даст красиво оформленную ошибку.
• •Ложное согласие. Сходимость оценок не означает истину. Эксперты могут дружно ошибаться, а итеративность лишь усиливает общее заблуждение, придавая ему вид консенсуса.
• •Потеря живой дискуссии. Заочность убирает искажения, но и убирает продуктивный спор, где сталкивание идей рождает новое. Аргументы передаются в сжатом виде через организатора.
• •Роль организатора. Тот, кто сводит ответы и решает, чьи аргументы показать, влияет на результат. Небрежная или предвзятая обработка искажает всё.

Метод Дельфи не находит истину — он собирает лучшую доступную коллективную оценку и честно показывает, насколько эксперты в ней уверены.

Метод Дельфи — инструмент для решений, где расчёт бессилен, а интуиция одного человека рискованна. Он не заменяет данные там, где они есть, но структурирует экспертное суждение там, где данных нет. Живое обсуждение он не отменяет, а дополняет: сверять оценки трендов с коллегами по отрасли полезно и лично — на профильных деловых мероприятиях практики обсуждают, куда движется рынок, и вы слышите разброс мнений тех, кто чувствует перемены на своей выручке. О более широком наборе инструментов выбора — в статье как принимать управленческие решения.