Контакты

Что такое метод Дельфи и как им пользоваться? Экспертная оценка: метод Дельфи

Метод «Дельфи» характеризуются следующими чертами:

  • · анонимность мнений экспертов;
  • · регулируемая обработка, связь, которая осуществляется аналитической группой за ряд туров опроса, причем результаты каждого тура сообщаются экспертам;
  • · групповым ответом, который получается с помощью статистических методов и отображает обобщенное мнение участников экспертизы

Метод Дельфи является наиболее формальным из всех методов экспертного прогнозирования и наиболее часто используется в технологическом прогнозировании, данные которого используются, затем в планировании производства и сбыта продукции. Это групповой метод, при котором проводится индивидуальный опрос группы экспертов относительно их предположений о будущих событиях в различных областях, где ожидаются новые открытия или усовершенствования.

Опрос проводится с помощью специальных анкет анонимно, т.е. личные контакты экспертов и коллективные обсуждения исключаются. Полученные ответы сопоставляются специальными работниками, и обобщенные результаты снова направляются членам группы. На основе такой информации члены группы, по-прежнему сохраняя анонимность, делают дальнейшие предположения о будущем, причем этот процесс может повторяться несколько раз (так называемая многотуровая процедура опроса). После того как начинает появляться совпадение мнений, результаты используются в качестве прогноза.

Метод Дельфи назван в честь дельфийского оракула в Древней Греции. Он разработан Олафом Хельмером, видным математиком из корпорации “РЭНД”, и его коллегами и вероятно поэтому, по сравнению с другими творческими подходами, дает достаточную точность прогноза.

Метод Дельфи относится к классу количественных методов групповых экспертных оценок. Опрос экспертов проводится в 3-4 тура, состоящих из серии анкет, вопросы конкретизируются от тура к туру. Для проведения этого метода необходимо также создать аналитическую группу, которая после каждого тура производит статистическую обработку полученной информации.

Прежде всего, аналитики определяют область предпочтительных количественных значений объектов.

Процедуру экспертного опроса по методу "Дельфи" можно выделить в несколько этапов.

Этап 1. Формирование рабочей группы

Задача рабочей группы заключается в организации процедуры экспертного опроса.

Этап 2. Формирование экспертной группы.

В соответствии с методом "Дельфи" группа экспертов должна включать 10-15 специалистов в данной области. Компетентность экспертов определяется путем анкетирования, анализом уровня реферирования (количества ссылок на работы данного специалиста), использованием листов самооценки.

Этап 3. Формулирование вопросов

Формулировки вопросов должны быть четкими и однозначно трактуемыми, предполагать однозначные ответы.

Этап 4. Проведение экспертизы

Метод "Дельфи" предполагает повторение нескольких шагов проведения опроса.

Этап 5. Подведение итогов опроса

Для проведения первого тура экспертам предлагаются вопросы. Ответы должны быть представлены в виде количественных оценок на поставленный вопрос. Ответ должен быть обоснован экспертом.

Аналитическая группа проводит статистическую обработку полученной от всех экспертов информации. Для этого рассчитывается среднее значение исследуемого параметра, средневзвешенное значение исследуемого параметра, определяется медиана как средний член общего ряда чисел, полученных от экспертов и область доверительности. Область доверительности целесообразнее рассчитывать через показатель квартиль. Значение квартиля равно ј разницы между максимальной и минимальной оценок ряда. Сама область доверительности будет равна как минимальная оценка минус значение квартиля, максимальная оценка плюс значение квартиля.

Эксперты должны обязательно познакомиться с результатами и выводами аналитиков, после чего проводится второй (очередной) тур. Эксперты по результатам представленных расчетов могут увидеть, как корреспондируется их мнение с мнением всей группы экспертов. Они могут изменить свои мнения или оставить прежними, но в этом случае выдвинуть контраргументы в свою пользу. При этом строго соблюдается принцип анонимности. Таким образом проводится 2-3 тура. В итоге получаем довольно точную групповую оценку.

Существует несколько модификаций метода Дельфи, в которых основные принципы организации экспертизы имеют много общего. Различия связаны с попытками усовершенствовать метод за счет более обоснованного отбора экспертов, введения схем оценки их компетентности, улучшенных механизмов обратных связей и т.п. Для удобства обработки информации все модификации, как правило, предполагают возможность выражения ответа в виде числа, количественной оценки.

Но у него есть недостатки - например, субъективность мнений специалистов, участвующих в опросе, он не позволяет сталкивать в споре мнения экспертов и на него затрачивается много времени.

Некоторые недостатки метода Дельфи связаны с нехваткой времени, которое отведено эксперту на обдумывание проблемы. В этом случае эксперт может согласиться с мнением большинства, чтобы уйти от необходимости объяснения, в чем заключается отличие его решения от остальных вариантов. Эти недочеты устраняются совершенствованием организации экспертиз путем создания автоматизированных систем обработки результатов опроса. Техническая реализация такой системы основана на использовании ЭВМ с внешними терминалами (дисплеями). ЭВМ обеспечивает представление вопросов экспертам (общающимся с ней через их персональные дисплеи), сбор и обработку результатов ответов, запрос и выдачу аргументации и другой необходимой информации для подготовки ответов.

Кроме того, некоторые специалисты считают, что «предположение о том, чтобы те, кто резко расходится с мнением большинства, обосновали свою точку зрения, может привести к усилению эффекта приспособления, а не уменьшить его, как это было задумано». Но все же многие ученые утверждают, что метод Дельфи превосходит «обычные» методы прогнозирования, по крайней мере, при разработке краткосрочных прогнозов.

Метод Дельфи впервые был описан в «Докладе об изучении долгосрочного прогнозирования» американской корпорации «Рэнд» в 1964 г. Объектами исследования явились: научные прорывы, рост населения, автоматизация, исследование космоса, возникновение и предотвращение войн, будущие системы оружия. За истекший период круг прогнозируемых процессов с помощью метода Дельфи значительно расширился, но несомненно, что наибольшее применение этот метод нашел в областях, связанных с научно-техническим прогрессом.

Метод, получивший название древнегреческого города, прославивше­гося своими предсказателями будущего, разработан в начале 1950-х гг. в известном «мозговом центре» США - корпорации «Рэнд». Авторами его являются американские ученые О.

Хелмер и Т. Гордон. Как и мно­гие разработки в области политического анализа и прогнозирования, применение метода Дельфи изначально было ограничено проблемати­кой военно-промышленного и военно-дипломатического характера.

Возникновение Дельфи связано с объективно назревшей потреб­ностью усовершенствовать методики группового принятия решений. До появления Дельфи наиболее распространенным способом согла­сования различных позиций и выработки общего мнения было тради­ционное совещание (очная дискуссия). Однако такой метод обладает рядом очень серьезных недостатков, большинство из которых связано с негативными психологическими эффектами межличностного обще­ния, к которым можно отнести:

Групповое давление. Этот феномен изучен в социальной психоло­гии (конкретнее, психологии малых групп) и заключается в том, что большинство в группе стремится навязать свою позицию меньшинст­ву. Меньшинство же, как правило, склонно проявлять конформизм - принимать групповое мнение, а не отстаивать свою точку зрения (да­же если у представителей меньшинства сохраняется субъективная уверенность в ее правильности). Таким образом, результатом дискус­сии может стать победа мнения большинства только потому, что это мнение большинства;

Личностные различия членов группы, определяющие способность активно отстаивать свою точку зрения и навязывать ее другим. В оч­ной дискуссии «конкурентное преимущество», как правило, нахо­дится на стороне более активных, напористых, лучше владеющих словом и даром убеждения участников. При этом совсем не обяза­тельно наличие у человека этих качеств свидетельствует о его более глубоком понимании обсуждаемой проблемы. Таким образом, мо­жет возобладать мнение не самых компетентных, а самых «убеди­тельных» экспертов;

Различный формальный или неформальный статус участников обсуждения. Практически в любой группе можно выделить более авторитетных и «заслуженных» экспертов, к чьему мнению будут при­слушиваться в большей степени. Так, мнение академика будет «весить» больше, чем мнение аспиранта, при этом аспирант может углубленно изучать именно поставленную проблему, а академик - иметь лишь поверхностное представление о ней. В группах, где име­ется определенная иерархия (например, на совещаниях в военных ведомствах, структурах государственной службы и т.д.), весомость точки зрения начальников будет выше, чем точки зрения подчиненных (которые к тому же вряд ли будут свои точки зрения активно от­стаивать);

Психологическую сложность для многих участников экспертизы из­менить уже высказанную точку зрения, даже если они осознали ее недостатки. Для многих людей, особенно «заслуженных» и «авторитетных», бывает трудно взять свои слова обратно, признать ошибку, осо­бенно если признание ошибки «работает» на укрепление позиции, например, давнего оппонента. Поэтому высоки риски того, что экс­перт будет отстаивать свою точку зрения, даже убедившись в ее несостоятельности;

Неконкретностъ, расплывчатость итоговых оценок, выводов и за­ключений, присущая многим традиционным совещаниям.

Именно эти проблемы способна устранить процедура, используе­мая в методе Дельфи. Она базируется на следующих основных прин­ципах:

Заочный характер взаимодействия экспертов. Специфика Дельфи состоит в том, что каждый эксперт работает индивидуально, однако общая оценка является коллективной (групповой). Данный принцип направлен на устранение феномена группового давления и эффектов разницы в «публичной активности» и напористости экспертов;

Анонимность мнений экспертов. Каждому участнику экспертизы предоставляется полная свобода донести свою позицию и аргумента­цию до всей группы, однако никто не будет знать, чья именно это по­зиция. Данный принцип направлен на ликвидацию «эффекта автори­тетного мнения»;

Итеративность (повторяемость) экспертизы. Процедура форми­рования групповой экспертной оценки в методе Дельфи проходит в несколько этапов, причем каждый из экспертов на каждом этапе мо­жет скорректировать собственную предыдущую оценку. В Дельфи это делается психологически безболезненно, учитывая заочный и ано­нимный характер процедуры;

Управляемая обратная связь. Эксперты могут обмениваться оцен­ками и аргументацией, но делают это не напрямую, а через организаторов экспертизы, которые осуществляют обратную связь между экс­пертами, систематизируют оценки и аргументы;

Количественное оценивание и статистическая обработка эксперт­ных оценок. Эксперты ограничены в формулировании оценок их чис­ловым форматом. Это требуется для того, чтобы сделать результаты экспертизы максимально конкретными.

Рассмотрим, каким образом названные выше принципы находят свое выражение в процедуре метода Дельфи.

На этапе подготовки экспертизы определяется состав ее организаторов, которые на предварительной стадии должны сформулировать изучаемую проблему таким образом, чтобы с ней можно было работать в рамках Дельфи. Другими словами, проблема должна быть представлена в виде набора конкретных вопросов к экспертам, в качестве ответа на каждый из которых можно было бы получить числовую оценку. К примеру, экспертов некорректно спросить: «Состоится ли отставка правительства до истечения конституционного срока его полномочий?» Правильно сформулировать вопрос можно двумя спо­собами:

Когда состоится отставка правительства? (Крайний срок - дата следующих президентских выборов.)

Какова вероятность досрочной отставки правительства? (При этом четко указывается, какой временной период понимается под досрочной отставкой.)

Все вопросы должны быть сформулированы таким образом, чтобы ответы на них можно было дать в рамках порядковой или интервальной шкалы. Исключение составляет лишь иногда применяемый «бес­структурный этап», о котором мы поговорим отдельно.

Разумеется, такое ограничение несколько сужает возможности применения Дельфи. Тем не менее остается очень широкий спектр признаков, которые можно измерятв с его помощью. Например, для политической партии это:

Уровень поддержки на выборах (в процентах или голосах - интервальной уровень);

Влиятельность (порядковый уровень);

Сроки вхождения в альянс с другой политической партией (вре­мя - интервальный уровень);

Уровень поддержки со стороны тех или иных политических групп (порядковый уровень);

Уровень лояльности действующему главе государства (порядко­вый уровень);

Уровень выраженности в идеологии определенных позиций (ска­жем, насколько партия привержена либеральным ценностям - порядковый уровенв);

Стоимости реализации партией той или иной агитационной кам­пании (интервальный уровень) и т.д.

Метод Дельфи бывает очень полезен и для достижения сугубо исследовательских целей, например при конструировании сложного инструмента измерения определенного признака. К примеру, конст­руируя индекс политической влиятельности губернатора, мы введем в него подиндексы «поддержка главы государства», «поддержка со сто­роны населения региона», «лоббистские возможности» и ряд других. Каждый из этих подиндексов поддается прямому измерению. Но как понять, какой из них имеет больший вес при расчете итогового ин­декса влиятельности? Непосредственному измерению вес каждой из составляющих индекса, как правило, поддаваться не будет. И здесь нам на помощь приходят экспертные оценки, в первую очередь метод Дельфи. «Взвешивание» компонентов индекса - одна из задач, которые оптимально решать именно с помощью Дельфи.

Итак, проблема должна быть сформулирована как перечень во­просов, предполагающих ответ в виде оценки по порядковой или ин­тервальной шкале. Следующая важная задача организаторов экспер­тизы на подготовительном этапе - сформировать состав экспертной группы, т.е. определить ее численность и персональный состав.

Специфика метода Дельфи, связанная со статистической обработ­кой оценок и заочным характером взаимодействия экспертов, имеет прямое влияние на комплектование экспертной группы с точки зрения ее численности. Прежде всего, количество оценок (а значит, и количе­ство экспертов) должно быть статистически значимым. Мы не можем привлечь к процедуре Дельфи только трех экспертов, так как не смо­жем обработать их оценки. Соответственно, нижняя граница числен­ности экспертной группы - 7-9 человек. В то же время у нас не зада­на верхняя граница, так как нет необходимости собирать экспертов в одном месте. В реальной практике использования Дельфи есть приме­ры, когда в экспертизе участвовало несколько сотен специалистов. Конкретное их число будет определяться спецификой рассматривае­мой проблемы, общим числом компетентных экспертов, их техничес­кой доступностью и согласием на участие в экспертизе.

Также на подготовительном этапе определяется технический канал коммуникации с экспертами. На заре развития метода это была обыч­ная почта, в настоящее время - в основном электронная почта и фак­симильная связь.

Подготовив анкету и определив состав экспертов, можно присту­пать к проведению первого тура экспертизы. Возьмем задачу прогнозного типа. Предположим, нас интересует вероятность реали­зации определенного политического события, и единственным во­просом в анкете будет: «Оцените вероятность наступления события TV в период М, используя оценки в интервале от 0 до 1, где 0 - полная уверенность в том, что событие не произойдет, 1 - полная уверен­ность в том, что событие произойдет». Разумеется, в реальном иссле­довании вопросов и пояснений к ним было бы больше, однако в учеб­ных целях ограничимся самым простым видом анкеты.

Скажем, вопросе принимают участие девять экспертов. Соответст­венно, по итогам первого тура мы получим девять оценок вероятности реализации события N. Таким образом, мы имеем неупорядоченный числовой ряд из девяти элементов: (1; 0,2; 0,1; 0,1; 0,6; 0,8; 0,3; 0,5; 0,8).
В методе Дельфи основу статистической обработки оценок состав­ляет вычисление средней и вариации на порядковом уровне измере­ния, т.е. речь идет о вычислении медианы - середины ранжирован­ного числового ряда - и квартилей - четвертей ранжированного числового ряда. Ранжированный по возрастанию ряд в нашем случае будет иметь вид: (0,1; 0,1; 0,2; 0,3; 0,5; 0,6; 0,8; 0,8; 1).

Медиана равна 0,5, значение нижнего квартиля составляет 0,2; верхнего - 0,8 (М= Q2 = 0,5; Q1 = 0,2; Q3 = 0,8).

Применительно к методу Дельфи медиана показывает общее груп­повое мнение, а интервал между верхним и нижним квартилями (или квартальный ранг) - разброс мнений экспертов, или степень консолидированности обще: оценка группы составляет 0,5 (равновероятно), интервал между верх­ним и нижним квартилями равен 0,8 - 0,2 = 0,6, т.е. является очень большим. Исходя из такого значения квартильного ранга, можно кон­статировать, что мнение группы фактически не сформировалось, оценки очень сильно разбросаны.

Для вероятностных оценок есть дополнительный инструмент ин­терпретации общего группового мнения, выраженного в значении медианы. В теории вероятностей существует понятие неопределенно­сти, причем уровень неопределенности связан с уровнем вероятности следующим принципиальным образом:

Уровень неопределенности равен нулю в двух случаях: если веро­ятность события равна 0 и 1. Иными словами, неопределенность от­сутствует, когда мы полностью уверены либо в том, что событие реа­лизуется, либо в том, что оно не реализуется. Соответственно, максимального уровня неопределенность достигает в ситуации рав­новероятности - 0,5. По мере удаления от крайних значений (0 и 1) и приближения к значению 0,5 неопределенность возрастает.
Таким образом, по итогам первого тура экспертизы мы имеем не только большой разброс оценок, но и ситуацию максимальной неопределенности относительно наступления данного события в указанные сроки. Решение, которое принимается руководителями экспертизы, в данном случае однозначно: экспертиза должна быть продолжена.

Во втором туре экспертов знакомят с обобщенными результа­тами первого тура (разброс оценок, иногда средняя) и просят ответить на тот же самый вопрос о вероятности наступления события.

Однако здесь возникает существенное дополнение: оценка должна быть до­полнена определенным набором аргументов. Технически здесь имеет­ся два варианта:

1. Аргументировать выставленную оценку просят всех экспертов.

2. Аргументацию просят только утех экспертов, чьи оценки выхо­дят за интервал между квартилями, т.е. являются крайними. В нашем случае это два эксперта, поставившие оценки 0 и 1, и один эксперт, поставивший оценку 1.

Второй вариант оптимален в случае, если к экспертизе привлекается сравнительно большое число экспертов и оценки существенной их час­ти оказываются вне интервала между квартилями. Тогда мы получим полноценный набор аргументов, с одной стороны, в пользу высокой, с другой - в пользу низкой вероятности реализации события. Получать аргументы тех экспертов, чьи оценки оказались внутри интервала, в та­кой ситуации большого смысла нет: их аргументация, скорее всего, будет комбинацией аргументов «крайних» экспертов.

Однако в нашем случае, когда число привлеченных экспертов не­велико и оценки всего трех из них находятся за пределами кварталь­ного ранга, целесообразно собрать аргументы всех экспертов. Аргу­менты формулируются экспертами в том же режиме, что и весь процесс экспертизы: заочно, анонимно и индивидуально. Собирает, обобщает и систематизирует аргументы группа организаторов проце­дуры Дельфи. Основное содержание этой работы: объединение сход­ных аргументов, удаление повторяющихся, разбиение всех аргумен­тов на две группы: в пользу повышения или понижения вероятности наступления события N.

В результате второго тура имеем:

Новые оценки экспертов. Они могут совпадать с оценками пер­вого тура, а могут и не совпадать. Как правило, от первого тура ко вто­рому оценки меняются незначительно, поскольку эксперты еще не успели ознакомиться с аргументацией своих коллег. Пусть в нашем случае получились следующие оценки: (0,1; 0,2; 0,2; 0,3; 0,6; 0,7; 0,8; 0,8; 0,9). Тогда статистика второго тура: М= 0,6; Q1 = 0,2; Q3 = 0,8; квартальный ранг = 0,6;

Два систематизированных перечня аргументов: в пользу повыше­ния и понижения оценки вероятности наступления события. Автор­ство аргументов не указывается.

Все полученные результаты доводятся до участников экспертизы (характерное проявление управляемой обратной связи), и начинается третий тур Дельфи. В третьем туре, как и во втором, от экспертов требуется вновь оценить вероятность события и дать перечень аргу­ментов. В пояснительной записке к анкете, как правило, указывает­ся, что от экспертов ждут либо новых аргументов, либо усиления, до­полнения или конкретизации аргументов, использованных во втором туре.

Обычно именно третий тур экспертизы по методу Дельфи являет­ся переломным: получив значительный объем информации от своих коллег по итогам второго тура, эксперты имеют больше оснований скорректировать собственные оценки. Общий «сдвиг» в результатах экспертизы должен быть значительно более существенным по сравне­нию со вторым туром.

Предположим, оценки третьего тура таковы: (0,1; 0,3; 0,5; 0,5; 0,7; 0,7; 0,8; 0,9; 0,9).

Статистика третьего тура соответственно: М= 0,7; Q1 = 0,5; Q3 = 0,8; квартальный ранг = 0,3.

Анализируя эту статистику, мы видим две принципиальные тен­денции:

Общее мнение группы сдвигается от равновероятной оценке в сторону повышения вероятности реализации события (0,7). При этом в оценке реализации события сокращается уровень неопреде­ленности;

Мнение группы становится более консолидированным. Интервал между квартилями по сравнению со вторым туром существенно со­кращается (0,6 и 0,3).

Итерации (новые туры) проводятся в Дельфи по тому же прин­ципу, что второй и первый тур. Решение об окончании экспертизы принимается тогда, когда смещения в оценках перестают быть сущест­венными. Так, если в четвертом туре мы имеем оценки: (0,1; 0,5; 0,6; 0,6; 0,7; 0,7; 0,8; 0,8; 0,8) и статистику: М = 0,7; Q1 = 0,6; Q2 = 0,8; квар­тальный ранг = 0,2, - можно констатировать, что групповое мнение сформировалось. Смещение оценок по сравнению с третьим туром незначительно, общее групповое мнение не изменилось, интервал между квартилями незначителен. Таким образом, эксперты в целом согласились, что вероятность наступления события N в указанные сроки составляет 0,7; его реализация «скорее вероятна».

Динамику развития экспертизы в методе Дельфи полезно пред­ставить визуально. На рисунке ниже хорошо видны «траектории» оценок экспертов, формирование более консолидированного мне­ния и общий сдвиг в сторону медианы 0,7. Хорошо видна также «изо­лированная позиция»: один из экспертов ни разу не изменил свою оценку (0,1), несмотря на ее сильное расхождение с общегрупповым мнением.

Экс­ Турі Тур 2 ТурЗ Тур 4
1 0,1 од 0,1 0,1
2 0,1 0,2 0,3 0,5
3 0,2 0,2 0,5 0,6
4 0,3 0,3 0,5 0,6
5 0,5 0,6 0,7 0,7
6 0,6 0,7 0,7 0,7
7 0,8 0,8 0,8 0,8
8 0,8 0,8 0,9 0,8
9 1 0,9 0,9 0,8

Возможны ситуации, когда сближение оценок либо не происходит, либо происходит на крайних полюсах. Такой случай можно увидеть в таблице и на рисунке ниже.

Тур 1 Тур 2 Тур 3 Тур 4
0,1 0,1 0,1 0,1
0,2 0,1 0,1 0,1
0,3 0,3 0,2 0,1
0,4 0,3 0,2 0,2
0,5 0,5 0,5 0,5
0,6 0,7 0,8 0,9
0,7 0,8 0,8 0,9
0,8 0,8 0,9 1
1 1 1 1
Тур 1 Тур 2 Тур 3 Тур 4
Q1 0,3 0,3 0,2 0,1
м 0,5 0,5 0,5 0,5
Q3 0,7 0,8 0,8 0,9

id="Рисунок 29" src="/files/uch_group28/uch_pgroup17/uch_uch327/image/46.jpg">

Метод Дельфи характеризуются следующими чертами:

  • · анонимность мнений экспертов;
  • · регулируемая обработка, связь, которая осуществляется аналитической группой за ряд туров опроса, причем результаты каждого тура сообщаются экспертам;
  • · групповым ответом, который получается с помощью статистических методов и отображает обобщенное мнение участников экспертизы

Метод Дельфи является наиболее формальным из всех методов экспертного прогнозирования и наиболее часто используется в технологическом прогнозировании, данные которого используются, затем в планировании производства и сбыта продукции. Это групповой метод, при котором проводится индивидуальный опрос группы экспертов относительно их предположений о будущих событиях в различных областях, где ожидаются новые открытия или усовершенствования.

Опрос проводится с помощью специальных анкет анонимно, т.е. личные контакты экспертов и коллективные обсуждения исключаются. Полученные ответы сопоставляются специальными работниками, и обобщенные результаты снова направляются членам группы. На основе такой информации члены группы, по-прежнему сохраняя анонимность, делают дальнейшие предположения о будущем, причем этот процесс может повторяться несколько раз (так называемая многотуровая процедура опроса). После того как начинает появляться совпадение мнений, результаты используются в качестве прогноза.

Метод Дельфи назван в честь дельфийского оракула в Древней Греции. Он разработан Олафом Хельмером, видным математиком из корпорации “РЭНД”, и его коллегами и вероятно поэтому, по сравнению с другими творческими подходами, дает достаточную точность прогноза.

Метод Дельфи относится к классу количественных методов групповых экспертных оценок. Опрос экспертов проводится в 3-4 тура, состоящих из серии анкет, вопросы конкретизируются от тура к туру. Для проведения этого метода необходимо также создать аналитическую группу, которая после каждого тура производит статистическую обработку полученной информации.

Прежде всего, аналитики определяют область предпочтительных количественных значений объектов.

После такой проверки проводится очередной тур. Процедуру экспертного опроса по методу "Дельфи" можно выделить в несколько этапов.

ЭТАП 1. ФОРМИРОВАНИЕ РАБОЧЕЙ ГРУППЫ

Задача рабочей группы заключается в организации процедуры экспертного опроса.

ЭТАП 2. ФОРМИРОВАНИЕ ЭКСПЕРТНОЙ ГРУППЫ.

В соответствии с методом "Дельфи" группа экспертов должна включать 10-15 специалистов в данной области. Компетентность экспертов определяется путем анкетирования, анализом уровня реферирования (количества ссылок на работы данного специалиста), использованием листов самооценки.

ЭТАП 3. ФОРМУЛИРОВАНИЕ ВОПРОСОВ

Формулировки вопросов должны быть четкими и однозначно трактуемыми, предполагать однозначные ответы.

ЭТАП 4. ПРОВЕДЕНИЕ ЭКСПЕРТИЗЫ

Метод "Дельфи" предполагает повторение нескольких шагов проведения опроса.

ЭТАП 5. ПОДВЕДЕНИЕ ИТОГОВ ОПРОСА

Для проведения первого тура экспертам предлагаются вопросы. Ответы должны быть представлены в виде количественных оценок на поставленный вопрос. Ответ должен быть обоснован экспертом.

Аналитическая группа проводит статистическую обработку полученной от всех экспертов информации. Для этого рассчитывается среднее значение исследуемого параметра, средневзвешенное значение исследуемого параметра, определяется медиана как средний член общего ряда чисел, полученных от экспертов и область доверительности. Область доверительности целесообразнее рассчитывать через показатель квартиль. Значение квартиля равно ј разницы между максимальной и минимальной оценок ряда. Сама область доверительности будет равна как минимальная оценка минус значение квартиля, максимальная оценка плюс значение квартиля.

Эксперты должны обязательно познакомиться с результатами и выводами аналитиков, после чего проводится второй (очередной) тур. Эксперты по результатам представленных расчетов могут увидеть, как корреспондируется их мнение с мнением всей группы экспертов. Они могут изменить свои мнения или оставить прежними, но в этом случае выдвинуть контраргументы в свою пользу. При этом строго соблюдается принцип анонимности. Таким образом проводится 2-3 тура. В итоге получаем довольно точную групповую оценку.

Существует несколько модификаций метода Дельфи, в которых основные принципы организации экспертизы имеют много общего. Различия связаны с попытками усовершенствовать метод за счет более обоснованного отбора экспертов, введения схем оценки их компетентности, улучшенных механизмов обратных связей и т.п. Для удобства обработки информации все модификации, как правило, предполагают возможность выражения ответа в виде числа, количественной оценки.

Но у него есть недостатки - например, субъективность мнений специалистов, участвующих в опросе, он не позволяет сталкивать в споре мнения экспертов и на него затрачивается много времени.

Некоторые недостатки метода Дельфи связаны с нехваткой времени, которое отведено эксперту на обдумывание проблемы. В этом случае эксперт может согласиться с мнением большинства, чтобы уйти от необходимости объяснения, в чем заключается отличие его решения от остальных вариантов. Эти недочеты устраняются совершенствованием организации экспертиз путем создания автоматизированных систем обработки результатов опроса. Техническая реализация такой системы основана на использовании ЭВМ с внешними терминалами (дисплеями). ЭВМ обеспечивает представление вопросов экспертам (общающимся с ней через их персональные дисплеи), сбор и обработку результатов ответов, запрос и выдачу аргументации и другой необходимой информации для подготовки ответов.

Кроме того, некоторые специалисты считают, что «предположение о том, чтобы те, кто резко расходится с мнением большинства, обосновали свою точку зрения, может привести к усилению эффекта приспособления, а не уменьшить его, как это было задумано». Но все же многие ученые утверждают, что метод Дельфи превосходит «обычные» методы прогнозирования, по крайней мере, при разработке краткосрочных прогнозов.

Метод Дельфи впервые был описан в «Докладе об изучении долгосрочного прогнозирования» американской корпорации «Рэнд» в 1964 г. Объектами исследования явились: научные прорывы, рост населения, автоматизация, исследование космоса, возникновение и предотвращение войн, будущие системы оружия. За истекший период круг прогнозируемых процессов с помощью метода Дельфи значительно расширился, но несомненно, что наибольшее применение этот метод нашел в областях, связанных с научно-техническим прогрессом.

МИНИСТЕРСТВО ЭКОНОМИЧЕСКОГО РАЗВИТИЯ И ТОРГОВЛИ РОССИЙСКОЙ ФЕДЕРАЦИИ

НИЖЕГОРОДСКИЙ КОММЕРЧЕСКИЙ ИНСТИТУТ

Реферат на тему:

МЕТОД «ДЕЛЬФИ»

Выполнила:

Студентка 4-1ЭФ гр.

Мальцева Я.В.

Проверила:

Желонкин В.В.

Нижний Новгород

Введение

Метод Дельфи - многоэтапный метод, предусматривающий первоначальное изолированное вынесение экспертами своих суждений и дальнейшую многократную их корректировку на базе ознакомления каждого эксперта с суждениями других экспертов до тех пор, пока величина разброса оценок не будет находиться в рамках заранее устанавливаемого желаемого интервала варьирования оценок.

Получаемые посредством данных методик оценки носят статичный и одноразовый характер, в результате чего возникает необходимость повторного обращения к экспертам при составлении прогноза доли рынка на последующие периоды. Кроме того, метод внутреннего и внешнего экспертного прогнозирования характеризуется определенной степенью субъективности.

Надежность метода "Дельфи" считается высокой при прогнозировании на период как от 1 до 3 лет, так и на более отдаленный период времени. В зависимости от цели прогноза для получения экспертных оценок может привлекаться от 10 до 150 экспертов.

Качественный подход позволяет оценить специфику каждой конкретной ситуации. В некоторых случаях внимательное исследование различных специфических элементов, определяющих ситуацию, может быть более важным, чем проведение систематической количественной оценки. Большим недостатком этого метода является чрезмерная субъективность оценок. Старые стереотипы иностранного общества могут сыграть роковую роль при принятии решений. Дж. Саймон оценил этот подход как “спорадический, основанный на селективном, неконтролируемом восприятии или идеологических и личностных пристрастиях”.

Область применения экспертных методов.

Методы экспертных оценок нашли широкое применение в прогнозировании и перспективном планировании, там, где отсутствуют достаточно достоверные статистические данные об изучаемом вопросе, где имеется несколько вариантов решений и необходим выбор наиболее предпочтительного из них. Также эти методы применяются при разработке новых программ в отраслях промышленности, подверженных сильному влиянию новых открытий в фундаментальных науках.

При анализе и прогнозировании экономической ситуации возникает ряд трудностей:

Невозможность точного предсказания последствий принимаемых решений;

Неповторяемость и невозможность экспериментальной проверки предполагаемого хода и результатов решения;

Наличие факторов, которые не поддаются контролю со стороны принимающего решения;

Наличие нескольких возможных путей решения и необходимость выбора одного из них;

Неполнота исходной информации, на основе которой приходится формировать проблему и принимать решение (часто исходная информация имеет качественный характер и не поддается количественному измерению).

Предпосылками использования экспертизы являются:

Недостаточность и недостоверность информации о состоянии тех или иных условий, в которых осуществляется создание и развитие продукции;

Стохастический (вероятностный) характер объекта информации;

Сложность и новизна проблем.

Организация экспертизы проводится в несколько этапов:

1.Определение целей и задач экспертизы.

2.Выбор процедуры проведения экспертизы.

3.Отбор и формирование группы экспертов.

4.Организация самой процедуры экспертизы;

5.Обработка информации.

6.Принятие решения по результатам экспертизы.

Определение целей и задач экспертизы

Сначала ставится проблема – определяется предыстория, рассматриваются доводы в пользу ее решения, происходит обсуждение со всеми заинтересованными лицами. Главное здесь – распознать мнимые проблемы. Поэтому при постановке проблемы необходима гласность и обсуждение.

После того как проблема обоснована определяются границы ее существования, совокупность внутренних и внешних факторов, влияющих на проблему. Для этого выделяется центральный вопрос и расщепляется на подвопросы. При этом пытаются ограничить поле только теми вопросами, без которых нельзя получить ответ на центральный вопрос. Далее формулируются цели и задачи реализации выбранной проблемы. Таким образом, выбираются главные события, факторы, центральные и второстепенные вопросы.

Необходимо иметь в виду – с увеличением детализации – увеличивается точность экспертизы, НО снижается согласованность мнений экспертов.

Организаторы проведения экспертизы выбирают процедуру осуществления экспертизы. Известны различные подходы к этому вопросу. Можно проводить

-индивидуальный или групповой опрос,

-очный или заочный;

-открытый или закрытый.

Индивидуальный опрос заключается в интервьюировании эксперта и позволяет максимально использовать способности и знания каждого эксперта.

Групповой – при этом методе эксперты могут обмениваться мнениями, могут учесть упущенный момент каждым из них, скорректировать свою оценку. Недостаток группового мнения заключается в сильном влиянии авторитетов на мнения большинства участников экспертизы, в трудности публичного отказа от своей точки зрения, психологической несовместимости некоторых участников экспертизы.

Из методов группового опроса используют:

различные модификации метода Дельфи.

Методы Дельфи характеризуются следующими чертами:

· анонимность мнений экспертов;

· регулируемая обработка, связь, которая осуществляется аналитической группой за ряд туров опроса, причем результаты каждого тура сообщаются экспертам;

· групповым ответом, который получается с помощью статистических методов и отображает обобщенное мнение участников экспертизы

Метод Дельфи является наиболее формальным из всех методов экспертного прогнозирования и наиболее часто используется в технологическом прогнозировании, данные которого используются затем в планировании производства и сбыта продукции. Это групповой метод при котором проводится индивидуальный опрос группы экспертов относительно их предположений о будущих событиях в различных областях, где ожидаются новые открытия или усовершенствования.

Опрос проводится с помощью специальных анкет анонимно, т.е. личные контакты экспертов и коллективные обсуждения исключаются. Полученные ответы сопоставляются специальными работниками, и обобщенные результаты снова направляются членам группы. На основе такой информации члены группы, по-прежнему сохраняя анонимность, делают дальнейшие предположения о будущем, причем этот процесс может повторяться несколько раз (так называемая многотуровая процедура опроса). После того как начинает появляться совпадение мнений, результаты используются в качестве прогноза.

Применение метода Дельфи можно проиллюстрировать на следующем примере №1 : компания, занимающаяся морским нефтяным промыслом хочет получить информацию о том, когда можно будет использовать роботов вместо водолазов для проверки платформ под водой. Для начала прогнозирования по этому методу компания должна войти в контакт с рядом экспертов. Эти эксперты должны быть представителями самых разных областей данной отрасли промышленности, включая водолазов, инженерно-технических работников из нефтяных компаний, капитанов кораблей, инженеров по техобслуживанию и конструкторов роботов. Им объясняется стоящая перед компанией задача, и каждого эксперта спрашивают, когда по его мнению можно будет заменить водолазов роботами. Первые ответы дадут, вероятно, очень большой разброс данных, например, от 2000 до 2050 года. Эти ответы обрабатываются и возвращаются экспертами. При этом каждого эксперта просят пересмотреть свою оценку в свете ответов других экспертов. После повторения этой процедуры несколько раз мнения могут сблизиться, так что около 80% ответов даст срок от 2005 до 2015 года, что будет достаточным для целей планирования производства и реализации роботов.

Метод Дельфи назван в честь дельфийского оракула в Древней Греции. Он разработан Олафом Хельмером, видным математиком из корпорации “РЭНД”, и его коллегами и вероятно поэтому, по сравнению с другими творческими подходами, дает достаточную точность прогноза.

Метод Дельфи относится к классу количественных методов групповых экспертных оценок. Опрос экспертов проводится в 3-4 тура, состоящих из серии анкет, вопросы конкретизируются от тура к туру. Для проведения этого метода необходимо также создать аналитическую группу, которая после каждого тура производит статистическую обработку полученной информации.

Прежде всего, аналитики определяют область предпочтительных количественных значений объектов.

После такой проверки проводится очередной тур. Процедуру экспертного опроса по методу "Дельфи" можно выделить в несколько этапов.

ЭТАП 1. ФОРМИРОВАНИЕ РАБОЧЕЙ ГРУППЫ

Задача рабочей группы заключается в организации процедуры экспертного опроса.

ЭТАП 2. ФОРМИРОВАНИЕ ЭКСПЕРТНОЙ ГРУППЫ.

В соответствии с методом "Дельфи" группа экспертов должна включать 10-15 специалистов в данной области. Компетентность экспертов определяется путем анкетирования, анализом уровня реферирования (количества ссылок на работы данного специалиста), использованием листов самооценки.

ЭТАП 3. ФОРМУЛИРОВАНИЕ ВОПРОСОВ

Формулировки вопросов должны быть четкими и однозначно трактуемыми, предполагать однозначные ответы.

ЭТАП 4. ПРОВЕДЕНИЕ ЭКСПЕРТИЗЫ

Метод "Дельфи" предполагает повторение нескольких шагов проведения опроса.

ЭТАП 5. ПОДВЕДЕНИЕ ИТОГОВ ОПРОСА

Метод Дельфи представляет собой ряд последовательно осуществляемых процедур, направленных на подготовку и обосно-вание прогноза. Эти процедуры характеризуются анонимностью (независимостью ответов экспертов) опроса, регулируемой об-ратной связью между результатами опроса предыдущего этапа и подготовкой их нового варианта, а также групповым характе-ром ответа.

Регулируемая обратная связь осуществляется путем проведения нескольких туров опроса экспертов , на каждом из которых характеристики их ответов обрабатываются с помощью математико-статистических методов и результаты сообщаются анонимно.

Групповой ответ формируется путем обработки и анализа результатов ответов экспертов. Критерием окончания его разработки, как правило, служит «близость» мнений экс-пертов.

Недостаток метода Дельфи заключается в том, что он не по-зволяет сталкивать в споре различные мнения и стимулировать тем самым возникающее при личном контакте «генерирование» идей. Кроме того, при экспертизе по методу Дельфи необходимо значительное время.

Рассмотрим порядок проведения экспертного опроса по методу Дельфи .

1. Отбор специалистов для участия в экспертизе начинается с составления списка компетентных в соответствующих облас-тях лиц. Этот список служит основой для выбора экспертов с помощью специальных методов оценки их качеств. Известны четыре группы таких методов: самооценки, оценки группой каждого специалиста, оценки специалиста на основе результа-тов его прошлой экспертной деятельности, методы определения компетентности .

При методе самооценок специалисты оценивают по предлага-емой анкете свои способности (зрительную память, настойчивость, способность к аналитическому мышлению, сообразительность, внимание, активность, эрудицию и многое другое) по пятибалль-ной шкале.

Организаторы экспертизы рассчитывают средние значения по каждой характеристике, для группы экспертов в целом. В зависимости от их значений состав группы может ме-няться. Практический опыт показывает, что группы с высокой самооценкой ошибаются в своих экспертных суждениях меньше других: средняя групповая ошибка уменьшается с ростом средней самооценки. С помощью самооценок определяют компетент-ность эксперта, оценивая аргументы, с помощью которых он обосновывал свои ответы, а также степень его знакомства с ис-следуемом проблемой.

В тех случаях, когда эксперты знают друг друга, наряду с самооценкой используют метод коллективной оценки каждого из них остальными членами группы. Коллективные оценки обычно менее точны, чем самооценки. Поэтому, как правило, использу-ются оба метода: организаторы экспертизы предлагают каждому из кандидатов заполнить опросные листы на себя и на других участников опроса.


Более объективными оказываются методы, основанные на использовании результатов прошлой экспертной деятельности специалиста. Они применяются, когда имеются данные о резуль-татах участия специалиста в экспертизах в прошлом. Одним из таких методов является определение степени надежности экспер-та, которое представляет собой частное от деления правильных оценок к общему числу оценок эксперта.

Определить оптимальную численность экспертной группы до-вольно трудно. Наиболее простой способ - установление ее ми-нимальной численности. Минимальное количество специалистов должно соответствовать количеству рассматриваемых проблем. Верхняя оценка численности экспертной группы определяется как потенциально возможное и достаточное число экспертов.

2. Общая схема проведения экспертизы по методу Дельфи со-стоит в следующем .

На первом туре эксперты дают ответы на поставленные вопросы, как правило, без аргументации. Ответы обрабатываются, определяются их статистические характеристики (средняя, среднеквадратическое отклонение, крайние значения ответов) и результаты обработки сообщаются экспертам .

После этого проводится второй тур опроса, в ходе которого экспер-ты должны объяснить, почему они изменили или не изменили своего мнения. Данные обработки результатов второго тура опроса и аргу-ментация ответов с сохранением анонимности снова сообщаются экспертам перед проведением третьего тура опроса.

Последу-ющие туры проводятся по такой же схеме. Подобная организация экспертизы позволяет экспертам учесть в своих ответах новые для них обстоятельства и в то же время избавляет их от какого бы то ни было давления при отстаивании своей позиции.

Как правило, на практике оказывается достаточным прове-дение четырех туров опросов . После чего мнения всех экспертов либо сближаются, либо образуют две (или больше) группы су-щественно различающихся мнений. В первом случае достигнутый результат со значительной степенью обоснованности может быть рассмотрен в качестве прогнозного решения, во втором - не-обходимо продолжить исследование проблем развития объекта с учетом выдвигаемой различными группами аргументации.

Метод Дельфи имеет несомненные преимущества по срав-нению с методами, основанными на обычной статистической обработке результатов индивидуальных опросов. Он позволяет уменьшить колебания по всей совокупности индивидуальных ответов, ограничивает колебания внутри групп. При этом, как показывают проводимые эксперименты, наличие малоквали-фицированных экспертов оказывает менее сильное влияние на групповую оценку, чем простое усреднение результатов ответов, поскольку ситуация помогает им исправить ответы за счет по-лучения новой информации от своей группы.

Существует несколько модификаций метода Дельфи, в кото-рых основные принципы организации экспертизы имеют много общего. Различия связаны с попытками усовершенствовать метод за счет более обоснованного отбора экспертов, введения схем оценки их компетентности, улучшенных механизмов обратных связей и т. п. Для удобства обработки информации все моди-фикации, как правило, предполагают возможность выражения ответа в виде числа, количественной оценки.

Некоторые недостатки метода Дельфи связаны с нехваткой времени, которое отведено эксперту на обдумывание проблемы. В этом случае эксперт может согласиться с мнением большинства, чтобы уйти от необходимости объяснения, в чем заключается отличие его решения от остальных вариантов. Эти недочеты устраняются совершенствованием организации экспертиз пу-тем создания автоматизированных систем обработки результатов опроса.

Техническая реализация такой системы основана на ис-пользовании компьютерной сети по схеме «клиент - сервер ». Это обеспечивает представление вопросов экспертам (общающимся с сервером посредством Интернета или выделенного канала), сбор и обработку результатов ответов на выделенном сервере, запрос и выдачу аргументации и другой необходимой информации для подготовки ответов.

Кроме того, некоторые специалисты считают, что пред-положение о том, чтобы те, кто резко расходится с мнением большинства, обосновали свою точку зрения, может привести к усилению эффекта приспособления, а не уменьшить его, как это было задумано. Но все же многие ученые утверждают, что метод Дельфи превосходит «обычные» методы прогнозирования, по крайней мере, при разработке краткосрочных прогнозов.

Метод Дельфи впервые был описан в «Докладе об изуче-нии долгосрочного прогнозирования» американской корпора-ции «Рэнд» в 1964 г. Объектами исследования явились: научные прорывы, рост населения, автоматизация, исследование космоса, возникновение и предотвращение войн, будущие системы оружия.

За истекший период круг прогнозируемых процессов с помощью метода Дельфи значительно расширился, но несомненно, что наибольшее применение этот метод нашел в областях, связанных с научно-техническим прогрессом. Благодаря развитию теле-коммуникационных технологий его применение существенно упростилось по сравнению с той длительной бюрократической процедурой, которую он представлял собой вначале. В нашей стране в последнее время он довольно успешно применяется в предпринимательской деятельности, при разработке комплекс-ных, затрагивающих различные сферы социума проектов. Метод Дельфи используется, как правило, в сочетании или в качестве составляющей части в сложных методиках синтеза управлен-ческих решений.



Понравилась статья? Поделитесь ей