Методы экспертных оценок

Основная идея прогнозирования на основе экспертных оце­нок заключается в построении рациональной процедуры инту­итивно-логического мышления человека в сочетании с количественными методами оценки и обработки получаемых результатов.

Сущность методов экспертных оценок заключается в том, что в основу прогноза закладывается мнение специалиста или коллектива специалистов, основанное на профессиональном, научном и практическом опыте. Различают индивидуальные и коллективные экспертные оценки.

Индивидуальные экспертные оценки основаны на использо­вании мнений экспертов-специалистов соответствующего про­филя. Среди индивидуальных экспертных оценок наиболее широкое распространение получили методы "интервью", ана­литический, написания сценария.

Метод "интервью" предполагает беседу прогнозиста с эк­спертом по схеме "вопрос—ответ", в процессе которой прогно­зист в соответствии с заранее разработанной программой ставит перед экспертом вопросы относительно перспектив развития прогнозируемого объекта. Успех такой оценки в значительной степени зависит от способности эксперта экспромтом давать заключение по самым различным вопро­сам.

Аналитический метод предусматривает тщательную са­мостоятельную работу эксперта над анализом тенденций, оценкой состояния и путей развития прогнозируемого объек­та. Эксперт может использовать всю необходимую ему ин­формацию об объекте прогноза. Свои выводы он оформляет в виде докладной записки. Основное преимущество этого мето­да — возможность максимального использования индивиду­альных способностей эксперта. Однако он мало пригоден для прогнозирования сложных систем и выработки стратегии из-за ограниченности знаний одного специалиста-эксперта в смежных областях знаний.

Метод написания сценария следует отнести как к индивиду­альным, так и к коллективным экспертным оценкам. Сущность и основные его характеристики будут раскрыты ниже.

Наиболее достоверными являются коллективные экспер­тные оценки. Методы коллективных экспертных оценок предполагают определение степени согласованности мнений экспертов по перспективным направлениям развития объекта прогнозирования, сформулированным отдельными специа­листами. В современных условиях используется математико-статистический инструментарий для обработки результа­тов опроса экспертов. Например, для оценки степени согласованности мнений экспертов по решению той или иной исследуемой проблемы исчисляются: дисперсия оценок, среднеквадратическое отклонение оценок и на этой основе — коэф­фициент вариации оценок. Чем меньше значение этого коэф­фициента, тем выше согласованность мнений экспертов.

Для организации проведения экспертных оценок создают­ся рабочие группы, в функции которых входят проведение оп­роса, обработка материалов и анализ результатов коллектив­ной экспертной оценки. Рабочая группа назначает экспертов, которые дают ответы на поставленные вопросы, касающиеся перспектив развития данного объекта. Количество экспертов, привлекаемых для разработки прогноза, может колебаться от 10 до 150 человек в зависимости от сложности объекта. Опре­деляется цель прогноза, разрабатываются вопросы для эк­спертов. При проведении опроса необходимо обеспечить однозначность понимания отдельных вопросов и независимость суждений экспертов. После опроса осущес­твляется обработка материалов, полученных в результате коллективной экспертной оценки. Окончательная оценка мо­жет определяться как среднее суждение или как среднее арифметическое значение оценок всех экспертов.

Могут использоваться и другие методы проведения экспертной оценки. При разработке научно-технических про­гнозов методика статистической обработки материалов пре­дусматривает использование совокупности оценок относи­тельной важности сделанных экспертами по каждому из оцениваемых направлений научных исследований. Оценки важности выражаются в баллах и могут принимать значения от 0 до 1, от 0 до 10, от 0 до 100 и т.д.

В мировой практике широкое применение нашли такие ме­тоды коллективных экспертных оценок, как метод коллектив­ной генерации идей, метод "635", метод "Дельфи", метод "ко­миссий", метод написания сценария. Рассмотрим механизм действия перечисленных методов.

Суть метода коллективной генерации идей (мозговой ата­ки) состоит в использовании творческого потенциала специа­листов при "мозговой атаке" проблемной ситуации, реализу­ющей вначале генерацию идей, а затем их деструктурирование (разрушение, критику) с выдвижением контридей и выработкой согласованной точки зрения. Этот метод был разработан в конце 30-х годов американцем А. Осборном, стремившимся решать проблемы посредством спон­танно возникающих идей. Нечто подобное использовали 400 лет назад индийские мастера "Хинду" во время своих собра­ний: запрещались критика и дискуссии, каждый мог свободно выражать свои идеи, оценка делалась позже.

Метод коллективной генерации идей предполагает реали­зацию следующих этапов. Первый этап связан с формировани­ем группы участников "мозговой атаки" по решению опреде­ленной проблемы. Оптимальная численность группы находится эмпирическим путем. Наиболее продуктивными признаны группы, состоящие из 10—15 человек. На втором этапе группа анализа составляет проблемную записку, в которой формулируется проблемная ситуация и содержится описание метода и проблемной ситуации. Третий этап — этап генерации идей. Каждый участник имеет право выступать мно­го раз. Критика предыдущих выступлений и скептические за­мечания не допускаются. Ведущий корректирует процесс, при­ветствует усовершенствование или комбинацию идей, оказывает поддержку, освобождая участников от скованности. Продолжительность "мозговой атаки" — не менее 20 мин и не более 1 ч в зависимости от активности участников. Четвертый этап связан с систематизацией идей, высказанных на этапе ге­нерации. Формируется перечень идей, выделяются признаки, по которым идеи могут быть объединены, идеи объединяются в группы согласно выделенным признакам. На пятом этапе осу­ществляется деструктурирование (разрушение) систематизи­рованных идей. Каждая идея подвергается всесторонней кри­тике со стороны группы высококвалифицированных специалистов. Группа состоит из 20—25 человек. На шестом этапе дается оценка критических замечаний и составляется список практически реализуемых идей. Этот метод позволяет качественно и достаточно быстро проводить оценку вариантов развития объекта прогнозирования.

Метод "635" — одна из разновидностей "мозговой атаки". Цифры 6, 3, 5 обозначают 6 участников, каждый из которых должен записать 3 идеи в течение 5 мин. Лист ходит по кругу. Таким образом, за полчаса каждый запишет в свой актив 18 идей, а все вместе — 108. Структура идей четко определена. Воз­можны модификации метода. Этот метод широко используется в зарубежных странах (особенно в Японии) для отбора из мно­жества идей наиболее оригинальных и прогрессивных по реше­нию определенных проблем.

Метод "Делъфи" — одна из первых попыток разработать более обоснованную и строгую процедуру при экспертном прогнозировании, предпринятая Т. Гордоном и О. Хелмером — сотрудниками одной из корпораций США, которые в 1964г. опубликовали результаты обобщения и статистичес­кой обработки мнений специалистов относительно перспек­тив развития в ряде областей науки. Он используется при прогнозировании развития науки и техники, инвестиций и других аспектов. Цель метода "Дельфи" — разработка программы последова­тельных многотуровых индивидуальных опросов. Индивиду­альный опрос экспертов обычно проводится в форме ан­кет-вопросников. Затем осуществляется их статистическая обработка на ЭВМ и формируется коллективное мнение груп­пы, выявляются и обобщаются аргументы в пользу различных суждений. Обработанная на ЭВМ информация сообщается эк­спертам, которые могут корректировать оценки, объясняя при этом причины своего несогласия с коллективным суждением. Эта процедура может повторяться до 3—4 раз. В результате происходит сужение диапазона оценок и вырабатывается сог­ласованное суждение относительно перспектив развития объекта.

Особенности метода "Дельфи": а) анонимность экспертов. Участники экспертной группы неизвестны друг другу. Взаимодействие членов группы при за­ полнении анкет полностью исключается; б) возможность использования результатов предыдущего тура опроса в) статистическая характеристика группового мнения.

Этот метод помогает предопределить развитие проблемных ситуаций, носящих долгосрочный характер. Наши специалис­ты, работающие в области научно-технического прогнозирова­ния, также разрабатывают методы обработки экспертных оце­нок. Они носят название эвристических.

Метод "комиссий" — один из методов экспертных оценок, основанный на работе специальных комиссий. Группы экспер­тов за "круглым столом" обсуждают ту или иную проблему с целью согласования точек зрения и выработки единого мнения. Недостаток этого метода заключается в том, что группа экспер­тов в своих суждениях руководствуется в основном логикой компромисса.

Метод написания сценария основан на определении логи­ки процесса или явления во времени при различных услови­ях. Он предполагает установление последовательности событий, развивающихся при переходе от существующей ситуации к будущему состоянию объекта. Своеобразным сце­нарием может быть описание последовательности и условий международной интеграции хозяйства стран, включающее следующие вопросы: от каких простейших форм к более сложным должен пройти этот процесс; как он повлияет на на­циональное хозяйство и экономические связи стран; каковы финансовые, организационные, социальные, юридические проблемы, которые могут возникнуть в ходе интернациона­лизации хозяйства.

Прогнозный сценарий определяет стратегию развития про­гнозируемого объекта. Он должен отражать генеральную цель развития объекта, критерии оценки верхних уровней "дерева целей", приоритеты проблем и ресурсы для достижения основ­ных целей. В сценарии отображаются последовательное реше­ние задачи, возможные препятствия. При этом используются необходимые материалы по развитию объекта прогнозирова­ния.

Сценарий должен быть написан так, чтобы после ознаком­ления с ним стала ясна генеральная цель проводимой работы в свете социально-экономических задач на прогнозируемый период. Он обычно носит многовариантный характер и освещает три линии поведения: оптимистическую — развитие системы в наиболее благоприятной ситуации; пессимисти­ческую — развитие системы в наименее благоприятной ситуа­ции; рабочую — развитие системы с учетом противодействия отрицательным факторам, появление которых наиболее веро­ятно. В рамках прогнозного сценария целесообразно прораба­тывать резервную стратегию на случай непредвиденных ситу­аций. Сценарий в готовом виде должен быть подвергнут анали­зу. На основании анализа информации, признанной пригод­ной для предстоящего прогноза, формулируются цели, опре­деляются критерии, рассматриваются альтернативные решения.

При анализе и прогнозе систем широко используются про­гнозный граф и "дерево целей". Графом называют фигуру, состо­ящую из точек-вершин, соединенных отрезками-ребрами. "Де­рево целей" — это граф-дерево, выражающее отношение между вершинами-этапами или проблемами достижения цели. Каж­дая вершина представляет собой цель для всех исходящих из нее ветвей.

"Дерево целей" предполагает выделение нескольких струк­турных или иерархических уровней. Каждая цель верхнего уровня должна быть представлена в виде подцелей следующего уровня таким образом, чтобы объединение понятий подцелей полностью определяло понятие исходной цели.

Построение "дерева целей" требует решения многих про­гнозных задач: прогноза развития объекта в целом; формули­ровки сценария прогнозируемой цели, уровней и вершин "дере­ва целей"; критериев и их весов в ранжировании вершин. Эти задачи могут решаться при необходимости методами экспер­тных оценок. Следует отметить, что данной цели как объекту прогноза может соответствовать множество разнообразных сценариев.

Метод морфологического анализа предполагает выбор на­иболее приемлемого решения проблемы из числа возможных. Его целесообразно использовать при прогнозировании фун­даментальных исследований. Метод морфологического ана­лиза включает ряд приемов, предполагающих систематизиро­ванное рассмотрение характеристик объекта. Исследование проводится по методу "морфологического ящика", который строится в виде дерева целей или матрицы, в клетки которой вписаны соответствующие параметры. Последовательное со­единение параметра первого уровня с одним из параметров последующих уровней представляет собой возможное реше­ние проблемы. Общее количество возможных решений равно произведению числа всех параметров, представленных в "ящике", взятых по строкам. Путем перестановок и различ­ных сочетаний можно выработать вероятностные характе­ристики объектов.

Поиск по сайту: