Методы экспертных оценок. Изучению возможностей и особенностей применения экспертных оценок посвя­щено много работ. В них рассматриваются формы экс­пертного опроса (разные виды анкетирования, интер­вью), подходы к оцениванию (ранжирование, нормиро­вание, различные виды упорядочения и т.д.), методы об­работки результатов опроса, требования к экспертам и формированию экспертных групп, вопросы тренировки экспертов, оценки их компетентности (при обработке оценок вводятся и учитываются коэффициенты компе­тентности экспертов, достоверности их мнений), мето­дики организации экспертных опросов. Выбор форм и методов проведения экспертных опро­сов, подходов к обработке результатов опроса и т.д. за­висит от конкретной задачи и условий проведения экс­пертизы. Однако существуют некоторые общие пробле­мы, которые нужно помнить специалисту по системному анализу. Остановимся на них подробнее.

Возможность использования экспертных оценок, обоснование их объективности обычно базируется на том, что неизвестная характеристика исследуемого явле­ния трактуется как случайная величина, отражением за­кона распределения которой является индивидуальная оценка специалиста-эксперта о достоверности и значи­мости того или иного события. При этом предполагает­ся, что истинное значение исследуемой характеристики находится внутри диапазона оценок, получаемых от груп­пы экспертов, и что обобщенное коллективное мнение является достоверным.

Однако в некоторых теоретических исследованиях это предположение подвергается сомнению. Например, предлагается разделить проблемы, для решения которых применяются экспертные оценки, на два класса.

К пер­вому классу относятся проблемы, которые достаточно хорошо обеспечены информацией и для которых можно использовать принцип «хорошего измерителя», считая эксперта хранителем большого объема информации, а групповое мнение экспертов — близким к истинному.

Ко второму классу относятся проблемы, в отношении которых знаний для уверенности в справедливости на­званных предположений недостаточно; экспертов нельзя рассматривать как «хороших измерителей», и необходи­мо осторожно подходить к обработке результатов экс­пертизы, поскольку в этом случае мнение одного (еди­ничного) эксперта, больше внимания уделяющего иссле­дованию малоизученной проблемы, может оказаться наиболее значимым, а при формальной обработке оно будет утрачено. В связи с этим к задачам второго класса в основном должна применяться качественная обработка Результатов. Использование методов осреднения (справедливых для «хороших измерителей») в данном случае может привести к существенным ошибкам.

Задачи коллективного принятия решений по форми­рованию целей, совершенствованию методов и форм управления обычно можно отнести к первому классу. Однако при разработке прогнозов и перспективных пла­нов целесообразно выявлять «редкие» мнения и подвер­гать их более тщательному анализу.

Одной из разновидностей экс­пертного метода является метод изучения сильных и слабых сторон организации, возможностей и угроз ее деятельности - метод SWOT-анализа.

Методы типа «Делъфи».

Основные средства повышения объективности результатов при применении "Дельфи"-метода - использование обратной связи, ознакомление экспертов с результатами предшествующего тура опроса и учет этих результатов при оценке значимости мнений экспертов. В конкретных методиках, реализующих процедуру "Дельфи", это средство используется в разной степени. Так, в упрощенном виде организуется последовательность итеративных циклов мозговой атаки. В более сложном варианте разрабатывается программа последовательных индивидуальных опросов с помощью анкет-вопросников, исключающих контакты между экспертами, но предусматривающих ознакомление их с мнениями друг друга между турами. Вопросники от тура к туру могут уточняться. Для снижения таких факторов, как внушение или приспособление к мнению большинства иногда требуется, чтобы эксперты обосновали свою точку зрения, но это не всегда приводит к желаемому результату, а напротив, может усилить эффект приспособляемости. В наиболее развитых методиках экспертам присваивают весовые коэффициенты значимости их мнений, вычисляемые на основе предшествующих опросов, уточняемые от тура к туру и учитываемые при получении обобщенных результатов оценок.

В силу трудоемкости обработки результатов и значительных временных затрат первоначально предусматриваемые методики "Дельфи" не всегда удается реализовать на практике. В последнее время процедура "Дельфи" в той или иной форме обычно сопутствует любым другим методам моделирования систем - морфологическому, сетевому и т.д. В частности, весьма перспективная идея развития методов экспертных оценок, предложенная в свое время В.М. Глушковым, состоит в том, чтобы сочетать целенаправленный многоступенчатый опрос с "разверткой" проблемы во времени, что становится вполне реализуемым в условиях алгоритмизации такой (достаточно сложной) процедуры и использования компьютерной техники.

Для повышения результативности опросов и активи­зации экспертов иногда сочетают процедуру «Дельфи» с элементами деловой игры: эксперту предлагается прово­дить самооценку, ставя себя на место конструктора, ко­торому реально поручено выполнять проект, или на ме­сто работника аппарата управления, руководителя соот­ветствующего уровня системы организационного управ­ления и т.д.

Идея метода дерева целей впервые была предложена У. Черменом в связи с проблемами принятия решений в промышленности.

Термин «дерево» подразумевает использование ие­рархической структуры, полученной путем разделения обшей цели на подцели, а их, в свою очередь, на более детальные составляющие, которые можно называть под­целями нижележащих уровней или, начиная с некото­рого уровня, — функциями. Как правило, термин «дере­во целей» используется для иерархических структур, имеющих отношения строго древовидного порядка, но сам метод иногда применяется и в случае «слабых» ие­рархий. Поэтому в последнее время все большее распро­странение получает предложенный В.М. Глушковым термин «прогнозный граф», который может представ­ляться и в виде древовидной иерархической структуры, и в форме структуры со «слабыми» связями.

При использовании метода «дерево целей» в качест­ве средства принятия решений часто вводят термин «дерево решений». При применении «дерева» для выяв­ления и уточнения функций управления говорят о «де­реве целей и функций». При структуризации тематики научно-исследовательской организации удобнее поль­зоваться термином «дерево проблемы», а при разработке прогнозов термином «дерево направлений разви­тия (или прогнозирования развития)» или упомянутым выше термином «прогнозный граф».

Метод «дерева целей» ориентирован на получение пол­ной и относительно устойчивой структуры целей, проб­лем, направлений, т.е. такой структуры, которая на про­тяжении какого-то периода времени мало изменялась при неизбежных изменениях, происходящих в любой развивающейся системе. Для достижения этого при по­строении вариантов структуры следует учитывать зако­номерности целеобразования и использовать принципы и методики формирования иерархических структур це­лей и функций.