Рассмотрим последовательность реализации метода экспертных оценок (рис. 12.1), который состоит из ряда шагов и этапов. Различают три основных этапа экспертного оценивания. Первый из них – подготовительный, в течение которого выполняются все действия, предшествующие процедуре оценивания (опроса) экспертов. Сюда включают уяснение проблемы и постановку задачи оценивания, выбор экспертов и формирование экспертной комиссии, определение объектов оценивания, методов и процедур, определение и расчет коэффициентов компетентности (важности) экспертов, определение и формирование критериев оценивания, а также определение веса каждого критерия (относительной важности), определение шкал измерений.
Во второй этап включают все действия и работы, связанные с проведением опроса экспертов и обработкой результатов экспертизы. Этими действиями являются: организация работы группы экспертов, сбор и систематизация данных, объяснение и интерпретация полученных результатов.
Рис.12.1 Технология реализации экспертного анализа
В третий этап включают действия, связанные с определением достоверности экспертного оценивания, оценивания согласованности мнений экспертов, утверждения результатов экспертизы. При недостаточной степени согласованности оценок экспертов, которая говорит о пониженной достоверности общей оценки, целесообразным является повторное проведение второго и третьего этапов экспертного оценивания после обсуждения результатов экспертами.
Отдельные шаги реализации метода экспертных оценок, рассмотрим подробнее.