Методы проведения экспертиз

Каждый сценарий может быть реализован в нескольких вариантах. Вариант – небольшие (незначительные) изменения каких-либо параметров системы в рамках сценария.

Разработка сценариев способствует предвидению потенциальной опасности, с которой сопряжены варианты управленческих воздействий и неблагоприятное развитие событий. Использование специальных компьютерных систем, а также датчиков случайных чисел, с последующим исключением невозможных ситуаций, расширяет горизонт анализа альтернативных вариантов в составе сценариев и выбор наиболее эффективного.

В составе экспертных методов, наиболее активно используемых в настоящее время, наиболее известны метод «Дельфи» и метод мозговой атаки.

Метод «Дельфи».

Метод «Дельфи» один из основных в проведении групповых экспертиз и имеет различные модификации. Фактически это группа процедур, объединенных общими требованиями к организации экспертизы и форме получения экспертных оценок. В нем предусматривается создание условий, обеспечивающих наиболее продуктивную работу экспертной комиссии, что достигается анонимность процедуры, с одной стороны, и возможностью пополнить информацию о предмете экспертизы – с другой. Метод разработан и применен в США впервые в 1964 г. сотрудниками научно-исследовательской корпорации «РЭНД» О. Хелмером и Т. Гордоном.

Метод «Дельфи» целесообразно применять в таких случаях, когда имеющиеся в распоряжении или доступные данные непригодны для анализа существующее проблемы; в распоряжении нет нужных данных; нет достаточного времени для сбора данных; процесс получения и анализа необходимых данных слишком дорог.

Метод «Дельфи» предусматривает создание условий, обеспечивающих эффективную работу экспертной комиссии. Это достигается анонимностью процедуры и возможностью пополнить информацию о предмете экспертизы, отказом от коллективного мнения. Важное свойство – это обратная связь, позволяющая экспертам корректировать свои суждения с учетом промежуточных усредненных оценок и пояснений экспертов, высказавших «крайние» точки зрения. Для реализации обратной связи необходима многотуровая процедура. Экспертиза проводится чаще всего в четыре тура.

Прямые дебаты заменены тщательно разработанной программой последовательных опросов, проводимых обычно в форме анкетирования. Ответы экспертов обобщаются и вместе с новой дополнительной информацией поступают в распоряжение экспертов, после чего они уточняют первоначальные ответы. Такая процедура повторяется несколько раз до достижения приемлемой согласованности всей совокупности высказанных мнений. Перед рассылкой анкеты эксперту объясняется проблема.

На первом туре экспертам сообщается цель экспертизы и формируются вопросы, ответы на которые составляют основное содержание экспертизы.

Успеху экспертизы способствует предоставление эксперту дополнительной информации о предмете экспертизы. Информация, полученная от эксперта, поступает в распоряжение аналитической группы, обеспечивающей организацию, проведение, обработку промежуточных и окончательных результатов экспертизы. Аналитическая группа определяет экспертов, высказавших крайние точки зрения, давших самую высокую и самую низкую оценку альтернативе. Усредненное мнение экспертов – медиану, верхнюю и нижнюю квартили, т.е. значение оцениваемой альтернативы, выше и ниже которых расположены 25% числовых значений оценок. Расстояние между квартилями характеризует разброс экспертных оценок, т.е. согласованность точек зрения экспертов.

Вводятся следующие обозначения:

T 0 - значение наиболее ранней оценки;

T 0,25 – значение оценки, определяющей 25% наиболее ранних оценок (из всех имеющихся), - нижний квартиль;

T 0,5 – значение оценки, разделяющий упорядоченную по оси времени совокупность оценок на две равные по количеству оценок части, - медиана;

T 0,75 – значение оценки, определяющей 25% наиболее поздник оценок (из всех имеющихся), - верхний квартиль;

T 1,0 – значение наиболее поздней оценки.

Степень согласованности мнений экспертов определяют коэффициентом вариации υ, который не должен превышать 33%. Он рассчитывается по формуле

σ

υ= ─ ×100%,

х

где х – средне квадратическое отклонение оценок;

σ – квартиль.

σ=√[∑(xi ­ x)²]:n,

где х – среднее значение оценок;

хi – оценка каждого эксперта;

n ­ число экспертов.

Медиана – это значение оценки, которое находится в середине ранжированного ряда. Для нахождения медианы ряда с четным числом складывают два средних варианта и делят сумму пополам.

На втором туре экспертам предъявляется усредненная оценка экспертной комиссии и обоснования экспертов, высказавших «крайние» точки зрения. Обоснования принимаются анонимно, без указания имен экспертов. Скорректированная информация вновь поступает в аналитическую группу. На третьем туре эта информация вместе с анонимными аргументациями поставленных оценок снова направляется каждому участнику. На основе полученной информации эксперты пересматривают предыдущие оценки. На четвертом туре каждому эксперту предоставляется право распределения оценок третьего тура, и он должен снова представить на рассмотрение пересмотренную оценку, учтя полученную информацию. В некоторых случаях согласованная точка зрения экспертов может быть получена уже после второго или третьего туров. Тогда необходимость проведения следующих туров отпадает.

При использовании метода «Дельфи» полезно учитывать следующее:

1. Группы экспертов должны быть стабильными.

2. Время между турами опросов не должно быть более месяца.

3. Вопросы в анкетах должны быть тщательно продуманны и однозначно сформулированы.

4. Число туров должно быть достаточным, чтобы обеспечить всем участникам возможность ознакомиться с причиной появления оценки, а также для критики этих причин.

5. Должен проводиться систематический отбор экспертов.

6. Необходимо иметь самооценку компетенции экспертов по рассматриваемым проблемам.

7. Нужна формула согласованности оценок, основанная на данных самооценок.

8. Необходимо установить влияние различных видов передачи информации экспертам по каналам обратной связи.

Метод «Дельфи» является достаточно надежным инструментом получения экспертной информации. С его помощью выявляется преобладающее суждение специалистов.

После первой апробации метода «Дельфи» были разработаны различные его модификации. Все модификации могут быть охарактеризованы следующим образом:

-составление классификатора событий, которые экспертам предстоит анализировать;

-предварительное описание прогнозного фона;

-уменьшение числа туров опроса;

-характер вопросов, задаваемых экспертам, и соответствующие математические процедуры получения групповых прогнозных оценок.

Модифицирование метода «Дельфи» было связанно с расширением области его применения.

Классический метод «Дельфи», созданный для прогнозирования научных открытий и времени их свершения, стал использоваться для оценки приоритетности направлений прикладных исследований, а также для анализа перспективности технических (конструкторских и технологических) решений и даже для оценки количественных показателей разрабатываемых технических объектов, технологических процессов и т.д.

 Скачать реферат