Экспертные методы прогнозирования

Лекция 3. Продолжение

4. Способы количественной оценки результатов опроса специалистов

5. Показатели оценки степени согласованности экспертов

4. Способы количественной оценки результатов опроса специалистов

Для количественной оценки результатов опроса специалистов используются следующие способы:

1. метод ранжирования

2. способ балльной оценки

3. нормирования балльных оценок

4. метод парных сравнений

Метод ранжирования предполагает упорядочение альтернатив (высказанные идеи, факторы, направления, способы) путем присвоения им индивидуальных, результирующих и стандартизированных рангов.

Ранг, равный 1, присваивается наиболее важной альтернативе, наивысший ранг – наименее важной альтернативе.

Индивидуальный ранг – это ранг, проставляемый отдельным экспертом, характеризующий мнение этого эксперта.

Результирующее ранги присваиваются сумме индивидуальных рангов, характеризуют мнения группы экспертов.

Стандартизирующие ранги рассчитываются для одинаковых по важности альтернатив.

Пример.

– если, по мнению эксперта, направления А и Е одинаковые. Условно они занимают 4 и 5 места, тогда каждому из них присваивается 4,5.

– по мнению 2ого эксперта направления А, Б и В одинаковы по значимости, им присваивается ранг, равный 2. Последующее ранжирование производится с того ранга, который не был задействован, т.е. с ранга 4.

Наиболее приемлемы направления, которые получили наименьшую сумму рангов и, соответственно, наименьший результирующий ранг.

Метод балльной оценки используются при применении экспертами регламентированной балльной шкалы (шкала, в которой определена размерность и определены условия или обстоятельства, при которых тот или иной балл присваивается), где наибольший балл соответствует значимому признаку (наиболее важной альтернативе), наименьший балл – наименее значимой альтернативе.

Общее мнение группы определяется по средней балльной оценке. Баллы распределяются не последовательно, могут повторяться.

Пример.

Метод нормирования балльных оценок применяется при использовании экспертами нерегламентированный балльной шкалы (шкала, в которой не определена размерность, баллы могут присваиваться «по своему усмотрению»), предполагает переход от абсолютных балльных оценок к относительным с целью обеспечения их единообразия.

Пример.

Мнение группы экспертов определяется по средней нормированной оценке:

Нормированная оценка:

Метод парных сравнений предполагает определение значимости рассматриваемых альтернатив на основе их попарного сравнения. Метод частичных парных сравнений реализуется следующим образом: 1) Осуществляется парное сравнение рассматриваемых альтернатив каждым экспертом.

По всей таблице расставляются номера альтернатив. Т.е. сравнивается 1 и 2, 1 лучше – ставим 1. Сравниваем 1 и 3, 3 лучше – ставим 3.

S_i – частота по столбцу, r_i – частота по строке.

2) Определяется частота превосходства альтернатив по горизонтали и по вертикали.

3) Суммарная частота превосходства:

4) Рассчитывается коэффициент значимости каждой альтернативы

Наилучшей альтернативой считается та, которая имеет наибольший коэффициент значимости.

5. Показатели оценки степени согласованности экспертов

«Это практически последний этап в экспертном прогнозирования, но от него зависит дальнейшее использование результатов прогноза. Если на последнем этапе в результате расчетов показателей мнений экспертов выявляется, что они являются низкими, то эти прогнозные оценки не должны применяться»

Формула расчёта степени согласованности экспертов осуществляется на расчёте следующих показателей:

· Коэффициент конкордации (согласия):

С_l – сумма рангов по l альтернативе

N – количество экспертов в группе

m – количество оцениваемых альтернатив

Изменяется от 0 до 1, высокая степень согласованности ближе к 1. Степень согласованности экспертов при оценке всех альтернатив.

· Среднее квадратическое отклонение:

· Коэффициент вариации:

(в процентах)

характеризуют степень согласованности мнений экспертов при оценке каждой альтернативы. Столько, сколько было высказываний или альтернатив, столько будет данных показателей. Чем меньше отклонение и вариация, тем лучше – меньше различий в мнениях и оценках. Также лучше, когда коэффициент конкордации выше.