Лагойда В.В.
Семинар
1. С чем была связана необходимость разработки инновационных методов экспертных оценок в послевоенный период?
Во время Второй мировой войны английский флот нес большие потери от немецких торпед. Научные институты не смогли предложить эффективные средства защиты. Тогда в штабе собрали представителей всех отделов, служб и основных специальностей. Каждый должен был высказать любое предложение. Присутствующий синоптик высказал абсурдную мысль: при торпедной атаке собрать всех на один борт и дуть на воду. Образующееся при этом вихревое (турбулентное) движение воды будет отгонять торпеду. Находящийся там же физик подхватил идею, сказав, что создание такого движения логично поручить машине. Участник совещания — электротехник предложил сконструировать электроаппарат, создающий вихревое поле. Через несколько недель аппарат был сконструирован.
Потребность придания научного статуса группе методик, обычно определяемых как «экспертные оценки» оказалась особенно высока в связи с общим усилением прогностической направленности прикладных проектов и включения в проектные задания таких параметров, как вероятность оптимального и реально возможного развития событий.
Методики экспертных оценок как особый класс научного инструментария активно совершенствовались и были чрезвычайно популярны в 70-80-е годы ХХ в. В этот период на основе их применения было выполнено особенно большое количество прикладных политологических проектов, в том числе и по международной проблематике.
В целом, разнообразные варианты методики экспертных оценок применялись и продолжают применяться главным образом для формулирования прогнозов в отношении тенденций и перспектив развития ситуации, для оценки вероятностных характеристик ситуации на определенном временном этапе будущего, а также для определения желаемого состояния ситуации.
2. Назовите основные этапы прикладного политического исследования на основе применения экспертных оценок.
1) Готовятся информационные материалы и подбираются эксперты.
2) Собираются экспертные заключения и обрабатываются результаты.
3) Готовится итоговое заключение.
3. Чем отличается экспертный опрос от других видов социологического опроса?
Отличительная особенность этого метода состоит в том, что он предполагает компетентное участие экспертов (экспертизу) в анализе и решении проблем исследования. В опросе экспертов достаточно широко используются процедуры других методов, в частности методов анализа информации и принятия решений.
Главное отличие экспертного опроса от других видов опроса состоит в формировании целевой установки и ее реализации. В обычном опросе в качестве объекта изучения выступают сами опрашиваемые.
4. Назовите основные нормативные требования использования экспертного опроса.
- логические и статистические процедуры отбора специалистов;
- организация опроса специалистов;
- выбора конкретной методики опроса;
- обработка результатов экспертизы;
5. Что такое экспертная группа?
Для получения экспертных оценок формируется группа экспертов. Каждый из них должен отвечать таким критериям, как компетентность, высокая квалификация, большой стаж работы, результаты работы, соответствующее образование, профессиональная принадлежность, способность к анализу, синтезу, прогнозу.
6. Какие способы формирования экспертной группы вы знаете?
Наиболее распространённые способы – документальный и экспериментальный, способы голосования, коллективной оценки и индивидуальной самооценки.
Документальный способ предполагает подбор экспертов исходя из социально-демографических и профессиональных характеристик.
Экспериментальный заключается либо в проверке эффективности и качества предшествующей работы экспертов, либо в прохождении кандидатами в эксперты профессиональных тестов, позволяющих оценить их компетентность.
7. Какие способы опроса членов экспертной группы вы знаете?
Существует широкий диапазон конкретных методик опроса экспертов. В зависимости от характера воздействия экспертов выделяются методы очного и заочного опроса. В зависимости от процедуры согласования оценок методы экспертного опроса подразделяются на одноразовые и интегративные. В зависимости от численности – индивидуальные и групповые.
Очные и заочные бывают вербальными и письменными. Они распадаются на ряд конкретных способов, процедур и приемов сбора необходимой информации. К очным методам относят свободное интервью и мозговую атаку (способ коллективной генерации идей), а к заочным – докладные записки, анкетные опросы (раздаточные и нераздаточные, одноразовые опросы и опросы в несколько туров), шкальные оценки, технику Дельфи.
Вид опроса, по существу, определяет разновидность метода экспертной оценки. Основными видами опроса являются: анкетирование, интервьюирование, мозговой штурм (мозговая атака), дискуссия, метод Делфи. Выбор того или иного вида опроса определяется целями экспертизы, сущностью решаемой проблемы, полнотой и достоверностью исходной информации, располагаемым временем и затратами на проведение опросов.
8. Назовите основные принципы метода Дельфи.
Основные принципы методы Дельфи:
- Заочный характер взаимодействия экспертов.
- Анонимность мнений экспертов.
- Итеративность (повторяемость) экспертизы.
- Управляемая обратная связь.
- Количественное оценивание и статистическая обработка экспертных оценок.
9. Что такое «принцип управляемой обратной связи» и как он практически реализуется в алгоритме Дельфи?
Принцип заключается в том, что эксперты могут обмениваться оценками и аргументацией, но делают это не напрямую, а через организаторов экспертизы, которые осуществляют обратную связь между экспертами, систематизируют оценки и аргументы.
Во втором туре метода Дельфи все полученные результаты доводятся до участников экспертизы – это и есть характерное проявление управляемой обратной связи. И после этого уже начинается третий тур Дельфи.
10. Дайте характеристику статистической обработки экспертных оценок в методе Дельфи.
Специфика метода Дельфи, связанная со статистической обработкой оценок и заочным характером взаимодействия экспертов, имеет прямое влияние на комплектование экспертной группы с точки зрения ее численности. Прежде всего, количество оценок (а значит, и количество экспертов) должно быть статистически значимым. Мы не можем привлечь к процедуре Дельфи только трех экспертов, так как не сможем обработать их оценки. Соответственно, нижняя граница численности экспертной группы — 7—9 человек. В то же время у нас не задана верхняя граница, так как нет необходимости собирать экспертов в одном месте. В реальной практике использования Дельфи есть примеры, когда в экспертизе участвовало несколько сотен специалистов. Конкретное их число будет определяться спецификой рассматриваемой проблемы, общим числом компетентных экспертов, их технической доступностью и согласием на участие в экспертизе.