Формирование экспертной группы

Эксперты – это специалисты по рассматриваемой проблеме. С одной стороны, чем больше экспертов будет участвовать в экспертной оценке, тем достоверность оценки будет выше. Но, с другой стороны, эксперты должны быть «настоящими», то есть иметь реальный опыт по проблеме, признанный не только ими лично или узким кругом друзей и знакомых, но и большинством экспертного сообщества.

Существуют эмпирические зависимости достоверности экспертизы от количества экспертов (см. рис.)

Вероятность

совпадения

экспертной

оценки с фактическим 0, 8

состоянием оцениваемого 0, 7

объекта 0, 6

0, 5

0, 4

0, 3

0, 2

1 3 5 7 9 11 Количество экспертов

Рис. Достоверность экспертизы в зависимости от количества экспертов

Найти большое количество специалистов по конкретной проблеме не так-то просто. Кроме того, чем больше экспертов, тем дороже обойдется экспертиза. На практике минимальным (и достаточным) количеством экспертов считается 7.

Важным при формировании экспертной группы является обеспечение ее качественного состава. Для подбора наиболее квалифицированных экспертов используются два метода:

· самооценки

· групповой оценки

Опыт многочисленных экспертиз и в России, и за рубежом показал, что группы экспертов с высокой самооценкой, как правило, ошибаются в своих суждениях меньше, чем группы с низкой самооценкой. Одна из применяемых методик самооценки заключается в определении коэффициента компетенции эксперта.

К_к = (К_з + К_а ): 2

где

К_к - коэффициент компетенции эксперта

К_з - коэффициент знакомства эксперта с проблемой; определяется самим экспертом по шкале от 0, 1 до 1, 0.

К_а - коэффициент аргументации; определяется по таблице:

Предположим, что эксперт оценил степень своего знакомства с проблемой в 0, 7. А источники своей компетенции он оценил, как в таблице (значения, выделенные полужирным курсивом)

Тогда К_а = 0, 3+0, 4+0, 03+0, 03+0, 04+0, 05 =0, 85

К_к = (0, 7+0, 85): 2 = 0, 775

Групповая оценка предполагает формирование экспертной группы из числа экспертов, знающих друг друга по публикациям и может быть лично.

Предположим, что группа экспертов состоит из 10 человек. Они должны выбрать по их мнению пять самых компетентных. В таблице 1 представлена матрица взаимных оценок экспертов. Эксперты отмечают самых квалифицированных экспертов, проставляя, как в данном случае, число 1.

Таблица 1

Первая матрица взаимных оценок экспертов

Затем строится вторая матрица, в которой выбор соответствующих экспертов заменяется количеством его выборов другими экспертами. То есть оценки каждого эксперта заменяются его условной квалификацией, весомостью его выбора.

Таблица 2

Вторая матрица взаимных оценок экспертов

Теперь становится понятно, каков уровень квалификации экспертов, определенной вполне объективным образом. Далее можно исключить из числа экспертов тех, кто оказался менее квалифицированными, или учесть весомость их суждений.