2. Процедура проведения экспертизы и анализ экспертных оценок
Для проведения качественной экспертизы необходимы такие условия;
- наличие экспертной комиссии, которая состоит из специалистов, знакомых с объектом экспертизы, которые имеют опыт экспертной работы;
- существование аналитической группы, которая профессионально владеет технологией организации и проведение экспертиз, методами получения и анализа экспертной информации;
- получение надежной экспертной информации;
- корректная обработка и анализ экспертной информации.
Выделяют такие основные этапы экспертизы:
1. Формулирование цели экспертизы.
2. Построение объектов оценивания или их характеристик (к началу экспертизы этот этап уже может быть выполнен).
3. Создание экспертной группы.
4. Определение способа экспертного оценивания и способа представления экспертных оценок.
5. Проведение экспертизы.
6. Обработка и анализ результатов экспертизы.
7. Повторный тур экспертизы, если возникает потребность в уточнении или сближении мыслей экспертов.
8. Формирование вариантов рекомендаций.
Виды экспертных оценок. Экспертиза, т.е. измерение и сравнение объектов, связанная с определенным оцениванием объектов. Оценки бывают разных видов. В отличие от количественных, которые по обыкновению отвечают объективным измерениям объективных показателей, в экспертизе используют балльные оценки. Они характеризуют субъективные мысли. Балльная шкала представляет собой ограниченный ряд равноотстоящих одно от одного чисел. Балльные оценки бывают двух видов:
1) оценки первого вида осуществляют согласно объективному критерию, общепринятому эталону и согласно градациям этого эталона. Чем точнее характеристика и оценка отклонения от эталону, тем большей есть доверие к нему. Итак, оценивания осуществляют за балльной шкалой;
2) балльную оценку второго вида применяют, когда не хватает не только общепринятых эталонов, а и даже сомнительным является наличие одного объективного критерия, который обеспечивает субъективные отображения в виде оценок. В этом случае речь идет о порядковой (или ранговую) шкалу. Такие оценки можно сравнивать по принципу “больше-меньше”.
Следующий вид оценивания - ранжирование. Это упорядочение объектов по уменьшению отдачи преимущества (допускается равноценность объектов и их оценок).
Существует метод попарного сравнения, который иногда кажется более легким для качественного сравнения двух объектов, чем оценивание их по балльной или ранговой шкалле. Для упорядочения объектов на основании качественного критерия иногда целесообразным является метод средней точки: избирают лучший и худший объекты; потом объект, который может располагаться посредине между ними, потом объекты, которые можно расположить посредине между худшим и раньше найденным средним, а также посредине между лучшим и средним, и т.п.