Определение понятий: экспертные оценки, эксперт, экспертиза

Тема 6. Методы экспертных оценок

1. Определение понятий: экспертные оценки, эксперт, экспертиза

2. Метод «Дельфи»

3. Метод «мозгового штурма».

4. Методика организации экспертных опросов

Определение понятий: экспертные оценки, эксперт, экспертиза

Экспертными оценкаминазывают оценки, основанные на интуи­ции, воображении и опыте.

Эксперт - это человек, которого лицо, принимающее решение, или проводящая экспертизу аналитическая группа считает профес­сионалом достаточно высокого уровня в каком-то вопросе, чьи оцен­ки и суждения по поводу объекта экспертизы учитываются при при­нятии решений.

Под экспертизойобычно понимают проведение группой компе­тентных специалистов измерения некоторых характеристик для под­готовки принятия решений. Особенность такой процедуры измере­ния, как экспертиза, в том, что в качестве измерительных приборов выступают люди.

Причины привлечения людей для оценивания объ­ектов просты: либо сами объекты или их характеристики субъектив­ны, либо нет соответствующих приборов, либо объекты или их ха­рактеристики еще предстоит создать (как это имеет место при состав­лении прогноза развития какой-либо системы). Классическими при­мерами экспертизы являются дегустация и судейство спортивных со­ревнований.

Типичными проблемами, требующими проведения экспертизы, являются, например:

- определение целей, стоящих перед объектом управления;

- прогнозирование;

- разработка сценариев;

- генерирование альтернативных вариантов решений;

- разработка оценочных систем;

- определение рейтингов и другие.

Предполагается, что эксперт основывает свое суждение на группе причинных факторов, действующих в рамках определенного сцена­рия, оценивая вероятность его реализации и влияния факторов на изучаемый показатель. Причинно-следственная структура неразрыв­но связана с личностью эксперта. Так, два разных эксперта, решая одну и ту же проблему, используя одну и ту же информацию, могут прийти к разным выводам.

Ценность полученных оценок зависит от опыта и интуиции лица, формулирующего оценку. Уменьшить риск субъективности индиви­дуального суждения можно, обратившись к группе экспертов, кото­рые могут обсуждать и согласовывать свои оценки.

Распространено мнение, что достоверны те оценки, которые яв­ляются результатом согласованности действий экспертов. Однако из­вестны случаи, когда именно один эксперт, не согласный с мнением большинства, как раз и давал правильные оценки, прогнозы.

При решении проблем нестандартных, например связанных с прогнозированием в нестабильных условиях, должны участвовать эксперты высокой квалификации. Прогнозы, составленные «средни­ми» экспертами, обычно основаны на традиционных, привычных оценках. В ситуации неопределенности, неустойчивости они часто ошибочны. Высококвалифицированные специалисты оценят скрытые факторы и возможность появления новых тенденций.

Эксперт используется как источник информации, как советник руководителя, принимающего решения. Работа, выполненная экспер­том, по существу обобщает мнения многих людей, дает исходные данные для планирования.

Для групповых экспертных оценок часто используют открытое обсуждение поставленных вопросов с последующим открытым или закрытым голосованием. Опыт показывает, что этот метод малоэф­фективен, поэтому предпочтительны следующие методы:

- закрытое обсуждение с последующим закрытым голосованием или заполнением анкет опроса;

- свободные высказывания без обсуждения и голосования.

2. Метод «Дельфи»

Одним из наиболее эффективных и известных методов использо­вания экспертов считается метод «Дельфи» (по названию греческого города Дельфы, чьи мудрецы славились умением предсказывать бу­дущее), который предполагает проведение экспертных опросов в не­сколько туров.

Метод характеризуется тремя основными чертами: анонимно­стью, регулируемой обратной связью, групповым ответом. Аноним­ность достигается применением специальных опросников или други­ми способами индивидуального опроса. Регулируемая обратная связь осуществляется за счет проведения нескольких туров опроса. Резуль­таты каждого тура обрабатываются с помощью статистических мето­дов и сообщаются экспертам. Результатом обработки индивидуаль­ных оценок являются групповые оценки.

В основу метода Дельфи положены следующие предпосылки: по­ставленные вопросы должны допускать ответы в виде чисел, экспер­ты должны быть достаточно информированными, каждый ответ экс­перта должен быть им обоснован.

Применительно к разработке научно-технических прогнозов ис­пользование метода Дельфи выглядит так.

Первый тур.Первая анкета может допускать любые ответы. Це­лью такой анкеты является составление перечня событий для прогно­за в какой-то области науки и техники. Организатор экспертизы объ­единяет прогнозы, и полученный перечень событий становится осно­вой второй анкеты.

Второй тур.Эксперты оценивают сроки реализации и приводят соображения, по которым они считают свои оценки верными. По сде­ланным оценкам и их обоснованиям организатор экспертизы (или ор­ганизаторы экспертизы, или организаторы плюс математики) прово­дит статистическую обработку полученных данных, группирует мне­ния экспертов, изучает крайние точки зрения. Результаты этой рабо­ты организатора сообщаются экспертам, и они могут изменить свое мнение (причем работа экспертов идет анонимно).

Третий тур.Третья анкета содержит перечень событий, стати­стических характеристик, дат наступления событий, сводных данных (аргументов) о причинах более ранних или поздних оценок. Экспер­там надо рассмотреть аргументы; сформулировать новые оценки предполагаемой даты наступления каждого события; обосновать свою точку зрения при ее значительном отклонении от групповой; прокомментировать (анонимно!) противоположные мнения. Пересмотренные оценки и новые аргументы возвращаются к организато­ру, который вновь их обрабатывает, суммирует все аргументы и под­готавливает на этой основе новый прогноз.

Четвертый тур.Эксперты знакомятся с новым групповым про­гнозом, аргументами, критикой и составляют новый прогноз. Если группа не может прийти к единому мнению и организатор заинтере­суется аргументами обоих сторон, то он может собрать экспертов для очного обсуждения.