Навигация
Организация и проведение экспертиз
32866
знаков
0
таблиц
4
изображения
2. Организация и проведение экспертиз.
Ряд работ посвящен организации и проведению экспертиз. Это, прежде всего, работы по систематизации многочисленных разновидностей метода "Дельфи", касающиеся, в основном, совершенствования процедур обмена информации между экспертами в процессе экспертизы. Дальнейшее развитие получили методы мозговой атаки, сценариев, ситуационного анализа.
В настоящее время все большее значение приобретает проведение комплексных экспертиз при оценке сложных объектов.
3. Получение экспертной информации.
Широкое распространение получили методы экспертных ранжирований и гиперупорядочений, классификаций, парные и множественные сравнения и др.
При практическом использовании значительное внимание уделяется как качественным, так и количественным методам получения экспертной информации.
Разрабатываются методы измерения экспертной информации. К числу основных проблем относятся:
проблема представимости экспертной информации;
проблема единственности измерений;
проблема адекватности.
4. Определение результирующих экспертных оценок.
Одной из центральных проблем обработки экспертной информации является определение результирующих экспертных оценок – результата коллективной работа экспертов. Для этой цели был введен аналог расстояний – мера близости между ранжированиями, классификациями и т.д.
Это позволило разработать корректные способы определения результирующих экспертных оценок, такие как медиана Кемени, метод строчных сумм и др.
5. Многокритериальные оценки.
Многокритериальный опыт использования методов и процедур экспертного оценивания показал, что во многих случаях, хотя и не во всех, оценки объектов экспертизы экспертами оказывались более точными при использовании методов многокритериального оценивания.
6. Анализ результатов экспертизы.
Полученная экспертная информация обязательно должна быть проанализирована. Получили развитие методы оценки согласованности экспертных суждений, высказанных в виде ранжирований, парных сравнений и т.д. При этом установлена связь между коэффициентами ранговой корреляции, характеризующие согласованность экспертных суждений, и упомянутыми ранее мерами близости.
Скорее поставлены, чем решены проблемы оценки степени конъюнктурности, конформизма и других факторов, характеризующих адекватность экспертной информации.
7. Компьютерная система поддержки.
Характерным для современного этапа использования методов экспертного оценивания является широкое применение компьютерных систем поддержки. К числу таких систем могут быть отнесены экспертные системы, позволяющие использовать знания и опыт экспертов-специалистов высокой квалификации специалистами менее высокой квалификации для решения задач, возникающие в их практической деятельности.
Система поддержки принятия решений, находящая применение в различных областях, в качестве одной из основных составляющих использует результаты экспертного оценивания.
Однако наиболее важным классом компьютерных систем, позволяющих обеспечить сопровождение и поддержку непосредственно процедур получения, обработки и анализа экспертной информации являются, с нашей точки зрения, автоматизированные системы экспертного оценивания (АСЭО).
АСЭО обеспечивает технологическое сопровождение, необходимое методическое и информационное обеспечение процесса экспертного оценивания при организации и проведении экспертиз с учетом специфического характера проводимой экспертизы 1, с. 17 - 20.
Для прогнозов развития науки и техники, будущих открытий и изобретений, для которых не имеется достаточной теоретической базы в момент составления прогноза, составления картины будущего мира широко применяется один из методов, связанный с обобщением и статистической обработкой мнений группы экспертов, получивший название метода "Дельфи". Этот метод относится к классу методов групповых экспертных оценок. Он был разработан и применен в США впервые в 1964 году сотрудниками научно-исследовательской корпорации РЭНД О.Хелмером и Т.Гордоном [3, с.155].
Происхождение названия этого метода связывают с понятиями "дельфийский оракул". Дельфийский оракул – наиболее известное в Древней Греции место религиозных пророчеств. Дельфийский оракул находился в городе Дельфы при храме Аполлона, считавшегося покровителем и прорицателем. Пророческие изречения в Дельфийском оракуле от имени Аполлона давала жрица-пифия.
Метод "Дельфи" наиболее целесообразно применять в таких случаях, когда имеющиеся в распоряжении или доступные данные непригодны для решения существующей проблемы; в распоряжении нет нужных данных; нет достаточного времени для сбора необходимых данных; процесс получения и анализа необходимых данных слишком дорогостоящий [5, с.30].
В методе "Дельфи" предусматривается создание условий, обеспечивающих наиболее продуктивную работу экспертной комиссии [6, с.26]. Это достигается равномерностью процедуры, возможностью пополнить информацию о предмете экспертизы, отказом от коллективного мнения. Еще одно важное свойство – обратная связь, позволяющая экспертам корректировать свои суждения с учетом промежуточных усредненных оценок и пояснений экспертов, высказавших "крайние" точки зрения. Для реализации обратной связи необходима многотуровая процедура. Экспертизы по методу "Дельфи" проводятся, чаще всего, в 4 тура при помощи анкетирования [6, с.26].
На первом туре экспертам сообщается цель экспертизы, и формируются вопросы, на которых составляют основное содержание экспертизы. Вопросы предъявляются каждому эксперту персонально в виде анкеты, иногда сопровождаемой пояснительной запиской. Если предъявляемые экспертам вопросы достаточно сложны, целесообразна предварительная разработка приближенной модели исследуемой системы, чтобы правильно ориентировать эксперта, конкретизировать цели и предмет экспертной процедуры, показать характер возможных ответов.
Успеху экспертизы способствует предоставление эксперту дополнительной информации о предмете экспертизы. Информация, полученная от эксперта, поступает в распоряжение аналитической группы, обеспечивающей организацию, проведение, обработку промежуточных и окончательных результатов экспертизы. Аналитическая группа определяет экспертов, высказавших “крайние” точки зрения, давших самую высокую и самую низкую оценку альтернативе, усредненное мнение экспертов — медиану, верхнюю и нижнюю квартили, т.е. значение оцениваемой альтернативе, выше и ниже которых расположены 25% численных значений оценок. Расстояние между квартилиями характеризует разброс экспертных оценок, и тем самым характеризует согласованность точек зрения экспертов.
Вводятся следующие обозначения:
t0 — значение наиболее ранней оценки;
t0,25 — значение оценки, определяющей 25% наиболее ранних оценок (из всех имеющихся), — нижний квартиль;
t0,5 — значение оценки разделяющей упорядоченную по оси времени совокупность оценок на две равные по количеству оценок части — медиана;
t0,75 — значение оценки, определяющей 25% наиболее поздних оценок (из всех имеющихся), — верхний квартиль;
t1,0 — значение наиболее поздней оценки;
Значение t0,15 принимается за показатель обобщенного мнения экспертов об ожидаемом времени свершения определенного события [5, с.32].
Степень согласованности мнений экспертов определяют коэффициентом вариации
где 
–
среднее квадратическое
отклонение
оценок;
yi – оценка каждого эксперта;
–
число
экспертов,
участвующих
в экспертизе.
Медиана — значение признака, которое находится в середине ранжированного ряда. Для нахождения медианы ряда с четным числом вариант складывают две средние варианты и делят сумму пополам.
На втором туре “Дельфийской” процедуры экспертам предъявляется усредненная оценка экспертной комиссии и обоснования экспертов, высказавших “крайние” точки зрения [6, с.27]. Обоснования принимаются анонимно, без указания давших их экспертов. После получения дополнительной информации эксперты, как правило, корректируют свои оценки. Скорректированная информация вновь поступает в аналитическую группу. На третьем туре эта информация вместе с анонимными аргументациями поставленных оценок снова направляется каждому участнику. На основе полученной информации эксперты пересматривают предыдущие оценки [5, с.31]. Если же оценка какого-либо эксперта значительно выходит за рамки общего интервала, то он должен подтвердить достаточной аргументацией свою позицию и объяснить, почему предыдущая информация и аргументация противоположных оценок не заставили его изменить свое мнение. На четвертом туре каждому эксперту предоставляется распределение оценок третьего тура, и он должен снова представить на рассмотрение пересмотренную оценку в свете полученной информации. Как показывает практика, желаемое согласие наступает к четвертому туру.
В некоторых случаях согласованная точка зрения экспертов может быть получена уже после второго или третьего туров. Тогда необходимость проведения следующих туров отпадает.
При прогнозировании, в целях минимизации расходов, на прогноз стараются привлекать минимальное число экспертов при условии обеспечения ошибки результата прогнозирования не более b, где 0
Похожие работы
... как предусмотрено Постановлением Верховной Рады Украины от 3 июля 1999 г., необходимо ежегодно выделять из государственного бюджета средства в сумме не менее 1,7%, а в перспективе – 2,3–2,5% стоимости продукции, произведенной в агропромышленном комплексе Украины. В настоящее время этот показатель не превышает 0,4%. В системе таких мер должен найти место и Закон Украины «О рынке научной продукции ...
... данной отрасли дают повод считать, что в ближайшем будущем Новосибирская займет достойное место среди таких регионов как Московская и Ленинградская области. ЗАКЛЮЧЕНИЕ Итак, мы рассмотрели агропромышленный комплекс Новосибирской области. Из всего вышесказанного можно сделать выводы об этом Комплексе. Несмотря на имеющийся потенциал и ресурсы, району присущ ряд проблем, ...
... является монополистом в России по производству буровых насосов, грузовых автомобилей грузоподъемностью до 1,25 тонн, сортовой быстрорежущей стали[4]. Глава II. Государственное регулирование территориального развития Республики Удмуртия § 2.1 Роль государства в разработке и реализации инвестиционной политики в Удмуртской Республике Создание благоприятных экономических, правовых и ...
... в условиях кризиса) к созданию в долгосрочном периоде инфраструктурных объектов и мер государственной поддержки развития приоритетных экономических специализаций. С другой стороны, органам государственной власти национально-территориальных образований - субъектов Российской Федерации необходимо реализовать комплекс мер, направленных на повышение производительности, как приоритетного направления ...
0 комментариев