10060

Общая схема экспертизы

Доклад

Менеджмент, консалтинг и предпринимательство

Общая схема экспертизы Общая схема экспертных вопросов включает следующие основные этапы: подбор экспертов и формирование экспертных групп, формирование опросов и составление анкет, работу с экспертами, формирование правил определения суммарных оценок н

Русский

2013-03-20

40.5 KB

15 чел.

Общая схема экспертизы

Общая схема экспертных вопросов включает следующие основные этапы:

- подбор экспертов и формирование экспертных групп;

- формирование опросов и составление анкет;

- работу с экспертами;

- формирование правил определения суммарных оценок на основе оценок отдельных экспертов;

- анализ и обработку экспертных оценок.

Прежде чем приступить к рассмотрению содержания отдельных этапов экспертной процедуры, необходимо сделать следующее замечание.

Проблема экспертных оценок имеет самостоятельное теоретическое и прикладное значение и выходит далеко за рамки проблем теоретического риска. Для ее решения используются специальные экономико-математические методы и методы системного анализа.

Здесь не стоит задача раскрытия сущности и содержания используемых методов, поскольку они достаточно полно отражены в обширной специальной литературе по проблеме. Поэтому представленная ниже краткая характеристика содержания отдельных этапов носит ознакомительно-описательный характер.

Подбор экспертов и формирование экспертных групп. На этом этапе, исходя из целей экспертного опроса, решаются вопросы относительно структуры экспертной группы, количества экспертов и их индивидуальных качеств, т.е. определяются требования к специализации и квалификации экспертов, необходимое число экспертов каждой специализации и их общее количество в группе.

Оценки численности группы экспертов производятся на основе следующих изображений.

Численность группы не должна быть малой, так как в этом случае будет потерян смысл формирования экспертных оценок, определяемых группой специалистов. Кроме того, на групповые экспертные оценки в значительной степени влияла бы оценка каждого эксперта.

При увеличении группы экспертов, хотя и устраняются эти недостатки, зато появляется опасность возникновения новых. Так, при очень большом числе экспертов оценка каждого из них в отдельности почти не влияет на групповую оценку. Причем рост численности экспертной группы далеко не всегда приводит к повышению достоверности оценок. Часто расширение группы экспертов возможно лишь за счет малоквалифицированных специалистов, что, в свою очередь, может привести к снижению достоверности групповых оценок. Одновременно с ростом числа экспертов увеличиваются трудности, связанные с координацией работы группы и обработки результатов опроса.

Существующие методы позволяют выбрать оптимальную в каждом конкретном случае численность группы и ее структуру - численность экспертов требуемой специализации и квалификации.

При подборе экспертов должно быт учтено ограничение, касающееся соответствия целей экспертов целям экспертного опроса. То есть необходимо установить, имеется ли тенденция у отдельных экспертов оценивать необъективно рассматриваемые события. Для этого желательно выявить возможные потенциальные цели экспертов, противоречащие целям получения объективных результатов.

Анализируя предшествующую деятельность экспертов, необходимо выяснить наличие причин, которые приводят к стремлению завысить или занизить оценки так, чтобы повлиять на групповые результаты в желательном для себя либо для других лиц направлении.

Формирование вопросов и составление анкет. Правила опроса экспертов содержат ряд положений, обязательных к выполнению всеми. Эти правила должны обеспечивать соблюдение условий, благоприятствующих формированию экспертами объективного мнения. В число таких входят:

- независимость формирования экспертами собственного мнения об оцениваемых событиях;

- удобство работы с предполагаемыми анкетами (вопросы формулируются в общепринятых терминах и должны исключать всякую смысловую неоднозначность и др.);

- логическое соответствие вопросов структуре объекта опроса;

- приемлемые затраты времени на ответы по вопросам анкеты, удобное время получения вопросов и выдачи ответов;

- сохранение анонимности ответов для членов экспертной группы;

- предоставление экспертам требуемой информации.

Для обеспечения выполнения этих условий должны быть разработаны правила проведения опроса и организации работы экспертной группы.

Работа с экспертами. В зависимости от характера исследуемого объекта, от степени его формализации и возможности привлечения необходимых экспертов порядок работы с ними ожжет быть различным, но в основном он содержит следующие три стадии.

На первой стадии эксперты привлекаются в индивидуальном порядке с целью: уточнить модель объекта, ее параметры и показатели, подлежащие экспертной оценке; уточнить формулировки вопросов и терминологию в анкетах; согласовать целесообразность той или иной формы представления таблиц экспертных оценок; уточнить группы экспертов.

На второй стадии  экспертам направляются анкеты с пояснительным письмом, в котором описывается цель работы, структура и порядок построения таблиц с примерами. Если имеется возможность собрать экспертов вместе, то цели и задачи анкетирования, а также все вопросы, связанные с анкетированием, могут быть изложены устно. Обязательное условие такой формы экспертного опроса - последующее самостоятельное заполнение анкет при соблюдении правил анкетирования.

Третья стадия работы с экспертами осуществляется после получения результатов пороса, в процессе обработки анализа полученных результатов. На этой стадии от экспертов в форме консультации обычно получают всю необходимую информацию для уточнения данных и их окончательного анализа.

Формирование правил определения суммарных оценок на основе оценок отдельных экспертов. Рациональное использование информации, получаемой от экспертов, возможно при условии преобразования ее в форму, удобную для дальнейшего анализа, направленного на подготовку и принятие решений.

Существует несколько способов использования группы экспертов. Один из них (метод согласования оценок) заключается в том, что каждый эксперт дает оценку независимо от других, а затем, с помощью определенных приемов, эти оценки объединяются в одну обобщенную (согласованную).

В методе «Дельфи» в качестве обобщенного мнения принимается медиана оценок последнего тура опроса экспертов.

Можно рассчитать и средневзвешенное значение вероятности, если попытаться учесть вес (компетентность) самого эксперта, который определяется на основе предыдущей деятельности (отношение количества верных ответов к общему количеству), либо на основе других методов - самооценки эксперта с учетов своих знаний в области заданных вопросов, квалификации, должности, ученого звания и т.д.

Существуют различные приемы оценки компетентности эксперта, выбор которые определятся как характером решаемой задачи, так и возможностями проведения конкретного экспертного опроса.

В зависимости от специфики экспертного опроса, объекта исследования и используемой методики обработки экспертных данных оценки, даваемые экспертами, могут иметь различную шкалу измерения: от 0 до 1 , от 0 до 10, от 0 до 100. Вместе с тем, принципиальной разницы в шкалах измерения нет, выбор какой-либо из них во многом определяется вкусом исследователя, проводящего экспертный опрос.

Принятая шкала измерения может в некоторой степени повлиять на выбор методов анализа и обработки мнений экспертов.

Анализ и обработка экспертных оценок. При проведении анализа собранных экспертных данных в соответствии с целями исследования и принятыми моделями необходимо представить информацию, полученную от экспертов в виде, удобном для принятия решений (упорядочить объекты - варианты, показатели, факторы и т.п.), а также определить согласованность действий экспертов и достоверность экспертных оценок.

Так, например, выявленные в процессе качественного анализа риски необходимо представить в порядке их важности (степени возможного их влияния на уровень потерь), или варианты снижения риска - в порядке их предпочтительности и т.п.

Существует ряд методов упорядочивания, каждый из которых имеет свои достоинства и недостатки, а также область эффективного применения. Наиболее распространенными из них являются: ранжирование, непосредственная оценка, последовательное сравнение, парное сравнение.

Важным моментом экспертных процедур является оценка согласованности действий экспертов и достоверности экспертных оценок.

Как отмечалось, существующие способы определения достоверности экспертных оценок основаны на предположении, что в случае согласованности действий экспертов достоверность оценок гарантируется.

Наиболее часто для этих целей используют коэффициент конкордации (согласия), величина которого позволяет судить о степени согласованности мнений экспертов, и, как следствие, о достоверности их оценок.

Используются также критерии, которые позволяют оценить вероятность того, что согласованность экспертов не явилась результатом случайных вариаций их мнений.

Если в соответствии с принятыми критериями мнения экспертов можно считать согласованными, то данные ими оценки принимаются и используются в процессе подготовки и реализации управленческих решений. Если полученные оценки нельзя считать достоверными, следует повторить опрос заново. Если и это не даст желаемых результатов, следует уточнить исходные данные и (или) изменить состав группы экспертов.

Здесь следует отметить важную роль организаторов экспертизы, в задачи которых входят: постановка проблемы, определение целей и задач экспертизы, ее границ и основных этапов; разработка процедур экспертизы, в наибольшей степени соответствующей характеру решаемой проблемы; отбор экспертов; проверка их компетентности и формирование групп экспертов; проведение опроса и согласование оценок; формализация полученной информации, ее обработка, анализ и интерпретация.

От правильной организации экспертизы в значительной степени завит эффективность результатов, полученных посредством экспертных оценок, в том числе достоверность их оценок.


 

А также другие работы, которые могут Вас заинтересовать

31040. Проблемы славянского этногенеза. Восточные славяне: територия, хозязствово, быт, культура, религия 33 KB
  Восточные славяне: територия хозво быт культура религия. Славяне относятся к одной из самых многочисленных групп индоевропейских народов. Как самостоятельные народы начали свое существование греки латины славяне и др. Тогда же оформились три славянские ветви: западные славяне поляки чехи словаки южные болгары сербы хорваты и др восточные русские украинцы белорусы.
31041. Центры зарождения славянской государственности. Полемика историков вокруг проблемы образования Древнерусского гос-ва. Политика первых правитиелей Руси: Олега, Игоря, Ольги, Святослава 31.5 KB
  Главными проблемами являются вопросы о причинах возникновения госва Русь кто такие русыи откуда взялось название страны Русь кто были варяги. Немецкие ученые Байер и Миллер считали что слово русь означало название варяжского племени пришедшее с Рюриком что Древнерусское госва было создано норманнамиварягами. Название русь он связал с древним народом сарматамироксаланами и с названием реки Рось. В современной отечественной и зарубежной науке большинство ученых склоняется к мнению о скандинавском происхождении термина русь.
31042. Русь при Владимире 1 и Ярославе Мудром. Внешняя и внутренняя политика. Крещение и распространение христианства на Руси 31 KB
  Русь при Владимире 1 и Ярославе Мудром. шла междоусобица сыновей Святослава которую выиграл Владимир9801015. При Владимире завершилось объединение восточнославянских земель. При Владимире в Древнерусское госво вошли червенские земли земли радимичей северных угрофинов и др.
31043. Древнерусское общество и государство в 9-12 веках 31 KB
  Завещание разделило русскую землю на уделы. Это означало окончательный распад Руси на уделы. Постепенно малые бедные окраины стали превращаться в цветущие и сильные уделы. Многие уделы он сконцентрировал в руках своих сыновей.
31044. Тенденции развития различных древнерусских земель в 12 – начале 13 веков. Крупнейшие княжества и земли 33 KB
  Условной датой начала раздробленности на Руси считают 1132г когда умер Мстислав сын Мономаха и раздрася вся русская земля. Время раздробленности на Руси тянулось с начала 12века по147080г. На юге и юговостоке Руси неособо любили метсное боярство поэтому занятие киевского престола всякий раз обуславливалось сочетанием борьбы. В Западной Руси сильны были федеративные тенденции.
31045. Русь в международных отношениях 11-13веков: отношения с Великой Степью, Византией и Западной Европой 30.5 KB
  Первая встреча русских с монголотатарами произошла 31 мая 1223г. Впоследствии установилась зависимость русских земель от державы Батыя продлившаяся для СевВост Руси до 1480г а для Южной до 1362г. Эти 2 победы были очень важны: они прервали череду поражений русских для церкви же особенно было важно недопущение католического влияния на русских землях.
31046. Альтернативы объединительных процессов на Руси. Центры объединения русских земель в 14-15веках. Московская и Литовская Русь 31 KB
  Альтернативы объединительных процессов на Руси. Главными центрами объединения Руси выступили в 14в. Но реализовать свой шанс на объединение всей Руси этому княжеству не удалось во многом решающую роль здесь сыграли религиозные противоречия и сближение Литвы с Польшей что впоследствии преобразится в Речь Посполитую1569г. В Москву же была перенесена резиденция митрополита всея Руси.
31047. Природа социально-политического строя Московской Руси в 15-16веках. Российское гос-во при Иване 3 и Василии: органы централизованого и местного управления, доктрина Москва – Третий Рим, нарпавленность внешней политики 30 KB
  Российское госво при Иване 3 и Василии: органы централизованого и местного управления доктрина Москва Третий Рим нарпавленность внешней политики. москвичи осадили Тверь и с этого момента ученые обычно отсчитывают историю единого Московского госва. При Иване 3 уделов не стало он оказался государем всея Руси. Для централизованных стран харрно: сильный гос аппарат в центре чиновничество единое войско законодательство суд единообразное налогооблажение.
31048. Россия и Европа в 15-16в. Европеизация России в 17в(причины, хараткер, особенности, последствия) 31.5 KB
  Россия и Европа в 1516в. После брака Ивана 3 и Софьи Палеолог за рубежом стало встречаться еще одно название Россия. В ходе Ливонской войны15581583 и Смуты начала 17 века Россия остро ощущала как ей тяжело соперничать с европейскими странами особенно в военнотехнич области. Россия вывозила за границу лес меха.