10060

Общая схема экспертизы

Доклад

Менеджмент, консалтинг и предпринимательство

Общая схема экспертизы Общая схема экспертных вопросов включает следующие основные этапы: подбор экспертов и формирование экспертных групп, формирование опросов и составление анкет, работу с экспертами, формирование правил определения суммарных оценок н

Русский

2013-03-20

40.5 KB

17 чел.

Общая схема экспертизы

Общая схема экспертных вопросов включает следующие основные этапы:

- подбор экспертов и формирование экспертных групп;

- формирование опросов и составление анкет;

- работу с экспертами;

- формирование правил определения суммарных оценок на основе оценок отдельных экспертов;

- анализ и обработку экспертных оценок.

Прежде чем приступить к рассмотрению содержания отдельных этапов экспертной процедуры, необходимо сделать следующее замечание.

Проблема экспертных оценок имеет самостоятельное теоретическое и прикладное значение и выходит далеко за рамки проблем теоретического риска. Для ее решения используются специальные экономико-математические методы и методы системного анализа.

Здесь не стоит задача раскрытия сущности и содержания используемых методов, поскольку они достаточно полно отражены в обширной специальной литературе по проблеме. Поэтому представленная ниже краткая характеристика содержания отдельных этапов носит ознакомительно-описательный характер.

Подбор экспертов и формирование экспертных групп. На этом этапе, исходя из целей экспертного опроса, решаются вопросы относительно структуры экспертной группы, количества экспертов и их индивидуальных качеств, т.е. определяются требования к специализации и квалификации экспертов, необходимое число экспертов каждой специализации и их общее количество в группе.

Оценки численности группы экспертов производятся на основе следующих изображений.

Численность группы не должна быть малой, так как в этом случае будет потерян смысл формирования экспертных оценок, определяемых группой специалистов. Кроме того, на групповые экспертные оценки в значительной степени влияла бы оценка каждого эксперта.

При увеличении группы экспертов, хотя и устраняются эти недостатки, зато появляется опасность возникновения новых. Так, при очень большом числе экспертов оценка каждого из них в отдельности почти не влияет на групповую оценку. Причем рост численности экспертной группы далеко не всегда приводит к повышению достоверности оценок. Часто расширение группы экспертов возможно лишь за счет малоквалифицированных специалистов, что, в свою очередь, может привести к снижению достоверности групповых оценок. Одновременно с ростом числа экспертов увеличиваются трудности, связанные с координацией работы группы и обработки результатов опроса.

Существующие методы позволяют выбрать оптимальную в каждом конкретном случае численность группы и ее структуру - численность экспертов требуемой специализации и квалификации.

При подборе экспертов должно быт учтено ограничение, касающееся соответствия целей экспертов целям экспертного опроса. То есть необходимо установить, имеется ли тенденция у отдельных экспертов оценивать необъективно рассматриваемые события. Для этого желательно выявить возможные потенциальные цели экспертов, противоречащие целям получения объективных результатов.

Анализируя предшествующую деятельность экспертов, необходимо выяснить наличие причин, которые приводят к стремлению завысить или занизить оценки так, чтобы повлиять на групповые результаты в желательном для себя либо для других лиц направлении.

Формирование вопросов и составление анкет. Правила опроса экспертов содержат ряд положений, обязательных к выполнению всеми. Эти правила должны обеспечивать соблюдение условий, благоприятствующих формированию экспертами объективного мнения. В число таких входят:

- независимость формирования экспертами собственного мнения об оцениваемых событиях;

- удобство работы с предполагаемыми анкетами (вопросы формулируются в общепринятых терминах и должны исключать всякую смысловую неоднозначность и др.);

- логическое соответствие вопросов структуре объекта опроса;

- приемлемые затраты времени на ответы по вопросам анкеты, удобное время получения вопросов и выдачи ответов;

- сохранение анонимности ответов для членов экспертной группы;

- предоставление экспертам требуемой информации.

Для обеспечения выполнения этих условий должны быть разработаны правила проведения опроса и организации работы экспертной группы.

Работа с экспертами. В зависимости от характера исследуемого объекта, от степени его формализации и возможности привлечения необходимых экспертов порядок работы с ними ожжет быть различным, но в основном он содержит следующие три стадии.

На первой стадии эксперты привлекаются в индивидуальном порядке с целью: уточнить модель объекта, ее параметры и показатели, подлежащие экспертной оценке; уточнить формулировки вопросов и терминологию в анкетах; согласовать целесообразность той или иной формы представления таблиц экспертных оценок; уточнить группы экспертов.

На второй стадии  экспертам направляются анкеты с пояснительным письмом, в котором описывается цель работы, структура и порядок построения таблиц с примерами. Если имеется возможность собрать экспертов вместе, то цели и задачи анкетирования, а также все вопросы, связанные с анкетированием, могут быть изложены устно. Обязательное условие такой формы экспертного опроса - последующее самостоятельное заполнение анкет при соблюдении правил анкетирования.

Третья стадия работы с экспертами осуществляется после получения результатов пороса, в процессе обработки анализа полученных результатов. На этой стадии от экспертов в форме консультации обычно получают всю необходимую информацию для уточнения данных и их окончательного анализа.

Формирование правил определения суммарных оценок на основе оценок отдельных экспертов. Рациональное использование информации, получаемой от экспертов, возможно при условии преобразования ее в форму, удобную для дальнейшего анализа, направленного на подготовку и принятие решений.

Существует несколько способов использования группы экспертов. Один из них (метод согласования оценок) заключается в том, что каждый эксперт дает оценку независимо от других, а затем, с помощью определенных приемов, эти оценки объединяются в одну обобщенную (согласованную).

В методе «Дельфи» в качестве обобщенного мнения принимается медиана оценок последнего тура опроса экспертов.

Можно рассчитать и средневзвешенное значение вероятности, если попытаться учесть вес (компетентность) самого эксперта, который определяется на основе предыдущей деятельности (отношение количества верных ответов к общему количеству), либо на основе других методов - самооценки эксперта с учетов своих знаний в области заданных вопросов, квалификации, должности, ученого звания и т.д.

Существуют различные приемы оценки компетентности эксперта, выбор которые определятся как характером решаемой задачи, так и возможностями проведения конкретного экспертного опроса.

В зависимости от специфики экспертного опроса, объекта исследования и используемой методики обработки экспертных данных оценки, даваемые экспертами, могут иметь различную шкалу измерения: от 0 до 1 , от 0 до 10, от 0 до 100. Вместе с тем, принципиальной разницы в шкалах измерения нет, выбор какой-либо из них во многом определяется вкусом исследователя, проводящего экспертный опрос.

Принятая шкала измерения может в некоторой степени повлиять на выбор методов анализа и обработки мнений экспертов.

Анализ и обработка экспертных оценок. При проведении анализа собранных экспертных данных в соответствии с целями исследования и принятыми моделями необходимо представить информацию, полученную от экспертов в виде, удобном для принятия решений (упорядочить объекты - варианты, показатели, факторы и т.п.), а также определить согласованность действий экспертов и достоверность экспертных оценок.

Так, например, выявленные в процессе качественного анализа риски необходимо представить в порядке их важности (степени возможного их влияния на уровень потерь), или варианты снижения риска - в порядке их предпочтительности и т.п.

Существует ряд методов упорядочивания, каждый из которых имеет свои достоинства и недостатки, а также область эффективного применения. Наиболее распространенными из них являются: ранжирование, непосредственная оценка, последовательное сравнение, парное сравнение.

Важным моментом экспертных процедур является оценка согласованности действий экспертов и достоверности экспертных оценок.

Как отмечалось, существующие способы определения достоверности экспертных оценок основаны на предположении, что в случае согласованности действий экспертов достоверность оценок гарантируется.

Наиболее часто для этих целей используют коэффициент конкордации (согласия), величина которого позволяет судить о степени согласованности мнений экспертов, и, как следствие, о достоверности их оценок.

Используются также критерии, которые позволяют оценить вероятность того, что согласованность экспертов не явилась результатом случайных вариаций их мнений.

Если в соответствии с принятыми критериями мнения экспертов можно считать согласованными, то данные ими оценки принимаются и используются в процессе подготовки и реализации управленческих решений. Если полученные оценки нельзя считать достоверными, следует повторить опрос заново. Если и это не даст желаемых результатов, следует уточнить исходные данные и (или) изменить состав группы экспертов.

Здесь следует отметить важную роль организаторов экспертизы, в задачи которых входят: постановка проблемы, определение целей и задач экспертизы, ее границ и основных этапов; разработка процедур экспертизы, в наибольшей степени соответствующей характеру решаемой проблемы; отбор экспертов; проверка их компетентности и формирование групп экспертов; проведение опроса и согласование оценок; формализация полученной информации, ее обработка, анализ и интерпретация.

От правильной организации экспертизы в значительной степени завит эффективность результатов, полученных посредством экспертных оценок, в том числе достоверность их оценок.


 

А также другие работы, которые могут Вас заинтересовать

39813. Анализ качества АСР 433.5 KB
  Анализ качества АСР. Системы построенные только по условиям физической реализации как правило не удовлетворяют показателям качества а реализация переходного процесса близко к идеальному связано с большими энергозатратами. Наиболее тяжёлым для АСР является единичный сигнал поэтому если АСР удовлетворяет заданным показателям качества при ступенчатом воздействии то она будет вести себя не хуже при остальных воздействиях. Методы оценки качества переходного процесса АСР.
39814. Автоматические системы прямого и непрямого регулирования 193.5 KB
  При нарушении установившегося режима вследствие уменьшения нагрузки двигателя произойдет увеличение частоты вращения приводного вала 4 и центробежной силы грузов 5. Регуляторы частоты вращения непрямого действия. При изменении частоты вращения муфта ЧЭ будет перемещать управляющий золотник который откроет доступ масла высокого давления в одну из полостей сервомотора. будет восстанавливаться заданная частота вращения.
39815. Двухпозиционное регулирование 51.5 KB
  Если объект представляется интегрирующим звеном с запаздыванием то диапазон колебаний регулируемой величины будет больше ширины петли гистерезиса 2а так как регулятор будет реагировать на фактическое изменение регулируемой величины с запаздыванием об. Дополнительное приращение амплитуды автоколебаний на счет запаздывания составит .4: Очевидно как и в случае интегрирующего объекта наличие запаздывания в апериодическом объекте приведет к увеличению диапазона колебаний регулируемой величины. Амплитуда колебаний будет тем больше чем больше...
39816. Нелинейные системы 71.5 KB
  Существует 2 группы НС: системы которые разрабатывались как линейные но изза несовершенства изготовления некоторых элементов или в процессе эксплуатации за счет износа элементы носят существенно нелинейный характер например появление нечувствительности. Идеальное поляризованное реле с зоной нечувствительности: [аа] зона нечувствительности Идеальное реле Нечувствительность [аа] зона нечувствительности Ограничение насыщение Ограничениенечувствительность Нессиметрия Реле идеальное поляризованное с петлей...
39817. Импульсные и цифровые автоматические системы управления 51.5 KB
  К импульсным АСУ относятся системы в состав которых входит хотя бы один элемент дискретного действия преобразующий непрерывный сигнал в последовательность импульсов или в ряд квантованных сигналов. Функциональную схему импульсной системы можно представить состоящей из дискретного элемента и непрерывной части НЧ. непрерывные системы дискретные системы xt непрерывная величина x k величина определена в отдельные промежутки времени производная от непрерывной величины  x k=x kx k1 разность первого порядка вторая...
39818. Развитие автоматизации судов 194.5 KB
  характеризуется внедрением автоматических систем управления регулирования контроля и защиты в объёме. На следующем этапе разрабатываются автоматические системы регулирования и дистанционного управления функционально связанными установками: котельной паротурбинной дизельэнергетической электроэнергетической. Автоматика первого поколения позволила решить главные задачи: повысить маневренность стабильность работы и экономичность судовых машин и систем освободить людей от утомительной обязанности ручной регулировки и управления. Резко...
39819. Классификация систем автоматического регулирования 381.5 KB
  Системы автоматического регулирования нашли широкое применение в многочисленных технологических процессах различных отраслей народного хозяйства. Следящие системы когда изменение выходного параметра Yt происходит по заранее неизвестному закону изменения задающего воздействия Xt. Во время работы системы регулируемая величина Yt должна изменяться в полном соответствии с задающим воздействием т. К таким системам относятся системы автоматического сопровождения цели например телескоп следит за движением небесного тела системы...
39820. Анализ автоматических систем регулирования 362 KB
  Теория автоматического управления делится на: анализ АСР известны параметры блоков их характеристики при этом необходимо определить поведение системы качество регулирования. синтез АСР заключается в нахождении параметров блоков АСР регулятора при заданных показателях качества. АСР могут находиться в двух режимах: Статический все воздействия внутренние и внешние постоянны во времени реальные АСР практически редко находятся в статическом режиме. Для упрощения расчётов АСР проводят линеаризацию ведь как правило поведение...
39821. Разработка проекта комплексного дизайн-графического обеспечения рекламной кампании Уфимского филиала МГГУ им. М.А. Шолохова в области образовательных услуг 67.17 KB
  Краткая история графического дизайна. Теоретическая значимость: в теоретической части дан подробный анализ истории зарождения графического дизайна и история возникновения наружного штендера. В первой главе представлен краткий обзор истории графического дизайна. Краткая история графического дизайна Графический дизайн художественнопроектная деятельность по созданию гармоничной и эффективной визуальнокоммуникативной среды.