Смекни!
smekni.com

Эффективность работы отдела маркетинга (стр. 9 из 13)

Оценки численности группы экспертов в этом случае можно произвести, руководствуясь следующими соображениями. Ясно, что численность группы не должна быть малой, так как в этом случае был бы потерян смысл формирования экспертных оценок, определяемых группой специалистов. Кроме того, на групповые экспертные оценки в значительной степени влияла бы оценка каждого эксперта. При увеличении группы экспертов хотя и устраняются эти недостатки, но зато появляется опасность возникновения новых. Так, при очень большом числе экспер­тов оценка каждого из них в отдельности почти не влияет на групповую оценку. Причем рост численности экспертной группы далеко не всегда приносит повышение достоверности оценок. Часто расширение группы экспертов возможно лишь за счет привлечения малоквалифицированных специалистов, что в свою очередь может привести лишь к уменьшению достоверности групповых оценок. Одновременно с ростом числа экспертов увеличиваются трудности, связанные с обработкой результатов опроса и координацией работы группы. Следовательно, существуют некоторые граничные оценки численности группы экспертов Nmin и Nmax которые определяются следующим образом.

Нижняя оценка численности Nmin должна зависеть от числа оцени­ваемых событий. Данное предположение основано на существовании правила, которое обычно соблюдается при работе ученых советов, комис­сий специалистов и т.д., а именно — требований представительности группы, состоящей из N экспертов, для принятия решений по множеству m событий, которое можно представить как N >= m. Поэтому принимаем Nmin >= m.

Верхней границей численности экспертной группы является по­тенциально возможное число экспертов:

Nmax <= Nn (2)

откуда действительное значение численности группы N находится в пределах

Mmax<= Nmin <= Nmax <= Nn (3)

После того как найдена численность группы, определяется ее структу­ра и состав, т.е. подбираются в группу эксперты требуемой специализации и квалификации. Для того чтобы экспертная группа могла всесторонне про­извести оценку событий, число экспертов NL каждого L-го направления желательно выбрать одинаковым:

NL = N / r (4)

где L = 1, 2, ..., r;

где r — число направлений.

Далее должно быть учтено одно ограничение, касающееся соответствия целей экспертов целям экспертного опроса, т.е. необходимо уста­новить, имеется ли тенденция у отдельных экспертов необъективно оце­нивать рассматриваемые события. Для этого желательно выявить потенциальные возможные цели экспертов, противоречащие целям получения объективных результатов. Анализируя предшествующую деятельность экспертов, необходимо выяснить наличие причин, которые приводят к стремлению завышать или занижать оценки так, чтобы повлиять на групповые в желательном для себя либо для других лиц направлении.

На основе сформулированных выше условий последовательность формирования группы экспертов может быть следующей. Сначала определяется потенциально возможное число экспертов Nn а также минимально допустимая численность группы Nmin. После этого среди потенциально возможных экспертов выделяют группу специалистов Nk (Nk <= Nn) требуемой квалификации для оцениваемого класса событий. Затем из Nk исключают тех экспертов, чьи потенциально возможные цели могут противоречить целям получения объективных результатов. Из оставшихся экспертов Nц (Nц < Nk) формируют группу так, чтобы в ней обеспечива­лось равночисленное представительство разных направлений. Для этого вначале определяют максимально возможное число представителей каж­дого направления как

NLmax = Nц / r (5)

Потом находят направление с наименьшим числом экспертов NLmax, которое входит в группу Nц. Тогда общая численность группы будет определяться по формуле

N = NLmin r (6)

После этого проверяют соотношение N >= Nmin. Если оно не удовлетворяется, то необходимо выяснить возможность ослабления приведенных выше ограничений либо допустимость нарушения условия N >= Nmin, что связано с важностью принимаемых решений на основе экспертных оценок.

2.3.2.4. Формирование вопросов и составление анкет

Правила опроса экспертов содержат ряд положений, обязательных к выполнению всеми. Эти правила должны обеспечивать соблюдение условий, благоприятствующих формированию экспертами объективного мнения. В число таких условий входит:

- независимость формирования экспертами собственного мнения об оцениваемых событиях;

- удобство работы с предполагаемыми анкетами (вопросы формулируются в общепринятых терминах и должны исключать всякую смысловую неоднозначность и др.);

- логическое соответствие вопросов структуре объекта опроса;

- приемлемые затраты времени на ответы по вопросам анкеты, удобное время получения вопросов и выдачи ответов;

- сохранение анонимности ответов для членов экспертной груп­пы;

- проведение коллективных обсуждений оцениваемых событий;

- предоставление экспертам требуемой информации. Для обеспечения выполнения этих условий должны быть разрабо­таны правила проведения опроса и организации работы экспертной груп­пы. Причем в них должна быть учтена специфика оцениваемых событий, а также особенности организаций, из которых приглашаются эксперты.

2.3.2.5. Формирование правил определения суммарных оценок на основе оценок отдельных экспертов

Если имеются оценки aij событий (факторов) Ci определенные каждым nj Î N экспертом, то возникает вопрос о том, каким образом могут быть получены групповые оценки событий.

В общем случае групповая оценка аi, каждого Сi события зависит от оценок экспертами этого события и степени компетентности hj экспер­тов. Степень компетентности hj эксперта учитывает его опыт и квалифи­кацию и является основной характеристикой эксперта, которая использу­ется при определении групповых оценок- Поэтому

ai = f(aij,hj) (7)

где i = 1, 2, ..., m;

j = 1, 2, …, p.

Следовательно, задание способа формирования групповых экспертных оценок состоит в определении этой функции. Причем необходимо, чтобы она была строго монотонно возрастающей по aij и hj

Этому условию удовлетворяет множество функций. Обычно полагают, что функцию (5) можно представить как

ai =

(8)

При равной компетентности экспертов эта формула принимает вид средней оценки

ai =

(9)

В зависимости от специфики экспертного опроса, объекта исследования и используемой методики обработки экспертных данных оценки аij могут иметь различную шкалу измерения: от 0 до 1, от 0 до 10 и от 0 до 100. Принципиальной разницы в данных шкалах нет, выбор той или иной из них во многом определяется удобством получения и обработки оценок, а также вкусом исследователя, проводящего экспертный опрос.

Для того чтобы учитывать различие в компетентности экспертов, им могут быть приписаны различные «веса», которые учитываются при определении групповых оценок. Причем значения этих коэффициентов интерпретируются как вероятность задания экспертом достоверной оценки. Тогда 0 < hj, <= 1. Значения весовых коэффициентов могут быть использованы при построении системы стимулирования работы группы экспертов. Например, дополнительная оплата за работу по оценке событий определится пропорционально весовому коэффициенту эксперта.

Существуют различные приемы оценки компетентности эксперта, выбор которых определяется как характером решаемой задачи, так и возможностями проведения конкретного экспертного опроса.

Оценку следует строить на основе определенной шкалы, каждый балл которой определяется с помощью выбора соответствующих характеристик, оценивающих квалификацию эксперта[10]. При этом должен быть учтен уровень квалификации эксперта в узкой области спе­циализации, уровень теоретической подготовки, его практический опыт и широта кругозора. Перечисленные характеристики лучше всего оценивать по десятибалльной шкале, разработанной специально к конкретному экс­пертному опросу. Полученные характеристики следует свести в один показатель, характеризующий объективную оценку компетентности эксперта, hjo.

Кроме того, целесообразно определить показатель относительной самооценки эксперта (субъективный показатель hсj). Этот показатель получается следующим образом: для каждого вопроса или группы вопросов, по которым считается необходимым оценить компетентность эксперта, в таблице экспертных оценок предусматривается шкала под названием «относительная самооценка эксперта». В ней эксперту предлагается проставить себе балл по десятибалльной шкале, ориентируясь, например, на следующие значения баллов:

10 – эксперт специализируется по данному вопросу, имеет по нему законченные теоретические или практические разработки (научные исследования, запущенные в производство технические разработки, данный вопрос непосредственно относится к области его узкой служебной деятельности);

8 – в практическом решении данного вопроса эксперт участвует, но этот вопрос не входит в сферу его узкой специализации;

5 – вопрос входит в сферу, тесно связанную с его узкой специализацией направления (смежная прикладная дисциплина, смежная область практической деятельности);