Экспертная оценка как метод маркетингового исследования

     При нахождении оценок экспертным путем  помимо погрешности, вносимой недостатком  информации о событиях и недостаточной  компетентностью экспертов, возможна и погрешность совсем иного рода, обусловленная заинтересованностью  экспертов в результатах оценки, что обязательно скажется на их достоверности. Наличие такого рода погрешности может значительно искажать оценки, вследствие чего необходимо предусмотреть соответствующие меры для устранения погрешности.

     Например, всегда существует опасность систематического занижения оценок, потенциального спроса со стороны сбытовиков, которые заинтересованы иметь легко выполнимый план по продажам, а в конце планового периода добиться значительного превышения плановых показателей. Отметим следующие варианты коррекции таких оценок, снижающие риск систематической погрешности:

— попросить  торговых работников самостоятельно определить степень погрешности их оценок. Эти данные можно затем использовать для уточнения прогноза;

— далее  возможно скорректировать оценки торговых работников с помощью регионального  менеджера по продажам, который может  иметь более широкий взгляд;

— возможно ввести корректирующий коэффициент, основанный на учете погрешностей в прошлых  прогнозах каждого торгового  работника.

     Одним из показателей, характеризующих пригодность  эксперта, является степень его надежности. Под степенью надежности понимается относительная частота случаев, когда он приписывал более высокую вероятность тем событиям, которые впоследствии реализовывались. На этом основании считается, что чем чаще эксперт оказывался прав, тем выше его авторитет. Однако необходимо иметь в виду, что могут существовать обстоятельства, когда эксперт, несведущий в данном вопросе, дает правильный ответ с высокой степенью вероятности. Например, на стабильных рынках можно успешно прогнозировать ситуацию на ближайшее будущее, принимая ее такой же, как и сегодня.

     Применяются как индивидуальные, так и групповые (коллективные) экспертные опросы.

     Основными целями использования индивидуальных экспертных оценок являются:

— прогнозирование  хода развития событий и явлений  в будущем, а также оценка их в  настоящем (количественная и качественная оценка вероятности реализации определенного события в будущем, прогнозирование характеристик рынка и направлений их развития, определение целей и стратегий маркетинговой деятельности, ранжирование различных объектов и т.д.);

— анализ и обобщение результатов, представленных другими экспертами;

— составление  сценариев;

— выдача заключений на работу других специалистов или организаций (рецензии, отзывы, экспертизы и т.д.).

     Отдельный эксперт в раде случаев может  быть очень полезен как источник информации и как советник для руководителей, принимающих решения.

     Даже  в том случае, если работа выполнена  одним экспертом, она может по существу обобщить мнения многих людей и дать крайне полезные исходные данные для анализа.

     К числу групповых экспертных опросов  относятся:

— открытое обсуждение поставленных вопросов с  последующим открытым или закрытым голосованием;

— закрытое обсуждение с последующим закрытым голосованием или заполнением анкет  экспертного опроса;

— свободные  высказывания без обсуждения и голосования.    Групповые экспертные оценки могут быть получены при опросе экспертов как одной специальности, так и разных. В последнем случае экспертная оценка часто носит характер деловой игры.

     Опыт  показал, что традиционные методы обсуждения поставленных перед группой экспертов вопросов, относящиеся к первому типу экспертных опросов, до достижения определенного согласия между ними или до выработки общей позиции не являются наилучшими методами использования группы экспертов. Эти методы обсуждения страдают рядом недостатков, таких, как взаимное влияние мнений экспертов и нежелание участников обсуждения отказываться от точек зрения, ранее высказанных публично. Поэтому на практике при подготовке решений по широкому кругу вопросов находят все большее распространение второй и третий типы групповых экспертных оценок.

     Второй  тип групповых экспертных оценок можно подразделить на две категории: экспертный опрос, проводимый в один тур путем одноразового заполнения анкет, и проводимый в несколько туров путем многократного заполнения анкет экспертами с целью последовательного уточнения оценок. 
 

2. Экспертные опросы, проводимые в несколько  туров 
 

     Одним из наилучших методов использования  суждений экспертов является метод  «Дельфи», предусматривающий проведение экспертного опроса в несколько  туров.

     Создатели этого метода назвали его «Дельфи» по имени древнегреческого города Дельфы, который заслужил свою известность оракулами, занимавшимися предсказанием будущего. Эти предсказания не были обычными для того времени пророчествами отдельных прорицателей. Это были предсказания, которые обнародовались лишь после тщательного обсуждения на совете дельфийских мудрецов и досконального ознакомления всех членов совета с обстоятельствами дела.

     Первоначально рассматривалось применение метода «Дельфи» только для целей повышения  качества прогнозирования. Первый эксперимент, выполненный в конце 40-х годов нашего века, относился к попытке определить лучший выигрыш на бегах по результатам ежедневных сообщений о заездах.

     Метод «Дельфи» можно назвать «кибернетическим арбитражем» — кибернетическим  потому, что процесс выработки  суждений экспертами здесь управляется  рабочей группой через обратную связь.

     В методе «Дельфи» делается попытка усовершенствовать  групповой подход к решению задачи разработки прогноза или оценки путем взаимной критики субъективных взглядов, высказываемых отдельными специалистами без непосредственных контактов между ними и при сохранении анонимности мнений или аргументации в защиту этих мнений.

     В одном из вариантов этого метода прямое обсуждение заменяется обменом  информацией и мнениями с помощью тщательно разработанных вопросников. К участникам обращаются с просьбой не только высказать свои мнения, но и привести их обоснование, а в каждом из последующих туров опроса им выдается новая и уточненная информация по высказанным мнениям, которая образуется в результате расчета совпадения точек по ранее выполненным этапам работы. Этот процесс продолжается до тех пор, пока продвижение в направлении повышения совпадения точек зрения не становится незначительным. После этого фиксируются расходящиеся точки зрения.

     Для уяснения сущности метода «Дельфи» рассмотрим пример оценки стоимости какого-либо сложного проекта, при проведении которой могут существовать различные точки зрения и суждения. Будем решать эту задачу в следующей последовательности.         Во-первых, попросим отдельно каждого эксперта дать свою оценку стоимости С, затем расположим ответы в порядке возрастания предлагаемых значений и определим квартили Q₁, М и Qз таким образом, чтобы каждый из четырех интервалов, образованных этими тремя точками на линии значений С, содержал примерно одну четвертую часть оценок. Для 11 участников это будет выглядеть следующим образом:

     Во-вторых, значения Q₁ М и Q₃ (мнение экспертной группы) сообщаем участникам опроса и в том случае, если первоначальная оценка выходит за междуквартальное значение (Q₁ — Q₃), просим пересмотреть ее, а также высказать свои соображения, почему ответ должен быть ниже (или выше) значений, определенных 75% участников первого тура.

     В-третьих, передаем результаты второго тура (которые, как правило, имеют меньшее расхождение, чем в первом туре) в обобщенной форме всем участникам опроса, включая сюда новые квартили и медиану. Кроме того, фиксируются обоснования уменьшения или увеличения значений, предложенных участникам опроса во втором туре (конечно, при их обобщении и редактировании сохраняется анонимность авторов). После этого экспертов просят рассмотреть новые оценки и их обоснования, высказать свое сомнение об их весомости и пересмотреть свою предыдущую оценку. В том случае, если пересмотренные оценки выпадают из междуквартальных значений, то автора просят кратко изложить причины его несогласия с аргументами, которые привели бы его оценку ближе к значению медианы.

     Наконец, в четвертом туре участникам опроса сообщают квартили третьего распределения  ответов и контраргументы, высказанные в третьем туре, и просят еще раз пересмотреть оценки. Медиана, получаемая в результате четвертого тура, принимается в качестве значения групповой экспертной оценки. Зачастую требуемый уровень консенсуса экспертов достигается за два тура. Метод «Дельфи» успешно применяется в маркетинге, например, при решении таких задач, как экспертное определение сметной стоимости необычных проектов, выявление множества важнейших факторов, путей решения маркетинговых проблем (например, увеличение сбыта). 
 

3. Метод коллективной  генерации идей 
 

     Метод коллективной генерации идей (по американской терминологии, метод «мозговой атаки») относится к третьему типу групповых экспертных оценок и направлен на получение большого количества идей, в том числе и от лиц, которые, обладая достаточно высокой степенью эрудиции, обычно воздерживаются от высказываний.

     При проведении экспертного опроса с помощью метода коллективной генерации идей проблема должна быть сформулирована в основных терминах с выделением центрального вопроса. Кроме того, предусматриваются отсутствие любого вида критики, препятствующей формулировке идей, свободная интерпретация идей в рамках данного вопроса, стремление к получению максимального количества идей, учитывая принцип повышения вероятности полезных предложений с увеличением общего их количества и, наконец, поощрение различных комбинаций идей и путей их усовершенствования.

     Процесс выдвижения идей протекает в определенном смысле лавинообразно: высказываемая одним из членов группы идея порождает творческую реакцию у других. Исследования эффективности метода коллективной генерации идей показали, что групповое мышление производит на 70% больше ценных новых идей, чем сумма индивидуальных мышлений. Наиболее продуктивными признаны группы в 10—15 человек, хотя имеются примеры использования и более многочисленных групп — до 200 человек.

     Так как результаты этого метода представляют не совокупность несвязанных высказываний, а систему идей, ни одно предложение не персонифицируется. Результаты обсуждения считаются плодом коллективного труда всей группы. Это вполне закономерно. Ведь любая идея, высказанная в данный момент одним из участников опроса, могла уже ранее «мысленно принадлежать» его коллеге, ожидающему слова. Кроме того, конкретное предложение может быть прямо подсказано идеей, поданной кем-то несколькими минутами раньше. Принимая во внимание указанный аспект, на рассмотрение не рекомендуется выносить проблемы, затрагивающие чей-либо приоритет в рассматриваемой области.

     С помощью метода коллективной генерации  идей можно успешно решать многие задачи маркетинговых исследований, например:

— определение  возможных путей развития прогнозируемого процесса или объекта, один из которых оптимальный; при решении подобных задач данный метод применяется с целью определения полного набора возможных путей развития;

— определение  наиболее широкого круга применяемых  методов, если решение проблемы требует  параллельного или последовательного  использования ряда разнообразных  методов;

— выявление  круга факторов, которые необходимо принимать во внимание, определяя  окончательный вариант решения  задачи.

     К числу важнейших недостатков  метода коллективной генерации идей относятся значительный уровень  информационного шума, создаваемого тривиальными идеями, спонтанный и стихийный характер генерации идей.

     Принципы  метода коллективной генерации идей явно просматриваются в «пятиминутках» и «оперативках». 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

ЗАКЛЮЧЕНИЕ