<< Пред. стр. 11 (из 15) След. >>
где: x1 и x2 - средние для двух выборок;и - средние квадратические отклонения;
n1 и n2 - объемы первой и второй выборки
Приведенные примеры точечных оценок демонстрируют основные подходы к общеизвестным расчетам в маркетинге. Их достоверность для многих задач недостаточна. В методических материалах обычно подчеркивается, что суть маркетинговых задач такова, что они в принципе малодоступны моделированию, все решения эмоционально-качественные, а количественные оценки фрагментарны и ориентировочны. У многих маркетологов доминируют в работе опыт и интуиция, т.е. эвристические методы. Особенно часто используются методы экспертных оценок.
7.4. Экспертные оценки
Экспертные оценки используют в двух вариантах: количественном и качественном.
Примером традиционных эвристических процедур являются экспертизы, консилиумы, совещания и т.п. Их алгоритмы обычно следуют из традиций. Итоги их работы подводятся в качественной форме. Часть задач, типа формирования маркетинговой стратегии, несомненно решаются в качественной форме.
Количественные методы нередко подвергаются критике. Общий смысл критических замечаний иллюстрируется высказыванием классика: ''Если выразить математически глупость, то получится глупость, но еще большая ''.
Корректность моделирования - необходимое условие для всех методов, безотносительно к маркетингу, и адекватность модели непременно подлежит проверке.
Выбор методов экспертных оценок диктуется необходимостью, поскольку их используют, когда нет других, более достоверных источников информации для принятия решений. Предполагается, что опыт эксперта является преобразованной информацией, первичные источники которой недоступны. Преобразование информации, накопленной ранее экспертами, по методике, обеспечивающей селекцию наиболее близкого к истине или оптимуму результата, является целевой функцией экспертных оценок.
Обычно в качестве экспертов маркетологи выбирают менеджеров и работников сбытовых подразделений. Статистические данные недоступны, особенно о фирмах-конкурентах, и эксперты используют оценки качественные: ''ниже'', на ''прекрасном уровне'' и т.п.
Главный недостаток всех экспертных оценок - их недоступность проверкам достоверности. Гипотеза об извечной правоте большинства, далеко не всегда срабатывает. Бывало, что все эксперты были за анафему генетике и кибернетике.
Экспертов тщательно отбирают в соответствии со спецификой рассматриваемых вопросов. Достоверность оценок проверяют в тех задачах, которые содержат оперативно осуществляющиеся события, ранее прогнозируемые экспертами. Ошибки прогнозирования классифицируются для последующих оценок. При наличии, в частности, систематических погрешностей, вводят корректирующий коэффициент.
Одним из показателей, характеризующих эксперта, является его надежность. Оценивается частота случаев, когда он делал верный прогноз.
Группа экспертов организуется в очной или заочной формах. В очной форме работа экспертов проходит как деловая игра. В заочной форме эксперт заполняет анкету.
1. Выбор численности группы экспертов.
Выбирают число экспертов, исходя из следующих соображений. Если искомое число уменьшать, то оценки становятся субъективными, так что теряется смысл группы. При чрезмерном числе, достоверность меняется несущественно, но растет доля малоквалифицированных оценок. Группа превращается в толпу. Учитывается также число оцениваемых событий. Стремятся к равному числу экспертов по каждому событию.
2. Формирование вопросов и составление анкет.
Работа экспертов регламентируется общими правилами:
- независимость мнения каждого эксперта;
- удобство работы с анкетой;
- удовлетворительное для экспертов время для ответов и уровень сложности;
- анонимность ответов для членов группы;
- коллективное обсуждение оцениваемых событий;
- представление экспертам нужной информации.
Экспертам предлагается шкала оценок: от 0 до 1 или от 0 до 10. Необходимо учитывать, что рост числа баллов вовсе не увеличивает точность оценок для сложных объектов. Иллюстрацией этому являются оценки членов комиссии на защите дипломных проектов. Оценки всегда различаются на один или даже два балла. Фактически действует четырех бальная система, причем погрешности оценок перекрывают всю шкалу. Увеличение числа баллов в такой ситуации бессмысленно - оценки будут напоминать генератор случайных чисел.
Для субъективной оценки неизмеримых признаков наиболее рациональна - пятибалльная оценка. Учитывают естественную неточность субъективных оценок и школьную привычку к пяти баллам. Для особо нешкалируемых объектов, три балла, выраженных в градациях ''за'' , ''против'', ''ни то, ни сё''.
Расчеты упрощаются, если признается равная квалификация экспертов, в этом случае оценки можно суммировать:
,
где: p - число экспертов;
ai - оценки.
Во многих методиках введены степени компетентности экспертов. Ситуация напоминает акционерное собрание - вклад в решение определяется числом акций у каждого участника. Массы бедных акционеров попросту не участвуют в собраниях, не видя смысла в своих голосах. И эксперты в группе не должны быть слишком разными по опыту.
Научно-технические семинары гораздо демократичнее - все голоса равны: и маститого академика, и молодого специалиста.
Самая главная в стране группа - это Государственная Дума. Там у депутатов равные голоса и неизвестны идеи насчет селекции депутатов по степени компетентности. Хотя что-то в этом есть.
Оценивают экспертов по десятибалльной шкале - это уровень теоретической подготовки, практический опыт, кругозор - hj.
Кто именно оценивает экспертов, обычно не уточняется, возможно, есть высшая инстанция как в судах.
Кроме того, сами эксперты самооцениваются - это субъективный показатель hi.
По этой оценке эксперт сам себе ставит баллы:
10 - специализация по данному вопросу, наличие законченных разработок - научные или практические, совпадение со служебной работой;
8 - в практических работах по теме участвует, но с узкой специализацией не совпадает;
5 - смежная область деятельности;
3 - знакомство с вопросом только по литературе.
Итак предполагается, что отсутствие специалиста, имеющего достаточный опыт и знания по рассматриваемому вопросу, компенсируется тремя читателями специальной литературы.
Все баллы делят на сто, после чего 0? hj?1 трактуется как вероятность достоверной оценки экспертов.
Иногда применяют оценки экспертами друг друга. В отличие от кумушек у подъездов они выставляет баллы.
Считается, что наличие нескольких ''оценщиков'' повышает достоверность оценки.
На первом этапе с экспертами обсуждается индивидуально модель объекта, её показатели, уточняются формулировки и терминология в анкетах, форма таблиц с экспертными оценками и состав группы.
На втором этапе экспертам направляются анкеты с пояснительным письмом, в котором приведены цели работы, структура анкет и порядок их заполнения с примерами.
При возможности личного контакта экспертов возможны устные обсуждения всех вопросов. Однако самостоятельное заполнение анкет обязательно при соблюдении всех правил анкетирования. На третьем этапе производится сбор анкет, обработка данных и анализ полученных результатов. Наличие неких рангов для экспертов, очевидно, повышает достоверность оценок в некоторых задачах. Однако нужно учесть, что эксперты, отнесенные к ''низким'' кастам могут не воспринимать всерьёз заполнение таблиц, смысл группы исчезает.
Можно вообразить выборы, скажем, мэра, в которых пенсионер с уровнем 0,1, а политолог с 1. Мэр, возможно, найдется самый удачный, но основная часть избирателей не пойдет на выборы.
Важно уточнить особенности субъективных оценок в качестве измерительного средства. Это средство неточное, например, ±20%, как уже отмечалось. Но оно может быть чувствительным, если проявляется при сравнении идентичных объектов. Сравнивая, к примеру, два утюга, эксперт может уловить самое малое преимущество одного, но баллы одному утюгу содержат неизбежные, значительные погрешности.
7.5. Обработка экспертных оценок
1. Составляется таблица рангов важности.
В столбцах оцениваемое события Сi.
В строках выставленные оценки каждым экспертом. Наибольшая оценка соответствует первому рангу важности и т.д.
Таблица 18. Ранги важности
События Ci 1 2 3 Оценки
экспертов
Эксперт j=1 0,5 0,2 0,3 Эксперт j=2 0,3 0,6 0,1 Ранг
важности Эксперт j=1 1 3 2 Эксперт j=1 2 1 3 Суммарный ранг важности 3 4 5
Далее рассчитывается коэффициент конкордации W, алгоритм расчета демонстрируется примером. Пусть было десять событий m = 10 оцениваемых тремя экспертами: N, Q, R.
В 1, 2 и 3 строках - оценки, выставленные экспертом каждому событию.
4 строка - сумма значений в столбце, т.е. оценок всех экспертов. Все значения в четвертой строке суммируются и сумма делится на число событий, здесь на 10 = A.
Таблица 19. Расчёт коэффициента конкордации.
№ Эксперты Оценка 1 N 1 4,5 2 4,5 3 7 6 9 7,5 10 2 Q 2,5 1 2,5 4,5 4,5 8 9 6,5 10 6,5 3 R 2 1 4,5 4,5 4,5 4,5 8 8 8 10 4 5,52 6,5 9 13,5 12 20 23 23,5 25,5 26,5 A=16,6 5 -11 -10 -7,5 -3 -4,5 3,5 6,5 7 9 10 6 ?2 121 10 56,25 9 20,25 12,25 42,25 49 81 100 ??2=
Sv=591
5 строка - из значения в 4 строке вычитается величина А, т.е. среднее значение.
6 строка - значения из 5 строки в квадрате.
Значения 6 строки суммируется:
W=0,828
При анализе учитывается, что W приближается к нулю, если нет согласования в оценках и наоборот при W ? 1 эксперты демонстрируют полное согласие. Принято считать нормой W ? 0,5, когда наличие согласованности заметно, но нет оснований подозревать экспертов в сговоре. Норма W от 0,5 до 0,8.
7.6. Анализ экспертных оценок
Последующая обработка таблиц с экспертными оценками, приводится во многих учебных пособиях и теоретических источниках, как правило, в сопровождении пространных и сложных вычислений. Для практических задач сложные расчеты, обычно, избыточны, поскольку привносят риск ошибочной трактовки результатов. Выводы по таблице с экспертными оценками, могут быть корректными без длинных формул.
Упрощения можно начать с коэффициента конкордации, заменив его мерами погрешностей экспертных оценок.
Для определения погрешностей экспертных оценок рационально ввести побольше градаций по заданному событию - не менее 10. Задача эксперта - назвать самый привлекательный для покупателей товар и самую приемлемую цену. В дальнейшем, нужно, провести опрос покупателей по аналогичной тематике и найти разности.
Расчет коэффициента коркордации, равно как и формальные оценки для экспертов непременно вводятся в отчеты, поскольку являются убедительным для заказчиков подтверждением компетентности и добросовестности авторов. Между тем в изложенных расчетах накоплены методические погрешности, для многих задач чрезмерные.
Прежде всего, оценка компетентности экспертов, это тема вовсе не совпадающая с целями исследований. На достоверность оценок экспертов влияет ряд факторов, среди которых компетентность может не доминировать. Коэффициент конкордации не имеет связи с погрешностями оценок, им пользуются интуитивно, без объективного обоснования.
Для объективного контроля экспертных оценок необходимы данные о погрешностях, достаточные для эмпирической функции распределения. Функция распределения погрешностей экспертных оценок строится аналогично всем прочим, определяющим точность, и доступна расчетам с заданной достоверностью.
Оценки экспертов признаются равноценными во всех операциях их совместной обработки. В качестве исходной принимается "презумпция невиновности" эксперта в ошибке. Погрешности экспертных оценок определяются в основном при наличии количественных признаков, которые можно предъявить экспертам в форме вопросов, а затем точно определить. Такие вопросы можно рассматривать в качестве образцовых мер. При отсутствии таковых недоступна определению систематическая погрешность экспертных оценок. Случайная погрешность определима без образцовой меры. Необходимым условием является численная оценка с числом градаций не менее 10.
Каждая градация должна быть статистически значимой. Если к примеру 20 экспертов ставит десятибалльные оценки так, что баллы от 1 до 7 не используются вовсе, придется признать их оценки трехбалльными - 8, 9, 10. Затем ввести десятичные доли, как у гимнастов и повторить оценки. Требуется не менее четырех градаций, используемых экспертами, не реже, чем дважды для 20 оценок каждая.
При наличии значительного размаха в оценках, с доминированием экстремальных значений, надо уменьшить число градаций, обеспечивая статистическую значимость центра группирования погрешностей.
Оцениваемый экспертами признак должен быть доступен проверке, насколько это возможно. К примеру, оценки качества товаров по ряду признаков могут включать объемы продаж, уровни дефектности, цены и т.п. числа, прогнозируемые экспертами и определяемые в дальнейшем по фактическим данным. Все экспертные оценки вносятся на вероятностный график.
Самой типичной темой для экспертных оценок являются цена нового товара, планируемого для ввода на местный рынок, и объем продаж на неделю. Смысл оценок конкретизируется, к примеру, цена удовлетворяет не менее чем 10% потенциальных покупателей, а условия продаж приравниваются к некоторому товару, который есть в магазинах. Оценки экспертов представлены на рис.53.
После пробных продаж выяснилось, что цена нового товара, при которой не менее 10% потенциальных покупателей приобретают товар, составляет СФ = 1700 руб. Таким образом, систематическая погрешность экспертов составила +100 руб., а ? - средняя квадратическая ошибка 200 руб.
Метрологическая аксиома - ошибка измерений, определяемая с образцовой мерой, определяет ошибки измерений всех выборок из исследуемой совокупности. В данном случае вводится допущение, что если среднее квадратическое отклонение ?ф у избранного признака составляет 0,2 размаха, то все прочие признаки определяются с той же погрешностью. Предполагается также, что шкалы для всех признаков, включая качественные, выбраны корректно в равной степени, так что систематические погрешности идентичны у измерений, независимо от признака.
Рис. 53. Вероятностный график экспертных оценок
В отличие от измерительных средств, эксперты доступны замене в произвольной последовательности. При известных погрешностях измерений доступны объективной оценке вклады экспертов в ошибку. Здесь отклонения от аппроксимирующей прямой F(x) рассматриваются как промахи. Если некий эксперт допускает промахи неоднократно, то его полезно исключить, несмотря на его, возможно, высокую компетентность. Столь же нежелательная альтернативная ситуация когда несколько экспертов дают одинаковые оценки многократно. Повторяющиеся оценки наиболее правдоподобные, являются основанием для комплектования будущей группы экспертов.
7.7. Методы сбора данных в маркетинговых исследованиях
Информационное обеспечение маркетинговых исследований включает в себя сбор данных по методам, классификация которых приведена на следующем рисунке (рис. 54).
Каждый метод сбора данных имеет свои преимущества и недостатки. Самые общие из них преимущества по скорости и цене у коммуникаций, а также по объективности и точности у наблюдений.
Недостатками коммуникаций являются субъективные факторы, а наблюдений - ограниченный состав доступных объектов.
В каждой конкретной ситуации требуется выбор наиболее эффективных правил и средств сбора данных.
Рис. 54. Методы сбора данных.
7.7.1. Наблюдение
Методы наблюдений отличаются от всех прочих невмешательством исполнителя в исследуемый процесс.
Различают четыре основных подхода к организации наблюдений:
- прямое наблюдение адресуется непосредственно к объекту, скажем покупателям или клиентам, апробирующим товар;
- косвенное наблюдение ориентировано на следствия исследуемого процесса, к примеру по упаковкам, накопленным на свалке, судят об объемах продаж разных фирм;
- открытое наблюдение предусматривает предупреждение людей о работе наблюдателей;
- скрытое наблюдение предполагает неведение наблюдаемых лиц о наличии пристального внимания к ним;
- структурированное наблюдение проводится по плану, который определяет, что именно и как наблюдать с оформлением специального места наблюдений и обработкой данных;
- неструктурированное наблюдение фиксирует в исследуемой ситуации все встречающиеся эпизоды, включая непредсказуемые.
Наблюдения могут быть полевыми или лабораторными. Проводятся наблюдения человеком или приборами с автоматической регистрацией данных. Приборы, как правило, более точны и объективны. К примеру, специальные устройства в телевизоре регистрируют время и номер канала включаемых передач, что для наблюдателей слишком сложно. Однако состав таких приборов на сегодня ограничен.
Результаты наблюдений фиксируются в блокнотах, на специальных бланках, посредством аудио и видеотехники и т.п.
7.7.2. Панельные наблюдения
Панель - постоянный предмет исследования, подвергаемый периодическим повторяющимися наблюдениями. Членами панели могут быть покупатели, семьи, организации и т.д.
Все виды панелей делятся на:
- краткосрочные (менее года) и долгосрочные;
- непосредственные и периодические, для сбора информации в заданном ритме;
- потребительские, состоящие из семей или покупателей;
- торговые, состоящие из торговых организаций;
- экспертные, из специалистов по данной проблеме.
В ходе проведения панельных наблюдений:
- выявляют доминирующие факторы и их динамику;
- определяют тенденцию в изменениях общественного восприятия товаров;
- изучают мотивы покупок и прогнозируют спрос.
7.7.3. Эксперимент
Экспериментальные исследования определяют причинно-следственные связи между независимыми переменными, к примеру, погодой, днем недели, адресом и зависимыми параметрами - число покупателей, объемом реализации, состав сделок и т.п.
Условия эксперимента планируется заранее и контролируется.
Эксперимент может быть пассивным и активным.
Пассивный эксперимент проходит при условиях, не зависящих от воли оператора.
Активный эксперимент - формируется экспериментатором. Все существенные условия эксперимента устанавливаются и поддерживаются в соответствии с планом эксперимента.
Эксперименты классифицируются:
- изменение признаков одной группы до и после воздействия фактора, например, рекламы на покупателей;
- изменение признаков у экспериментальной и контрольной групп после воздействия фактора;
- исследование контрольной и экспериментальной групп до и после воздействия фактора, либо процессе воздействия.
Именно последний вариант является самым корректным.
В рекламе нередко упоминаются эксперименты в качестве обоснования, неких снадобий.
Некая единица избавилась от болезней или стала невесомой, приняв "эликсир". Остается за кадром сколько единиц приняло участие в эксперименте, что случилось с остальными: худели они, полнели, обретали побочные эффекты, была ли группа с плацебо. Получается не эксперимент, а рекламный трюк.
7.7.4. Опрос
Опросы являются основными инструментами маркетологов, применяются в 90% исследований.
Опросы могут быть в письменной и устной формах.
Устные опросы называют интервью.
Спрашивает интервьюер отвечает респондент. Респондентами могут быть прохожие, посетители, продавцы и т.п.
При письменном опросе респонденты получают опросные листы, предназначенные для передачи (пересылки) интервьюеру.
При устном опросе ответы фиксируются интервьюером в заданной форме.
Аккумулируют информацию тремя способами:
- вопросы задает интервьюер;
- респонденты сами заполняют опросные листы;
- респонденты работают с компьютерами.
Первый способ обеспечивает обратную связь с респондентами и доверительные отношения с ними.
Второй способ отличается отсутствие влияния интервьюера и комфортными условиями для респондента.
Третий способ реализуется с наибольшей скоростью, доступностью видеоматериалов, совмещенных с вопросами, исключение ошибок интервьюера и т.п.
Методы сбора данных при опросе:
1. Интервью на дому у респондента. Самые доверительные отношения при получении данных, длительные беседы. Это самый дорогой вариант.
2. Интервью посетителей крупных магазинов. Метод относительно дешев, однако есть риск легкомысленного восприятия вопросов.
3. Интервью в офисах. Применяют для продукции предприятий, обычно с участием высококвалифицированных интервьюеров и демонстрациями товаров.
4. Телефонное интервью. Относительна малая стоимость и охват большого числа респондентов, но проблематичен контроль.
5. Телефонные интервью с параллельно работающих телефонов, к которым подключается контролер.
6. Телефонные интервью посредством компьютера. Автоматически набирается номер, на мониторе появляется очередной вопрос. Бывают полностью автоматизированный опрос. Ответы респондента вводятся с его телефона или его компьютера.
7. Групповое самостоятельное заполнение анкет используется для снижения затрат. Группа смотрит рекламный ролик и заполняет свои анкеты в присутствии интервьюера.
8. Самостоятельное заполнение анкет. Анкеты оставляют у респондентов а через некоторое время забирают. Это для тех, чье перемещение ограничено на период опроса.
9. Обследование на почте. Удобно респондентам, но чрезмерно низкий процент ответов ? 5%, что делает этот метод дорогостоящим.
Качество собранных данных зависит от многих факторов, среди которых доминирует характеристики респондентов. Основными особенностями опрашиваемых лиц принято считать:
1. Степень охвата, определяется процентом респондентов, обладающих необходимыми свойствами, среди опрашиваемых лиц. К примеру, число пользователей видеокамер среди посетителей магазина, в котором проводится опрос.
2. Желание принять участие в опросе определяет долю респондентов, отказывающихся отвечать на вопросы. Основными причинами отказов является подозрительность или нежелание освещать личную жизнь, либо особенностями вопросов, затрагивающих нежелательные темы.
3. Возможность принятия участия в обследовании оценивает доступность для респондентов контракта с интервьюером (командировка, забывчивость, болезнь и т.п.).
4. Степень различия респондентов характеризует меру, в которой ожидаемая в итогах опроса информация распределилась между респондентами - от ключевой до ничтожной.
5. Объем и уровень сложности информации, запрашиваемые у респондентов, существенно влияют на долю респондентов, отвечающих на все вопросы респондентов, отвечающих на все вопросы квалифицированно, а также на длительность и на материальное оснащение опроса. Телефонные интервью самые короткие, а личные наиболее длительные. Наиболее сложные опросы затрагивают морально-этические аспекты, а самыми оснащенными являются компьютерные интервью в офисах.
7.7.5. Измерения в маркетинговых исследованиях
В общем случае под измерением понимается определение количественной меры или плотности некоего свойства, изучаемого исследователем.
Изучаемые свойства существенно различаются по доступности измерениям. Доступнее измерениям объективные характеристики - возраст, вес, доход и т.п. Менее доступные субъективные свойства - вкусы, привычки, отношения и т.п. "Неизмеримые" характеристики респондент переводит на шкалу плотности, которую необходимо разработать исследователю.
Известны четыре типа шкал:
1. Описание. Отличается единственным опознавателем (дескриптором) для каждой градации шкалы. Градации взаимонезависимы, для каждой предусматривается альтернативные ответы "да", "нет". К примеру, марка, адрес, форма.
2. Порядок. Определяет относительный размер: больше, чем; меньше, чем; равен. К примеру, предпочтение одного цвета перед другим.
3. Расстояние. Определяет абсолютное расстояние между дескрипторами. К примеру, ранжирование признака, по которому делается выбор с оценкой весовых коэффициентов по каждой позиции.
4. Начальная точка. Отличает шкалы, имеющие единственное начало отсчета. Например, возраст имеет начало отсчета а отсутствие мнения об уровне помех не является нулевым уровнем покупательской позиции.
Таблица 20. Характеристики шкал.
Уровень
Измерений Характеристики шкал описание порядок расстояние начальная точка Шкала наименований ? Шкала порядка ? ? Интервальная шкала ? ? ? Шкала отношений ? ? ? ? Каждая последующая характеристика шкалы строится по предыдущей, так что "описание" является наиболее базовой характеристикой, присущей любой шкале.
Если шкала имеет "расстояние" то она обладает также "порядком" и "описанием".
Применяется четыре уровня измерения, определяющие тип шкалы: наименований, порядка, интервальный и отношений.
Шкала наименований содержит только описание; объект представлен названием, без количественных характеристик. Оценки для этой шкалы возможны типа "согласен" и "не согласен".
Шкала порядка ранжирует ответы респондентов. Она имеет свойства шкалы наименований (номиналов) в сочетании с отношениями порядка. Если каждую пару категорий шкалы наименований удается упорядочить относительно друг друга то получается порядковая шкала. Чтобы отличить шкальные оценки от обычных чисел, их называют рангами.
Интервальная шкала обладает характеристикой расстояния между градациями шкалы, измеряемого посредством некоторой единицы измерений. На этой шкале разности между градациями имеют однозначный смысл, т.е. определимо равенство некоторых интервалов или который из них больше другого. Шкальные оценки можно складывать. Шкала может быть равномерной, т.е. равные интервалы имеют равные значения измеряемого признака.
Шкала отношений является единственной шкалой, имеющей нулевую точку, так что полученные результаты доступны количественному сравнению. Например, шумы в канале один превышает вдвое уровень в канале два.
Применительно к статистическим данным шкала наименований вводится для внесения статистических мер, соответствующих избранной гипотезе или внесения очередной реализации в некоторый интервал.
На шкале порядка используют коэффициенты ранговой корреляции, определяют квантили и т.п.
Интервальная шкала предназначена для преобразований, в частности, ее можно описать или растянуть, а также сдвинуть. Рассчитываются статистические меры, оцениваются доверительные интервалы.
Шкала отношений используется в прогнозирующих расчетах, при оценках точности и надежности.
Полученные результаты можно всегда перевести в более простую шкалу, но никогда наоборот.
Ниже приведены примеры вопросов, заданных в разных шкалах измерений, помогающие ощутить разницу в построении и оформлении.
Шкала наименований
Укажите марки электронной продукции, которые вы предпочитаете "да" или "нет"
- Сони;
- Панасоник;
- Филипс;
- прочие. Шкала порядка Проранжируйте, пожалуйста фирмы, производящие электронную аппаратуру и укажите место, которое занимает фирма в Ваших предпочтениях:
- Сони - 1;
- Панасоник - 2;
- Филипс - 3;
- прочие.
Шкала интервалов Проранжируйте, пожалуйста, название фирмы по уровню надежности выпускаемых ими электронной аппаратуры:
очень низкая очень высокая
Сони 1 2 3 4 5 6 7 8 9
Панасоник 1 2 3 4 5 6 7 8 9
Филипс 1 2 3 4 5 6 7 8 9
Шкала отношений Укажите, пожалуйста, приблизительно сумму, затраченную Вами на продукцию фирм, руб.
до 102 до 103 до 104 до 105
Панасоник
Филипс
Сони
7.7.6. Эксперимент
Экспериментом в маркетинговых исследованиях называют измерения зависимых параметров при контроле и регулировании независимых параметров при условиях, организации и техническом оснащении, регламентирующих действия источников погрешностей. Условия, организация, техническое оснащение и погрешности экспериментов прогнозируются при планировании эксперимента.
Применяются эксперименты двух типов: лабораторные и полевые:
- эксперименты в искусственных условиях, исключающих воздействие побочных факторов;
- эксперименты в реальных условиях. Часть таких экспериментов называют "пробный маркетинг" и "тестирование рынка".
В лабораторных условиях целесообразно изучать особенности реакции покупателей на составляющие части рекламы, дизайна, сервиса и т.п. К примеру, фрагменты рекламы, оставшиеся в памяти, реакцию на форму или размещение кнопок и т.п.
Тестирование рынка классифицирует на стандартное, контролируемое, электронное имитационное.
Стандартное тестирование включает в себя испытания товаров в обычных каналах сбыта, используемых конкретной фирмой. Для реализации требуется значительные затраты времени и средств. Основанием этих затрат является обострение конкуренции, необходимость модернизации маркетинговой стратегии. Апробация установочной партии товара, инновация в сервисе, в рекламе и т.п.
Контролируемое тестирование рынка проводится специализированными фирмами, которые заключают договоры с дистрибьюторами, избранными для эксперимента. Аналогия каналов, выбранных при планировании, может быть гипотезой, не соответствующей реальности.
Электронное тестирование отличается наличием идентификационных карточек, вручаемых участникам потребительской панели для предъявления при покупке товара. По карточкам автоматически фиксируется ситуация с покупками а заодно основные сведения о покупателях. Наименьшие затраты времени и средств.
Имитационное тестирование предполагает использование ограниченного объема данных о реакции потребителей в соответствии с избранной моделью. Стоимость оказывается 5-10% от стандартного тестирования. Достоверность зависит от гипотез, заложенных при выборе модели. В модели имитируются группы покупателей на базе предположений о вероятностях покупок.
Разработка форм для сбора данных в маркетинговых исследованиях принято, в соответствии с общенаучной практикой, вносить данные в специальные формы. Разработка этих форм является задачей, сложность которой возрастает для трудноизмеримых объектов. Наиболее сложны формы для данных о физических лицах, в частности, анкеты (вопросники).
Анкета, т.е. бланк для записи данных о респонденте рассматривается сегодня как продукт творческой работы исследователя, малодоступной формализации. Процесс разработки анкеты может быть необходимой составной частью работ по созданию программного продукта для задач, ранее недоступных для компьютерных решений.
Рис. 55. Этапы разработки анкеты
Этап 1. Предполагается, что исследователь обладает достаточными знаниями по теме для формирования гипотез о направлении работы. Эти гипотезы будут определять характер анкеты, т.е. как и от кого требуется собрать информацию и какие взаимосвязи надо изучить. Первоначально составляется макет таблицы для сбора информации. Вносятся данные, полученные путем опроса нескольких экспертов. Уточняются исходные гипотезы по критериям необходимости и достаточности данных для решения задачи исследования. Анализируются риски - избыточности вопросов с повышенным уровнем отказов отвечать, а также недостаточности вопросов с низкой эффективностью опроса.
Этап 2. От особенностей информации зависит вид анкеты и метод проведения опроса. Определяется степень стандартизации и открытости анкеты, а также используемые средства - лично, по телефону или почте. Выбор зависит от заданной достоверности и планируемых затрат времени и средств.
Этап 3. Содержание вопросов. Каждый потенциальный вопрос оценивается, является ли он необходимым. Если очевидно, что без этого вопроса в исследовании будет невосполнимый пробел, то рассматриваются варианты ввода нескольких вопросов, упрощающих и уточняющих ответы. К примеру, вопрос о выборе "Сони" может делиться на сравнения по престижу, по надежности, по дизайну и т.п.
Каждый вопрос проверяется на предмет наличия информации у респондента, необходимой для ответа. Нередки ответы респондентов на вопросы, о которых они имеют смутное представление. Для проверки воображаемой компетентности респондента в анкетах встречаются вопросы о несуществующих реально ситуациях, причем наблюдается значительная часть положительных ответов.
В сомнительных случаях предшествует сложному вопросу "фильтрующий", типа "У Вас есть мнение о ...". В 20-25% случаев следуют ответы "не знаю".
Необходимо учитывать два фактора, влияющие на достоверность ответа:
- ошибка преувеличения, т.е. склонность помнить события так, будто оно произошло значительно позднее, чем на самом деле, или было более значимым;
- потеря воспоминания, т.е. склонность забывать событие целиком, если оно не оставило ощутимый след. С течением времени воспоминания слабеют и преувеличения становятся реже;
- откровенность респондента. Далеко не всю информацию, которой располагает респондент можно найти в его ответах. Некоторые люди более откровенны, другие склонны к секретности: обоснованной, либо проистекающей из мира эмоций. Некоторые вопросы вызывают неудовольствие респондента, исключая сотрудничество по оставшейся части анкеты. Если "опасные" вопросы не удается избежать, то надо сделать попытку подойти к ним косвенно.
Деликатные вопросы стремятся перенести к финишу опроса, а вначале располагать те, которые "разогревают" респондента, способствуют доверию. Кроме того, учитывают рост откровенности при обсуждении других людей, к примеру, легче назвать доходы соседей и друзей, чем собственные. Среднее от соседских доходов может правдоподобнее определять финансы респондента, чем его прямая оценка. Обычно называют точно самые скромные доходы, скажем пенсию, а те, кто побогаче, непременно "скромнее".
Многим неприятен вопрос о возрасте, не всегда кстати вопрос о поле. Поэтому вводятся возрастные категории, скажем от 60+ до 20- и предпочтительные для респондента формы обращения: госпо(дин)жа или просто мужчина (женщина). Лишнее зачеркнуть.
Иногда используется модель случайного ответа, в которой респонденту достаются вопросы, которые интервьюер не знает и ответы не в состоянии прочесть. Часть вопросов является сугубо деликатной, скажем о стремлении обмануть партнера, а другая часть невинна. Номера вопросов задаются генератором случайных чисел. При обработке выявляются искомые взаимосвязи.
Этап 4. Форма ответа на каждый вопрос, может быть произвольной - для открытого вопроса или с ограниченным числом вариантов ответа, с двумя вариантами, с применением шкалы. Открытый вопрос с произвольным ответом типа "Почему вы купили ТВ Горизонт" отставляют свободу выбора за респондентом, не навязывает ему авторскую позицию. Кроме того, дает возможность проникнуть в мир респондента, ответить неизвестные исследователю аспекты задачи. Обычно открытые вопросы ставят в начале анкеты.
Закрытый вопрос предполагает многовариантные ответы. Под формулировкой вопроса размещаются варианты ответа, среди которых респондент ищет наиболее подходящий и отмечает его крестиком, точкой и т.п.
Число вариантов ограничено, обычно ? 10. Процесс опроса упрощается и для респондента и для интервьюера. Не надо мучительно придумывать свою версию ответа и анкеты доступны математической обработке.
К примеру, покупатель "Горизонта" выбирает ответы: "самый дешевый", "патриотизм", "ремонтопригодность, гарантия дольше", "картинка лучше", "прочее". Здесь респондент принуждается выбрать одну из позиций, запланированных исследователем, причем его отношение к сумме этих позиций остается "за кадром". Ему может быть неинтересен или неизвестен любой ответ на вопрос или есть другое мнение. Часть исследователей вводят вариант "не знаю", а другие считают, что в нем может проявиться лень респондента, т.е. данные "не в тему". Затруднения с ответами являются поводом для фильтрующих вопросов.
Необходимо учитывать шанс порядкового искажения. Порядок следования ответов существенно влияет на выбор респондента, явное предпочтение тем, что вначале. Особо важен порядок при телефонном опросе, поэтому рационально переставлять ответы случайным образом.
Дихотомический вопрос предполагает два ответа "да" и "нет".
Этот вопрос можно преобразовать в многовариантный и наоборот. При последующей обработке альтернативные ответы проще других. Однако порядок следования ответов и здесь проявляется, поэтому половину опроса проводят с одним порядком ответов, а другую с обратным.
Шкалы. Многовариантные вопросы с ответами типа "много", "мало", "ничего" снабжаются шкалами. Удобство шкал заключается в доступности для респондентов внести нюансы в оценки внутри интервала и, кроме того, возможности предложить несколько шкал для сопоставляемых объектов с одинаковым масштабом представленным в начале анкеты. Респондент, ознакомившийся с инструкцией для всех последующих ответов сравнительно легко и быстро заполняет анкету.
Формулировка вопроса.
От формулировки вопроса зависит риск "состояния не ответа" когда респондент не желает или не в силах отвечать после ответа на предыдущие вопросы.
Кроме того, может быть недостаточная точность оценки, когда запись отличается от действительного восприятия ответов респондентом. Среди источников недоразумений с ответами основным является уровень образования, несопоставимый у респондентов и автора вопросов. Поэтому во-первых надо использовать простые слова. И неясностей или двусмысленностей не должно быть.
Примерами непредсказуемости ответов могут быть разночтения слов "иногда", "часто" воспринимаемые, как ежедневно или ежегодно. "Вы" могут относить к себе лично и к коллективу или нации. Негативно относятся респонденты к экстремальным оценкам, вроде "все", "никогда", "всегда", "никто" и т.п.
Наводящие вопросы. Если вопросы задают направление ответов, их называют наводящими. Такие вопросы смещают ответы респондентов, что приводит к систематической погрешности оценок.
Вопросы не должны содержать скрытых альтернатив или допущений. Альтернативные ответ, который не содержится в составных частях вопроса, называют скрытой альтернативой. Когда вопрос сформулирован так, что он порождает разные ответы от разных респондентов, допускающих различные последствия, то он содержит скрытое допущение. Кроме того, вопрос может быть двухканальным, т.е. ориентированным на два ответа, что затрудняет ответ.
Этап 5. Определение последовательности вопросов. Сформулированные вопросы надо расставить так, чтобы получить единую анкету. Порядок следования вопросов имеет принципиальное значение.
Самые простые и интересные вопросы являются первоочередными. Они должны показать респонденту, что его мнение очень интересует кого-то, а это так приятно.
Туннельный подход. Один из подходов к выбору последовательности вопросов называют воронкообразным, поскольку начинается с широко охвата и постепенно сужается к конкретной теме. Содержание вопросов плавно перетекает от одного к другому.
Разветвленный вопрос отсылает респондента к разным участкам анкеты в зависимости от его реакции на текущий вопрос. К примеру, после вопроса о наличии видеокамеры переходят к сюжетам съемок, либо к вопросу о любимых телепередачах. Такие вопросы применяют при личных или телефонных интервью, однако с осторожностью, поскольку могут запутать респондента.
Классификационный вопрос. Классификационные вопросы вводятся в конце анкеты. Они относятся к особенностям респондента и дают возможность выяснять зависимость основных данных в анкете от признаков, субъекта, например, демографических. Именно классификационные вопросы раздражают респондентов в наибольшей степени, так что основные вопросы должны им предшествовать.
Основные вопросы должны следовать в порядке возрастания сложности.
Этап 6. Физические признаки анкеты.
Внешний вид анкеты может повлиять на согласие респондента отвечать, особенно при почтовой связи. Необходима хорошая бумага и яркий текст.