в) В период этого же общего пилотажа осуществляются все необходимые операции, относящиеся к проверке уровня обоснованности. Результаты анализа данных пилотажа приводят к усовершенствованию методики, к доработке всех ее деталей и в итоге – к получению окончательного варианта методики для основного исследования.
г) В начале основного исследования желательно провести проверку используемого варианта методики на устойчивость с тем, чтобы рассчитать точные показатели ее устойчивости. Последующее уточнение границ обоснованности проходит через весь анализ результатов самого исследования.
Вне зависимости от использованного метода оценки надежности у исследователя имеется четыре последовательных шага по повышению надежности результатов измерений.
Во-первых, в случае чрезвычайно низкой надежности измерений некоторые вопросы просто выбрасываются из анкеты, особенно когда степень надежности можно определить в процессе разработки анкеты.
Во-вторых, исследователь может “свернуть” шкалы и использовать меньше градаций. Скажем, шкала Лайкерта в этом случае может включать только следующие градации: “согласен”, “не согласен”, “не имею мнения”. Обычно так поступают, когда пройден первый шаг, и когда обследование уже было проведено.
В-третьих, как альтернатива второму шагу или как подход, осуществляемый после второго шага, оценка надежности проводится на индивидуальной основе. Скажем проводится прямое сравнение ответов респондентов в ходе их первоначального и повторного тестирований или с каким-то эквивалентным ответом. Ответы ненадежных респондентов просто не учитываются при проведении заключительного анализа. Очевидно, что если использовать данный подход без объективной оценки надежности респондентов, то, выбрасывая «неугодные» ответы, результаты исследования можно подогнать под желаемые.
Наконец, после того как первые три шага были использованы, можно оценить уровень надежности измерений. Обычно надежность измерений характеризуется коэффициентом, изменяющемся от нуля до единицы, где единица характеризует максимальную надежность.
Обычно считается, что минимально приемлемый уровень надежности характеризуют цифры 0, 65–0, 70, особенно если измерения проводились впервые.
Очевидно, что в процессе проведения разными фирмами разнообразных и многочисленных маркетинговых исследований имела место последовательная адаптация шкал измерений и методик их проведения под цели и задачи конкретных маркетинговых исследований. Это облегчает решение задач, рассмотренных в данном разделе, и делает это скорее необходимым при проведении оригинальных маркетинговых исследований.
Достоверность (validity) измерений характеризует совершенно другие аспекты, чем надежность измерений. Измерение может быть надежным, но не достоверным. Последнее характеризует точность измерений по отношению к тому, что существует в реальности. Например, респонденту задали вопрос о его годовом доходе, который составляет менее 25000 долларов. Не желая интервьюеру называть истинную цифру, респондент указал доход “более 100000 долларов”. При повторном тестировании он снова назвал данную цифру, демонстрируя высокий уровень надежности измерений. Лож не является единственной причиной низкого уровня достоверности измерений. Можно также назвать плохую память, плохое знание респондентом действительности и т.п.
Рассмотрим другой пример, характеризующий различие между надежностью и достоверностью измерений. Даже часы с неточным ходом будут показывать время в один час два раза в сутки, демонстрируя высокую надежность. Однако идти они могут очень неточно, т.е. показ времени будет недостоверным.
Главное направление проверки достоверности измерений заключается в получении информации из различных источников. Это может быть осуществлено по-разному. Здесь прежде всего следует отметить следующее.
Надо стремиться составлять вопросы таким образом, чтобы их формулировки способствовали получению достоверных ответов. Далее в анкету могут включаться вопросы, связанные друг с другом.
Например, в анкету помещается вопрос о том, в какой степени респонденту нравиться какой-то продукт питания определенной марки. И далее спрашивается, какое количество данного товара было куплено респондентом за последний месяц. Данный вопрос направлен на проверку достоверности ответа на первый вопрос.
Часто для оценки достоверности измерений используется два различных метода или источников получения информации. Например, после письменного заполнения анкет ряду респондентов из первоначальной выборки дополнительно задаются те же вопросы по телефону. По схожести ответов судят о степени их достоверности.
Иногда образуют на основе одних и тех же требований две выборки респондентов и для оценки степени достоверности сравнивают их ответы.
Вопросы для проверки:
Что такое измерение?
Чем объективное измерение отличается от субъективного?
Охарактеризуйте четыре шкальные характеристики.
Дайте определение четырем типам шкал и укажите типы информации, заключенные в каждой из них.
Каковы аргументы за и против использования нейтральной градации в симметричной шкале?
Что из себя представляет модифицированная шкала Лайкерта и как с ней соотносятся шкала жизненного стиля и семантическая дифференциальная шкала?
Что из себя представляет «гало эффект» и как его должен контролировать исследователь?
Какие компоненты определяют содержание понятия «надежность измерения»?
Какими недостатками может обладать используемая шкала измерений?
Какие методы оценки устойчивости измерений вы знаете?
Какие подходы к оценке уровня обоснованности измерений вы знаете?
Чем надежность измерения отличается от его достоверности?
В каких случаях исследователь должен оценивать надежность и достоверность измерения?
Предположим, что вы занимаетесь маркетинговыми исследованиями и к вам обратился владелец частного продуктового магазина с просьбой создать положительный имидж данного магазина. Спроектируйте семантическую дифференциальную шкалу для измерения соответствующих показателей имиджа данного магазина. При выполнении данной работы вы должны проделать следующее:
а. Провести «мозговой штурм» для выяснения набора измеряемых показателей.
б. Найти соответствующие биполярные определения.
в. Определить число градаций на шкале.
г. Выбрать метод контроля над «гало эффектом».
Спроектируйте шкалу измерений (обоснуйте выбор шкалы, число градаций, наличие или отсутствие нейтральной точки или градации; подумайте над тем, то ли вы измеряете, что планировали измерить) для следующих задач:
а. Фирма-изготовитель детских игрушек желает знать, как дошкольники реагируют на видеоигру «Поем с нами», в которой ребенок должен петь совместно с героями мультипликационного фильма.
б. Фирма-производитель молочных продуктов испытывает пять новых вкусовых добавок в йогурты и желает знать, как потребители оценят эти добавки с точки зрения степени их сладости, приятности и насыщенности вкуса.
Списоклитературы
Burns Alvin C., Bush Ronald F. Marketing Research. New Jersey, Prentice Hall, 1995.
Евланов Л.Г. Теория и практика принятия решений. М., Экономика, 1984.
Елисеева И.И., Юзбашев М.М. Общая теория статистики.М., Финансы и статистика, 1996.
Рабочая книга социолога. М., Наука, 1977.