Достоверность эксперимента
В процессе эксперимента исследователь ставит две цели: получить верные выводы о влиянии независимой переменной на анализируемую совокупность единиц наблюдения и на этой основе сделать достоверные выводы относительно всей генеральной совокупности. Первая связана с понятием внутренней достоверности, вторая – с внешней достоверности.
Внутренняя достоверность – мера точности результатов эксперимента. Определяет, действительно ли изменение независимой переменной вызвало изменение зависимых переменных.
Имеется в виду, что в какой мере наблюдаемое изменение зависимых факторов вызвано какими-либо другими факторами, кроме независимых. Если наблюдаемое изменение вызвано или искажено действием посторонних факторов, то трудно сделать обоснованные выводы о наличии каузальных связей между независимыми и зависимыми переменными.
Внешняя достоверность связана с возможностью обобщения выявленной в процессе эксперимента каузальной зависимости. Имеется в виду, возможно ли распространение полученных результатов на более широкий круг элементов (группы населения).
Пример, исследование предпочтений посетителей ресторанов быстрого обслуживания по отношению к новым блюдам в меню, проведенное в исследовательской студии. Можно ли полученные результаты распространить на реальные рестораны.
Если нарушена внутренняя достоверность, то такие результаты не обобщаются. Внутренняя достоверность более значима для возможности использования результатов эксперимента на практике.
В зависимости от условий, где проводится эксперимент, различают полевой и лабораторный эксперимент (табл. ).
Таблица Сравнительная характеристика лабораторного и полевого экспериментов
Факторы | Лабораторный эксперимент | Полевой эксперимент |
Среда | Искусственная | Естественная |
Степень контроля | Высокая | Низкая |
Ошибка реакции | Высокая | Низкая |
Ложные результаты | Высокие | Низкие |
Внутренняя достоверность | Высокая | Низкая |
Внешняя достоверность | Низкая | Высокая |
Время проведения | Непродолжительное | Продолжительное |
Количество единиц наблюдения | Небольшое | Большое |
Простота проведения | Высокая | Низкая |
Затраты | Низкие | Высокие |
Наибольшее применение на практике находит полевой эксперимент, который проводится в нормальных условиях окружающей среды. Лабораторный эксперимент проводится в специально подготовленных условиях тестирования. В зависимости от отношения тестируемого к условиям процесса тестирования различают четыре группы эксперимента:
1. Открытый эксперимент, когда тестируемый осведомлен о цели, задачах и условиях эксперимента.
2. Эксперимент в не ясной для тестируемого ситуации, когда известны ему только его задачи и его поведение в эксперименте, но не известны цели эксперимента.
3. Мнимый эксперимент, когда тестируемый знает цели и задачи опыта, но не знает условий ситуации, в которой он будет проведен.
4. Неопределенный эксперимент, когда тестируемый полностью не осведомлен о цели, задаче и условиях проведения эксперимента.
На практике имеют место эксперименты, которые проводятся в форме различных тестов и упорядочиваются по различным критериям:
– по месту проведения тестирования (рынок, студия, дом и др.);
– по объекту тестирования (продуктовый тест, ценовой тест и др.);
– по личности тестируемого (постоянный потребитель, эксперт, потенциальный потребитель и др.);
– по продолжительности теста (краткосрочный, продолжительный);
– по объему тестирования (полный или частный тест продукта);
– по числу тестированных продуктов.