Достоверность эксперимента

В процессе эксперимента исследователь ставит две цели: получить верные выводы о влиянии независимой переменной на анализируемую совокупность единиц наблюдения и на этой основе сделать достоверные выводы относительно всей генеральной совокупности. Первая связана с понятием внутренней достоверности, вторая – с внешней достоверности.

Внутренняя достоверность – мера точности результатов эксперимента. Определяет, действительно ли изменение независимой переменной вызвало изменение зависимых переменных.

Имеется в виду, что в какой мере наблюдаемое изменение зависимых факторов вызвано какими-либо другими факторами, кроме независимых. Если наблюдаемое изменение вызвано или искажено действием посторонних факторов, то трудно сделать обоснованные выводы о наличии каузальных связей между независимыми и зависимыми переменными.

Внешняя достоверность связана с возможностью обобщения выявленной в процессе эксперимента каузальной зависимости. Имеется в виду, возможно ли распространение полученных результатов на более широкий круг элементов (группы населения).

Пример, исследование предпочтений посетителей ресторанов быстрого обслуживания по отношению к новым блюдам в меню, проведенное в исследовательской студии. Можно ли полученные результаты распространить на реальные рестораны.

Если нарушена внутренняя достоверность, то такие результаты не обобщаются. Внутренняя достоверность более значима для возможности использования результатов эксперимента на практике.

В зависимости от условий, где проводится эксперимент, различают полевой и лабораторный эксперимент (табл. ).

 

Таблица Сравнительная характеристика лабораторного и полевого экспериментов

Факторы Лабораторный эксперимент Полевой эксперимент
Среда Искусственная Естественная
Степень контроля Высокая Низкая
Ошибка реакции Высокая Низкая
Ложные результаты Высокие Низкие
Внутренняя достоверность Высокая Низкая
Внешняя достоверность Низкая Высокая
Время проведения Непродолжительное Продолжительное
Количество единиц наблюдения Небольшое Большое
Простота проведения Высокая Низкая
Затраты Низкие Высокие

 

Наибольшее применение на практике находит полевой эксперимент, который проводится в нормальных условиях окружающей среды. Лабораторный эксперимент проводится в специально подготовленных условиях тестирования. В зависимости от отношения тестируемого к условиям процесса тестирования различают четыре группы эксперимента:

1. Открытый эксперимент, когда тестируемый осведомлен о цели, задачах и условиях эксперимента.

2. Эксперимент в не ясной для тестируемого ситуации, когда известны ему только его задачи и его поведение в эксперименте, но не известны цели эксперимента.

3. Мнимый эксперимент, когда тестируемый знает цели и задачи опыта, но не знает условий ситуации, в которой он будет проведен.

4. Неопределенный эксперимент, когда тестируемый полностью не осведомлен о цели, задаче и условиях проведения эксперимента.

На практике имеют место эксперименты, которые проводятся в форме различных тестов и упорядочиваются по различным критериям:

– по месту проведения тестирования (рынок, студия, дом и др.);

– по объекту тестирования (продуктовый тест, ценовой тест и др.);

– по личности тестируемого (постоянный потребитель, эксперт, потенциальный потребитель и др.);

– по продолжительности теста (краткосрочный, продолжительный);

– по объему тестирования (полный или частный тест продукта);

– по числу тестированных продуктов.