Проектирование эксперимента заключается в том, чтобы создать такие условия, которые гарантировали бы влияние на зависимую переменную только одной изучаемой зависимой переменной, исключив при этом влияние побочных факторов.
Например, нашей целью является изучение влияния местоположения на прилавке магазина бананов на величину их продажи.
Вы случайным образом разбиваете все овощные магазины на две группы: контрольную и экспериментальную. Обе группы по возможности должны быть эквивалентными во всех аспектах, т.е. иметь одинаковое количество больших и малых магазинов, расположенных и в центре, и в пригороде, и т.п. Определяете объем продажи бананов за какой-то период времени в магазинах обеих групп. Затем только в магазинах экспериментальной группы определенным, одинаковым, образом меняете местоположение бананов и спустя определенное время вновь определяете (измеряете) объем продажи бананов в магазинах обеих групп. По результатам данного эксперимента определяете влияние местоположения бананов на прилавке на объем их продаж. Однако выявленное изменение объема продаж в экспериментальных магазинах обусловлено не только изменением положения бананов на прилавке, но также и рядом других побочных факторов: возможной рекламой производителей, погодой и т.п. Однако эти влияния характеризует изменение объема продаж в магазинах контрольной группы. Таким образом, разница в изменениях объема продаж в контрольной и экспериментальной группах характеризует влияние на изменение объема продаж бананов (зависимая переменная) их местоположения на прилавке магазина (независимая переменная).
Теперь необходимо оценить степень достоверности полученных результатов. Используется внутренняя и внешняя достоверности.
Внутренняя достоверность определяет, в каких пределах изменение зависимой переменной действительно обусловлено изменением зависимой переменной. Например, если в предыдущем примере не обеспечилось полностью условие эквивалентности контрольной и экспериментальной групп, скажем, магазины этих групп посещают посетители, различные по возрасту и материальному положению. Эти различия тогда будут относиться к неконтролируемым побочным факторам, и данный эксперимент не будет удовлетворять требованиям внутренней достоверности. Результаты таких экспериментов обладают малой ценностью. При проектировании эксперимента экспериментатор должен обратить внимание на следующие факторы, определяющие внутренную достоверность:
— наличие побочных явлений или факторов, влияющих на результаты эксперимента;
— биологические, социальные, психологические изменения исследуемого объекта в процессе эксперимента;
— однородность с точки зрения точности и чувствительности инструментов измерения в течение всего эксперимента;
— идентичность характеристик обеих групп.
Внешняя достоверность характеризует пределы, в которых можно использовать
выявленные зависимости, полученные в ходе эксперимента.
Например, можно ли распространять на другие типы магазинов выявленную (если она есть) зависимость между объемом продаж и расположением бананов на прилавке магазина?
При определении внешней достоверности необходимо учитывать следующие факторы:
— обладает ли нужным уровнем репрезентативности выборка испытываемых единиц?
— характеризует ли с достаточной полнотой выборка популяцию в целом?
— соответствуют ли условия эксперимента реальным условиям?
Например, при тестировании рекламы оценивается реакция покупателей на разные виды рекламы, причем это тестирование осуществляется в специальной демонстрационной комнате. Однако реальная реакция покупателей на различные методы продвижения товара, в том числе на рекламу, в демонстрационной комнате и реальном торговом зале может различаться.