Пилотажное исследование

Разведывательное исследование часто называют также пилотажным ис следованием. Хотя правильнее считать его самостоятельным видом социоло гического исследования. Разведывательное и пилотажное исследования по хожи в двух аспектах:

♦ Цель — получить примерные данные о том или ином явлении либо апро­бировать применение методики к более широкомасштабным исследованиям.

«Объект — для проведения того и другого исследования нужна незначитель­ная совокупность объектов, поэтому они проводятся в ограниченные сроки.

Но в отличие от разведывательного, пилотажное исследование предназ­начено для отработки технических процедур и приемов, чаще всего — для ап­робации вопросника. Предварительная проверка опросного инструментария столь же важна для успеха исследования, считают Дж. Мангейм и Р. Рич, как пробная поездка — для успешной покупки подержанного автомобиля. Она помогает обнаружить проблемы, которые в полной мере могут проявиться только в полевых условиях.

При проведении пилотажного исследования необходимо учитывать правила:

4 Объем выборки в пилотажном исследовании не имеет четкого методи­ческого обоснования. Обычно полагают достаточным опросить около 30 рес­пондентов. Важно только, чтобы они представляли все существенные кате­гории планируемого объекта исследования'.

+ Малая выборка в пилотаже вовсе не обязательно должна быть репре­зентативной по отношению к генеральной совокупности. Куда важнее дру­гое ее качество — разнообразие: она должна включать те группы респонден­тов, которые способны реагировать на инструментарий по-разному. Если ма­лообразованные люди составят в будущей выборке незначительную долю, их необходимо опрашивать в первую очередь именно потому, что они могут от­вечать на ваши умные вопросы совсем не так, как ожидается.

«В пилотажную выборку включают тех респондентов, которые представ­ляют наиболее важные для темы опроса социально-демографичекие призна­ки (пол, возраст, образование, стаж работы, содержание труда и т.п.).

В социальной психологии пилотажное исследование (рабочий термин «зондаж») применяется для установления необходимого объема выборки, уточнения содержания и числа вопросов анкеты, времени опроса и др. В за­рубежной и отечественной практике применения тестов (тестологии) пило­тажа (рабочий термин — «претест») служит средством выявления некоторых стандартов основного теста.

В социологии пилотаж проводится до основного исследования и высту­пает способом проверки обоснованности гипотез и задач, а также професси­онального уровня и методической отработанности инструментария. Пило­таж помогает оценить правильность модели выборки и внести в нее в случае необходимости соответствующие исправления; уточнить некоторые харак­теристики объекта и предмета исследования, обосновать финансовые расхо­ды и сроки проведения главного исследования. Пилотаж полезен также для тренировки группы интервьюеров (анкетеров).

Современные социологи придерживаются правила: прежде чем отдавать анкету в большой тираж, ее целесообразно опробовать в малотиражном (пи­лотажном) опросе, чтобы уточнить, правильно ли понимают вопросы рес­понденты, не слишком ли она длинна и утомительна, сколько времени за­нимает ее заполнение (или интервью), а в случае почтовой рассылки — сколь­ко дней проходит с момента отправления анкеты до получения ответов.

Шмерлина И.А. Процедурные начала исследовательской социологии. Учеб. пособие // http:// www.unn.ac.ru/ras/fl4/k2/courses/shmern.htm

Пилотажное исследование представляет собой исследование по «укорочен­ному» плану — в нем используются малые выборки, не в полной степени про­водится сбор информации, полученная информация анализируется только пс наиболее значимым критериям. Если пилотажное исследование проводится в цикле исследования хорошо изученной проблемы, оно позволяет «отточить» инструментарий исследования, выявить и устранить его дефекты и дефекты подходов к математическому анализу. Проведение пилотажного исследования в этом случае позволяет избежать сбора информации по «пустым» вопросам, ответы респондентов на которые не подлежат анализу, или неадекватно (не­однозначно) интерпретируются самими респондентами. Для поискового ис­следования (исследования в сфере недостаточно разработанной) пилотажное исследование предоставляет информацию для уточнения многих пунктов про­граммы, что в дальнейшем обеспечивает немалую экономию ресурсов.

Пилотаж полезен для: а) тестирования инструментария, в котором исследо­ватель вполне уверен, б) усовершенствования инструментария в ситуации, когда предмет исследования хуже известен исследователю. В первом случае инстру­ментарий проходит предварительное испытание в своем окончательном вари­анте. Во втором исследователь может захотеть поэкспериментировать с разны­ми вариантами (макетами) инструмента, чтобы узнать, какой из них удобнее е работе. Предварительное тестирование такого типа может включать в себя:

1.Тестирование различных словесных формулировок и форм вопросов.

2.Опробование анкеты, предназначающейся для самостоятельного запол­нения респондентом, в личном интервью, чтобы в процессе живого обще­ния с респондентом выявились возможные трудности ее заполнения.

3.Употребление открытых вопросов для выявления типичных ответов, которые затем можно будет включить в набор ответов на закрытые вопросы, с тем чтобы использовать последние в окончательном варианте.

4.Тестирование различных видов инструментария (почтовых анкет, очных интервью, телефонных интервью) с целью определения годности каждого из них².

Рис. 28. Тестирование различных видов инструментария

Пилотаж можно считать генеральной репетицией к главному исследованию. Он позволяет сделать первые выводы о том, насколько успешно прошел этал подготовки к нему, какими могут быть ожидаемые результаты. В ходе такогс опроса собирается методическая информация, т.е. информация о качестве раз­работанного инструментария. Проверяются все организационные и методичес­кие условия будущего исследования, и прежде всего: доступность необходимых

Мангейм Дж.Б., Рич Р.К. Политология. Методы исследования. М.: Весь мир, 1997. С. 211-212.

документов, отношение респондентов к опросу и их реакция на вопросы анке­ты. Оценивая качества методики опроса, социолог регистрирует любые затруд­нения респондента, вызванные техникой заполнения, непониманием смысла вопросов, отдельных слов. Учитываются также все замечания и наблюдения ан­кетеров о методических недостатках, которые им удалось обнаружить.

Вернувшись с опроса, лучше сразу же сесть за свою анкету, просмот­реть ответы на все вопросы, отметить самые проблемные, а потом схо­дить на объект и пообщаться с респондентами.

Пилотаж проводится в двух вариантах. В первом — всю группу респон­дентов приглашают в отдельную комнату, где на столах разложены анкеты. Респондентов «вводят» в ситуацию пилотажа, т.е. объясняют его цели и за­дачи, инструктируют по технике заполнения анкеты и просят высказать после заполнения критические замечания, поговорить о неясностях и о тех вопро­сах, которые затрудняют работу с анкетой. Заполненные анкеты опускаются в опечатанные урны, после чего начинается групповое обсуждение содержа­ния опроса в целом. Показателями, позволяющими оценить пригодность анкетного вопроса, выступают число неответивших на вопрос и характер распределения ответов по шкале, используемой в вопросе.

Второй вариант пилотажного опроса предполагает приглашение группы из 3—4-х респондентов для обсуждения анкеты по мере ее заполнения: оп­рашиваемые делают пометки о качестве вопросов. Перед началом пилотажа их вводят в ситуацию экспертного опроса, объясняя, что содержание отве­тов не анализируется, так как опрос преследует только методические цели.

Резка