The post has been translated automatically. Original language: Russian
A field study can be well planned on paper, but run into problems on the very first day of data collection. Interviewers understand the instructions differently, a broken transition is found in the questionnaire, quotas are filled unevenly, and part of the interview turns out to be impossible to verify.
The later such an error is detected, the more expensive it is to fix it. Sometimes it is enough to adjust the instructions, but in other cases it is necessary to contact the respondents again or exclude the answers already collected.
Therefore, it is useful to conduct a separate project readiness check before starting field work. Her task is to make sure that the team, the questionnaire, the sample and the control procedures work as a single system.
1. Questionnaire: not only the questions have been checked, but also the interview scenarios
Before launching, it is necessary to make sure that the wording is clear to the respondents, the answer options do not overlap, and the transition logic works correctly.
Special attention needs to be paid to issues with conditions. For example, if a respondent reported that they do not use a particular service, the questionnaire should not ask them to rate the quality of that service. In an electronic questionnaire, such transitions can be automated, but first they need to be checked for different filling scenarios.
It is also worth checking the required fields, the acceptable ranges of numerical answers, and the option to select "Other" if the suggested categories do not cover all reasonable answers.
Readiness criterion: the interviewer can complete the questionnaire according to any provided scenario without contradictions, unclear instructions and technical errors.
2. Sampling and routes: it is clear who to interview and where
Even a well-written questionnaire will not ensure the quality of the research if the interviewers decide on their own who to invite to participate.
Before starting, it is necessary to determine the target audience, the rules for selecting respondents, the geography of the study and quotas. If the project covers several cities or districts, the team should understand how many interviews are required at each point and how assignments are distributed.
A separate issue is the replacement of respondents. What should I do if the selected person refuses to participate? Is it possible to contact the next household or the next visitor? The answer should follow from the research methodology, and not depend on the decision of a particular interviewer.
Readiness criteria: for each field team, the territory, the task, the selection rules and the procedure for actions in case of refusal or unavailability of the respondent are defined.
3. Interviewers: the training is confirmed by practice
Handing over the questionnaire to the interviewers does not mean that they are ready to work. It is important to check whether the team understands the purpose of the study, the wording of the questions, and the rules of interaction with respondents in the same way.
It is advisable to complete the training with a trial interview. It helps to detect discrepancies: one interviewer reads out all the possible answers, another shortens the wording, and the third explains the question on his own. Such differences can affect the results.
Interviewers should also know how to introduce themselves, explain the purpose of the study, respond to rejection, and act in non-standard situations.
Readiness criteria: each interviewer has passed a practical test and received uniform instructions on how to conduct an interview.
4. Technical readiness: the equipment has been tested under operating conditions
If the study is conducted using electronic questionnaires, technical verification should not be limited to opening the form in the office.
You need to check your devices, access to the required version of the questionnaire, how the required fields work, and how the answers are saved. If the project involves geolocation, audio recording, or photographic materials, it is necessary to test the relevant functions separately and make sure that their use is provided for by the research methodology.
The usual field conditions should also be taken into account: unstable Internet, limited battery power, different device models, and the need to securely transfer the collected data.
Readiness criterion: The team knows how to conduct interviews and save the results in the expected conditions, as well as what to do in case of a technical failure.
5. Pilot survey: the identified errors have indeed been fixed
The pilot is not a formality and not just a few additional interviews. It allows you to check the research in conditions as close as possible to real ones.
During the pilot, it is important to evaluate not only the work of the questionnaire, but also how the respondents understand the questions, how long the interview takes, where difficulties arise and which instructions require clarification.
After the pilot, it is useful to have a discussion with the interviewers and supervisors. All detected problems should receive a specific solution: change the wording, correct the transition, supplement the instructions, or revise the operating procedure.
Readiness criteria: the pilot's results have been reviewed, significant errors have been corrected, and the team is working with the approved version of the questionnaire.
6. Quality control: it is pre-determined who checks what
Quality control is more effective when its rules are established before data collection begins. If you start checking the interview only after completing the field stage, the opportunities to fix system errors will be limited.
Before launching, it is necessary to determine who monitors the fulfillment of quotas, checks the completeness of responses, identifies suspiciously short interviews and examines violations of the methodology. If necessary, geodata, audio recordings, and repeated contacts with respondents can be used, taking into account the research conditions and rules for working with data.
At the same time, neither the GPS nor the audio recording by themselves prove that the interview was conducted efficiently. It is more reliable to evaluate several signs together and sort out controversial cases.
Readiness criterion: those responsible for monitoring have been appointed, verifiable indicators and the procedure for responding to identified problems have been determined.
7. Data protection: rules are set before the first contact
The field study may include contact information, answers to personal questions, and additional materials for quality control. Therefore, the rules for handling information must be determined in advance.
The team must understand what information really needs to be collected, how to inform respondents, when their consent is required, who will get access to the data, and how long it will be stored. Access to personal data and monitoring materials should be limited in accordance with the objectives of the project participants.
It is especially important not to collect additional information "just in case" if they are not needed to achieve a research goal.
Readiness criteria: The team has clear instructions on how to inform respondents, collect, transfer, store, and use data.
When can I start field work?
The readiness of the research is determined not by the presence of a questionnaire and a formed team, but by the consistency of all elements of the project. A good electronic form does not compensate for sampling errors, and a detailed methodology will not help if interviewers understand it differently.
Before the first interview, it is useful for the project manager to conduct a short final check with those responsible for methodology, field team, technical part and quality control. If there is an unresolved problem in one of the critical points, it is better to fix it before mass data collection.
The main principle is simple: errors discovered before the start of field work are usually cheaper than errors discovered after hundreds of interviews.
Полевое исследование может быть хорошо спланировано на бумаге, но столкнуться с проблемами уже в первый день сбора данных. Интервьюеры по-разному понимают инструкции, в анкете обнаруживается неработающий переход, квоты заполняются неравномерно, а часть интервью оказывается невозможно проверить.
Чем позже выявляется такая ошибка, тем дороже её исправление. Иногда достаточно скорректировать инструкцию, но в других случаях приходится повторно связываться с респондентами или исключать уже собранные ответы.
Поэтому перед началом полевых работ полезно провести отдельную проверку готовности проекта. Её задача — убедиться, что команда, анкета, выборка и процедуры контроля работают как единая система.
1. Анкета: проверены не только вопросы, но и сценарии интервью
Перед запуском необходимо убедиться, что формулировки понятны респондентам, варианты ответов не пересекаются, а логика переходов работает корректно.
Особого внимания требуют вопросы с условиями. Например, если респондент сообщил, что не пользуется определённой услугой, анкета не должна предлагать ему оценить качество этой услуги. В электронной анкете такие переходы можно автоматизировать, но сначала их нужно проверить на разных сценариях заполнения.
Стоит также проверить обязательные поля, допустимые диапазоны числовых ответов и возможность выбрать вариант «Другое», если предложенные категории не охватывают все разумные ответы.
Критерий готовности: интервьюер может пройти анкету по любому предусмотренному сценарию без противоречий, непонятных инструкций и технических ошибок.
2. Выборка и маршруты: понятно, кого и где опрашивать
Даже правильно составленная анкета не обеспечит качество исследования, если интервьюеры будут самостоятельно решать, кого приглашать к участию.
До старта необходимо определить целевую аудиторию, правила отбора респондентов, географию исследования и квоты. Если проект охватывает несколько городов или районов, команда должна понимать, сколько интервью требуется в каждой точке и как распределяются задания.
Отдельный вопрос — замена респондентов. Что делать, если выбранный человек отказался участвовать? Можно ли обратиться к соседнему домохозяйству или следующему посетителю? Ответ должен следовать из методики исследования, а не зависеть от решения конкретного интервьюера.
Критерий готовности: для каждой полевой команды определены территория, задание, правила отбора и порядок действий при отказе или недоступности респондента.
3. Интервьюеры: обучение подтверждено практикой
Передача анкеты интервьюерам ещё не означает, что они готовы к работе. Важно проверить, одинаково ли команда понимает цель исследования, формулировки вопросов и правила взаимодействия с респондентами.
Обучение желательно завершать пробным интервью. Оно помогает обнаружить расхождения: один интервьюер зачитывает все варианты ответа, другой сокращает формулировку, а третий самостоятельно поясняет вопрос. Такие различия способны повлиять на результаты.
Интервьюеры также должны знать, как представиться, объяснить цель исследования, реагировать на отказ и действовать в нестандартных ситуациях.
Критерий готовности: каждый интервьюер прошёл практическую проверку и получил единые инструкции по проведению интервью.
4. Техническая готовность: оборудование проверено в условиях работы
Если исследование проводится с использованием электронных анкет, техническую проверку нельзя ограничивать открытием формы в офисе.
Нужно проверить устройства, доступ к нужной версии анкеты, работу обязательных полей и сохранение ответов. Если проект предполагает геолокацию, аудиозапись или фотоматериалы, необходимо отдельно протестировать соответствующие функции и убедиться, что их использование предусмотрено методикой исследования.
Следует учитывать и обычные полевые условия: нестабильный интернет, ограниченный заряд батареи, разные модели устройств и необходимость безопасно передать собранные данные.
Критерий готовности: команда знает, как проводить интервью и сохранять результаты в ожидаемых условиях, а также что делать при техническом сбое.
5. Пилотный опрос: выявленные ошибки действительно исправлены
Пилот — это не формальность и не просто несколько дополнительных интервью. Он позволяет проверить исследование в условиях, максимально приближенных к реальным.
Во время пилота важно оценить не только работу анкеты, но и то, как респонденты понимают вопросы, сколько времени занимает интервью, где возникают затруднения и какие инструкции требуют уточнения.
После пилота полезно провести разбор с интервьюерами и супервайзерами. Все обнаруженные проблемы должны получить конкретное решение: изменить формулировку, исправить переход, дополнить инструкцию или пересмотреть порядок работы.
Критерий готовности: результаты пилота рассмотрены, существенные ошибки исправлены, а команда работает с утверждённой версией анкеты.
6. Контроль качества: заранее определено, кто и что проверяет
Контроль качества эффективнее, когда его правила установлены до начала сбора данных. Если начать проверять интервью только после завершения полевого этапа, возможности исправить системные ошибки будут ограничены.
До запуска стоит определить, кто отслеживает выполнение квот, проверяет полноту ответов, выявляет подозрительно короткие интервью и разбирает нарушения методики. При необходимости могут использоваться геоданные, аудиозаписи и повторные контакты с респондентами — с учётом условий исследования и правил работы с данными.
При этом ни GPS, ни аудиозапись сами по себе не доказывают, что интервью проведено качественно. Надёжнее оценивать несколько признаков в совокупности и разбирать спорные случаи.
Критерий готовности: назначены ответственные за контроль, определены проверяемые показатели и порядок реагирования на выявленные проблемы.
7. Защита данных: установлены правила до первого контакта
Полевое исследование может включать контактные данные, ответы на личные вопросы и дополнительные материалы для контроля качества. Поэтому правила обращения с информацией необходимо определить заранее.
Команда должна понимать, какую информацию действительно нужно собирать, как информировать респондентов, когда требуется их согласие, кто получит доступ к данным и как долго они будут храниться. Доступ к персональным данным и материалам контроля следует ограничивать в соответствии с задачами участников проекта.
Особенно важно не собирать дополнительные сведения «на всякий случай», если они не нужны для достижения исследовательской цели.
Критерий готовности: у команды есть понятные инструкции по информированию респондентов, сбору, передаче, хранению и использованию данных.
Когда можно начинать полевые работы?
Готовность исследования определяется не наличием анкеты и сформированной команды, а согласованностью всех элементов проекта. Исправная электронная форма не компенсирует ошибки выборки, а подробная методика не поможет, если интервьюеры понимают её по-разному.
Перед первым интервью руководителю проекта полезно провести короткую итоговую проверку с ответственными за методологию, полевую команду, техническую часть и контроль качества. Если по одному из критически важных пунктов остаётся нерешённая проблема, её лучше устранить до массового сбора данных.
Главный принцип прост: ошибки, обнаруженные до начала полевых работ, обычно обходятся дешевле ошибок, обнаруженных после сотен интервью.
Share
