Здесь я рассмотрю объём всего учебного материала, введу основные определения и опишу три опроса, которые помогут продемонстрировать как удачные, так и неудачные практики в методологии опросов.
Опросы — это, вероятно, один из самых широко используемых методов исследований по всему миру. Они заметны не только из-за их частого использования в исследованиях по разработке цифровых продуктов, но и благодаря тому, что нас регулярно приглашают участвовать в опросах в повседневной жизни: будь то в качестве избирателей, потребителей или пользователей услуг. Широкое применение опросов может создать иллюзию их простоты и легкости в сборе важной информации о продуктах, контекстах, процессах, работниках и многом другом, но это не так.
На собственном опыте применения и оценки исследовательских методов я не ожидал столкнуться с серьёзными трудностями при планировании опроса, направленного на изучение вопросов внедрения технологий. Однако эта статья и последующие материалы покажут, насколько ошибочным было это предположение. Я делюсь извлечёнными уроками в надежде, что они помогут улучшить методологию проведения опросов, особенно в сфере создания цифровых продуктов.
На собственном опыте применения и оценки исследовательских методов я не ожидал столкнуться с серьёзными трудностями при планировании опроса, направленного на изучение вопросов внедрения технологий. Однако эта статья и последующие материалы покажут, насколько ошибочным было это предположение. Я делюсь извлечёнными уроками в надежде, что они помогут улучшить методологию проведения опросов, особенно в сфере создания цифровых продуктов.
Что такое опрос?
Это не просто инструмент (анкета или контрольный лист) для сбора информации, а комплексная система, предназначенная для описания, сравнения или объяснения знаний, установок и поведения людей. Опросный инструмент является лишь частью более широкого процесса, включающего следующие этапы:
Опросы бывают разными и могут классифицироваться по уровню контроля, который оказывает исследователь на процесс. В зависимости от целей исследования и доступных ресурсов, выделяют несколько типов опросов:
- Установление конкретных, измеримых целей
- Планирование и составление графика опроса
- Обеспечение необходимых ресурсов
- Разработка опроса
- Подготовка инструмента для сбора данных
- Валидация инструмента
- Отбор участников
- Проведение опроса и оценка результатов
- Анализ данных
- Подготовка отчёта о результатах.
Опросы бывают разными и могут классифицироваться по уровню контроля, который оказывает исследователь на процесс. В зависимости от целей исследования и доступных ресурсов, выделяют несколько типов опросов:
- Контролируемые опросы. В таких опросах исследователь активно участвует в процессе. Например, при телефонных интервью каждому респонденту назначается интервьюер, который помогает понять вопросы и получить точные ответы. Иногда опрос проводится в группе, где исследователь находится рядом, чтобы разъяснить инструкции и помочь с возникшими вопросами.
- Полу-контролируемые опросы. В этом формате исследователь объясняет цели исследования, даёт инструкции и проводит несколько примеров вопросов. Далее респонденты продолжают заполнять опрос самостоятельно, без активного вмешательства исследователя. Такой подход помогает сохранить баланс между управлением процессом и автономией участников.
- Неконтролируемые опросы. Эти опросы предполагают полное отсутствие вмешательства исследователя. Например, автоматические телефонные звонки или анкеты, отправляемые по почте, где респондент самостоятельно отвечает на вопросы о своем образе жизни, привычках в путешествиях или предпочтениях в еде.
Постановка целей исследования
Цель — это просто утверждение о предполагаемых результатах опроса. Например, опрос может стремиться выявить наиболее полезные функции инструмента разработки фронтенда или наиболее распространённые потребности в обучении новых сотрудников. Очень важно, чтобы в заявлении о целях были даны определения всех потенциально неоднозначных терминов. Эти определения влияют не только на разработку инструмента опроса, но и на понимание респондентами используемой терминологии.
Структура курса
Эта статья — первая из шести, посвящённых небольшому текстовому курсу об исследованиям через опросы. Я использую собственный опыт и работы других исследователей, чтобы показать как преимущества метода опросов, так и его слабые стороны.
Следующие материалы курса:
Следующие материалы курса:
- Разработка опроса
- Составление анкеты
- Оценка анкеты
- Работа с аудиторией
- Анализ данных
Чтобы лучше понять, как опросы вписываются в контекст эмпирических исследований, приглашаю вас ознакомиться с другими статьями на сайте, где описаны различные методы: от анализа случаев и факторных исследований до экспериментов.
Эти материалы помогут вам выбрать наилучший метод для конкретной ситуации. В этой же статье я предполагаю, что вы уже решили провести опрос, и сосредоточусь на том, как правильно его организовать, провести и проанализировать, чтобы получить значимые результаты.
Исследования
В этом учебном материале я буду ссылаться на свои прошлые исследования , где подчеркну собственные ошибки и упущения. Меня не пугают ошибки, напротив, я считаю их важной частью процесса обучения. Главное — это проводить ретроспективный анализ подобных ситуаций, чтобы совершенствовать свои методы исследования.
Для разбора я приведу три исследования, в которых проведу детальный анализ, показывая, как я учился на собственных промахах и корректировал подходы для достижения более точных и ценных результатов.
Для разбора я приведу три исследования, в которых проведу детальный анализ, показывая, как я учился на собственных промахах и корректировал подходы для достижения более точных и ценных результатов.
- Опрос среди разработчиков для создания образовательных программ. В первом опросе участников набирали через интернет и профильные сообщества. В 2017 году проведено 2 опроса, цель которых — сравнить, какие знания программисты получили в университете и что им реально пригодилось на работе.
- Опрос среди участников сообщества о внедрении новых технологий. Во втором анкету распространяли в Сообществе «Кофаундеров». Опрос, который я провёл, чтобы выяснить, какими данными компании руководствуются при принятии решений о внедрении новых технологий.
- Опрос среди участников конференции о рисках в проектах и стратегии управления ими. В третьем — анкеты отправляли заранее отобранной группе участников конференции с должностями «менеджер» или аналогичными. При этом анкеты рассылались не более чем двум менеджерам из одной компании. Опрос, изучал риски в проектах и стратегии управления ими.