Четыре типа основных систематических ошибок в исследованиях и средства предотвращения их влияния на опрос

Предвзятость является смертельным врагом всех опросов. Для получения достоверных результатов важно избегать ее при составлении опросов. На протяжении многих лет мы предлагаем передовые методики для разработки опросов, которые учитывают различные типы систематических ошибок в исследованиях, такие как непредвзятая формулировка, структура и стилизация. Но если Вы не будете осторожны, Вы можете допустить предвзятость некоторыми способами, даже не зная об этом.

Многие типы предвзятости в исследованиях связаны непосредственно с авторами опросов. Эта проблема очень коварна. Некоторые составители опросов неосознанно влияют на вопросы, пытаясь достичь желаемых результатов. Но при этом под угрозой оказываются достоверность и ценность этих результатов.

Можно ли избежать предвзятости этого типа?

Да! Ниже описаны 4 основных типа предвзятости в исследованиях и приведены советы по составлению опросов с активным устранением этих ошибок:

Невозможно получить правильные ответы, если Вы задаете неправильные вопросы. К сожалению, результаты опроса могут быть легко скомпрометированы вопросами, которые не в состоянии охватить весь спектр проблемы опроса. Например, опрос был создан, чтобы узнать, какой вид пиццы предпочитают Ваши сотрудники. Вы спрашиваете: «Что Вам больше нравится: пепперони, мясная пицца или вегетарианская пицца?». Хотя есть много других видов пиццы, они не приходили Вам в голову и были исключены. Теперь, вместо определения самой популярной пиццы, исследование выясняет предпочтения между этими тремя типами пиццы.

Совет: поисковое исследование — лучший способ убедиться, что Ваши вопросы исчерпывающие и точные. Опросив сначала небольшую группу, задав им открытые вопросы по Вашей теме, Вы получите более полное представление о масштабе темы опроса и с меньшей вероятностью пропустите варианты, которые могут иметь значение для респондентов. Вы также можете просмотреть другие подобные опросы, чтобы узнать, какие категории и темы были популярны у респондентов в прошлом.

Выбор группы респондентов может показаться легким делом, но часто приводит к тому, что называется систематическими ошибками выбора. При проведении опроса необходимо ориентироваться на людей, которые соответствуют целям опроса. Если Вы ошибочно исключите нужных или включите ненужных участников, Вы можете получить искаженные результаты.

Обычно систематическая ошибка возникает, когда у Вас нет четко определенной целевой группы. Например, Вы хотите ограничить свой опрос людьми с низким материальным положением. Эта группа населения может быть определена разными способами: люди с низким доходом, люди, у которых нет располагаемого дохода, или люди, у которых имеется незначительный собственный капитал после учета их имущества, доходов и долгов. Каждое из этих трех описаний может быть успешно использовано для охвата всех людей, мнения которых Вы надеетесь узнать. Но каждое определение приведет к разным результатам Вашего исследования.

Совет: чтобы избежать опроса не тех людей, убедитесь, что Вы еще до начала Вашего проекта четко определили требования к респондентам, которые необходимы для достижения целей опроса. Этот шаг обеспечит надлежащий охват для получения достоверных результатов. Также не забывайте соблюдать точность в отчетах и выводах, относящихся к целевой группе населения. Использование таких широких терминов, как бедный, богатый, большой или маленький, может привести к неверному толкованию.

Некоторые методы опроса могут затруднить или даже сделать невозможным участие некоторых людей в Вашем исследовании. Например, если Вы опрашиваете только пешеходов, которые прогуливаются по улице, Вы можете не узнать мнения репрезентативной выборки людей, которые ездят на велосипедах или автомобилях. Исключая потенциальных респондентов неслучайным образом, Вы можете привнести в свой опрос систематические ошибки, если у людей, которые не входят в группу опроса, есть мнения, которые отличаются от мнений тех, кто входит в эту группу.

Совет: лучший способ ограничить этот тип предвзятости в исследовании — представить всем потенциальным респондентам равные шансы в принятии участия в опросе. В нашем предыдущем примере Вам следовало разослать онлайн-опрос всем, кто живет в Вашем городе, или попросить местных предпринимателей разослать Ваш опрос всем своим сотрудникам.

Эта форма предвзятости реализуется, когда необработанные данные преобразуются в неверно истолкованные результаты. Обычно это связано с использованием неподходящих или неточных статистических методов, которые приводят к неправильной интерпретации результатов опроса. Например, предвзятость может появиться, когда составитель опроса доволен тем, что результат опроса соответствует его гипотезе, но не учитывает тот факт, что этот результат основан только на мнении незначительного числа респондентов.

Убедитесь, что Ваши результаты соответствуют размеру выборки, необходимому для принятия окончательных решений, используя наш калькулятор размера выборки.

Совет: чаще всего эта форма предвзятости вызвана тем, что сначала собирается информация, а потом разрабатывается стратегия анализа этой информации. Чтобы избежать такой систематической ошибки, создайте план анализа данных перед составлением опроса. Таким образом, Вы будете уверены, что вопросы хорошо согласуются с предполагаемым методом анализа. Например, используйте вопрос с множественными вариантами ответа, если Вы хотите количественно оценить свои результаты. Наконец, заранее обратите внимание на различные аналитические инструменты, доступные в программном обеспечении для опросов. Таким образом, Вы еще до составления опроса будете знать, какие типы анализа возможно использовать, а какие невозможно.

На первый взгляд может показаться, что избежать этих четырех типов ошибок в исследованиях достаточно трудно. Но если Вы будете верны цели своего опроса и иметь четкое понимание затронутых в нем тем, Вам удастся устранить все систематические ошибки в своем исследовании.

Проще говоря, Вам нужно уделить некоторое время планированию перед началом опроса. Выделите время на то, чтобы подумать о каждом из перечисленных выше четырех пунктов и о том, учитываются ли они в плане опроса. Убедившись в правильности методологии исследования, Вы можете быть уверены, что окончательные результаты не введут Вас в заблуждение.