Результат опроса начинают читать с общей картины, а ошибаются обычно в подгруппах.
Выглядит это так. Общий вывод по всей выборке звучит убедительно. Дальше кто-то просит разрез по маленькой группе, и в отчёте появляется утверждение, построенное на горстке ответов. Формально оно есть, фактически это шум.
О чём стоит помнить, читая результаты:
— чем мельче разрез, тем меньше в нём людей и тем шире разброс;
— выборка описывает тех, кто дошёл до конца, а не всех приглашённых, и отвалившиеся отличаются от дошедших;
— порядок вопросов влияет на ответы: то, о чём спросили раньше, окрашивает последующее;
— совпадение двух показателей не означает, что один вызывает другой.
Полезная привычка — прикладывать к каждой цифре в отчёте количество ответов, на котором она получена. Это скучно и сразу снимает половину смелых выводов.
И последнее: опрос хорошо отвечает на вопрос «что люди говорят». На вопрос «что люди делают» он отвечает плохо, и путать эти две вещи — самая дорогая ошибка при чтении результатов.
Сервисы Опросов
@survey_tools_ru_n1k
Результат опроса начинают читать с общей картины, а ошибаются обычно в подгруппах.
Этот пост опубликован в Telegram-канале Сервисы Опросов. Подписаться можно по ссылке: @survey_tools_ru_n1k.