Анализ опроса начинается с проверки данных и определения базы каждого показателя. Затем рассматривают распределения, различия групп и контекст ответов. Доля должна иметь понятный знаменатель, а вывод — соответствовать отбору и инструменту. Красивый график не объясняет, кто ответил на вопрос и можно ли распространять результат за пределы собранной группы.
На графике половина клиентов недовольна процессом. Позже выясняется, что вопрос задавали только тем, кто уже сообщил о затруднении. Доля посчитана правильно. Заголовок описывает другую базу. Это один из самых спокойных способов получить сильный ошибочный вывод без единой арифметической ошибки.
Сверьте выгрузку с анкетой
Откройте фактическую версию инструмента и проверьте, как поля представлены в данных. Уточните переходы, обязательность, несколько вариантов выбора и коды отсутствия ответа. Если анкета менялась, определите, какие наблюдения относятся к каждой версии. Не начинайте анализ с предположения, что одинаковое имя столбца означает одинаковый вопрос.
Проверьте единицы наблюдения и доступные идентификаторы в допустимом объёме. Несколько ответов организации могут быть разными ролями, повторным прохождением или иной ситуацией. Решение зависит от дизайна. Не удаляйте автоматически всё с одинаковым названием компании, если задача изучает опыт людей.
Определите базу каждого показателя
Для каждой доли укажите, кто мог и кто фактически ответил на вопрос. Общая выборка, подгруппа по переходу и число валидных ответов могут различаться. Пропуск, неприменимость и вариант «не знаю» не должны незаметно становиться одним состоянием. Правило обработки нужно сохранить в отчёте.
Показывайте исходные количества, особенно для небольших групп. Десять из двадцати и пятьсот из тысячи дают одинаковую долю, но доступная точность и состав данных могут различаться. Само число наблюдений тоже не описывает все ограничения: важны способ отбора и качество измерения.
Учебный пример: как меняется смысл одной доли
Наблюдение: 20 человек отметили затруднение. База: 100 ответивших на исходный вопрос. Допустимая формулировка: 20% ответивших сообщили о затруднении
Наблюдение: 10 назвали задержку согласования. База: 20 участников соответствующего уточнения. Допустимая формулировка: 50% этой подгруппы назвали задержку
Наблюдение: Те же 10 человек. База: Не автоматически все клиенты компании. Допустимая формулировка: Нельзя назвать это долей всего рынка
Наблюдение: Граница примера. База: Все значения условные. Допустимая формулировка: Состав и способ отбора требуют отдельного описания
Как сравнивать группы
1. Проверить смысл различия
Группы должны отвечать на сопоставимый вопрос в подходящих условиях. Если одна оценивала завершённый проект, а другая находится в сложном внедрении, разница требует контекста.
2. Посмотреть на размеры и состав
Небольшая подгруппа может давать нестабильную картину. Учитывайте отбор, возможные веса и другие особенности дизайна. Не объявляйте любое визуальное расхождение доказанным эффектом.
3. Выбрать подходящий анализ
Статистические процедуры и оценку неопределённости применяют с учётом типа данных и дизайна. Если оснований недостаточно, ограничьте вывод. Название теста не исправляет неподходящую базу или неверно понятый вопрос.
Разделяйте связь и причину. Если более опытные клиенты оценивают услугу иначе, это ещё не доказывает, что длительность отношений вызвала разницу. Могут различаться продукт, ожидания, условия и состав сохранившихся клиентов. Для причинного утверждения нужен соответствующий дизайн и дополнительные основания.
Как разбирать открытые ответы
Сохраняйте контекст и разработайте подходящий порядок кодирования. Один текст может содержать несколько тем; правила должны это учитывать. Не называйте частоту слов готовой структурой причин. Участник может упоминать цену, объясняя, почему она не влияла на выбор.
Различайте число ответов, число упоминаний и число участников. Если один человек назвал три проблемы, итог категорий может превышать число людей. Это допустимо при понятном описании. Не подгоняйте категории под желаемые сто процентов, если сама структура ответа предполагает несколько тем.
Как подготовить графики и выводы
Подписывайте вопрос, период, единицы и базу. Покажите порядок категорий и существенные ограничения. Если часть данных взвешена, поясните это и не смешивайте без оговорки взвешенные доли с исходными количествами. Читатель должен понимать, какую величину он видит.
Формулируйте вывод рядом с основанием. «В изученной группе чаще встречалось» и «все покупатели предпочитают» — разные утверждения. Не расширяйте масштаб ради короткого заголовка. Для публичного отчёта сохраните достаточное описание метода, позволяющее оценить предел результата.
Как перейти к решению бизнеса
Сопоставьте наблюдение с исходным вопросом. Какие варианты теперь обоснованы лучше, что остаётся неизвестным и какое действие стоит проверить? Отдельно обозначьте профессиональную интерпретацию команды. Не каждое распределение требует немедленного изменения продукта. Иногда полезнее уточнить причину или улучшить сбор.
Сохраните рабочую версию данных, правила обработки и расчёты. Для значимых итогов нужен маршрут повторения. Если ошибка обнаружится позже, команда должна суметь объяснить, что изменилось и влияет ли это на решение. Анализ завершается проверяемым пониманием, а не только экспортом последнего графика.
Частые вопросы
Доли всегда должны складываться в 100%?
Нет. При нескольких ответах или нескольких кодах сумма может превышать 100%. При округлении возможны небольшие расхождения. Нужно объяснять правило, а не искусственно менять данные.
Можно ли сравнивать любые два процента?
Нет. Проверьте вопросы, базы, состав, отбор и условия. Даже одинаковая подпись не гарантирует сопоставимость. Для сильного вывода нужна соответствующая процедура анализа.
Нужно ли показывать все таблицы руководителю?
Не обязательно. В основном материале нужны ответы на задачу и существенные основания. Подробные расчёты можно вынести в доступные приложения, сохранив определения и ограничения.
Оставить заявку на исследование с проверяемым выводом
Authority Lab помогает связать метод, данные и итоговый материал с бизнес-вопросом. Обсудим, какой результат нужен вашей команде и какие основания следует подготовить для его проверки.