Перед анализом опроса нейросетью выясните, кому предназначался каждый вопрос и что известно о его показе. Пустое поле может остаться у человека, которому вопрос не открывался, и у того, кто оставил его без ответа. Разделите эти случаи по данным анкеты, сохраните «не знаю» отдельным вариантом и подпишите основание каждого процента. Если маршрут восстановить нельзя, причина пропуска остаётся неизвестной.
Это особенно нужно в анкетах с ветвлением: например, удобство доставки оценивают только те, кто ею пользовался. Если удалить все пустые строки или заполнить их нулями, состав группы изменится ещё до того, как модель начнёт искать выводы.
Соберите сведения о вопросе, которых нет в ячейке
Сохраните исходную выгрузку без изменений. Для работы сделайте копию с идентификаторами анкет вместо имён, телефонов и других ненужных сведений. Передавайте её только в сервис, которому разрешена обработка этих данных. Удаление одной колонки с именем само по себе не гарантирует обезличивания свободного текста.
Рядом с выгрузкой нужны точный текст вопроса, варианты ответа, условия перехода, версия анкеты и период сбора. Уточните, попали ли в файл незавершённые анкеты и тестовые записи. Например, в документации Qualtrics о сохранённых ответах перечислены не только полностью заполненные анкеты, но и закрытые незавершённые, тестовые и импортированные ответы. У своего сервиса проверьте собственные правила экспорта.
Отдельно найдите доступные сведения о прохождении страниц и показе вопроса. В настройках экспорта Qualtrics есть возможность выделить показанные, но оставленные без ответа вопросы специальным значением. Это пример функции конкретной системы, а не обещание, что она есть в любой таблице. Служебный признак трактуйте по документации сервиса: он не обязательно доказывает, что человек прочитал вопрос.
Сначала проверьте несколько анкет в исходной системе и сопоставьте их с экспортом. Совпали ли ответы, маршрут, статус завершения и обозначения пропусков? Если система не отдаёт нужный признак, не просите модель угадать его по соседним ответам.
Разберите один вопрос по адресатам и состояниям
Ниже условный учебный пример. Это не опрос клиентов Verum и не результат запуска модели. В восьми анкетах сначала спрашивали: «Пользовались ли вы доставкой?» Вопрос «Насколько удобно было выбрать время доставки?» предназначался только ответившим «да». Предположим, сведения о маршруте проверены отдельно.
| ID анкеты | Пользовался доставкой | Ответ об удобстве | Что известно о маршруте |
|---|---|---|---|
| 01 | Да | Удобно | Вопрос показан |
| 02 | Да | Неудобно | Вопрос показан |
| 03 | Да | Не знаю | Вопрос показан |
| 04 | Да | Пусто | Вопрос показан, ответа нет |
| 05 | Нет | Пусто | Вопрос скрыт по условию |
| 06 | Нет | Пусто | Вопрос скрыт по условию |
| 07 | Пусто | Пусто | Маршрут установить нельзя |
| 08 | Да | Пусто | Анкета прервана до страницы вопроса |
Здесь пять участников подтвердили опыт доставки: 01, 02, 03, 04 и 08. Из них для четырёх подтверждён показ вопроса. У трёх есть выбранный ответ, но только два дали оценку удобства. Участник 03 выбрал «не знаю»: это не оценка «неудобно» и не пустая ячейка.
У 05 и 06 отсутствие ответа ожидаемо по ветвлению. У 04 подтверждено отсутствие ответа на показанный вопрос, но мотив неизвестен. У 08 известен недостигнутый этап, а причина прерывания не установлена. У 07 неизвестен сам маршрут. Ни один из этих случаев не разрешает дописать мнение человека.
Для своего массива заведите отдельное поле состояния вопроса и поле основания: откуда взята отметка. «Не применимо» или «не хочу отвечать», если такие варианты есть, также сохраняйте отдельно. Не подменяйте ими пустоту задним числом. Набор состояний зависит от анкеты и доступных свидетельств.
Дайте модели задачу сверки, затем считайте доли
Попросите нейросеть сопоставить записи с правилами вопроса и выделить противоречия. Ей не нужно достраивать ответы. Можно использовать такую заготовку запроса; она не испытана как способ получить безошибочный анализ:
Проверьте данные одного вопроса анкеты.
Точный вопрос и варианты: [текст].
Кому он предназначен: [условие].
Версия анкеты и период: [данные].
Правила служебных полей экспорта: [подтверждённое описание].
Данные по ID: [разрешённая рабочая копия].
Не изменяйте исходные значения и не заполняйте пропуски.
По каждому ID укажите:
1. Принадлежность к адресатам: да, нет или неизвестно.
2. Состояние вопроса и конкретное основание в данных.
3. Что установить нельзя и что нужно проверить в системе.
Не выводите мотив отказа или мнение по пустому полю.
Отдельно покажите противоречия маршрута и ответы вне ветки.
Перечислите ID для каждого предлагаемого знаменателя.
Пока не делайте выводов о всех клиентах и не считайте проценты.Сверьте результат с исходной системой. В небольшой выгрузке можно проверить каждую строку. В большой отдельно просмотрите неопределённые случаи, ответы вне ветки и незавершённые анкеты; дополните это независимой проверкой обычных записей. Проверка только строк, которые модель сама назвала спорными, может пропустить её уверенные ошибки.
После утверждения состояний посчитайте количества и доли средствами таблицы. В учебном примере неудобство отметил 1 из 2 давших оценку, то есть 50%. Если взять все три выбранных ответа вместе с «не знаю», получится 1 из 3, около 33,3%. Обе дроби арифметически верны, но описывают разные группы. В отчёте назовите выбранную базу и отдельно покажите пропуски. Фраза «50% клиентов недовольны доставкой» здесь не подтверждена: вопрос был об удобстве выбора времени, а оценок всего две.
Не превращайте «не знаю» в середину числовой шкалы. В экспериментах Pew Research Center само добавление такого варианта влияло на распределение ответов. При сравнении двух периодов проверьте не только проценты, но и формулировку, варианты, ветвление и правила включения анкет. Изменение этих условий ограничивает сопоставимость результатов.
Примите отчёт, в котором видна граница вывода
Для учебного массива достаточно такой записи: «Получено 8 анкет. Опыт доставки подтвердили 5 участников; показ вопроса об удобстве выбора времени подтверждён для 4. Оценку дали 2: одному удобно, одному неудобно; ещё один выбрал “не знаю”. Отдельно учтены показанный вопрос без ответа, 2 скрытых вопроса, недостигнутая страница и неизвестный маршрут».
Проверьте, что все восемь ID сохранились, состояния не пересекаются и вместе покрывают массив. Сверьте число анкет с источником выгрузки, её фильтрами и периодом. Затем вернитесь к дробям: можно ли по списку ID воспроизвести числитель и знаменатель? Если нет, итоговый процент пока нельзя принимать.
Не заполняйте отсутствующие оценки средним значением ради красивой диаграммы. Здесь описан разбор доступных ответов без восстановления пропусков; статистические методы восстановления требуют отдельного обоснования. Даже правильно посчитанная таблица не делает добровольный небольшой опрос представительным для всех клиентов и не объясняет, почему люди промолчали.
Если ошибка обнаружилась в маршруте формы, зафиксируйте, кого и в какой версии она затронула. Перед следующей рассылкой пройдите каждую ветвь и проверьте, что сохранилось в выгрузке. Исправленная форма поможет собрать следующие ответы, но не восстановит мнения, которых в прежних анкетах нет. Для дальнейшей сверки вычислений используйте инструкцию об анализе таблиц нейросетью.

