Verum Lab
Подписаться в Telegram

Пропуски в опросе: как проверить анализ с нейросетью

Опубликовано 14 нояб. 2026 г.5 мин чтенияНачальный
Надпись «Пропуски в опросе» на тёмном фоне с медным акцентом

Новые разборы выходят в Telegram-канале.

3просмотра

Перед анализом опроса нейросетью выясните, кому предназначался каждый вопрос и что известно о его показе. Пустое поле может остаться у человека, которому вопрос не открывался, и у того, кто оставил его без ответа. Разделите эти случаи по данным анкеты, сохраните «не знаю» отдельным вариантом и подпишите основание каждого процента. Если маршрут восстановить нельзя, причина пропуска остаётся неизвестной.

Это особенно нужно в анкетах с ветвлением: например, удобство доставки оценивают только те, кто ею пользовался. Если удалить все пустые строки или заполнить их нулями, состав группы изменится ещё до того, как модель начнёт искать выводы.

Соберите сведения о вопросе, которых нет в ячейке

Сохраните исходную выгрузку без изменений. Для работы сделайте копию с идентификаторами анкет вместо имён, телефонов и других ненужных сведений. Передавайте её только в сервис, которому разрешена обработка этих данных. Удаление одной колонки с именем само по себе не гарантирует обезличивания свободного текста.

Рядом с выгрузкой нужны точный текст вопроса, варианты ответа, условия перехода, версия анкеты и период сбора. Уточните, попали ли в файл незавершённые анкеты и тестовые записи. Например, в документации Qualtrics о сохранённых ответах перечислены не только полностью заполненные анкеты, но и закрытые незавершённые, тестовые и импортированные ответы. У своего сервиса проверьте собственные правила экспорта.

Отдельно найдите доступные сведения о прохождении страниц и показе вопроса. В настройках экспорта Qualtrics есть возможность выделить показанные, но оставленные без ответа вопросы специальным значением. Это пример функции конкретной системы, а не обещание, что она есть в любой таблице. Служебный признак трактуйте по документации сервиса: он не обязательно доказывает, что человек прочитал вопрос.

Сначала проверьте несколько анкет в исходной системе и сопоставьте их с экспортом. Совпали ли ответы, маршрут, статус завершения и обозначения пропусков? Если система не отдаёт нужный признак, не просите модель угадать его по соседним ответам.

Разберите один вопрос по адресатам и состояниям

Ниже условный учебный пример. Это не опрос клиентов Verum и не результат запуска модели. В восьми анкетах сначала спрашивали: «Пользовались ли вы доставкой?» Вопрос «Насколько удобно было выбрать время доставки?» предназначался только ответившим «да». Предположим, сведения о маршруте проверены отдельно.

ID анкетыПользовался доставкойОтвет об удобствеЧто известно о маршруте
01ДаУдобноВопрос показан
02ДаНеудобноВопрос показан
03ДаНе знаюВопрос показан
04ДаПустоВопрос показан, ответа нет
05НетПустоВопрос скрыт по условию
06НетПустоВопрос скрыт по условию
07ПустоПустоМаршрут установить нельзя
08ДаПустоАнкета прервана до страницы вопроса

Здесь пять участников подтвердили опыт доставки: 01, 02, 03, 04 и 08. Из них для четырёх подтверждён показ вопроса. У трёх есть выбранный ответ, но только два дали оценку удобства. Участник 03 выбрал «не знаю»: это не оценка «неудобно» и не пустая ячейка.

У 05 и 06 отсутствие ответа ожидаемо по ветвлению. У 04 подтверждено отсутствие ответа на показанный вопрос, но мотив неизвестен. У 08 известен недостигнутый этап, а причина прерывания не установлена. У 07 неизвестен сам маршрут. Ни один из этих случаев не разрешает дописать мнение человека.

Для своего массива заведите отдельное поле состояния вопроса и поле основания: откуда взята отметка. «Не применимо» или «не хочу отвечать», если такие варианты есть, также сохраняйте отдельно. Не подменяйте ими пустоту задним числом. Набор состояний зависит от анкеты и доступных свидетельств.

Дайте модели задачу сверки, затем считайте доли

Попросите нейросеть сопоставить записи с правилами вопроса и выделить противоречия. Ей не нужно достраивать ответы. Можно использовать такую заготовку запроса; она не испытана как способ получить безошибочный анализ:

Проверьте данные одного вопроса анкеты.
Точный вопрос и варианты: [текст].
Кому он предназначен: [условие].
Версия анкеты и период: [данные].
Правила служебных полей экспорта: [подтверждённое описание].
Данные по ID: [разрешённая рабочая копия].

Не изменяйте исходные значения и не заполняйте пропуски.
По каждому ID укажите:
1. Принадлежность к адресатам: да, нет или неизвестно.
2. Состояние вопроса и конкретное основание в данных.
3. Что установить нельзя и что нужно проверить в системе.
Не выводите мотив отказа или мнение по пустому полю.
Отдельно покажите противоречия маршрута и ответы вне ветки.
Перечислите ID для каждого предлагаемого знаменателя.
Пока не делайте выводов о всех клиентах и не считайте проценты.

Сверьте результат с исходной системой. В небольшой выгрузке можно проверить каждую строку. В большой отдельно просмотрите неопределённые случаи, ответы вне ветки и незавершённые анкеты; дополните это независимой проверкой обычных записей. Проверка только строк, которые модель сама назвала спорными, может пропустить её уверенные ошибки.

После утверждения состояний посчитайте количества и доли средствами таблицы. В учебном примере неудобство отметил 1 из 2 давших оценку, то есть 50%. Если взять все три выбранных ответа вместе с «не знаю», получится 1 из 3, около 33,3%. Обе дроби арифметически верны, но описывают разные группы. В отчёте назовите выбранную базу и отдельно покажите пропуски. Фраза «50% клиентов недовольны доставкой» здесь не подтверждена: вопрос был об удобстве выбора времени, а оценок всего две.

Не превращайте «не знаю» в середину числовой шкалы. В экспериментах Pew Research Center само добавление такого варианта влияло на распределение ответов. При сравнении двух периодов проверьте не только проценты, но и формулировку, варианты, ветвление и правила включения анкет. Изменение этих условий ограничивает сопоставимость результатов.

Примите отчёт, в котором видна граница вывода

Для учебного массива достаточно такой записи: «Получено 8 анкет. Опыт доставки подтвердили 5 участников; показ вопроса об удобстве выбора времени подтверждён для 4. Оценку дали 2: одному удобно, одному неудобно; ещё один выбрал “не знаю”. Отдельно учтены показанный вопрос без ответа, 2 скрытых вопроса, недостигнутая страница и неизвестный маршрут».

Проверьте, что все восемь ID сохранились, состояния не пересекаются и вместе покрывают массив. Сверьте число анкет с источником выгрузки, её фильтрами и периодом. Затем вернитесь к дробям: можно ли по списку ID воспроизвести числитель и знаменатель? Если нет, итоговый процент пока нельзя принимать.

Не заполняйте отсутствующие оценки средним значением ради красивой диаграммы. Здесь описан разбор доступных ответов без восстановления пропусков; статистические методы восстановления требуют отдельного обоснования. Даже правильно посчитанная таблица не делает добровольный небольшой опрос представительным для всех клиентов и не объясняет, почему люди промолчали.

Если ошибка обнаружилась в маршруте формы, зафиксируйте, кого и в какой версии она затронула. Перед следующей рассылкой пройдите каждую ветвь и проверьте, что сохранилось в выгрузке. Исправленная форма поможет собрать следующие ответы, но не восстановит мнения, которых в прежних анкетах нет. Для дальнейшей сверки вычислений используйте инструкцию об анализе таблиц нейросетью.

Консультация

Заявка на консультацию по внедрению ИИ

Оставьте контакт: свяжемся и обсудим, какие задачи вашей компании имеет смысл передать искусственному интеллекту.

Статья была полезной?
Антон Ахтариев
Автор
Антон Ахтариев
Основатель Verum Lab

Предприниматель из Екатеринбурга. Основал маркетинговое агентство Easy Box и вёл в нём 120 проектов в ежемесячном сопровождении. В Verum Lab занимается внедрением искусственного интеллекта в малый и средний бизнес, для своих компаний собирает команду ИИ-агентов: лидогенерация, маркетинг, финансы. В статьях разбирает, что из этого работает, сколько стоит и где ломается.

Смежные статьи