AI.Product ClubБлог Михаила Карпова
← Все материалы
HOW-TOИИ для продукта7 мин чтения

ИИ для анализа данных: почему общая конверсия вводит в заблуждение

Разбери конверсию по сегментам в ChatGPT: учебная таблица, проверенные расчёты, график и ограничения выводов.

Конверсия выросла с 28% до 37%, и команда хочет объявить новую форму регистрации успешной. Но внутри каждого сегмента результат стал хуже. Такое возможно, если изменился состав трафика. Разберём пример в ChatGPT и подготовим вывод, который можно проверить до продуктового решения.

ИИ для анализа данных: почему общая конверсия вводит в заблуждение: схема проверки результата
Авторская схема AI Product Club; учебный пример. Открыть крупнее.

1. Зафиксируй, что именно считаешь

В нашем примере конверсия — число завершённых регистраций, делённое на число пользователей, начавших регистрацию. Один пользователь учитывается один раз внутри периода и сегмента. Периоды одинаковой длины, события собраны одинаково. Это учебные условия: в настоящей выгрузке их нужно подтвердить.

ChatGPT умеет анализировать загруженные таблицы и строить графики. Доступность зависит от аккаунта и режима работы. Для точных значений используй таблицу или текст, а не скриншот. Если нужна подготовка файла, начни с инструкции по CSV и Excel.

2. Передай учебную таблицу

Скопируй эти строки в чат или сохрани как CSV. Все числа вымышлены для обучения, персональных данных нет.

period,segment,started,completed
before,new,800,160
before,returning,200,120
after,new,200,30
after,returning,800,340

new — новые пользователи, returning — вернувшиеся. Внутри каждого периода группы не пересекаются. Сначала попроси проверить данные:

Проверь таблицу перед анализом. Одна строка — сегмент за период.
Проверь пропуски, отрицательные значения, completed > started,
повторения пары period + segment. Выведи число строк и суммы
started/completed по периодам. Не исправляй ничего молча.
Перечисли предпосылки, которые нельзя проверить по четырём строкам.

Контрольные суммы: до изменения — 1000 начавших и 280 завершивших, после — 1000 и 370. По агрегатам нельзя проверить уникальность пользователей, корректность определения сегмента и равенство окон наблюдения. Хороший ответ должен это отметить.

3. Сравни общую конверсию с сегментами

Вычисли completed / started отдельно для каждого периода и сегмента.
Общую конверсию считай как сумму completed / сумму started.
Не усредняй проценты строк. Покажи изменение в процентных пунктах.
Построй столбчатый график «до/после» для каждого сегмента.
Отдельно покажи долю сегментов среди started.
Сначала расчёты, затем интерпретация. Причины не придумывай.

Правильные результаты:

Группа До После Изменение
Новые 20% 15% −5 п.п.
Вернувшиеся 60% 42,5% −17,5 п.п.
Все 28% 37% +9 п.п.

Общая цифра улучшилась, потому что доля группы с более высокой конверсией выросла: вернувшиеся составляли 20% начавших регистрацию, а стали 80%. Это объясняет арифметику примера. Почему поменялся состав аудитории, из этих данных неизвестно.

4. Проведи сравнение при одинаковом составе

Для дополнительной проверки зафиксируй веса периода «до»: 80% новых и 20% вернувшихся. Попроси ChatGPT применить их к конверсиям обоих периодов и явно назвать это стандартизованным сравнением.

Используй фиксированные веса 0,8 для new и 0,2 для returning.
Посчитай взвешенную конверсию до и после. Покажи подстановку чисел.
Отдели этот расчёт от наблюдаемой общей конверсии.
Не называй его причинным эффектом изменения формы.

Получится: до — 0,8 × 20% + 0,2 × 60% = 28%; после — 0,8 × 15% + 0,2 × 42,5% = 20,5%. Разница −7,5 процентного пункта. Это способ убрать влияние изменения долей в нашем сравнении, но не доказательство, что ухудшение вызвала именно новая форма.

Для причинного вывода нужен дизайн эксперимента или другой обоснованный метод. Простое сравнение периодов не исключает сезонность, изменения источников трафика и ошибки событий.

5. Подготовь записку для решения

Попроси финальный ответ из трёх частей: наблюдаемые числа, ограничения и следующий шаг. В нашем примере разумный следующий шаг — проверить события и источники трафика, затем оценить результат в сопоставимых группах. Объявлять рост общей конверсии успехом формы преждевременно.

Моя рекомендация: в каждом таком отчёте сохранять знаменатель рядом с процентом. «37%» без числа начавших регистрацию и состава аудитории легко превращается в убедительную, но неполную историю. График должен показывать оба периода, одинаковую шкалу и понятные названия сегментов.

Перед отправкой записки вручную пересчитай хотя бы одну строку, общую конверсию и взвешенный итог. Не принимай красивый график за доказательство правильного расчёта. Выбор инструмента разобран в обзоре ИИ для таблиц, а работу с ИИ в продуктовых задачах — на курсе.

Документация сверена 23 октября 2026 года. Арифметика учебного примера проверена отдельно программно; прогон в интерфейсе ChatGPT не выполнялся.

Todo: попробуй на своей задачеПрогресс сохраняется в этом браузере.
ПРАКТИКА НА КУРСЕ / AI PRODUCT CLUB

Преврати ИИ-инструменты в рабочую систему

«Быстрый старт в AI»: практические воркшопы по AI-инструментам, прототипам и автоматизации. Собираем результат, который можно применить в работе.

21 практических воркшопов · записи · вопросы автору в чате

Посмотреть программу курса ↗

Автор: — практик автоматизации и автор курсов AI Product Club.