← Volta Neobank

Market & Jobs · проект 16 из 23

HTE-разрез A/B по возрасту: 35–44 +11,0 п.п. и 18–24 +5,3 п.п., но 45+ +1,4 п.п. (ns). Реферал (доверие) конвертит 45+ лучше всех — трение в доверии, не в UX.

Ситуация
Фикс KYC поднял конверсию в целом — проверяю, закрывает ли он именно сегмент 45+
Задача
Выяснить, закрывает ли фикс KYC отток в сегменте старшего возраста, а не только общий рост конверсии
Действия
HTE-разрез A/B по возрастным группам (z-тест на две доли), завершение KYC по каналам, Chi-square возраст × завершение
Результат
35–44 +11,0 п.п. (p<0,001), 45+ +1,4 п.п. (ns), 45+ в treatment 53,2% против 61,2%
Стек
Pythonpandas / NumPySciPy / Statsmodelsscikit-learnMatplotlib / Seabornuv + ruff
Содержание
  1. Ситуация
  2. Задача
  3. Действия
  4. Результат
  5. Рекомендации
  6. Документация

Volta — Глубокий разбор KYC 45+

Ситуация

Фикс KYC поднял конверсию в целом — но закрывает ли он конкретно сегмент 45+, который сильнее всех отваливался на воронке.

Задача

Мне нужно было выяснить, закрывает ли фикс KYC отток именно в сегменте старшего возраста, а не только рост конверсии в целом. От меня требовалось развести общий эффект и эффект для этого сегмента.

Действия

  • HTE-разрез A/B KYC по возрастным группам (z-тест на две доли).
  • Завершение KYC 45+ vs 25–34 по каналам.
  • Chi-square возраст × завершение внутри treatment.

Результат

  • 35–44 +11,0 п.п. (p<0,001) и 18–24 +5,3 п.п. (p<0,05) — лифт значим; 45+ +1,4 п.п. (p=0,59, ns) — фикс не закрывает 45+.
  • Разрыв 45+ сохраняется и в treatment: 53,2% против 61,2% у 25–34 (chi² p<0,001).
  • Реферал (доверие) конвертит 45+ лучше всех (64,1%) и даёт наименьший разрыв (−2,4 п.п. против −10,6 п.п. на сайте).

Рекомендации

  • Не выкатывать только UX-фикс для 45+ — барьер в доверии.
  • Отдельный трек: assisted-онбординг (видеозвонок / KYC в отделении) + партнёрский/реферальный канал.
  • Проверить экономику trust-трека (Project 18).

Документация

Аналитика

Данные: github.com/NikitaBoyarkin/volta-banking — 22 projects; figures recomputed from the repo's own datasets (data/*.csv) via its analysis scripts. Funnel counts from data/volta_funnel_data.csv (10,000 users); A/B, retention, segmentation, churn, RFM, CLV, attribution, anomalies, spend, support, NPS, JTBD, unit economics, premium, KYC deep-dive, referral, assisted CAC, FX sourcing, premium offers, anchor CAC and dormant win-back follow the published project narrative (README + part pages).

Лифт KYC-фикса по возрасту (HTE)

Гетерогенный эффект прогресс-бара KYC по возрастным группам (treatment − control, п.п.). Фикс работает для 18–44, но не для 45+.

0 5 10 15 18-24 — Lift: 5.3 5.3 25-34 — Lift: 3.1 3.1 35-44 — Lift: 11 11 45+ — Lift: 1.4 1.4 18-24 25-34 35-44 45+ Возраст Лифт, п.п.
Выводы
  • 35–44 +11.0 п.п. (p<0.001) и 18–24 +5.3 п.п. (p<0.05) — лифт значим; 45+ +1.4 п.п. (p=0.59, ns) — фикс не закрывает 45+.
  • Разрыв 45+ сохраняется и в treatment: 45+ 53.2% против 25–34 61.2% (chi² p<0.001) — трение в доверии, не в UX.

Карта подпроектов Volta

Обзор Volta →