Matemarketing 2026 talk graph
Матемаркетинг 2026 · 2026-11-17 — 2026-11-27. Built from the conference programme at build time.
Edges are only what the data actually holds, and the page shows them at two levels. The map below is the first level: the event, its 11 tracks and one “Untracked” bucket (27 talks). The second level is per track, in the Tracks section — its talks and the themes that define that track. Theme tags (AI, metrics, A/B, BI, data, marketing, HR, causal inference, retention, product, security) are not a level of the hierarchy: at programme scale they are not selective, the widest tag covers 52 of 91 talks, so as hubs they would connect half the graph to everything. No two talks share a speaker: all 94 names are distinct. A speaker is listed for 81 of 91 talks; 10 have none.
Interactive subgraph: 13 nodes and 12 links around this page. Each node is keyboard-focusable; press Enter or Space to open its page. A full list of nodes and their links follows the graphic.
- Матемаркетинг 2026 : AVITO (Hub), ARCHITECTURE (Hub), AI SAFETY (Hub), DISCUSSIONS (Hub), MARKETING ANALYTICS (Hub), MASTER CLASSES (Hub), SEMANTIC LAYER AND ANALYTICAL AGENTS (Hub), TRANSFORMATION (Hub), EXPERIMENTS (Hub), HR TRACK (Hub), KEYNOTES (Hub), Untracked (Hub)
- AVITO : Матемаркетинг 2026 (Hub)
- ARCHITECTURE : Матемаркетинг 2026 (Hub)
- AI SAFETY : Матемаркетинг 2026 (Hub)
- DISCUSSIONS : Матемаркетинг 2026 (Hub)
- MARKETING ANALYTICS : Матемаркетинг 2026 (Hub)
- MASTER CLASSES : Матемаркетинг 2026 (Hub)
- SEMANTIC LAYER AND ANALYTICAL AGENTS : Матемаркетинг 2026 (Hub)
- TRANSFORMATION : Матемаркетинг 2026 (Hub)
- EXPERIMENTS : Матемаркетинг 2026 (Hub)
- HR TRACK : Матемаркетинг 2026 (Hub)
- KEYNOTES : Матемаркетинг 2026 (Hub)
- Untracked : Матемаркетинг 2026 (Hub)
The event in the middle, gold are its 11 tracks plus an “Untracked” bucket; each track's talks and themes are in the Tracks section. Every node is labelled; tap or click opens its section. The centre node opens the programme page.
- Conference
- Track
Programme source — mm-program-page;
graph builder — src/lib/talks-graph.ts.
Programme by day
All 91 talks in start-time order, grouped by day. Search filters by title, speaker, hall, track and theme at once — the filter runs in the browser, nothing is sent anywhere.
Showing 91 of 91
1 день 39 2026-11-26
-
11:00–11:35 Атом · SEMANTIC LAYER AND ANALYTICAL AGENTS · Радослав Нейчев
AI agents: how progress becomes everyday practice (and where you can already do without a subscription) -
11:00–12:10 Молекула · TRANSFORMATION · Валерий Бабушкин
How progress in modern multimodal models affects the DS/DA/ML profession -
11:00–11:35 Архангельск · MARKETING ANALYTICS · Сергей Кноль
How a single SQL query can show that your attribution is lying to you -
11:40–12:10 Архангельск · MARKETING ANALYTICS · Екатерина Владек
How to turn thousands of conversations into data marketing can make decisions on -
11:40–12:10 Атом · SEMANTIC LAYER AND ANALYTICAL AGENTS · Александр Линников
What AI-harness is and why the system matters more than a specific model -
12:15–12:45 Архангельск · MARKETING ANALYTICS · Алексей Бакшаев
How we identify future customers: next best action at a state bank -
12:15–13:20 Физика · AVITO · no speaker
Whom and what to teach in the age of AI: the future of professions and education -
12:15–13:20 Молекула · TRANSFORMATION · Максим Стаценко
Adoption, Harness, Knowledge - three drivers of the apocalypse -
12:15–12:45 Атом · SEMANTIC LAYER AND ANALYTICAL AGENTS · Ирина Голощапова
Agentic Engineering for Data Tasks Automation -
12:15–13:20 Кинетика · MASTER CLASSES · no speaker
DataLens Platform: from data source to product insight -
12:50–13:20 Архангельск · MARKETING ANALYTICS · Кирилл Соколов
The mathematics of survival: how ecosystem LTV protects future revenue -
12:50–13:20 Атом · SEMANTIC LAYER AND ANALYTICAL AGENTS · Александр Давыдов
How much analytical work can be handed to an agent and how to verify it is done -
13:25–13:55 Архангельск · MARKETING ANALYTICS · Кирилл Зиняков
The architecture of modern analytical realtime systems -
13:25–14:30 Молекула · TRANSFORMATION · Роман Бунин
How to measure AI adoption in a large company -
13:25–13:55 Атом · SEMANTIC LAYER AND ANALYTICAL AGENTS · Никита Зеленский
When an agent becomes an analyst: what will happen to the profession and the team? -
13:25–14:30 Кинетика · MASTER CLASSES · Александр Тихоиванов
HTML versus a dashboard: what we lose when an AI agent can visualize everything -
13:25–14:30 Физика · AVITO · no speaker
People management and project context: how a leader can keep the balance -
14:00–14:30 Молекула · no speaker
Another topic will be here -
14:00–14:30 Атом · Денис Пехтерев
The leader's AI operating system: an architecture of 17 roles and 13 procedures -
14:00–14:30 Архангельск · MARKETING ANALYTICS · Григорий Мельников
When a bot becomes a human: how modern fraud systems fool marketing analytics -
15:15–16:00 Атом · ARCHITECTURE · Максим Дубровин
Analytics data architecture for an AI product: how to get rid of lags on billions of events -
15:15–16:00 Молекула · TRANSFORMATION · Тимур Мерлин
The new transformation of marketing -
15:15–16:30 Кинетика · MASTER CLASSES · Дарья Чиркина
A/B test calculations for unusual metrics: MAU, WAU, Retention, NSAT, Contact Rate and CTR -
15:15–16:00 Архангельск · HR TRACK · Никита Егоров
Is the analyst market overheated or do candidates just not know how to sell themselves? -
15:15–16:00 Физика · AVITO · Снежана Тихонова
The price of a result: how we stabilize contact cost at Avito? -
16:00–16:30 Молекула · TRANSFORMATION · Никита Гурьянов
Antifragile metrics: when analytics starts to drive decisions -
16:00–16:30 Архангельск · HR TRACK · Михаил Комаров
Changes in product analyst skills through the lens of global research agenda analysis -
16:00–16:30 Физика · AVITO · Константин Жучков, Дмитрий Охрименко
How we built analytics in an AI assistant for sellers -
16:00–16:30 Атом · ARCHITECTURE · Михаил Рязанский
Data catalog as a product: how to digitize data flows and close key user scenarios across the business -
16:35–17:05 Архангельск · HR TRACK · Камила Мухтарова
We grew a junior. What next? How not to lose an analyst after the first successes -
16:35–17:05 Молекула · TRANSFORMATION · Евгений Цапников
How we moved to an ai-native state in the data analytics vertical and what it cost us -
16:35–17:05 Физика · AVITO · Виктория Шумилова
How to send communications so as not to overspam users and turn this into a system -
16:35–17:40 Кинетика · MASTER CLASSES · Павел Злобин
How to strengthen a marketing department with AI agents in practice -
16:35–17:05 Атом · ARCHITECTURE · Максим Кочетков
The pretrain data factory: how to turn the web, documents, audio and video into a training corpus -
17:10–17:40 Молекула · TRANSFORMATION · Анна Бочканова, Максим Белоусов
Automating product development with AI agents -
17:10–18:15 Архангельск · HR TRACK · Ольга Чумакина
How to manage the probation period and what is wrong with it -
17:10–17:40 Физика · AVITO · Артём Новиков
Monetization feed on the home page: a dozen iterations and an uplift we did not believe -
17:10–17:40 Атом · ARCHITECTURE · Иван Ворфоломеев
AI agents in analytics and Data Science: an architecture on banking cases -
17:45–18:15 Атом · ARCHITECTURE · no speaker
How much a proprietary LLM costs: how to choose an approach and calculate the full cost of the product
2 день 37 2026-11-27
-
10:20–10:55 Молекула · AI SAFETY · Беслан Курашов
“LLM plumbing” – how to build working AI pipelines without leaks -
10:20–10:55 Атом · Галина Блонская
A metric for media advertising: why it is sometimes better to build new than to change the old -
10:20–10:55 Физика · EXPERIMENTS · Андрей Королев
An experiment on trading service quality for money -
10:20–10:55 Архангельск · SEMANTIC LAYER AND ANALYTICAL AGENTS · Анна Коковина
AI for market intelligence: how to automate demand, market, and competitor research -
11:00–11:35 Физика · EXPERIMENTS · Дмитрий Павлов
When PSM no longer works: moving to system dynamics simulation models -
11:00–11:35 Молекула · AI SAFETY · Николай Голов
Obfuscation of personal data — not a savior but a trap -
11:00–12:10 Кинетика · MASTER CLASSES · Денис Платонов, Александр Сорокин
From labeling to launching an A/B test in 60 minutes -
11:00–11:35 Атом · Олеся Норицына
Evaluating the effectiveness of “flight” offline advertising -
11:00–11:35 Архангельск · SEMANTIC LAYER AND ANALYTICAL AGENTS · Артем Прокопенко
Mutation testing for AI agents in A/B tests -
11:40–12:10 Атом · Максим Кочуров
Identifiability of causal relationships when building media mix models -
11:40–12:10 Физика · EXPERIMENTS · Курамагомед Алиев
How to measure the effect of product changes without an A/B test? -
11:40–12:10 Молекула · AI SAFETY · no speaker
Can this be sent to an LLM? Legal requirements of 152-FZ when working with foreign models -
11:40–12:10 Архангельск · Сергей Бажин
A systematic approach in agentic coding: how to be sure this is a working product without reviewing tens of thousands of lines of code -
12:15–13:20 Кинетика · MASTER CLASSES · Евгений Кузнецов
An analyst as a team lead of AI agents: three AI engineering cases, from channel scoring to dashboard development -
12:15–13:20 Молекула · Алексей Лукацкий
Taking control of the dark side of AI: security, privacy and AI firewalls when working with LLMs -
12:15–12:45 Архангельск · SEMANTIC LAYER AND ANALYTICAL AGENTS · Екатерина Герасименко
How we implemented an AI-first framework for integration with the data platform instead of xls -
12:15–12:45 Физика · EXPERIMENTS · Марк Хабаров, Мария Авдеева
It's not all that good: what an A/B test doesn't tell us about users -
12:15–12:45 Атом · Максим Калацкий
Managing ad traffic during periods of high utilization -
12:50–13:20 Архангельск · SEMANTIC LAYER AND ANALYTICAL AGENTS · Фёдор Холькин
From data chaos and holes in reports to an AI-powered team built on a corporate knowledge graph -
12:50–13:20 Атом · Максим Коматовский
Growing Yggdrasil: how to build a working metric graph -
12:50–13:20 Физика · Андрей Романов
A/B tests on employees: from AI copilots to sales scripts -
13:25–14:30 Молекула · AI SAFETY · Александр Абрамов, Александр Маер
Corporate AI security: the architecture of constraints and the vulnerabilities of user scenarios -
13:25–13:55 Физика · EXPERIMENTS · Тимур Пыгамов, Максим Дянкин
A/B test interference: from myths to measurable results and understanding the scale of the problem -
13:25–13:55 Атом · Наталья Цветкова, Денис Гнатенко
Custom analytics: how an AI agent speeds up the path from business question to result -
13:25–13:55 Архангельск · SEMANTIC LAYER AND ANALYTICAL AGENTS · Александр Барышников
Conversational AI on top of corporate BI: access rights, verified numbers and the new role of the analyst. The path to AI-native analytics -
13:25–14:30 Кинетика · MASTER CLASSES · Сергей Кукуруз
Building a Discovery pack for testing product hypotheses -
14:00–14:30 Архангельск · SEMANTIC LAYER AND ANALYTICAL AGENTS · Павел Дубинин
From source to insight: what an AI agent needs for its answers to be trusted -
14:00–14:30 Физика · EXPERIMENTS · Анна Ставнийчук
The pitfalls of LLM labeling in effect estimation -
15:15–16:00 Кинетика · MASTER CLASSES · Виталий Шатилов
Vibe coding and cybersecurity risks: how not to make most of the mistakes that can lead to an easy compromise of the service or product you built -
15:15–16:00 Атом · DISCUSSIONS · no speaker
How will the role of analytics in business change by 2029? -
15:15–16:00 Физика · DISCUSSIONS · Евгений Финогеев, Виктория Дочкина, Павел Криворучко, Роман Будылин
How large companies choose, deploy and secure AI -
15:15–16:00 Молекула · KEYNOTES · Алексей Савватеев
Optimization traps: when uncoordinated decisions make the overall result worse -
16:35–17:40 Молекула · no speaker
Big official conference closing -
16:35–17:40 Физика · DISCUSSIONS · no speaker
How to measure AI visibility so the numbers can be trusted? -
16:35–17:40 Архангельск · DISCUSSIONS · Ирина Говорова, Михаил Понежда, Валентин Борисов
Know Your Data: how to extract business value from your own data with AI -
17:45–19:00 Молекула · KEYNOTES · Станислав Дробышевский
Mind outside the head: from the stone hand axe to artificial intelligence -
17:45–19:00 Физика · DISCUSSIONS · no speaker
Т-Банк 100к1: analytics versus intuition
Онлайн-день 15 2026-11-17
-
11:00–11:35 Онлайн-зал №3 · Анна Амброзевич
The anatomy of churn in SaaS products: 9 cuts that show the real reason customers leave -
11:00–11:35 Онлайн-зал №1 · Хамид Ибрагимов
Democratizing data access in the AI era: how to build a semantic layer in a company from scratch -
11:00–11:35 Онлайн-зал №2 · Владислав Слесарев
A seamless event analytics migration: moving product analytics from AppMetrica to our own event stream -
11:40–12:10 Онлайн-зал №3 · Мария Рымарь
Finding suspicious patterns in user behavior -
11:40–12:10 Онлайн-зал №1 · Виктория Пролетарская
How much context does AI really need? -
11:40–12:10 Онлайн-зал №2 · Сергей Клитный
Whydra: a Causal Discovery library for identifying and analyzing causal dependencies in data -
12:15–12:45 Онлайн-зал №2 · Александр Кореньков
A unified system for evaluating advertising effectiveness -
12:15–12:45 Онлайн-зал №3 · Григорий Засько, Николай Бондаренко
How to build an A/B platform the ecosystem trusts from scratch -
12:15–12:45 Онлайн-зал №1 · Николай Войтов
A mission-based model for order clustering -
12:50–13:20 Онлайн-зал №1 · Андрей Кузнецов
How we grow the quality of AI generation, using a city walks app as an example -
12:50–13:20 Онлайн-зал №3 · Ишан Гоэл
Why does AI draw wrong conclusions from data? -
13:25–13:55 Онлайн-зал №2 · Степан Медведев
Fighting organic cannibalization and wrong optimization -
13:25–13:55 Онлайн-зал №1 · Эльвира Хайруллина
How to calculate the cumulative effect of a series of experiments: measuring the impact of ML improvements on product metrics -
13:25–13:55 Онлайн-зал №3 · Дмитрий Тамаров
Marketing AI-native analytics: from on-site behavior to money in the till -
14:00–14:30 Онлайн-зал №1 · Александр Бараков
How AI is changing BI: where we stumble, what works and where we run next
No talks match this query.
Mini-graphs per track
Each track is its own subgraph: the track hub, its talks, and the themes that define that track. “Untracked” holds the talks the programme leaves without a track. Theme labels after a talk open that theme.
SEMANTIC LAYER AND ANALYTICAL AGENTS 11
Interactive subgraph: 16 nodes and 39 links around this page. Each node is keyboard-focusable; press Enter or Space to open its page. A full list of nodes and their links follows the graphic.
- SEMANTIC LAYER AND ANALYTICAL AGENTS : AI agents: how progress becomes everyday practice (and where you can already do without a subscription) (Hub), What AI-harness is and why the system matters more than a specific model (Hub), Agentic Engineering for Data Tasks Automation (Hub), How much analytical work can be handed to an agent and how to verify it is done (Hub), When an agent becomes an analyst: what will happen to the profession and the team? (Hub), AI for market intelligence: how to automate demand, market, and competitor research (Hub), Mutation testing for AI agents in A/B tests (Hub), How we implemented an AI-first framework for integration with the data platform instead of xls (Hub), From data chaos and holes in reports to an AI-powered team built on a corporate knowledge graph (Hub), Conversational AI on top of corporate BI: access rights, verified numbers and the new role of the analyst. The path to AI-native analytics (Hub), From source to insight: what an AI agent needs for its answers to be trusted (Hub)
- AI agents: how progress becomes everyday practice (and where you can already do without a subscription) : SEMANTIC LAYER AND ANALYTICAL AGENTS (Hub), AI & agents (Thematic link), Data engineering (Thematic link)
- What AI-harness is and why the system matters more than a specific model : SEMANTIC LAYER AND ANALYTICAL AGENTS (Hub), AI & agents (Thematic link), Data engineering (Thematic link), BI & dashboards (Thematic link)
- Agentic Engineering for Data Tasks Automation : SEMANTIC LAYER AND ANALYTICAL AGENTS (Hub), AI & agents (Thematic link), BI & dashboards (Thematic link)
- How much analytical work can be handed to an agent and how to verify it is done : SEMANTIC LAYER AND ANALYTICAL AGENTS (Hub), AI & agents (Thematic link), BI & dashboards (Thematic link), Metrics (Thematic link)
- When an agent becomes an analyst: what will happen to the profession and the team? : SEMANTIC LAYER AND ANALYTICAL AGENTS (Hub), AI & agents (Thematic link), Data engineering (Thematic link), Metrics (Thematic link)
- AI for market intelligence: how to automate demand, market, and competitor research : SEMANTIC LAYER AND ANALYTICAL AGENTS (Hub), AI & agents (Thematic link)
- Mutation testing for AI agents in A/B tests : SEMANTIC LAYER AND ANALYTICAL AGENTS (Hub), AI & agents (Thematic link), Data engineering (Thematic link), Metrics (Thematic link)
- How we implemented an AI-first framework for integration with the data platform instead of xls : SEMANTIC LAYER AND ANALYTICAL AGENTS (Hub), AI & agents (Thematic link), Data engineering (Thematic link)
- From data chaos and holes in reports to an AI-powered team built on a corporate knowledge graph : SEMANTIC LAYER AND ANALYTICAL AGENTS (Hub), AI & agents (Thematic link)
- Conversational AI on top of corporate BI: access rights, verified numbers and the new role of the analyst. The path to AI-native analytics : SEMANTIC LAYER AND ANALYTICAL AGENTS (Hub), AI & agents (Thematic link), Data engineering (Thematic link), BI & dashboards (Thematic link), Metrics (Thematic link)
- From source to insight: what an AI agent needs for its answers to be trusted : SEMANTIC LAYER AND ANALYTICAL AGENTS (Hub), AI & agents (Thematic link), Data engineering (Thematic link), BI & dashboards (Thematic link), Metrics (Thematic link)
- AI & agents : AI agents: how progress becomes everyday practice (and where you can already do without a subscription) (Thematic link), What AI-harness is and why the system matters more than a specific model (Thematic link), Agentic Engineering for Data Tasks Automation (Thematic link), How much analytical work can be handed to an agent and how to verify it is done (Thematic link), When an agent becomes an analyst: what will happen to the profession and the team? (Thematic link), AI for market intelligence: how to automate demand, market, and competitor research (Thematic link), Mutation testing for AI agents in A/B tests (Thematic link), How we implemented an AI-first framework for integration with the data platform instead of xls (Thematic link), From data chaos and holes in reports to an AI-powered team built on a corporate knowledge graph (Thematic link), Conversational AI on top of corporate BI: access rights, verified numbers and the new role of the analyst. The path to AI-native analytics (Thematic link), From source to insight: what an AI agent needs for its answers to be trusted (Thematic link)
- Data engineering : AI agents: how progress becomes everyday practice (and where you can already do without a subscription) (Thematic link), What AI-harness is and why the system matters more than a specific model (Thematic link), When an agent becomes an analyst: what will happen to the profession and the team? (Thematic link), Mutation testing for AI agents in A/B tests (Thematic link), How we implemented an AI-first framework for integration with the data platform instead of xls (Thematic link), Conversational AI on top of corporate BI: access rights, verified numbers and the new role of the analyst. The path to AI-native analytics (Thematic link), From source to insight: what an AI agent needs for its answers to be trusted (Thematic link)
- BI & dashboards : What AI-harness is and why the system matters more than a specific model (Thematic link), Agentic Engineering for Data Tasks Automation (Thematic link), How much analytical work can be handed to an agent and how to verify it is done (Thematic link), Conversational AI on top of corporate BI: access rights, verified numbers and the new role of the analyst. The path to AI-native analytics (Thematic link), From source to insight: what an AI agent needs for its answers to be trusted (Thematic link)
- Metrics : How much analytical work can be handed to an agent and how to verify it is done (Thematic link), When an agent becomes an analyst: what will happen to the profession and the team? (Thematic link), Mutation testing for AI agents in A/B tests (Thematic link), Conversational AI on top of corporate BI: access rights, verified numbers and the new role of the analyst. The path to AI-native analytics (Thematic link), From source to insight: what an AI agent needs for its answers to be trusted (Thematic link)
Track “SEMANTIC LAYER AND ANALYTICAL AGENTS”: 11 talks, 4 themes.
- Track
- Talk
- Theme
- AI agents: how progress becomes everyday practice (and where you can already do without a subscription)
Рабочие сценарии без подписки на Claude Code, Codex и другие передовые решения. Какие задачи разрешимы прямо сейчас на полностью открытом стеке, а где сохраняются ограничения. Эксперименты с Goose, Qwen и DeepSeek
- What AI-harness is and why the system matters more than a specific model
Настройка обвязки и MCP-сервера для автоматизации рутины. Разбор ошибок масштабирования, эксплуатационные ограничения и задачи, где LLM категорически нельзя оставлять без проверки
- Agentic Engineering for Data Tasks Automation
Расскажу, как мы организуем end-to-end автоматизацию типовых data-задач: как меняется работа подразделений с появлением агентов и как удалось достичь ускорения на 73% на задачах, выполненных агентами. Отдельно обсудим, как посчитать value от AI-агентов и на чём фокусироваться на уровне организации, чтобы двигаться вперед в агентизации типовых процессов работы с данными.
- How much analytical work can be handed to an agent and how to verify it is done
Восемь шагов от аналитической задачи до принятого ответа агента с проверкой на разных этапах: передаваемость определяется не сложностью задачи, а тем, объявлены ли решения; незаписанное решение всё равно будет принято — слоем, витриной или моделью; приёмка зависит от образа результата, и у самой приёмки есть слепая зона.
- When an agent becomes an analyst: what will happen to the profession and the team?
Каким станет ближайшее будущее аналитиков, когда фабрики отчетов и инсайтов уже заслужили свою репутацию, аналитик перестал быть «узким горлышком», а объём контекста компании конечен для построения аналитической системы
- AI for market intelligence: how to automate demand, market, and competitor research
Превращаем цепочку аналитических действий в автоматизированный процесс: формирование запросов, анализ динамики и использование результатов для проверки продуктовых и маркетинговых гипотез. Как устроен многошаговый поисковый агент, который формирует запросы, изучает результаты, возвращается к поиску и собирает информацию из множества источников и как превратить типичный competitive research из ручного процесса в повторяемый агентский ресёрч.
- Mutation testing for AI agents in A/B tests
Система AI-агентов вокруг A/B-платформы и измерение её надёжности через benchmark на основе mutation testing: вносим контролируемые дефекты в кейсы с известным ответом и считаем mutation score, false positive rate и порог обнаружения. На этом полигоне сравниваем модели и архитектуры и определяем границы допуска где агентам уже можно доверять
- How we implemented an AI-first framework for integration with the data platform instead of xls
Перенос работы из ручных передач и однотипной разработки в конфигурацию, генераторы и инструменты платформы. Это сокращает путь от описания источника до появления данных в платформе и позволяет масштабировать подключение типовых источников без пропорционального роста ручной работы.
- From data chaos and holes in reports to an AI-powered team built on a corporate knowledge graph
Решение задачи устранения хаоса в данных компании и создание корпоративного графа знаний Последовательность перехода от исправления конкретной аналитической проблемы к общему контексту для AI-инструментов. Доклад поможет оценить, какие знания нужно формализовать в своей компании, как проверять их качество и с какого рабочего процесса начинать внедрение.
- Conversational AI on top of corporate BI: access rights, verified numbers and the new role of the analyst. The path to AI-native analytics
Мы встроили в работу разговорного ИИ-помощника: сотрудник спрашивает о продажах обычными словами, текстом или голосом, и получает график или численный ответ. Права доступа наследуются из BI, ответ сверяется кодом, рядом с цифрой — её «паспорт» (период, фильтры, источник). На пойманном промахе модели покажу, как работает проверка, расскажу, что мы измеряем на пилоте и где бот ошибся. А дальше — о переходе к AI-native-аналитике: руководители сами работают с данными, их вопросы копятся в базу знаний, словарь метрик поддерживает бизнес, а аналитик становится архитектором системы, которая приносит гипотезы
- From source to insight: what an AI agent needs for its answers to be trusted
Подключить LLM к базе — ещё не аналитика: агент не знает, откуда пришли данные, кто имеет к ним доступ и как посчитана метрика. Рассказываем, как встраивали ИИ в каждый шаг аналитического цикла (загрузку, SQL, оркестрацию, каталог, дашборды) и какой контекст ему для этого понадобился: автоматически собранные метаданные, lineage, права на уровне платформы. Разберём, где агент уже заменяет ручную работу, где ошибается и как проверить его ответ вплоть до исходной таблицы. Опыт DataLens Platform, самого крупного обновления DataLens: AI-first платформы, где к привычным дашбордам добавились lakehouse, оркестрация и каталог данных в едином интерфейсе
MASTER CLASSES 8
Interactive subgraph: 12 nodes and 25 links around this page. Each node is keyboard-focusable; press Enter or Space to open its page. A full list of nodes and their links follows the graphic.
- MASTER CLASSES : DataLens Platform: from data source to product insight (Hub), HTML versus a dashboard: what we lose when an AI agent can visualize everything (Hub), A/B test calculations for unusual metrics: MAU, WAU, Retention, NSAT, Contact Rate and CTR (Hub), How to strengthen a marketing department with AI agents in practice (Hub), From labeling to launching an A/B test in 60 minutes (Hub), An analyst as a team lead of AI agents: three AI engineering cases, from channel scoring to dashboard development (Hub), Building a Discovery pack for testing product hypotheses (Hub), Vibe coding and cybersecurity risks: how not to make most of the mistakes that can lead to an easy compromise of the service or product you built (Hub)
- DataLens Platform: from data source to product insight : MASTER CLASSES (Hub), AI & agents (Thematic link), Product & discovery (Thematic link), BI & dashboards (Thematic link)
- HTML versus a dashboard: what we lose when an AI agent can visualize everything : MASTER CLASSES (Hub), AI & agents (Thematic link), BI & dashboards (Thematic link)
- A/B test calculations for unusual metrics: MAU, WAU, Retention, NSAT, Contact Rate and CTR : MASTER CLASSES (Hub), AI & agents (Thematic link), Product & discovery (Thematic link)
- How to strengthen a marketing department with AI agents in practice : MASTER CLASSES (Hub), AI & agents (Thematic link), BI & dashboards (Thematic link)
- From labeling to launching an A/B test in 60 minutes : MASTER CLASSES (Hub), Product & discovery (Thematic link)
- An analyst as a team lead of AI agents: three AI engineering cases, from channel scoring to dashboard development : MASTER CLASSES (Hub), AI & agents (Thematic link), Product & discovery (Thematic link), BI & dashboards (Thematic link)
- Building a Discovery pack for testing product hypotheses : MASTER CLASSES (Hub), AI & agents (Thematic link), Product & discovery (Thematic link)
- Vibe coding and cybersecurity risks: how not to make most of the mistakes that can lead to an easy compromise of the service or product you built : MASTER CLASSES (Hub), AI & agents (Thematic link), Product & discovery (Thematic link)
- AI & agents : DataLens Platform: from data source to product insight (Thematic link), HTML versus a dashboard: what we lose when an AI agent can visualize everything (Thematic link), A/B test calculations for unusual metrics: MAU, WAU, Retention, NSAT, Contact Rate and CTR (Thematic link), How to strengthen a marketing department with AI agents in practice (Thematic link), An analyst as a team lead of AI agents: three AI engineering cases, from channel scoring to dashboard development (Thematic link), Building a Discovery pack for testing product hypotheses (Thematic link), Vibe coding and cybersecurity risks: how not to make most of the mistakes that can lead to an easy compromise of the service or product you built (Thematic link)
- Product & discovery : DataLens Platform: from data source to product insight (Thematic link), A/B test calculations for unusual metrics: MAU, WAU, Retention, NSAT, Contact Rate and CTR (Thematic link), From labeling to launching an A/B test in 60 minutes (Thematic link), An analyst as a team lead of AI agents: three AI engineering cases, from channel scoring to dashboard development (Thematic link), Building a Discovery pack for testing product hypotheses (Thematic link), Vibe coding and cybersecurity risks: how not to make most of the mistakes that can lead to an easy compromise of the service or product you built (Thematic link)
- BI & dashboards : DataLens Platform: from data source to product insight (Thematic link), HTML versus a dashboard: what we lose when an AI agent can visualize everything (Thematic link), How to strengthen a marketing department with AI agents in practice (Thematic link), An analyst as a team lead of AI agents: three AI engineering cases, from channel scoring to dashboard development (Thematic link)
Track “MASTER CLASSES”: 8 talks, 3 themes.
- Track
- Talk
- Theme
- DataLens Platform: from data source to product insight
Как пройти путь от сырых данных до ответа на вопрос о продукте — в одной платформе и с помощью ИИ? На мастер-классе разберём этот цикл на практическом примере: загрузим данные в Lakehouse, с помощью ИИ-агента подготовим SQL-запросы и настроим оркестрацию, организуем каталог данных и доступы, а затем соберём дашборд с Нейроаналитиком.
- HTML versus a dashboard: what we lose when an AI agent can visualize everything
AI-агенты позволяют аналитикам и менеджерам за минуты создавать интерактивные HTML-отчёты — гибкие, но не всегда надёжные. На примерах разных бизнес-юнитов Яндекса сравним HTML и классические дашборды, а также покажем, как SDK помогает совместить гибкость с управляемостью BI.
- A/B test calculations for unusual metrics: MAU, WAU, Retention, NSAT, Contact Rate and CTR
Стандартные статистические тесты не работают для сложных продуктовых метрик (MAU, Retention, NPS, CTR) из-за их ratio-структуры и автокорреляции, а бутстрап требует слишком много времени. На воркшопе мы разберем создание полностью автономного пайплайна для оценки A/B-экспериментов на чистом SQL (Presto/Trino) без сторонних платформ. Участники получат готовый алгоритм и код: от настройки SRM-контроля и линеаризации метрик до расчета MDE с поправкой Бонферрони и получения итоговых p-value из сырых логов.
- How to strengthen a marketing department with AI agents in practice
Как агенты ведут Яндекс.Директ, генерируют контент и дизайн, строят аналитические дашборды и выполняют маркетинговые задачи по расписанию.
- From labeling to launching an A/B test in 60 minutes
Участники пройдут цикл от разметки действий пользователя, до формирования продуктовых гипотез и запуска АБ-теста на реальном ecom-клиенте платформы uxrocket.ru Участники также выполнят пост-анализ и научатся формировать гипотезы, которые в 3 раза чаще приводят к росту.
- An analyst as a team lead of AI agents: three AI engineering cases, from channel scoring to dashboard development
Превращаем AI из генератора кода в управляемого исполнителя, способного провести задачу от размытого бизнес-вопроса до проверяемого результата.
- Building a Discovery pack for testing product hypotheses
Сборка агентских систем, выдающих результат стабильного качества. Инженерный разбор компонент и паттерны архитектуры ИИ-решений.
- Vibe coding and cybersecurity risks: how not to make most of the mistakes that can lead to an easy compromise of the service or product you built
Участники мастер-класс узнают о комплексном подходе к обеспечению базовых принципов информационной безопасности собственных продуктов. Будут рассмотрены в том числе автосканирование по публичным базам уязвимостей, собственные «зеркала» с уже проверенными пакетами и другие инструменты. Слушатели получат чек-лист критически важных моментов, на которые необходимо обращать внимание при разработке продуктов агентами. Мастер-класс сопровождается большим набором кейсов и примеров.
TRANSFORMATION 7
Interactive subgraph: 12 nodes and 22 links around this page. Each node is keyboard-focusable; press Enter or Space to open its page. A full list of nodes and their links follows the graphic.
- TRANSFORMATION : How progress in modern multimodal models affects the DS/DA/ML profession (Hub), Adoption, Harness, Knowledge - three drivers of the apocalypse (Hub), How to measure AI adoption in a large company (Hub), The new transformation of marketing (Hub), Antifragile metrics: when analytics starts to drive decisions (Hub), How we moved to an ai-native state in the data analytics vertical and what it cost us (Hub), Automating product development with AI agents (Hub)
- How progress in modern multimodal models affects the DS/DA/ML profession : TRANSFORMATION (Hub)
- Adoption, Harness, Knowledge - three drivers of the apocalypse : TRANSFORMATION (Hub), AI & agents (Thematic link), HR & team (Thematic link)
- How to measure AI adoption in a large company : TRANSFORMATION (Hub), AI & agents (Thematic link), Metrics (Thematic link)
- The new transformation of marketing : TRANSFORMATION (Hub), AI & agents (Thematic link), HR & team (Thematic link), Metrics (Thematic link)
- Antifragile metrics: when analytics starts to drive decisions : TRANSFORMATION (Hub), HR & team (Thematic link), Metrics (Thematic link), Product & discovery (Thematic link)
- How we moved to an ai-native state in the data analytics vertical and what it cost us : TRANSFORMATION (Hub), AI & agents (Thematic link), HR & team (Thematic link), Product & discovery (Thematic link)
- Automating product development with AI agents : TRANSFORMATION (Hub), AI & agents (Thematic link), Product & discovery (Thematic link)
- AI & agents : Adoption, Harness, Knowledge - three drivers of the apocalypse (Thematic link), How to measure AI adoption in a large company (Thematic link), The new transformation of marketing (Thematic link), How we moved to an ai-native state in the data analytics vertical and what it cost us (Thematic link), Automating product development with AI agents (Thematic link)
- HR & team : Adoption, Harness, Knowledge - three drivers of the apocalypse (Thematic link), The new transformation of marketing (Thematic link), Antifragile metrics: when analytics starts to drive decisions (Thematic link), How we moved to an ai-native state in the data analytics vertical and what it cost us (Thematic link)
- Metrics : How to measure AI adoption in a large company (Thematic link), The new transformation of marketing (Thematic link), Antifragile metrics: when analytics starts to drive decisions (Thematic link)
- Product & discovery : Antifragile metrics: when analytics starts to drive decisions (Thematic link), How we moved to an ai-native state in the data analytics vertical and what it cost us (Thematic link), Automating product development with AI agents (Thematic link)
Track “TRANSFORMATION”: 7 talks, 4 themes.
- Track
- Talk
- Theme
- How progress in modern multimodal models affects the DS/DA/ML profession
Валерий Бабушкин, cтарший главный начальник BP.
- Adoption, Harness, Knowledge - three drivers of the apocalypse
Как всей компании пройти путь от «AI, помоги написать SQL» до «AI, возьми задачу целиком»? Расскажу, какие технические решения мы для этого собирали в нашем направлении в Яндексе и как связали их в одну систему. В моем рассказе мы разберём три драйвера роста использования AI: Adoption - чтобы люди начали пользоваться AI. Как убрать все преграды и сделать AI в привычным рабочим инструментом. Harness - чтобы агент использовал внутренние инструменты. Как дать предсказателю следующего токена возможность использовать утилиты, которыми пользуются люди и обучить необходимым навыкам, а потом еще и проверить результат. Knowledge - чтобы агент понимал контекст вашего бизнеса. Как дать агенту информацию о данных, коде, документацию компании, чтобы меньше объяснять с нуля и не забить все окно контекста. Покажу, как устроена эта экосистема: от интерфейсов для работы с агентами до тестирования документации. В финале соберём всё на примере типовой задачи аналитика и вы сможете примерить эту архитектуру на свою команду и понять, каких компонентов вам пока не хватает.
- How to measure AI adoption in a large company
Системный подход к оценке AI Adoption внутри большой компании: от архитектуры решения до детального разбора применяемых методов. Слушатели получат фреймворк для оценки эффективности AI-инициатив, позволяющий управлять процессом внедрения нейросетей на основе данных.
- The new transformation of marketing
Поговорим о том, как сегодня добиться измеримого результата в областях где совсем недавно полагались "на веру", как выстроить AI-native фреймворк работы маркетинга и почему здесь нужна революция а не эволюция. Подробно расскажу о том, как выглядят конкретные примеры маркетинговых механизмов в Авито и поделюсь лайфхаками, которые приносят результаты.
- Antifragile metrics: when analytics starts to drive decisions
Главный результат аналитики выражается не точностью цифр, а тем, какие решения компания принимает на их основе. Что делать, когда привычные продуктовые метрики перестали отражать долгосрочное здоровье продукта, а разные команды по-разному понимают, что именно считать успехом? Вы узнаете, как изменить подход к измерению продукта и повлиять на реальные бизнес-решения
- How we moved to an ai-native state in the data analytics vertical and what it cost us
Трансформация вертикали data-аналитики в AI-native состояние. Слушатели узнают про «fast-track» для трансформации с целью радикального сокращение t2m-решения задач без потери в качестве. Подробно разберем целевую архитектура инфраструктуры для AI-native команды, компетенции, которые необходимы для успеха и то, как бороться с отторжением смены парадигмы командой
- Automating product development with AI agents
Путь от идеи до запуска готовой функциональности в продакшен можно объединить в единый процесс, управляемый AI-агентами? Мы расскажем, как создали продукт для сквозной автоматизации разработки: от поступления фич-реквеста и проработки требований до реализации, тестирования и публикации готового решения. Наглядно покажем, как именно AI-агенты взаимодействуют друг с другом, берут на себя задачи на разных этапах разработки и помогают управлять всем процессом в единой системе. На примере нашего решения разберём, как меняется привычный процесс разработки, какую роль в нём играет человек и как перейти от отдельных AI-инструментов к полноценной агентной автоматизации
AVITO 6
Interactive subgraph: 8 nodes and 9 links around this page. Each node is keyboard-focusable; press Enter or Space to open its page. A full list of nodes and their links follows the graphic.
- AVITO : Whom and what to teach in the age of AI: the future of professions and education (Hub), People management and project context: how a leader can keep the balance (Hub), The price of a result: how we stabilize contact cost at Avito? (Hub), How we built analytics in an AI assistant for sellers (Hub), How to send communications so as not to overspam users and turn this into a system (Hub), Monetization feed on the home page: a dozen iterations and an uplift we did not believe (Hub)
- Whom and what to teach in the age of AI: the future of professions and education : AVITO (Hub), HR & team (Thematic link)
- People management and project context: how a leader can keep the balance : AVITO (Hub), HR & team (Thematic link)
- The price of a result: how we stabilize contact cost at Avito? : AVITO (Hub)
- How we built analytics in an AI assistant for sellers : AVITO (Hub)
- How to send communications so as not to overspam users and turn this into a system : AVITO (Hub)
- Monetization feed on the home page: a dozen iterations and an uplift we did not believe : AVITO (Hub), HR & team (Thematic link)
- HR & team : Whom and what to teach in the age of AI: the future of professions and education (Thematic link), People management and project context: how a leader can keep the balance (Thematic link), Monetization feed on the home page: a dozen iterations and an uplift we did not believe (Thematic link)
Track “AVITO”: 6 talks, 1 themes.
- Track
- Talk
- Theme
- Whom and what to teach in the age of AI: the future of professions and education
- Какие границы между профессиями теряют смысл, а какие становятся особенно важными? - Где брать опыт и как учиться на протяжении карьеры? - Что проверять без AI, а что — обязательно с AI? Где важно самостоятельное владение методом, а где — способность получить и проверить результат с инструментами? - Какие форматы оценки стоит менять? Что теперь могут показать экзамен, домашнее задание, тестовое, портфолио и техническое собеседование? - Как проверять понимание и перенос навыка? Достаточно ли попросить объяснить решение, найти ошибку или адаптировать подход к новым условиям? - Как оценивать работу с AI? Какие признаки отличают сильного пользователя от человека, который принимает убедительный ответ без проверки? - Как проверять квалификацию действующих сотрудников? Что должно подтверждать готовность к большей ответственности или переходу в соседнюю роль? - Во что специалисту инвестировать своё время уже сейчас?
- People management and project context: how a leader can keep the balance
С ростом команды пипл-менеджмент занимает всё больше времени и внимания руководителя. Найм, развитие сотрудников и организационные вопросы вытесняют проектный контекст — руководителю становится сложнее обсуждать задачи по существу и предлагать содержательные решения. Поговорим о том, как распределять ограниченное контекстное окно между людьми и проектами, какой уровень погружения действительно необходим и какие практики помогают сохранять понимание сути происходящего в команде. Ключевой тезис: ресурс руководителя ограничен не только временем, но и объёмом контекста, который он способен удерживать. Баланс между пипл-менеджментом и проектами достигается во многом за счёт управления собственным вниманием.
- The price of a result: how we stabilize contact cost at Avito?
Что мы делаем ценообразование на Авито более справедливым для селлера за счет оптимизации стоимости контакта.
- How we built analytics in an AI assistant for sellers
Мы распарсили «черный ящик» диалогов селлера с ассистентом, даже не используя LLM-судей. Нам удалось полноценно выстроить воронки выполнения рекомендаций и выделить основные пользовательские сценарии использования ассистента и измерить качество AI-ассистента.
- How to send communications so as not to overspam users and turn this into a system
Превратили массовые CRM-пуши в систему, которая автоматически подстраивает объём и состав аудитории под баланс спроса и предложения на платформе подработки. Разбираем путь от расчёта сегментов и приоритизации пользователей до проверки решения A/B‑тестом. В результате пользователи стали получать в шесть раз меньше пушей без снижения числа бронирований смен.
- Monetization feed on the home page: a dozen iterations and an uplift we did not believe
Кросс-категорийная монетизационная лента на главной - одна из самых денежных раскаток команды эффективности монетизации. Расскажу, как мы научились приводить качественный платный трафик с главной. Отдельно разберу главный урок для аналитики: почему в АБ-тестах, которые меняют ранжирование, поюзерный сплит завышает эффект на выручку в разы, как мы это отловили и измерили.
MARKETING ANALYTICS 6
Interactive subgraph: 10 nodes and 16 links around this page. Each node is keyboard-focusable; press Enter or Space to open its page. A full list of nodes and their links follows the graphic.
- MARKETING ANALYTICS : How a single SQL query can show that your attribution is lying to you (Hub), How to turn thousands of conversations into data marketing can make decisions on (Hub), How we identify future customers: next best action at a state bank (Hub), The mathematics of survival: how ecosystem LTV protects future revenue (Hub), The architecture of modern analytical realtime systems (Hub), When a bot becomes a human: how modern fraud systems fool marketing analytics (Hub)
- How a single SQL query can show that your attribution is lying to you : MARKETING ANALYTICS (Hub), Marketing & ads (Thematic link), Data engineering (Thematic link), Metrics (Thematic link)
- How to turn thousands of conversations into data marketing can make decisions on : MARKETING ANALYTICS (Hub), Marketing & ads (Thematic link), Data engineering (Thematic link), Metrics (Thematic link)
- How we identify future customers: next best action at a state bank : MARKETING ANALYTICS (Hub)
- The mathematics of survival: how ecosystem LTV protects future revenue : MARKETING ANALYTICS (Hub)
- The architecture of modern analytical realtime systems : MARKETING ANALYTICS (Hub), Marketing & ads (Thematic link), Data engineering (Thematic link), Metrics (Thematic link)
- When a bot becomes a human: how modern fraud systems fool marketing analytics : MARKETING ANALYTICS (Hub), Marketing & ads (Thematic link)
- Marketing & ads : How a single SQL query can show that your attribution is lying to you (Thematic link), How to turn thousands of conversations into data marketing can make decisions on (Thematic link), The architecture of modern analytical realtime systems (Thematic link), When a bot becomes a human: how modern fraud systems fool marketing analytics (Thematic link)
- Data engineering : How a single SQL query can show that your attribution is lying to you (Thematic link), How to turn thousands of conversations into data marketing can make decisions on (Thematic link), The architecture of modern analytical realtime systems (Thematic link)
- Metrics : How a single SQL query can show that your attribution is lying to you (Thematic link), How to turn thousands of conversations into data marketing can make decisions on (Thematic link), The architecture of modern analytical realtime systems (Thematic link)
Track “MARKETING ANALYTICS”: 6 talks, 3 themes.
- Track
- Talk
- Theme
- How a single SQL query can show that your attribution is lying to you
Спикер поделится sql-кодом, который позволяет проверить честность модели атрибуции на собственных данных, а так же быстрым маркером некорректной оценки источников в one-touch моделях. Слушатели получат переиспользуемый аналитический фреймворк для быстрой оцифровки проблем с one-touch атрибуцией, которая искажает реальный вклад рекламных каналов в B2B-продуктах и сервисах с длинным циклом сделки.
- How to turn thousands of conversations into data marketing can make decisions on
Трансформация сырых голосовых логов в структурированные датасеты с помощью нейросетей. Строим автоматическую транскрибацию, тегирование намерений и распознавание эмоций, чтобы превратить речь в данные, пригодные для количественного анализа
- How we identify future customers: next best action at a state bank
Рассказываем про работающий процесс в закрытом контуре государственного банка. Собрали единую базу знаний о клиентах из всех доступных источников. На её основе автоматически формируется портрет клиента, а по портрету готовится предложение, актуальное именно для него. Весь путь от сбора данных до готового предложения у менеджера автоматизирован. Ценность кейса в том, что это работающий процесс в закрытом контуре государственного банка, а не эксперимент. Как собрать портрет клиента, которого у банка ещё нет: какие источники дали пользу, а какие оказались шумом.
- The mathematics of survival: how ecosystem LTV protects future revenue
Опыт принятия сложных решений для арбитража внутреннего трафика и принятия решений для максимизации ROI экосистемы.
- The architecture of modern analytical realtime systems
Разбор рабочей системы реалтайм-атрибуции, которую мы спроектировали, довели до боевой нагрузки и измерили сами с цифрами на каждом шаге: от 11 строк/с на стейджинге до ~26 тыс. событий/с в проде, с бенчмарками четырёх баз данных и стоимостью в рублях за миллион событий. Слушатели унесут не список технологий, а проверяемые правила выбора. Покажем не только результаты, но и собственные ошибки методики измерений
- When a bot becomes a human: how modern fraud systems fool marketing analytics
Кейсы обнаружения автоматизированного трафика и подходы к оценке качества фильтрации. многоуровневый анализ браузерного окружения, про отказ от блокировок по IP в пользу точечной фильтрации на уровне L7.
EXPERIMENTS 6
Interactive subgraph: 11 nodes and 24 links around this page. Each node is keyboard-focusable; press Enter or Space to open its page. A full list of nodes and their links follows the graphic.
- EXPERIMENTS : An experiment on trading service quality for money (Hub), When PSM no longer works: moving to system dynamics simulation models (Hub), How to measure the effect of product changes without an A/B test? (Hub), It's not all that good: what an A/B test doesn't tell us about users (Hub), A/B test interference: from myths to measurable results and understanding the scale of the problem (Hub), The pitfalls of LLM labeling in effect estimation (Hub)
- An experiment on trading service quality for money : EXPERIMENTS (Hub), A/B & experiments (Thematic link), Product & discovery (Thematic link), Causal inference (Thematic link)
- When PSM no longer works: moving to system dynamics simulation models : EXPERIMENTS (Hub), A/B & experiments (Thematic link), Marketing & ads (Thematic link), Causal inference (Thematic link)
- How to measure the effect of product changes without an A/B test? : EXPERIMENTS (Hub), A/B & experiments (Thematic link), Product & discovery (Thematic link), Marketing & ads (Thematic link), Causal inference (Thematic link)
- It's not all that good: what an A/B test doesn't tell us about users : EXPERIMENTS (Hub), A/B & experiments (Thematic link), Product & discovery (Thematic link)
- A/B test interference: from myths to measurable results and understanding the scale of the problem : EXPERIMENTS (Hub), A/B & experiments (Thematic link), Product & discovery (Thematic link), Marketing & ads (Thematic link)
- The pitfalls of LLM labeling in effect estimation : EXPERIMENTS (Hub), A/B & experiments (Thematic link), Product & discovery (Thematic link), Marketing & ads (Thematic link)
- A/B & experiments : An experiment on trading service quality for money (Thematic link), When PSM no longer works: moving to system dynamics simulation models (Thematic link), How to measure the effect of product changes without an A/B test? (Thematic link), It's not all that good: what an A/B test doesn't tell us about users (Thematic link), A/B test interference: from myths to measurable results and understanding the scale of the problem (Thematic link), The pitfalls of LLM labeling in effect estimation (Thematic link)
- Product & discovery : An experiment on trading service quality for money (Thematic link), How to measure the effect of product changes without an A/B test? (Thematic link), It's not all that good: what an A/B test doesn't tell us about users (Thematic link), A/B test interference: from myths to measurable results and understanding the scale of the problem (Thematic link), The pitfalls of LLM labeling in effect estimation (Thematic link)
- Marketing & ads : When PSM no longer works: moving to system dynamics simulation models (Thematic link), How to measure the effect of product changes without an A/B test? (Thematic link), A/B test interference: from myths to measurable results and understanding the scale of the problem (Thematic link), The pitfalls of LLM labeling in effect estimation (Thematic link)
- Causal inference : An experiment on trading service quality for money (Thematic link), When PSM no longer works: moving to system dynamics simulation models (Thematic link), How to measure the effect of product changes without an A/B test? (Thematic link)
Track “EXPERIMENTS”: 6 talks, 4 themes.
- Track
- Talk
- Theme
- An experiment on trading service quality for money
Качество клиентского сервиса — это управляемый экономический параметр, а не просто набор операционных SLA. В Т-Банке провели масштабный A/B-тест, отказавшись от единого стандарта поддержки: для разных сегментов применили режимы жесткой экономии (ECO, −30% костов) и премиального саппорта (CX+, +70% костов). Эксперимент доказал, что инвестиции в качество окупаются далеко за пределами контакт-центра: режим CX+ статистически значимо растит NPV, повышает утилизацию продуктов и даже снижает долю просрочек по кредитам. Разберем механику оценки через прокси-метрики LTV и покажем, как дифференцировать сервис, чтобы безопасно резать косты и максимизировать совокупную прибыль
- When PSM no longer works: moving to system dynamics simulation models
Имитационная модель системной динамики, откалиброванная под фактические бизнес-метрики, отвечающая на вопрос что будет с метриками если варьировать параметры бизнеса.
- How to measure the effect of product changes without an A/B test?
Разделить селлеров на группы А и Б в нашем случае нельзя: это означало бы предоставление разным селлерам разных условий продвижения. Поэтому провести классический A/B-тест невозможно. Решением становится синтетический контроль: он позволяет оценивать эффект изменений без прямого разделения селлеров на тестовую и контрольную группы
- It's not all that good: what an A/B test doesn't tell us about users
Как глубокий анализ аудитории А/В-теста помогает находить неожиданные эффекты экспериментов, принимать более точные продуктовые решения, а также улучшать качество и точность рекомендаций.
- A/B test interference: from myths to measurable results and understanding the scale of the problem
Целостная модель интерференции (искажение результата из-за пересечения экспериментов) и оригинальный критерий оценки влияния одного эксперимента на другой и внутренний инструмент для оперативной проверки от команды ASL, развивающей внутреннюю АБ платформу Т-Банка.
- The pitfalls of LLM labeling in effect estimation
Тональность отзыва, тема обращения, категория товара — ещё недавно всё это размечали вручную, теперь же — размечают языковые модели. Вместе с этим изменился статус чисел, которые на такой разметке считают. Метрика в дашборде и целевая метрика эксперимента больше не наблюдаются – они предсказываются. Можно ли считать статистику по метрике, которую проставила модель, и что с этой статистикой не так?
ARCHITECTURE 5
Interactive subgraph: 10 nodes and 16 links around this page. Each node is keyboard-focusable; press Enter or Space to open its page. A full list of nodes and their links follows the graphic.
- ARCHITECTURE : Analytics data architecture for an AI product: how to get rid of lags on billions of events (Hub), Data catalog as a product: how to digitize data flows and close key user scenarios across the business (Hub), The pretrain data factory: how to turn the web, documents, audio and video into a training corpus (Hub), AI agents in analytics and Data Science: an architecture on banking cases (Hub), How much a proprietary LLM costs: how to choose an approach and calculate the full cost of the product (Hub)
- Analytics data architecture for an AI product: how to get rid of lags on billions of events : ARCHITECTURE (Hub), AI & agents (Thematic link), Data engineering (Thematic link), Metrics (Thematic link)
- Data catalog as a product: how to digitize data flows and close key user scenarios across the business : ARCHITECTURE (Hub), Data engineering (Thematic link), Product & discovery (Thematic link)
- The pretrain data factory: how to turn the web, documents, audio and video into a training corpus : ARCHITECTURE (Hub), Data engineering (Thematic link), Product & discovery (Thematic link)
- AI agents in analytics and Data Science: an architecture on banking cases : ARCHITECTURE (Hub), AI & agents (Thematic link), Metrics (Thematic link)
- How much a proprietary LLM costs: how to choose an approach and calculate the full cost of the product : ARCHITECTURE (Hub), AI & agents (Thematic link), Product & discovery (Thematic link)
- AI & agents : Analytics data architecture for an AI product: how to get rid of lags on billions of events (Thematic link), AI agents in analytics and Data Science: an architecture on banking cases (Thematic link), How much a proprietary LLM costs: how to choose an approach and calculate the full cost of the product (Thematic link)
- Data engineering : Analytics data architecture for an AI product: how to get rid of lags on billions of events (Thematic link), Data catalog as a product: how to digitize data flows and close key user scenarios across the business (Thematic link), The pretrain data factory: how to turn the web, documents, audio and video into a training corpus (Thematic link)
- Product & discovery : Data catalog as a product: how to digitize data flows and close key user scenarios across the business (Thematic link), The pretrain data factory: how to turn the web, documents, audio and video into a training corpus (Thematic link), How much a proprietary LLM costs: how to choose an approach and calculate the full cost of the product (Thematic link)
- Metrics : Analytics data architecture for an AI product: how to get rid of lags on billions of events (Thematic link), AI agents in analytics and Data Science: an architecture on banking cases (Thematic link)
Track “ARCHITECTURE”: 5 talks, 4 themes.
- Track
- Talk
- Theme
- Analytics data architecture for an AI product: how to get rid of lags on billions of events
Проверенная схема построения высоконагруженных пайплайнов для подготовки ML-датасетов, краулинга и ETL. Как закладывать бизнес-логику в модель данных, и почему отказ от потоковой агрегации глобальных состояний делает систему устойчивой
- Data catalog as a product: how to digitize data flows and close key user scenarios across the business
Превращаем data‑каталог из «реестра таблиц» во внутренний продукт уровня экосистемы, выстроить архитектурный каркас, а затем “зашить” в него логику, которая закрывает реальные пользовательские сценарии аналитиков, инженеров и владельцев данных.
- The pretrain data factory: how to turn the web, documents, audio and video into a training corpus
Контроль качества данных в bigtech-масштабе без ручной разметки и специфика подготовки медиа-источников. Архитектура пайплайна подготовки pretrain-корпуса и чеклист что отсекать, чтобы не сжигать дорогой compute на грязных данных
- AI agents in analytics and Data Science: an architecture on banking cases
Разбираем архитектуру агентной системы: контракт задачи, управление агентами, данные и инструменты, расчёты и проверки. Покажу, как передаются задача, результаты расчётов и статусы проверок, когда нужна доработка и где решение принимает человек. На наших кейсах разберу неоднозначные метрики, связь качества модели с бизнес-KPI и влияние дрейфа. Проверки охватят данные, применимость метода, обоснованность выводов и устойчивость рекомендаций к допущениям: правила и пересчёт, поиск противоречий агентом, разбор специалистом. Покажу, как планируем применять архитектуру в платформе экспериментов и Data Science Альфа-Банка
- How much a proprietary LLM costs: how to choose an approach and calculate the full cost of the product
Разбор отраслевой практики создания и использования LLM. Спикер делится «лестницей опций» и прозрачной сметой каждого сценария: использование моделей по API, запуск открытой модели на собственной инфраструктуре, адаптация под отдельную задачу или домен, центральная модель компании, собственный претрейн и разработка frontier-модели. Разбираем какие потребности закрывает каждый сценарий и какие требования действительно оправдывают переход к более сложному решению. Из чего складывается каждая смета и метод фазирования, который позволяет покупать пошаговые проверки гипотез с точками принятия решений.
DISCUSSIONS 5
Interactive subgraph: 8 nodes and 11 links around this page. Each node is keyboard-focusable; press Enter or Space to open its page. A full list of nodes and their links follows the graphic.
- DISCUSSIONS : How will the role of analytics in business change by 2029? (Hub), How large companies choose, deploy and secure AI (Hub), Know Your Data: how to extract business value from your own data with AI (Hub), How to measure AI visibility so the numbers can be trusted? (Hub), Т-Банк 100к1: analytics versus intuition (Hub)
- How will the role of analytics in business change by 2029? : DISCUSSIONS (Hub), Product & discovery (Thematic link)
- How large companies choose, deploy and secure AI : DISCUSSIONS (Hub), AI & agents (Thematic link)
- Know Your Data: how to extract business value from your own data with AI : DISCUSSIONS (Hub), AI & agents (Thematic link)
- How to measure AI visibility so the numbers can be trusted? : DISCUSSIONS (Hub), AI & agents (Thematic link), Product & discovery (Thematic link)
- Т-Банк 100к1: analytics versus intuition : DISCUSSIONS (Hub), Product & discovery (Thematic link)
- AI & agents : How large companies choose, deploy and secure AI (Thematic link), Know Your Data: how to extract business value from your own data with AI (Thematic link), How to measure AI visibility so the numbers can be trusted? (Thematic link)
- Product & discovery : How will the role of analytics in business change by 2029? (Thematic link), How to measure AI visibility so the numbers can be trusted? (Thematic link), Т-Банк 100к1: analytics versus intuition (Thematic link)
Track “DISCUSSIONS”: 5 talks, 2 themes.
- Track
- Talk
- Theme
- How will the role of analytics in business change by 2029?
Дискуссия руководителей аналитики крупных технологических компаний о будущем функции: какие задачи будут уходить, какие зоны ответственности появятся и как к этим изменениям готовить команды.
- How large companies choose, deploy and secure AI
Руководители AI/ML-команд поделятся практическим опытом, инженерными компромиссами и подходами, которые используют в работе
- Know Your Data: how to extract business value from your own data with AI
Представители крупных digital-продуктов поделятся реальными кейсами классификации и обогащения данных с помощью ML/LLM. Обсудим, как AI помогает автоматизировать бизнес-процессы в Trust & Safety, сокращать издержки и получать измеримый экономический эффект.
- How to measure AI visibility so the numbers can be trusted?
За год замеры видимости брендов в ответах нейросетей прошли путь от эксперимента до строки в медиаплане. Но единой методологии пока нет: агентства, вендоры и инхаус-команды по-разному определяют упоминание, формируют выборку промптов, выбирают число прогонов и оценивают устойчивость результатов.
- Т-Банк 100к1: analytics versus intuition
Мы привыкли проверять гипотезы и доверять данным. Но что, если сегодня нужно угадать не точный ответ, а тот, который выбрало большинство? Угадываем популярные ответы, разбираемся в болях индустрии и проверяем, насколько наши представления о пользователях совпадают с реальностью. Только логика, интуиция и коллективный разум.
AI SAFETY 4
Interactive subgraph: 7 nodes and 10 links around this page. Each node is keyboard-focusable; press Enter or Space to open its page. A full list of nodes and their links follows the graphic.
- AI SAFETY : “LLM plumbing” – how to build working AI pipelines without leaks (Hub), Obfuscation of personal data — not a savior but a trap (Hub), Can this be sent to an LLM? Legal requirements of 152-FZ when working with foreign models (Hub), Corporate AI security: the architecture of constraints and the vulnerabilities of user scenarios (Hub)
- “LLM plumbing” – how to build working AI pipelines without leaks : AI SAFETY (Hub), AI & agents (Thematic link), Security & privacy (Thematic link)
- Obfuscation of personal data — not a savior but a trap : AI SAFETY (Hub), AI & agents (Thematic link)
- Can this be sent to an LLM? Legal requirements of 152-FZ when working with foreign models : AI SAFETY (Hub), AI & agents (Thematic link)
- Corporate AI security: the architecture of constraints and the vulnerabilities of user scenarios : AI SAFETY (Hub), AI & agents (Thematic link), Security & privacy (Thematic link)
- AI & agents : “LLM plumbing” – how to build working AI pipelines without leaks (Thematic link), Obfuscation of personal data — not a savior but a trap (Thematic link), Can this be sent to an LLM? Legal requirements of 152-FZ when working with foreign models (Thematic link), Corporate AI security: the architecture of constraints and the vulnerabilities of user scenarios (Thematic link)
- Security & privacy : “LLM plumbing” – how to build working AI pipelines without leaks (Thematic link), Corporate AI security: the architecture of constraints and the vulnerabilities of user scenarios (Thematic link)
Track “AI SAFETY”: 4 talks, 2 themes.
- Track
- Talk
- Theme
- “LLM plumbing” – how to build working AI pipelines without leaks
Методы работы с чувствительными данными: какие данные бывают, какие методы подходят для каждого случая, как подобрать правильный метод и где всё это может поломаться. Разбираемся, как (и что) не разрешать провайдерам делать со своими данными. Подробно поговорим о том, как использовать LLM в ситуациях, когда может быть задействовано много чувствительных данных и как при этом не допустить утечек, успокоить службу безопасности, релизнуть сервис и не разориться на железках. Слушатели получат ответы на вопросы: как эффективно использовать LLM, чтобы не обучать провайдера, не нарушать законы, не привлекать регуляторов и дружить со службой безопасности; что делать, если мы хотим крутить нейронки у себя (on-premise)? Как «манипулировать» данными с целью устранения чувствительности, но сохранения сути? Как сшить пайплайны под задачу, балансируя между приватностью и мощностью? Как создать «шоры» для LLM, чтобы не отдать управление пользователям?
- Obfuscation of personal data — not a savior but a trap
Риски современных законов о защите персональных данных (GDPR, 152 ФЗ, CCPA, PDPA, PDPL, DPDPA) в контексте использования внешних AI моделей. Насколько легально слать во внешние API AI сервисов персональные данные? Насколько реально защититься от рисков за счет обфускации отправляемых данных? Разбираем риски, возможности, и надежность такой защиты
- Can this be sent to an LLM? Legal requirements of 152-FZ when working with foreign models
Где персональные данные появляются в LLM-продукте? Чем различаются внешний API, российский посредник и самостоятельное размещение открытой модели. Как установить фактических получателей данных и страны обработки. Правовые основания обработки, локализация, уведомления по статьям 12 и 22, договоры и распределение ответственности. Какие сведения нужно получить от поставщика и что делать, если он не раскрывает необходимые условия. Что происходит с правовым статусом данных после удаления ФИО и телефонов. Как учитывать косвенную идентификацию, сохранённую таблицу соответствий и возможность восстановления сведений из контекста. Хранение запросов и ответов, использование данных для обучения, доступ сотрудников, привлечение других обработчиков, удаление информации и действия при инцидентах. Разборы типовых продуктовых сценариев и пограничных случаев (например, модель размещена внутри компании, но отдельные компоненты распознавание речи, получение эмбеддингов или журналирование — используют внешние сервисы. Как в этом случае оценить систему целиком)
- Corporate AI security: the architecture of constraints and the vulnerabilities of user scenarios
Внедрение ИИ не защищает от утечек, если ради скорости пользователь копирует в промпт всю коммерческую тайну и выдает приложению доступ ко всему диску. В докладе разбирается архитектура ограничения доступа ИИ-сервисов к корпоративным данным и два механизма уязвимостей: открытые логи провайдеров и передача скрытых инструкций в активные сессии. Спикеры покажут, как выстроить «зеленый коридор» для типовых задач, внедрить паспорта ИИ-решений и тестировать безопасность через симуляцию рабочих процессов.
HR TRACK 4
Interactive subgraph: 7 nodes and 10 links around this page. Each node is keyboard-focusable; press Enter or Space to open its page. A full list of nodes and their links follows the graphic.
- HR TRACK : Is the analyst market overheated or do candidates just not know how to sell themselves? (Hub), Changes in product analyst skills through the lens of global research agenda analysis (Hub), We grew a junior. What next? How not to lose an analyst after the first successes (Hub), How to manage the probation period and what is wrong with it (Hub)
- Is the analyst market overheated or do candidates just not know how to sell themselves? : HR TRACK (Hub), HR & team (Thematic link), Product & discovery (Thematic link)
- Changes in product analyst skills through the lens of global research agenda analysis : HR TRACK (Hub), Product & discovery (Thematic link)
- We grew a junior. What next? How not to lose an analyst after the first successes : HR TRACK (Hub), HR & team (Thematic link), Product & discovery (Thematic link)
- How to manage the probation period and what is wrong with it : HR TRACK (Hub), HR & team (Thematic link)
- HR & team : Is the analyst market overheated or do candidates just not know how to sell themselves? (Thematic link), We grew a junior. What next? How not to lose an analyst after the first successes (Thematic link), How to manage the probation period and what is wrong with it (Thematic link)
- Product & discovery : Is the analyst market overheated or do candidates just not know how to sell themselves? (Thematic link), Changes in product analyst skills through the lens of global research agenda analysis (Thematic link), We grew a junior. What next? How not to lose an analyst after the first successes (Thematic link)
Track “HR TRACK”: 4 talks, 2 themes.
- Track
- Talk
- Theme
- Is the analyst market overheated or do candidates just not know how to sell themselves?
Честно разберём, что на самом деле ценят на собеседованиях и как выделиться среди других кандидатов. Поговорим о зарплатах, странных требованиях компаний и мэтче с будущей командой. Выясним, где лучше расти как специалист, где идти за деньгами и что важнее при выборе оффера: должность, интересные задачи, люди или зарплата.
- Changes in product analyst skills through the lens of global research agenda analysis
Оценка трендов навыков продуктовых аналитиков на основе анализ мировой и российской научной повестки. Представлены семантические карты, тренды, драйверы развития и барьеры. Слушатели познакомятся с изменениями в профессии продуктового аналитика (как меняется спрос на навыки и компетенции и какая и как происходит перефокусировка).
- We grew a junior. What next? How not to lose an analyst after the first successes
Как растить начинающих аналитиков, чтобы они быстрее становились самостоятельными, приносили пользу продукту и не теряли интерес к работе после испытательного срока. Поделюсь тем, как мы работаем с ошибками, вопросами, обратной связью и постепенно передаем ответственность. И поговорим о том, почему даже хорошо обученный джун может захотеть уйти
- How to manage the probation period and what is wrong with it
Кандидат, прекрасно продал себя на собеседовании, но выяснилось, что что-то не то и его необходимо уволить. Что делать, если HR не соглашаются увольнять по результатам срока испытания, но быть заложником ситуации тоже не хочется.
KEYNOTES 2
Interactive subgraph: 3 nodes and 2 links around this page. Each node is keyboard-focusable; press Enter or Space to open its page. A full list of nodes and their links follows the graphic.
- KEYNOTES : Optimization traps: when uncoordinated decisions make the overall result worse (Hub), Mind outside the head: from the stone hand axe to artificial intelligence (Hub)
- Optimization traps: when uncoordinated decisions make the overall result worse : KEYNOTES (Hub)
- Mind outside the head: from the stone hand axe to artificial intelligence : KEYNOTES (Hub)
Track “KEYNOTES”: 2 talks.
- Track
- Talk
- Optimization traps: when uncoordinated decisions make the overall result worse
Теория игр для аналитиков. В своей лекции, посвящённой теории игр, Алексей Савватеев доступно расскажет о концепции равновесия по Нэшу в теории игр и продемонстрирует на ряде примеров, как взаимодействие эгоистичных участников может приводить к общему проигрышу. Парадокс Брайеса, дилемма заключённых, трагедия общин — во всех этих ситуациях равновесная логика не гарантирует удовлетворительного результата с точки зрения глобальной пользы обществу. Особое внимание будет уделено тому, как изменение правил игр меняет поведениелюдей, что необходимо учитывать при конструировании мотивационных схем. Специальная математическая подготовка не потребуется,но готовность рассуждать пригодится.
- Mind outside the head: from the stone hand axe to artificial intelligence
Как наш мозг создал знания и как на него влияет искусственная информационная среда, когда AI меняет культурную среду быстрее, чем биологию человека.
Untracked 27
Interactive subgraph: 31 nodes and 66 links around this page. Each node is keyboard-focusable; press Enter or Space to open its page. A full list of nodes and their links follows the graphic.
- Untracked : The leader's AI operating system: an architecture of 17 roles and 13 procedures (Hub), Another topic will be here (Hub), A metric for media advertising: why it is sometimes better to build new than to change the old (Hub), Evaluating the effectiveness of “flight” offline advertising (Hub), A systematic approach in agentic coding: how to be sure this is a working product without reviewing tens of thousands of lines of code (Hub), Identifiability of causal relationships when building media mix models (Hub), Managing ad traffic during periods of high utilization (Hub), Taking control of the dark side of AI: security, privacy and AI firewalls when working with LLMs (Hub), Growing Yggdrasil: how to build a working metric graph (Hub), A/B tests on employees: from AI copilots to sales scripts (Hub), Custom analytics: how an AI agent speeds up the path from business question to result (Hub), Big official conference closing (Hub), Democratizing data access in the AI era: how to build a semantic layer in a company from scratch (Hub), A seamless event analytics migration: moving product analytics from AppMetrica to our own event stream (Hub), The anatomy of churn in SaaS products: 9 cuts that show the real reason customers leave (Hub), How much context does AI really need? (Hub), Whydra: a Causal Discovery library for identifying and analyzing causal dependencies in data (Hub), Finding suspicious patterns in user behavior (Hub), A mission-based model for order clustering (Hub), A unified system for evaluating advertising effectiveness (Hub), How to build an A/B platform the ecosystem trusts from scratch (Hub), How we grow the quality of AI generation, using a city walks app as an example (Hub), Why does AI draw wrong conclusions from data? (Hub), How to calculate the cumulative effect of a series of experiments: measuring the impact of ML improvements on product metrics (Hub), Fighting organic cannibalization and wrong optimization (Hub), Marketing AI-native analytics: from on-site behavior to money in the till (Hub), How AI is changing BI: where we stumble, what works and where we run next (Hub)
- The leader's AI operating system: an architecture of 17 roles and 13 procedures : Untracked (Hub), AI & agents (Thematic link)
- Another topic will be here : Untracked (Hub)
- A metric for media advertising: why it is sometimes better to build new than to change the old : Untracked (Hub), Metrics (Thematic link)
- Evaluating the effectiveness of “flight” offline advertising : Untracked (Hub), Metrics (Thematic link)
- A systematic approach in agentic coding: how to be sure this is a working product without reviewing tens of thousands of lines of code : Untracked (Hub), AI & agents (Thematic link), Product & discovery (Thematic link)
- Identifiability of causal relationships when building media mix models : Untracked (Hub)
- Managing ad traffic during periods of high utilization : Untracked (Hub)
- Taking control of the dark side of AI: security, privacy and AI firewalls when working with LLMs : Untracked (Hub), AI & agents (Thematic link), Product & discovery (Thematic link)
- Growing Yggdrasil: how to build a working metric graph : Untracked (Hub), Metrics (Thematic link), Product & discovery (Thematic link)
- A/B tests on employees: from AI copilots to sales scripts : Untracked (Hub), AI & agents (Thematic link), Metrics (Thematic link), Product & discovery (Thematic link)
- Custom analytics: how an AI agent speeds up the path from business question to result : Untracked (Hub), AI & agents (Thematic link), Metrics (Thematic link)
- Big official conference closing : Untracked (Hub), Product & discovery (Thematic link)
- Democratizing data access in the AI era: how to build a semantic layer in a company from scratch : Untracked (Hub), AI & agents (Thematic link), Metrics (Thematic link)
- A seamless event analytics migration: moving product analytics from AppMetrica to our own event stream : Untracked (Hub), AI & agents (Thematic link), Product & discovery (Thematic link)
- The anatomy of churn in SaaS products: 9 cuts that show the real reason customers leave : Untracked (Hub), Metrics (Thematic link), Product & discovery (Thematic link)
- How much context does AI really need? : Untracked (Hub), AI & agents (Thematic link)
- Whydra: a Causal Discovery library for identifying and analyzing causal dependencies in data : Untracked (Hub), Metrics (Thematic link), Product & discovery (Thematic link)
- Finding suspicious patterns in user behavior : Untracked (Hub), Product & discovery (Thematic link)
- A mission-based model for order clustering : Untracked (Hub), Metrics (Thematic link)
- A unified system for evaluating advertising effectiveness : Untracked (Hub)
- How to build an A/B platform the ecosystem trusts from scratch : Untracked (Hub)
- How we grow the quality of AI generation, using a city walks app as an example : Untracked (Hub), AI & agents (Thematic link), Product & discovery (Thematic link)
- Why does AI draw wrong conclusions from data? : Untracked (Hub), AI & agents (Thematic link), Metrics (Thematic link), Product & discovery (Thematic link)
- How to calculate the cumulative effect of a series of experiments: measuring the impact of ML improvements on product metrics : Untracked (Hub), Metrics (Thematic link), Product & discovery (Thematic link)
- Fighting organic cannibalization and wrong optimization : Untracked (Hub), AI & agents (Thematic link)
- Marketing AI-native analytics: from on-site behavior to money in the till : Untracked (Hub), AI & agents (Thematic link), Metrics (Thematic link)
- How AI is changing BI: where we stumble, what works and where we run next : Untracked (Hub), AI & agents (Thematic link), Metrics (Thematic link), Product & discovery (Thematic link)
- AI & agents : The leader's AI operating system: an architecture of 17 roles and 13 procedures (Thematic link), A systematic approach in agentic coding: how to be sure this is a working product without reviewing tens of thousands of lines of code (Thematic link), Taking control of the dark side of AI: security, privacy and AI firewalls when working with LLMs (Thematic link), A/B tests on employees: from AI copilots to sales scripts (Thematic link), Custom analytics: how an AI agent speeds up the path from business question to result (Thematic link), Democratizing data access in the AI era: how to build a semantic layer in a company from scratch (Thematic link), A seamless event analytics migration: moving product analytics from AppMetrica to our own event stream (Thematic link), How much context does AI really need? (Thematic link), How we grow the quality of AI generation, using a city walks app as an example (Thematic link), Why does AI draw wrong conclusions from data? (Thematic link), Fighting organic cannibalization and wrong optimization (Thematic link), Marketing AI-native analytics: from on-site behavior to money in the till (Thematic link), How AI is changing BI: where we stumble, what works and where we run next (Thematic link)
- Metrics : A metric for media advertising: why it is sometimes better to build new than to change the old (Thematic link), Evaluating the effectiveness of “flight” offline advertising (Thematic link), Growing Yggdrasil: how to build a working metric graph (Thematic link), A/B tests on employees: from AI copilots to sales scripts (Thematic link), Custom analytics: how an AI agent speeds up the path from business question to result (Thematic link), Democratizing data access in the AI era: how to build a semantic layer in a company from scratch (Thematic link), The anatomy of churn in SaaS products: 9 cuts that show the real reason customers leave (Thematic link), Whydra: a Causal Discovery library for identifying and analyzing causal dependencies in data (Thematic link), A mission-based model for order clustering (Thematic link), Why does AI draw wrong conclusions from data? (Thematic link), How to calculate the cumulative effect of a series of experiments: measuring the impact of ML improvements on product metrics (Thematic link), Marketing AI-native analytics: from on-site behavior to money in the till (Thematic link), How AI is changing BI: where we stumble, what works and where we run next (Thematic link)
- Product & discovery : A systematic approach in agentic coding: how to be sure this is a working product without reviewing tens of thousands of lines of code (Thematic link), Taking control of the dark side of AI: security, privacy and AI firewalls when working with LLMs (Thematic link), Growing Yggdrasil: how to build a working metric graph (Thematic link), A/B tests on employees: from AI copilots to sales scripts (Thematic link), Big official conference closing (Thematic link), A seamless event analytics migration: moving product analytics from AppMetrica to our own event stream (Thematic link), The anatomy of churn in SaaS products: 9 cuts that show the real reason customers leave (Thematic link), Whydra: a Causal Discovery library for identifying and analyzing causal dependencies in data (Thematic link), Finding suspicious patterns in user behavior (Thematic link), How we grow the quality of AI generation, using a city walks app as an example (Thematic link), Why does AI draw wrong conclusions from data? (Thematic link), How to calculate the cumulative effect of a series of experiments: measuring the impact of ML improvements on product metrics (Thematic link), How AI is changing BI: where we stumble, what works and where we run next (Thematic link)
Track “Untracked”: 27 talks, 3 themes.
- Track
- Talk
- Theme
- The leader's AI operating system: an architecture of 17 roles and 13 procedures
Как превратить работу с LLM в устойчивый метод управления и оптимизировать процесс принятия управленческих решений
- Another topic will be here
- A metric for media advertising: why it is sometimes better to build new than to change the old
Новая модель данных позволяет сделать гибкое окно атрибуции, связать медийные показы с целями Метрики и событиями AppMetrica, добавить новые параметры и метрики качества трафика.
- Evaluating the effectiveness of “flight” offline advertising
Пошаговая инструкция по сборке Bayesian MMM для «флайтовых» размещений и чеклистом диагностики модели. Разбор работы с эффектом затухания памяти о рекламе (adstock) и убывающей отдачей от вложений (saturation)
- A systematic approach in agentic coding: how to be sure this is a working product without reviewing tens of thousands of lines of code
Рабочая связка open-source инструментов для агентского кодинга. Методология разработки OpenSpec и OpenSpec+. Превращаем хаотичную генерацию в предсказуемый и контролируемый инженерный процесс.
- Identifiability of causal relationships when building media mix models
Обсуждаем идентифицируемость, смещение и принятие решений в условиях неопределенности. Байесовская нелинейная эконометрика позволяет оценить причинно следственные связи и составление модели будет в теме нашего разговора: как составить модель таким образом, чтобы они действительно была не только интерпретируемой, но и идентифицируемой, как параметризовать модель, чтобы при оценке она не развалилась, а смещение было побеждено, как принимать решения в условиях неопределенности и чем нам поможет теория стохастической оптимизации.
- Managing ad traffic during periods of high utilization
Когда утилизация на пике, вы не можете показать бизнесу кратный рост, а партнерам — дать нужные объёмы за счёт свободного трафика. Делимся методологией расчета утилизации, подходами к медиапланированию и способами охлаждения трафика.
- Taking control of the dark side of AI: security, privacy and AI firewalls when working with LLMs
Запретить ChatGPT проще, чем научиться с ним безопасно работать. Главный ИБ-евангелист Positive Technologies Алексей Лукацкий рассказывает, как российские компании выстраивают секьюрную работу с западными LLM. В рамках лекции разберем методы анонимизации данных, архитектуру AI-firewalls и главное — как продуктовому аналитику научиться договариваться с отделом кибербезопасности, чтобы любимая фраза «ИБ это не пропустит» стала началом продуктивного диалога, а не крестом на внедрении ИИ.
- Growing Yggdrasil: how to build a working metric graph
Метрика, на которую бизнес хочет повлиять и метрика, на которую бизнес может повлиять произвольным воздействием - обычно разные метрики. Разбираем, как построить здоровое итерирование по продуктовым гипотезам с помощью графа метрик. Слушатели узнают, как извлечь больше информации из совокупности экспериментов - что дополнительно можно узнать о пользователях, если посмотреть на всю совокупность экспериментов, а также то, как измерять и декомпозировать эффект набора маркетинговых изменений на бизнес-метрику, когда ни один эксперимент в отдельности не даёт ответа.
- A/B tests on employees: from AI copilots to sales scripts
Специфика тестирования AI-копайлотов и других внутренних продуктов и процессов компании, чтобы точно ответить на вопрос «изменил ли новый инструмент работу сотрудников достаточно сильно, чтобы его было выгодно масштабировать».
- Custom analytics: how an AI agent speeds up the path from business question to result
Схема встраивания ИИ-агента в пайплайн обработки запросов с автоматическим контролем качества и важными точками проверки человеком. Разбираем архитектуру решения, логику автоматических тестов качества данных, типичные ошибки и эксплуатационные ограничения агента
- Big official conference closing
Подведение итогов, аналитика конференции, обсуждение новостей, планов на будущее, анонсы новых продуктов, благодарности и прочие важные приятные моменты. Во время закрытия состоится розыгрыш всех призов от Партнеров, стендистов и друзей конференции (участвуют только те, кто находится в зале)"
- Democratizing data access in the AI era: how to build a semantic layer in a company from scratch
Проектирование семантического слоя и процесс его интеграции с Looker. Рассмотрены эксплуатационные ограничения, неочевидные технические сложности и собственные ошибки.
- A seamless event analytics migration: moving product analytics from AppMetrica to our own event stream
Свой event stream вместо AppMetrica — и минимальные требования к событийным данным, чтобы LLM-агент начал отвечать на вопросы по данным без человека в цикле.
- The anatomy of churn in SaaS products: 9 cuts that show the real reason customers leave
Подходы и методы анализа когорт, тарифов, стадий жизненного цикла, поведения, причин ухода и др.
- How much context does AI really need?
Сравним работу AI со схемой БД, данными, техническими метаданными и полноценным семантическим слоем.Разберём, какую часть бизнес-контекста AI способен восстановить из схемы и самих данных, а какую необходимо явно получить от компании, но при этом не превратить построение semantic layer в многолетний проект описания всей компании.
- Whydra: a Causal Discovery library for identifying and analyzing causal dependencies in data
Доклад посвящён разработке библиотеки Whydra для выявления причинно-следственных зависимостей, оптимизации алгоритмов Causal Discovery и оценке их точности и производительности. Рассматриваются практические кейсы применения библиотеки в банковской сфере: анализ влияния кредитных решений и маркетинговых кампаний на клиентские показатели, а также исследование связи между открытием новых бизнесов и их последующей выручкой/
- Finding suspicious patterns in user behavior
Как антифрод-аналитика превращает поведенческие и контентные сигналы в продуктовые ограничения, как измеряется их эффективность и как оценивать качество детектора на исторических данных.
- A mission-based model for order clustering
Кластеризуем десятки миллионов корзин и показываем, что вместо чётких миссий там континуум с якорями. Расскажем, как отделить цель заказа от размера чека и скидки, какие метрики качества считать до A/B и почему мы перешли от кластеров к матрице «повод × товарная группа»
- A unified system for evaluating advertising effectiveness
Доклад о создании системы оценки эффективности рекламы на базе Marketing Mix Modeling. На примере подхода X5 Digital рассматриваем, как объединить рекламные и бизнес-данные, выбрать модель, оценить будущую кампанию и сравнить варианты распределения бюджета в одном сервисе. Подготовка данных, модель и пользовательский процесс работают вместе. Такой подход помогает последовательно оценивать и сравнивать медиапланы, сохраняя ограничения модели и ответственность человека за окончательное решение.
- How to build an A/B platform the ecosystem trusts from scratch
А/Б-платформа Т-Банка (Hippo) объединяет экспертизу в математике и работе с внутренними данными в единый отказоустойчивый конвейер. В Hippo внедрены Multi-CUPED (x2.2 ускорение), проверки корректности эксперимента, последовательные методы для раннего выявления сломанных экспериментов (x3.5 ускорения ценой 1% мощности). Разберем, как на практике найти баланс между adoption и качеством.
- How we grow the quality of AI generation, using a city walks app as an example
Анализ транскриптов агентского цикла - ключевой навык для работы над качеством ИИ-продуктов. Собственные эвалы зачастую важнее публичных лидербордов: 10% прирост качества на state-of-the-art модели может вести к деградации пользовательского опыта. Слушатели узнают как применять LLM для решения сильно недетерминированных задач (в нашем случае это городская прогулка, но общие подходы - свой эвал, работа с транскриптами, файнтюнинг тулов, могут быть применимы где угодно) и научатся балансировать агентскую и детерминированную части продукта.
- Why does AI draw wrong conclusions from data?
Делегирование аналитики ИИ не спасает от фундаментальных ошибок в статистике. Создатель стат-движка VWO Ишан Гоэл разбирает 5 главных ловушек интерпретации данных: от иллюзии средних значений до парадоксов А/В-тестирования и баланса ложноположительных ошибок. Вы узнаете, какие вопросы нужно задавать любому аналитическому отчету (сгенерированному человеком или нейросетью), чтобы не принять красиво оформленную, но математически неверную гипотезу за чистую монету.
- How to calculate the cumulative effect of a series of experiments: measuring the impact of ML improvements on product metrics
Ретроспективная оценка совокупного эффекта на продукт от серии последовательных экспериментов. Методы оценки накопительного эффекта и когда необходим контр-фактический сценарий.
- Fighting organic cannibalization and wrong optimization
Раскроем техническую сторону разработки системы сквозной ROAS-отчетности, в рамках которой связали расходы рекламных сетей, клики и доходы в единый контур, что позволило оптимизировать performance-бюджет на 30%, Отчет стал источником данных (Single Source of Truth) как для ручной оптимизации байерами, так и для автоматических агентов, частично управляющих кампаниями через API, что в итоге сократило время реакции на просадки с дней до пары часов
- Marketing AI-native analytics: from on-site behavior to money in the till
Покажу, как построить маркетинговую AI-аналитику поверх того, что у вас уже работает, не ломая интеграции. Соберём звонки, сделки и веб-аналитику из телефонии, Битрикс24, Roistat, PostHog и Метрики в единый контур. Построим граф пути клиента в Neo4j: от первого клика до сделки. AI-агент обработает тысячи цепочек касаний и ответит на ключевой вопрос бизнеса: «На каких сегментах вы теряете деньги, а где реально зарабатываете?».
- How AI is changing BI: where we stumble, what works and where we run next
Дашборды перестают быть чьей-то работой, а семантика и контекст ещё не стали чьей-то работой. Как BI в Авито прожил 2026 год в этом тумане: сертификация дата-контента, AI-готовность доменов, скиллы и базы знаний, пререквизиты AI-аналитика, решённые и нерешённые проблемы. Без историй успеха, но с психотерапевтическим эффектом
Themes
Themes are tags on talks, not a level of the hierarchy: a talk lands in several of them, so the theme mentions below total more than the number of talks.
AI & agents 52
Product & discovery 44
Metrics 32
HR & team 30
Marketing & ads 24
Data engineering 23
BI & dashboards 16
A/B & experiments 15
Security & privacy 9
Causal inference 7
| Talk | Track | Time |
|---|---|---|
| An experiment on trading service quality for money | EXPERIMENTS | 10:20–10:55 |
| When PSM no longer works: moving to system dynamics simulation models | EXPERIMENTS | 11:00–11:35 |
| Identifiability of causal relationships when building media mix models | — | 11:40–12:10 |
| How to measure the effect of product changes without an A/B test? | EXPERIMENTS | 11:40–12:10 |
| A/B tests on employees: from AI copilots to sales scripts | — | 12:50–13:20 |
| Finding suspicious patterns in user behavior | — | 11:40–12:10 |
| Whydra: a Causal Discovery library for identifying and analyzing causal dependencies in data | — | 11:40–12:10 |
Retention & LTV 5
| Talk | Track | Time |
|---|---|---|
| The mathematics of survival: how ecosystem LTV protects future revenue | MARKETING ANALYTICS | 12:50–13:20 |
| A/B test calculations for unusual metrics: MAU, WAU, Retention, NSAT, Contact Rate and CTR | MASTER CLASSES | 15:15–16:30 |
| An experiment on trading service quality for money | EXPERIMENTS | 10:20–10:55 |
| An analyst as a team lead of AI agents: three AI engineering cases, from channel scoring to dashboard development | MASTER CLASSES | 12:15–13:20 |
| The anatomy of churn in SaaS products: 9 cuts that show the real reason customers leave | — | 11:00–11:35 |
Halls and days
| Hall | Talks |
|---|---|
| Молекула | 16 |
| Атом | 18 |
| Архангельск | 18 |
| Физика | 16 |
| Кинетика | 8 |
| Онлайн-зал №1 | 6 |
| Онлайн-зал №2 | 4 |
| Онлайн-зал №3 | 5 |
| Day | Date | Talks |
|---|---|---|
| 1 день | 2026-11-26 | 39 |
| 2 день | 2026-11-27 | 37 |
| Онлайн-день | 2026-11-17 | 15 |