Это верхний конспект по кейс-секции: всё, что нужно держать в голове на собеседовании, на одной странице. Глубокие разборы — в цикле «Решаем продуктовый кейс»: диагностика упавшей метрики, разложения метрик по бизнес-моделям, метрики успеха фичи, юнит-экономика. Обзор кейс-секции целиком — в гайде по продуктовым кейсам.
Что оценивает интервьюер
У кейса нет правильного ответа. Интервьюер смотрит на процесс мышления и оценивает пять вещей:
- Структура. Раскладываете проблему на части — или хаотично перебираете идеи.
- Приоритизация. Отличаете важную ветку от неважной: «это проверю первым, потому что…».
- Работа с данными. Какие данные запросите, как посчитаете, знаете ли метрики и их ловушки.
- Бизнес-смысл. Понимаете, как продукт зарабатывает и что волнует бизнес.
- Коммуникация. Думаете вслух, слышите подсказки, укладываетесь в тайминг, даёте рекомендацию в конце.
Следствие, которое многое меняет в подготовке: стройное решение с неточным выводом ценится выше, чем угаданный ответ без структуры. Кейс — диалог, интервьюер готов подсказывать, если видит, куда вы идёте.
Каркас ответа из 7 шагов
Один и тот же скелет держит кейс любого типа. Тайминг дан для стандартного 30-минутного кейса.
| Шаг | Что делать | Время |
|---|---|---|
| 1. Уточнить контекст | Как продукт зарабатывает, кто пользователи, гео, что здесь значит «успех». 3–5 вопросов достаточно | 3–5 мин |
| 2. Переформулировать | «Правильно понимаю, что цель — …?» — вы с интервьюером решаете одну задачу | вместе с шагом 1 |
| 3. Назвать план вслух | «Пойду в три шага: данные → сегменты → причины». Интервьюер видит структуру и направит, если вы не туда | 2–3 мин |
| 4. Разложить на части | Дерево метрики, воронка, сегменты или дихотомия «внутреннее/внешнее». Ветки не пересекаются и вместе покрывают всё (MECE) | вместе с шагом 3 |
| 5. Приоритизировать ветки | Начать с самой вероятной и самой дешёвой для проверки — и сказать, почему именно с неё | 15–18 мин |
| 6. Прикинуть цифры | «~20% пользователей × +5% к частоте ≈ +1% к метрике». Предположения проговаривать | внутри разбора |
| 7. Собрать финал | Вывод → рекомендация → риски → следующий шаг. Не дать кейсу рассосаться | 3–4 мин |
Первая половина каркаса — шаги 1–4 — проходит до того, как вы начали что-то решать. Отвечать сразу — самая частая причина завала: идеи без зафиксированной цели интервьюер оценить не может.
Шаги 5–7 — где кейс выигрывается. Грубая прикидка на салфетке поднимает ответ на уровень, а финал забывает заметная часть кандидатов: разбор был, рекомендация не прозвучала.
10 типов кейсов и первый ход для каждого
Типы кейсов повторяются из компании в компанию — меняется только продукт. Узнали тип — и первый ход уже готов.
| Тип | Как звучит на собесе | Первый ход |
|---|---|---|
| Т1. Метрика упала | «Конверсия в оплату просела на 12% за неделю. Ваши действия?» | Как считается метрика? Насколько, резко или плавно, когда? → проверить данные → сегментировать → внутренние и внешние причины |
| Т2. Как измерить успех X | «Мы запускаем подписку на доставку. Какие метрики успеха?» | Цель продукта → ключевое действие, где создаётся ценность → главная метрика → дерево драйверов → guardrails |
| Т3. Улучши продукт X | «Как бы вы улучшили наше приложение для покупателей?» | Уточнить цель улучшения → выбрать один сегмент → его боли → 2–3 решения → приоритет → метрики успеха |
| Т4. Стоит ли запускать фичу | «Продакт хочет добавить сохранённые фильтры поиска. Делаем?» | Прикинуть эффект: охват × сдвиг поведения × ценность → дешёвая проверка (кнопка-обманка, ручной прототип) → критерии успеха до запуска |
| Т5. Спланируй A/B-тест | «Как проверить, что новый онбординг работает?» | Гипотеза «если X, то метрика M вырастет на Y%» → юнит рандомизации → метрика и MDE → длительность → проверка сходимости групп |
| Т6. Сходится ли экономика | «Подписка стоит 299 ₽, привлечение — 1400 ₽. Мы зарабатываем?» | LTV против CAC по каналам → маржа с одного заказа или клиента → срок окупаемости привлечения |
| Т7. Оцени рынок | «Сколько в Москве заказов доставки еды в день?» | Назвать подход вслух: сверху (от населения через доли) или снизу (от одной точки × их число) → круглые числа → проверка на здравый смысл |
| Т8. Как вырасти в N раз | «Как удвоить аудиторию продукта за год?» | Диагноз: теряем на притоке или на удержании? → воронка от привлечения до возврата → главный рычаг → 2–3 инициативы |
| Т9. Выходить ли на рынок | «Стоит ли нам запускать экспресс-доставку в Казахстане?» | Рынок привлекателен? → Можем ли выиграть — что у нас уже есть? → Как входить: строить, покупать или партнёриться |
| Т10. Что делать первым | «Вот бэклог из пяти фич, ресурсов на одну. Какую берём?» | Явные критерии (эффект/усилия или RICE) → выбор → назвать, чем при этом жертвуете |
Аналитику чаще всего достаются Т1, Т2, Т5 и Т6 — диагностика, метрики, эксперименты и экономика. Product sense (Т3) и стратегия (Т9) типичнее для PM-позиций, но границы размыты. Глубокие разборы: Т1 — в первой части цикла, Т2 — в третьей, Т6 — в четвёртой, разложения метрик для любого типа — во второй.
Алгоритм «метрика упала» — коротко
Самый частый кейс аналитика. Порядок шагов не случайный: от дешёвых проверок к дорогим.
- Проверить данные. Сломанное логирование, недогруженный ETL, смена методики расчёта, календарь и сезонность. Самая частая причина — и самая дешёвая проверка.
- Сегментировать. Платформа, гео, канал, новые/старые, версия приложения. Падает в одном сегменте — причина там; равномерно везде — ищите глобальное.
- Внутренние причины. Релизы и эксперименты в дату излома, изменение цен, остановленный маркетинг, сломанный шаг воронки.
- Внешние причины. Сезонность, конкуренты, обновления платформ и сторов, регуляторика, макро.
- Разложить формулой. DAU = новые + удержанные + вернувшиеся; выручка = трафик × конверсия × средний чек. Какой множитель просел?
Две ловушки, за знание которых ставят плюс. Парадокс Симпсона: общая метрика падает, хотя в каждом сегменте растёт, — сдвинулась структура трафика. И ratio-метрики: «конверсия упала» бывает ростом знаменателя, а не падением числителя — смотрите их по отдельности.
Полный алгоритм с разбором «выручка −15%» на цифрах — в отдельной статье.
Пять ловушек A/B-тестов
Интервьюеры спрашивают их чаще всего. Назовёте сами — получите плюс ещё до вопроса.
- Подглядывание (peeking). Останавливать тест при первом значимом p-value — путь к ложным победам: у Эвана Миллера в классической статье показано, что промежуточные проверки раздувают реальный уровень ложных срабатываний в разы против заявленных 5%. Фиксируйте длительность заранее и дожидайтесь конца — либо используйте последовательные критерии, спроектированные под подглядывание.
- Двадцать метрик разом. При пороге 5% вероятность, что хотя бы одна из двадцати независимых метрик «выиграет» случайно, равна 1 − 0,95²⁰ ≈ 64%. Одна главная метрика — или поправка на множественные сравнения.
- Эффект новизны. Всплеск первых дней выветривается за неделю-две: условные +12% кликов в первые три дня к концу второй недели превращаются в +1%. Смотрите динамику эффекта по дням от первого показа, а не средний эффект за весь тест.
- Значимость без пользы. На 5 миллионах пользователей прирост +0,05 п.п. при базе 8% даст p = 0,001 — и может не окупить поддержку кода. И наоборот: «незначимо» не значит «эффекта нет» — возможно, не хватило выборки. Сравнивайте эффект с MDE, зафиксированным до теста, и переводите в деньги.
- Сравнение без рандомизации. «Использовавшие фичу возвращаются на 40% чаще неиспользовавших» — это самоотбор, а не эффект: активные пользователи пользуются всем чаще. Сравнивать группы можно только по случайному разбиению.
Опорные числа для guesstimate по России
Оценки рынков строятся из пары выученных чисел. Минимальный набор:
| Число | Значение | Где пригодится |
|---|---|---|
| Население России | ~146 млн | верх любой top-down оценки |
| Москва / Санкт-Петербург | ~13 млн / ~5,6 млн | городские рынки |
| Городское население | ~75% | сервисы, живущие в городах |
| Домохозяйства | ~54 млн, в среднем 2,6 человека | товары «на семью»: интернет, подписки, техника |
| Людей одного года рождения | ~1,2–1,4 млн | образование, детские товары, призывные когорты |
| Пользователи интернета | ~90+ млн | потолок онлайн-аудитории |
| Смартфон у взрослых | ~85% | мобильные продукты |
| Экономически активное население | ~75 млн | B2B, HR-сервисы, банковские продукты |
Правила игры: подход называйте вслух, числа округляйте до удобных, в конце сверяйте ответ с известным ориентиром. Ошибка в 2 раза — норма для guesstimate, ошибка на порядок — повод пересчитать структуру, а не подкручивать множители.
Пять антипаттернов: как звучит завал
- Прыжок к решению. Интервьюер ещё договаривает условие, а кандидат уже: «Я бы добавил пуш-уведомления и программу лояльности». Идеи без зафиксированной цели и контекста оценить невозможно. Лечится шагами 1–3 каркаса.
- Фреймворк по буквам. «Сейчас применю CIRCLES: C — это Comprehend, значит, мне нужно понять ситуацию…» — звучит как пересказ учебника. Фреймворк — скелет в голове, а не текст ответа: те же шаги проговариваются своими словами.
- Пропущенная подсказка. Интервьюер говорит: «Допустим, с данными всё в порядке», — а кандидат продолжает: «…и ещё я бы проверил ETL». Подсказка означает «эта ветка закрыта, идите дальше» — уходите из неё немедленно.
- Молчание на минуту. Кандидат думает, интервьюер смотрит на пустой экран и не знает, происходит ли что-нибудь. Просите паузу словами: «Дайте полминуты, соберу структуру». Это звучит профессионально, молчание — нет.
- Кейс без финала. Сорок минут содержательного разбора, а на «итак, что порекомендуете?» — «ну, надо смотреть по ситуации». Разбор без рекомендации не засчитывается. Закрывайте синтезом, даже если разобрали не всё.
И ещё одно: если ошиблись и вас поправили — «да, точно, поправлюсь» и дальше. Умение принять поправку читается как плюс, спор — как минус.
Шесть фраз-каркасов
Заготовки на все случаи — от первого слова до финала. Проговорите их вслух пару раз до собеседования, чтобы они звучали своими:
- «Прежде чем отвечать, уточню пару вещей: …»
- «Правильно понимаю, что цель — …?»
- «Я бы разложила проблему на три части: … Начну с первой, потому что …»
- «Сделаю предположение, что … — поправьте, если это не так»
- «Если грубо прикинуть: … — получается порядка …»
- «Резюмирую: скорее всего дело в …, проверила бы так: …, если подтвердится — делаем …»
Шестая фраза — универсальный финал любого кейса: вывод → рекомендация → риски → следующий шаг.
Как этим конспектом пользоваться
Шпаргалка работает, когда каркас прогнали через рот, а не через глаза. Схема тренировки: взять кейс, поставить таймер на 30 минут, решить вслух с записью на диктофон, потом послушать себя и проверить четыре галочки — были ли уточнения, была ли структура вслух, были ли цифры, был ли финальный синтез. Четыре галочки — четыре привычки, и после пяти-семи прогонов каркас перестаёт требовать усилий.
Глубину по каждому типу добирайте в цикле: алгоритм диагностики метрики → разложения метрик по бизнес-моделям → метрики успеха фичи → юнит-экономика. Обзор кейс-секции и фреймворков — в гайде по продуктовым кейсам.
Источники
- Ron Kohavi, Diane Tang, Ya Xu. Trustworthy Online Controlled Experiments: A Practical Guide to A/B Testing. Cambridge University Press, 2020 — ловушки экспериментов, guardrail-метрики, интерпретация результатов.
- Evan Miller. How Not To Run an A/B Test, 2010 — раздувание ложноположительных при подглядывании: https://www.evanmiller.org/how-not-to-run-an-ab-test.html
- Lewis C. Lin. Decode and Conquer: Answers to Product Management Interviews — фреймворк CIRCLES и структура ответа на product-sense-кейсы.
- Gayle Laakmann McDowell, Jackie Bavaro. Cracking the PM Interview. CareerCup, 2013 — типология кейс-вопросов и оценка кандидата.
- Marc Cosentino. Case in Point — консалтинговая школа кейс-интервью: структура, guesstimate, market entry.
- Kerry Rodden, Hilary Hutchinson, Xin Fu. Measuring the User Experience on a Large Scale: User-Centered Metrics for Web Applications. CHI 2010 — фреймворк HEART.
- Dave McClure. Startup Metrics for Pirates, 2007 — воронка AARRR.
- Sean McBride (Intercom). RICE: Simple prioritization for product managers — фреймворк RICE.
- Демографические ориентиры — данные Росстата (численность и структура населения России).
Тренировка
Каркас без прогонов на живых кейсах остаётся текстом. В каталоге задач — продуктовые кейсы всех десяти типов по мотивам реальных собеседований, с разборами и эталонными ответами. Первые 5 разборов бесплатны — возьмите кейс, поставьте таймер на 30 минут и соберите ответ по каркасу.