Кейс: north star для Halves

Зустрічі з постановки цілей тримаються на темпах росту, і одне хибне число коштує тобі довіри в кімнаті. Перераховуй кожне заголовкове число з таблиці.

Ріст за період = кінцеве значення ÷ початкове значення − 1

Для MAU, січень–червень: 15 500 ÷ 9 800 − 1 = 0,5816 ≈ 58,2%. «58%» від CEO підтверджуються.

Дві типові помилки:

• ділити на кінцеве значення: (15 500 − 9 800) ÷ 15 500 ≈ 36,8%. Ріст завжди міряють відносно початкової точки;
• складати місячні темпи росту: сума п'яти змін місяць до місяця не дає загальної зміни, бо в кожного місяця своя база.

Потім зроби те саме для кожного кандидата за ті самі місяці, щоб їх можна було порівняти: реєстрації +119,4%, MAU +58,2%, відкриття застосунку +47,9%, витрати, додані людьми, +14,8%, підписники Plus +21,5%. Саме поставивши їх поруч, бачиш закономірність: числа охоплення росли швидко, числа цінності — повільно.

Округлюй лише наприкінці й залишай один знак після коми для відсотків, які порівнюватимуть.

Коли в кожного кандидата є темп росту, розклади їх на охоплення і цінність:

• охоплення: реєстрації +119,4%, MAU +58,2%, відкриття застосунку +47,9%;
• цінність: витрати, додані людьми, +14,8%, щотижневі активні групи +11,8%.

Щотижневі активні групи, north star з попередніх уроків модуля, зросли на 1 655 ÷ 1 480 − 1 = 0,1182 ≈ 11,8% проти 58,2% у MAU. MAU ріс приблизно вп'ятеро швидше, ніж групи, які справді ділять витрати.

Абсолютні числа кажуть те саме іншими словами: +5 700 користувачів місяця проти +175 щотижневих активних груп. Обидва правдиві, жодне не помилка.

Розрив між двома групами чисел — це і є знахідка. Якщо охоплення росте значно швидше за цінність, більшість нових людей не отримує того, для чого існує продукт, або ще не отримує. Ціль за числом охоплення святкувала б цей розрив; ціль за числом цінності змушує компанію на нього подивитися.

Зверни увагу: weekly_active_groups тут — середнє за тиждень у межах місяця, тож воно порівнянне місяць до місяця, хоча місяці мають різну довжину.

Темпи росту поруч натякають на розрив, а нормалізоване співвідношення його вимірює. Поділи число цінності на число охоплення місяць за місяцем і подивися, куди воно рухається.

• Щотижневі активні групи на 1 000 MAU: січень 1 480 ÷ 9 800 × 1 000 ≈ 151; червень 1 655 ÷ 15 500 × 1 000 ≈ 107.
• Витрати, додані людьми, на один MAU: січень 41 200 ÷ 9 800 ≈ 4,20; червень 47 300 ÷ 15 500 ≈ 3,05, менше приблизно на 27%.

Обидва співвідношення кажуть те саме: на кожного користувача місяця менше груп ділять витрати й менше витрат додається. Підсумки все одно зросли, тож ніщо не обвалюється; просто нові користувачі мало додають.

Нормалізоване співвідношення — міст між прочитанням обсягу й прочитанням якості. Воно не пояснює чому і чутливе до структури: якщо багато користувачів прийшли нещодавно, вони ще не встигли утворити групи. Тому наступний крок — розбити за когортами реєстрації й каналами.

Стеж за одиницями під час нормалізації: на користувача, на 1 000 користувачів чи у відсотках — усе гаразд, але кажи, що саме використовуєш.

Щотижневі активні групи на 1 000 MAU впали зі 151 до 107, а платні кампанії йшли з квітня. Що сталося?

Зваж кожну історію на доказах із таблиці:

• Зламався трекінг? Це було б різке падіння витрат. А витрати росли щомісяця.
• Продукт погіршився для наявних груп? Можливо, але активні групи в абсолютних числах і далі росли.
• Літні поїздки? Співвідношення почало падати у квітні, до сезону, а поїздки створюють групи.
• Змінився склад користувачів? Падіння починається разом із кампаніями. Багато користувачів із кампаній можуть відкривати застосунок, але рідко потрапляти в групу з другим активним учасником. Це зсув структури в бік користувачів, які лишаються самі.

Остання історія пасує найкраще, тож це найкраща перша гіпотеза. Але не висновок. Місячні підсумки змішують користувачів із кампаній з усіма іншими, і проблема з продуктом могла б дати схожі підсумки.

Щоб перевірити, розбий щотижневі активні групи за когортами реєстрації й каналами: чи утворюють когорти з кампаній групи рідше, ніж запрошені користувачі, що зареєструвалися в ті самі місяці? Доти кажи «імовірно» і кажи, як перевіриш, особливо коли йдеться про роботу колеги.

Відхилення кандидата легше захистити, коли його слабкість можна назвати одним рядком. Скористайся п'ятьма перевірками з уроку North star метрика і дерево метрик: (1) вона не росте, коли користувачі отримують менше цінності, (2) відстежує отриману цінність, (3) випереджає дохід, (4) розкладається на складові, на які впливають команди, (5) має записане визначення. Для Halves:

• MAU не проходить перевірку 1: рахується кожен, хто хоч раз відкрив застосунок, тож більший рекламний бюджет піднімає його незалежно від того, чи хтось ділить рахунок.
• Нові реєстрації не проходять перевірки 1 і 2: лише залучення, нічого про використання, і це число найлегше купити.
• Відкриття застосунку не проходять перевірку 1: вони ростуть і тоді, коли людям важко і вони знову й знову перевіряють баланс.
• Підписники Plus не проходять перевірку 3: це і є дохід, і він відстає від цінності, а paywall на шляху до спільного використання може їх підняти, поки групам гірше, тож вони не проходять і перевірку 1.

Щотижневі активні групи проходять усі п'ять: двоє людей, що ділять витрати, — це і є цінність, групи випереджають Plus, дерево розкладає їх на складові, а визначення записане.

Відхилений не означає видалений. Кожен лишається на дашборді зі своєю роллю: охоплення, залучення, сигнал тертя, монетизація. Але жоден не є ціллю компанії.

Коли люди не згодні щодо цілі, середній варіант спокусливий: підписники Plus зросли на 21,5%, між MAU (+58,2%) і щотижневими активними групами (+11,8%).

Але north star обирають за тим, що вона міряє, а не за тим, де опинився її темп росту. Проведи Plus через ті самі п'ять перевірок, що й інших кандидатів:

1. Не росте, коли користувачам гірше? Росте: paywall перед функціями, потрібними групам, на якийсь час піднімає підписки й шкодить спільному використанню.
2. Відстежує отриману цінність? Частково: люди платять за сканування чеків, коли вже ділять багато витрат.
3. Випереджає дохід? Це і є дохід, і він відстає від цінності: група, яка сьогодні перестала ділити витрати, скасує підписку наступного місяця.
4. Розкладається на складові? На нові підписки й скасування, але їхні важелі — ціна й paywall, а не цінність для груп.
5. Записане визначення? Легко, і це не виправляє перевірок 1–3.

Тож Plus — правильне число для щомісячної перевірки поруч із north star і хибне для кермування. Кожен кандидат для чогось корисний; те, за чим кермує вся компанія, має пройти перевірки, а не переговори.

Заперечення CEO передбачуване: «Групи зросли на 12%, MAU — на 58%. Навіщо обирати ціль, що виглядає гірше?»

Відповідь — у самій суті north star: вона виглядає гірше, бо її не можна купити. Ціль 20 000 MAU до грудня можна виконати, подвоївши рекламний бюджет, поки групи стоять, — приблизно це вже й показали січень–червень. Ціль за щотижневими активними групами росте, лише коли більше людей справді ділять витрати разом, тож її виконання означає, що продукт працює для більшої кількості груп.

Добре сформульований рядок цілі має три частини:

1. North star і її визначення: щотижневі активні групи, де щонайменше двоє учасників додають витрату чи розраховуються, без акаунтів команди, середнє за тиждень у місяці.
2. Точка відліку: 1 655 у червні й ціль, яку погодить рада.
3. Що відстежують поруч: MAU як охоплення, підписників Plus як перевірку доходу.

Так рада не втрачає нічого важливого для себе. Вона й далі щомісяця бачить охоплення й дохід, просто перестає винагороджувати ріст, який не перетворюється на групи.

Рекомендація переконує більше, а не менше, коли каже, чого дані не можуть показати. Обмеження, назване заздалегідь, викликає довіру; те, яке рада знаходить сама, її забирає.

Добрий рядок про обмеження має дві частини:

1. Чого дані не кажуть, конкретно. У таблиці місячні підсумки, тож вона не показує, які користувачі прийшли з кампаній. Падіння груп на 1 000 MAU узгоджується зі зсувом структури в бік користувачів із кампаній, але проблема з продуктом могла б дати схожі підсумки.
2. Наступний крок, який це покаже. Розбити щотижневі активні групи за когортами реєстрації й каналами і порівняти когорти з кампаній із запрошеними користувачами тих самих місяців.

Рядок про обмеження — не перебільшення в інший бік («дані доводять, що кампанії привели користувачів низької якості»), не напад на метрику, яка працює як задумано, і не сумнів у визначенні, яке щомісяця застосовують однаково.

Як це складається докупи: перерахуй темпи росту, відокремте охоплення від цінності, нормалізуй, сформулюй гіпотезу, обери за п'ятьма перевірками й назви обмеження. Цей модуль відповів, на які числа рівнятися; наступний питає, де застрягають нові користувачі.