Як розслідувати раптовий сплеск метрики

Maya

Ранок понеділка, і дашборд каже, що реєстрації за довгі вихідні зросли на 156%: 2 014 за три дні. Це ж новий екран реєстрації на Android, так? Хочу розповісти команді.

Alex Tutor

Можливо. Перш ніж святкувати, перелічімо все, що могло дати такий сплеск. Чотири родини причин: трекінг, трафік, продукт і зовнішні події.

Ви

Трекінг: ми щось рахуємо двічі. Трафік: кампанія чи місце в сторі. Продукт: реліз змінив те, що роблять люди. Зовнішнє: свято, новини, збій у конкурента.

Alex Tutor

Тоді виключаймо їх по одній на наявних даних, починаючи з найдешевшої перевірки. Це розслідування сплеску (spike investigation). Ось журнал змін за цей період.

Alex Tutor

Що змінилося, 29 серпня – 18 вересня

Дата	Що змінилося
Чт, 10 вересня	Почалося розгортання Android `5.2`: новий екран реєстрації за номером телефону (близько 30% реєстрацій на Android цього дня, 70% 11-го, усі з 12-го)
Ср, 16 вересня	Android `5.2.1` з виправленнями помилок, з полудня
Увесь період	Бюджети на рекламу в соцмережах і пошукову рекламу в сторах не змінювалися; фічерингу в сторі не було; релізу на iOS не було
Сб, 12 – пн, 14 вересня	Довгі святкові вихідні в кількох найбільших ринках Halves

Alex Tutor

Питання 1

Зіставте кожну родину причин із першою перевіркою, яку ви зробили б на цих даних.

Оберіть відповідь для кожного рядка. Якщо обрати відповідь, яку вже використано, вона переміститься в цей рядок.

Трекінг
Оберіть відповідь
Трафік
Оберіть відповідь
Продукт
Оберіть відповідь
Зовнішні події
Оберіть відповідь

Alex Tutor

«Зріс на 156%» потребує базового рівня. Вихідні й понеділки відрізняються від середини тижня, тож порівнюйте кожен день сплеску з тим самим днем тижня за два попередні тижні й усереднюйте ці два.

Ви

Тобто суботу 12-го — із суботами 29-го й 5-го, і так само неділю й понеділок.

Alex Tutor

Так. І рахуйте дві речі поруч: signup_events, які показує дашборд, і new_users, унікальні нові акаунти.

Alex Tutor

Набір даних · 168 рядків

Реєстрації Halves за днями, платформами й каналами

Субота 29 серпня – п'ятниця 18 вересня 2026; 21 день × 2 платформи × 4 канали.

Завантажити CSV

Стовпці
date: День (UTC), субота 29 серпня – п'ятниця 18 вересня 2026
platform: ios або android
acquisition_channel: invite, app_store_search, paid_social або store_search_ads
signup_events: Кількість подій `signed_up`: те, що дашборд називає «реєстраціями»
new_users: Унікальні нові акаунти, створені цього дня
new_users_in_trip_groups: З нових користувачів ті, чия перша група — поїздка

Дані

date	platform	acquisition_channel	signup_events	new_users	new_users_in_trip_groups
2026-08-29	ios	invite	71	71	11
2026-08-29	android	invite	55	55	9
2026-08-29	ios	app_store_search	34	34	2
2026-08-29	android	app_store_search	25	25	1
2026-08-29	ios	paid_social	35	35	2

Показати ще 163 рядки

2026-08-29	android	paid_social	27	27	1
2026-08-29	ios	store_search_ads	18	18	1
2026-08-29	android	store_search_ads	14	14	1
2026-08-30	ios	invite	65	65	11
2026-08-30	android	invite	58	58	8
2026-08-30	ios	app_store_search	32	32	1
2026-08-30	android	app_store_search	26	26	1
2026-08-30	ios	paid_social	34	34	2
2026-08-30	android	paid_social	26	26	1
2026-08-30	ios	store_search_ads	17	17	1
2026-08-30	android	store_search_ads	14	14	1
2026-08-31	ios	invite	56	56	9
2026-08-31	android	invite	48	48	7
2026-08-31	ios	app_store_search	29	29	2
2026-08-31	android	app_store_search	22	22	1
2026-08-31	ios	paid_social	32	32	2
2026-08-31	android	paid_social	27	27	1
2026-08-31	ios	store_search_ads	17	17	1
2026-08-31	android	store_search_ads	13	13	1
2026-09-01	ios	invite	54	54	8
2026-09-01	android	invite	46	46	7
2026-09-01	ios	app_store_search	31	31	2
2026-09-01	android	app_store_search	22	22	1
2026-09-01	ios	paid_social	32	32	1
2026-09-01	android	paid_social	27	27	1
2026-09-01	ios	store_search_ads	16	16	1
2026-09-01	android	store_search_ads	15	15	1
2026-09-02	ios	invite	53	53	9
2026-09-02	android	invite	47	47	7
2026-09-02	ios	app_store_search	31	31	2
2026-09-02	android	app_store_search	22	22	1
2026-09-02	ios	paid_social	31	31	2
2026-09-02	android	paid_social	27	27	1
2026-09-02	ios	store_search_ads	18	18	1
2026-09-02	android	store_search_ads	14	14	1
2026-09-03	ios	invite	59	59	9
2026-09-03	android	invite	47	47	7
2026-09-03	ios	app_store_search	28	28	1
2026-09-03	android	app_store_search	23	23	1
2026-09-03	ios	paid_social	36	36	2
2026-09-03	android	paid_social	28	28	1
2026-09-03	ios	store_search_ads	18	18	1
2026-09-03	android	store_search_ads	15	15	1
2026-09-04	ios	invite	58	58	9
2026-09-04	android	invite	46	46	7
2026-09-04	ios	app_store_search	27	27	1
2026-09-04	android	app_store_search	23	23	1
2026-09-04	ios	paid_social	31	31	2
2026-09-04	android	paid_social	27	27	1
2026-09-04	ios	store_search_ads	18	18	1
2026-09-04	android	store_search_ads	13	13	1
2026-09-05	ios	invite	63	63	10
2026-09-05	android	invite	50	50	8
2026-09-05	ios	app_store_search	33	33	2
2026-09-05	android	app_store_search	24	24	1
2026-09-05	ios	paid_social	31	31	2
2026-09-05	android	paid_social	27	27	1
2026-09-05	ios	store_search_ads	17	17	1
2026-09-05	android	store_search_ads	15	15	1
2026-09-06	ios	invite	71	71	11
2026-09-06	android	invite	53	53	8
2026-09-06	ios	app_store_search	30	30	2
2026-09-06	android	app_store_search	27	27	1
2026-09-06	ios	paid_social	34	34	2
2026-09-06	android	paid_social	26	26	1
2026-09-06	ios	store_search_ads	17	17	1
2026-09-06	android	store_search_ads	14	14	1
2026-09-07	ios	invite	56	56	8
2026-09-07	android	invite	47	47	7
2026-09-07	ios	app_store_search	30	30	2
2026-09-07	android	app_store_search	23	23	1
2026-09-07	ios	paid_social	33	33	2
2026-09-07	android	paid_social	26	26	1
2026-09-07	ios	store_search_ads	16	16	1
2026-09-07	android	store_search_ads	13	13	1
2026-09-08	ios	invite	52	52	8
2026-09-08	android	invite	47	47	7
2026-09-08	ios	app_store_search	28	28	1
2026-09-08	android	app_store_search	24	24	1
2026-09-08	ios	paid_social	32	32	2
2026-09-08	android	paid_social	28	28	1
2026-09-08	ios	store_search_ads	17	17	1
2026-09-08	android	store_search_ads	13	13	1
2026-09-09	ios	invite	52	52	8
2026-09-09	android	invite	47	47	7
2026-09-09	ios	app_store_search	30	30	2
2026-09-09	android	app_store_search	24	24	1
2026-09-09	ios	paid_social	33	33	2
2026-09-09	android	paid_social	27	27	1
2026-09-09	ios	store_search_ads	18	18	1
2026-09-09	android	store_search_ads	14	14	1
2026-09-10	ios	invite	56	56	9
2026-09-10	android	invite	55	42	6
2026-09-10	ios	app_store_search	29	29	2
2026-09-10	android	app_store_search	31	24	1
2026-09-10	ios	paid_social	31	31	1
2026-09-10	android	paid_social	34	26	1
2026-09-10	ios	store_search_ads	16	16	1
2026-09-10	android	store_search_ads	18	14	1
2026-09-11	ios	invite	59	59	10
2026-09-11	android	invite	80	47	7
2026-09-11	ios	app_store_search	30	30	1
2026-09-11	android	app_store_search	37	22	1
2026-09-11	ios	paid_social	33	33	2
2026-09-11	android	paid_social	43	25	1
2026-09-11	ios	store_search_ads	16	16	1
2026-09-11	android	store_search_ads	22	13	1
2026-09-12	ios	invite	177	177	104
2026-09-12	android	invite	278	139	86
2026-09-12	ios	app_store_search	45	45	10
2026-09-12	android	app_store_search	68	34	6
2026-09-12	ios	paid_social	33	33	6
2026-09-12	android	paid_social	54	27	5
2026-09-12	ios	store_search_ads	16	16	3
2026-09-12	android	store_search_ads	28	14	3
2026-09-13	ios	invite	168	168	111
2026-09-13	android	invite	292	146	93
2026-09-13	ios	app_store_search	45	45	10
2026-09-13	android	app_store_search	66	33	7
2026-09-13	ios	paid_social	31	31	6
2026-09-13	android	paid_social	52	26	6
2026-09-13	ios	store_search_ads	16	16	3
2026-09-13	android	store_search_ads	26	13	3
2026-09-14	ios	invite	154	154	97
2026-09-14	android	invite	236	118	65
2026-09-14	ios	app_store_search	37	37	8
2026-09-14	android	app_store_search	62	31	6
2026-09-14	ios	paid_social	35	35	7
2026-09-14	android	paid_social	50	25	5
2026-09-14	ios	store_search_ads	17	17	4
2026-09-14	android	store_search_ads	28	14	3
2026-09-15	ios	invite	52	52	9
2026-09-15	android	invite	90	45	7
2026-09-15	ios	app_store_search	30	30	1
2026-09-15	android	app_store_search	44	22	1
2026-09-15	ios	paid_social	33	33	2
2026-09-15	android	paid_social	58	29	2
2026-09-15	ios	store_search_ads	16	16	1
2026-09-15	android	store_search_ads	28	14	1
2026-09-16	ios	invite	57	57	9
2026-09-16	android	invite	66	44	6
2026-09-16	ios	app_store_search	28	28	1
2026-09-16	android	app_store_search	33	22	1
2026-09-16	ios	paid_social	31	31	2
2026-09-16	android	paid_social	41	27	1
2026-09-16	ios	store_search_ads	17	17	1
2026-09-16	android	store_search_ads	21	14	1
2026-09-17	ios	invite	57	57	8
2026-09-17	android	invite	46	46	7
2026-09-17	ios	app_store_search	29	29	1
2026-09-17	android	app_store_search	23	23	1
2026-09-17	ios	paid_social	32	32	1
2026-09-17	android	paid_social	25	25	1
2026-09-17	ios	store_search_ads	17	17	1
2026-09-17	android	store_search_ads	14	14	1
2026-09-18	ios	invite	53	53	8
2026-09-18	android	invite	45	45	6
2026-09-18	ios	app_store_search	28	28	1
2026-09-18	android	app_store_search	25	25	1
2026-09-18	ios	paid_social	34	34	2
2026-09-18	android	paid_social	26	26	1
2026-09-18	ios	store_search_ads	18	18	1
2026-09-18	android	store_search_ads	15	15	1

Базовий рівень за три дні — 785,5 в обох колонках. Тепер порівняйте з ним дні сплеску.

Alex Tutor

Питання 2

На скільки унікальних нових користувачів 12–14 вересня було більше за базовий рівень (середнє тих самих днів тижня за два попередні тижні)? Дайте зміну у відсотках.

Ваша відповідь

Одиниці: %, напр. 12,5

Ви

Подій побільшало на 156%, а нових акаунтів — лише на 77%. Отже, 620 подій у ці дні — не нові люди.

Alex Tutor

Розділіть за платформами. На iOS — 1,00 події на нового користувача, як завжди. На Android — 2,00 в усі три дні.

Ви

А зайві події на Android починаються 10-го, у день, коли почалося розгортання 5.2, і зникають після виправлення 16-го.

Alex Tutor

Новий екран надсилає signed_up двічі. Це половина надлишку Maya: помилка підрахунку, а не люди.

Alex Tutor

Питання 3

12–14 вересня на Android — 2,00 події signed_up на нового користувача, на iOS — 1,00; зайві події на Android з'являються 10 вересня й зникають після 16 вересня. Що з цього випливає?

Оберіть одну відповідьКористувачі Android реєструються вдвічі охочіше на новому екраніAndroid 5.2 записує кожну реєстрацію двічі, тож приблизно половина надлишкових подій — дублікатиТрекінг на iOS зламаний і пропускає половину реєстраційСплеск — повністю помилка трекінгу

Maya

Гаразд, але 608 справжніх додаткових користувачів — однаково багато. Звідки вони?

Alex Tutor

За каналами: запрошення +555,5, пошук у сторі +57,5, соцмережі −2, пошукова реклама −2,5. Жодна кампанія цього не зробила, і бюджети не змінювалися.

Ви

А за платформами: нових користувачів на iOS +77,7%, на Android +77,1%. Якби допоміг екран на Android, Android виріс би більше.

Alex Tutor

Отже, реліз пояснює зайві події, а не додаткових людей.

Maya

Тобто новий екран узагалі нічого не дав?

Alex Tutor

Нічого, що видно в реєстраціях. Чи ним зручніше користуватися — окреме питання, і відповість на нього A/B-тест, а не сплеск.

Alex Tutor

Питання 4

Які пояснення справжнього зростання нових користувачів можна виключити на цих даних? Виберіть усі правильні варіанти.

Оберіть усі правильні відповідіЇх привела платна кампаніяНовий екран реєстрації на Android конвертував більше відвідувачівГрупи, створені для поїздок, підтягнули нових учасників через запрошенняЗростання — це лише дублікати подій

Theo

З 12-го по 14-те були довгі святкові вихідні в кількох наших найбільших ринках. Люди їдуть кудись групами.

Alex Tutor

І дані з цим узгоджуються: 47% нових користувачів у дні сплеску почали з групи-поїздки, проти 10% у базові дні. Це узгоджується зі святами, хоча таке порівняння не може цього довести.

Ви

Тоді ці користувачі можуть поводитися як літні когорти й піти після поїздки.

Alex Tutor

Саме так, тож ніхто не має піднімати осінній прогноз через ці вихідні. А дашборд треба виправити, щоб наступний сплеск не був наполовину фальшивим.

Alex Tutor

Питання 5Коротка відповідь · Завдання з перевіркою ШІ

Виправте дашборд у 3–5 реченнях: перепишіть визначення «реєстрацій», щоб таке не повторилося, і опишіть одну автоматичну перевірку, яка виявила б помилку на Android ще 10 вересня.

Напишіть відповідь і отримайте оцінку та відгук від нашого ШІ-рецензента.

Увійдіть, щоб отримати відгук ШІ

Maya

Гаразд. Мені потрібне щось, що можна переслати команді сьогодні, поки не розійшлися чутки про новий екран.

Alex Tutor

Почніть із відповіді, потім перевірки з числами: що виключено, що лишилося, наскільки ми впевнені і що виправляємо.

Alex Tutor

Питання 6Кейс · Завдання з перевіркою ШІ

Напишіть записку для Maya: що спричинило сплеск реєстрацій 12–14 вересня?

Дашборд Maya показує реєстрації (кількість подій signed_up) за суботу 12 – понеділок 14 вересня: 2 014, на 156% більше за звичайний рівень. Вона вважала, що причина — новий екран реєстрації на Android, і хоче записку, яку сьогодні ж перешле команді.

У вас є щоденні дані про реєстрації вище й журнал змін:

Дата	Що змінилося
Чт, 10 вересня	Почалося розгортання Android `5.2`: новий екран реєстрації за номером телефону (близько 30% реєстрацій на Android цього дня, 70% 11-го, усі з 12-го)
Ср, 16 вересня	Android `5.2.1` з виправленнями помилок, з полудня
Увесь період	Бюджети на рекламу в соцмережах і пошукову рекламу в сторах не змінювалися; фічерингу в сторі не було; релізу на iOS не було
Сб, 12 – пн, 14 вересня	Довгі святкові вихідні в кількох найбільших ринках Halves

Напишіть 200–350 слів:

Спершу відповідь: що сталося, в одному-двох реченнях.
Гіпотези, які ви розглянули (трекінг, трафік, продукт, зовнішнє), і як дані підтверджують чи виключають кожну, з числами щодо названого базового рівня.
Наскільки ви впевнені і чого дані не можуть довести.
Що робити зараз: дашборд і що це означає для осіннього прогнозу.

Дані для завдання: Реєстрації Halves за днями, платформами й каналами

Напишіть відповідь і отримайте оцінку та відгук від нашого ШІ-рецензента.

Увійдіть, щоб отримати відгук ШІ

Звичка, яку варто зберегти: сплеск — це питання, а не результат. Перелічіть родини причин, порівняйте з базовим рівнем, почніть із трекінгу й кажіть, наскільки ви впевнені.

Alex Tutor

На цьому все. Ви відповіли на всі завдання — чудова робота.

Назад до курсу