Багатофакторний ANOVA та взаємодії

Alex Tutor

Софіє, пам'ятаєш тест банера зі знижкою на сторінці товару? Цього разу ми розбили результати за пристроєм: Десктоп проти Мобільного, Контроль проти Банера зі знижкою.

Ви

То це, по суті, той самий тест, тільки з додатковою колонкою?

Alex Tutor

Це більше, ніж просто колонка. Ми перевіряємо два фактори одразу: банер і пристрій. Кожну таку пояснювальну змінну називають фактором, а разом вони утворюють двофакторний дисперсійний аналіз (ANOVA).

Ви

Якщо банер додає 7 доларів до середньої виручки загалом, то він додає ці 7 доларів усюди, так?

Alex Tutor

Оце й треба перевірити. Погляньмо на чотири групи, які утворює цей дизайн, перш ніж довіряти одному загальному числу.

Alex Tutor

Питання 1

Чому дивитися лише на загальний середній приріст виручки від банера зі знижкою (без урахування пристрою) може вводити в оману?

Оберіть одну відповідьБо середні взагалі ніколи не надійні для жодних данихБо ефект банера може дуже відрізнятися на десктопі й мобільному, а одне загальне число це приховаєБо двофакторний дизайн узагалі не дає змоги обчислити загальне середнєБо мобільні користувачі взагалі не бачать банерів на сторінках товару

Alex Tutor

Виручка за сесію, USD, 3 користувачі на комірку: Десктоп-Контроль 38, 40, 42; Десктоп-Знижка 40, 42, 44; Мобільний-Контроль 28, 30, 32; Мобільний-Знижка 40, 42, 44.

Alex Tutor

Середня виручка за сесію за банером і пристроємЛінії для десктопа й мобільного не паралельні: банер зі знижкою майже не змінює виручку на десктопі, але значно піднімає її на мобільному.

Дані графіка

Банер	Десктоп	Мобільний
Control	40	30
Discount	42	42

Чотири середні комірок: Десктоп-Контроль 40, Десктоп-Знижка 42, Мобільний-Контроль 30, Мобільний-Знижка 42.

Зверни увагу: лінії не паралельні. Якби банер просто додавав однакову суму всюди, обидві лінії піднялися б на однакову висоту.

Ви

Мобільна лінія стрибає значно крутіше. Це і є та сама взаємодія?

Alex Tutor

Питання 2

Ефект взаємодії означає, що вплив одного фактора однаковий на кожному рівні іншого фактора.

ПравдаНеправда

Alex Tutor

Головний ефект — це середній вплив одного фактора за всіма рівнями іншого. Усередни ефект банера за обома пристроями.

Усереднивши десктоп і мобільний разом: середнє Контролю — 35, середнє Знижки — 42. Це головний ефект банера без урахування пристрою.

Тож головний ефект банера — 42 − 35 = 7 доларів, усереднено за обома пристроями.

Ви

А в фактора пристрою теж є головний ефект?

Alex Tutor

Середнє десктопа — 41, мобільного — 36, усереднено за обома станами банера. Тож головний ефект пристрою — 5 доларів: десктоп заробляє більше незалежно від банера.

Alex Tutor

Питання 3

Середні комірок: Десктоп-Контроль $40, Десктоп-Знижка$ 42, Мобільний-Контроль $30, Мобільний-Знижка$ 42. Обчисліть головний ефект банера: середнє знижки мінус середнє контролю, усереднено за обома пристроями.

Ваша відповідь

Одиниці: USD, напр. 5,0

Alex Tutor

Ефект взаємодії — це коли вплив одного фактора залежить від рівня іншого. Він проявляється рівно так, як ці непаралельні лінії.

На десктопі банер додає 42 − 40 = 2 долари. На мобільному — 42 − 30 = 12 доларів. Той самий банер, дуже різний ефект.

Ви

Тобто мобільні користувачі просто більше люблять знижки. Викочуємо банер лише туди, і все?

Alex Tutor

Це справедливе прочитання цих даних, але перевір, чи десктоп просто вже не впирається у стелю, перш ніж узагальнювати надто широко.

Alex Tutor

Питання 4

Використовуючи ті самі чотири середні комірок, обчисліть розмір ефекту взаємодії: приріст банера на мобільному (Мобільний-Знижка − Мобільний-Контроль) мінус приріст на десктопі (Десктоп-Знижка − Десктоп-Контроль).

Ваша відповідь

Одиниці: USD, напр. 5,0

Alex Tutor

F_{banner} = \dfrac{MS_{banner}}{MS_{error}}, \quad F_{device} = \dfrac{MS_{device}}{MS_{error}}, \quad F_{banner \times device} = \dfrac{MS_{banner \times device}}{MS_{error}}

Двофакторний ANOVA обчислює три окремі F-статистики: по одній на кожен головний ефект і одну для їхньої взаємодії.

Для цього тесту: F_banner ≈ 36,75, F_device ≈ 18,75, F_interaction ≈ 18,75, усі на df(1, 8). Усі три перевищують критичне значення близько 5,32.

Ви

Усі три значущі? Тобто все важливо однаково?

Alex Tutor

Усі важливі, але головна новина — взаємодія: вона змінює те, як взагалі варто читати обидва головні ефекти.

Alex Tutor

Питання 5

Зіставте кожен термін багатофакторного ANOVA з тим, що він означає.

Торкніться відповіді, а потім рядка, до якого вона належить. Можна й перетягувати.

Фактор
Головний ефект
Ефект взаємодії
Двофакторний (багатофакторний) ANOVA

Відповіді, які ще треба розмістити

Alex Tutor

За значущої взаємодії рішення на кшталт «викочуємо всюди або ніде» просто не пасує до цього запитання.

Сприймай значущу взаємодію як сигнал сегментувати рішення: цілком доречно запускати на мобільному, а на десктопі почекати або протестувати ще.

Ви

Схоже на родича парадоксу Сімпсона.

Alex Tutor

Майже: непомічена взаємодія — це саме те, як заспокійливе загальне середнє може приховувати сегмент, де зміна майже не допомагає.

Alex Tutor

Ви

Тобто ще більше тестів після тестів?

Alex Tutor

Та сама дисципліна, що й у post hoc кроці ANOVA, лише застосована на рівень глибше — до комбінацій, а не до окремих груп.

Alex Tutor

Питання 6

Які твердження про факторні дизайни та взаємодії правильні? Оберіть усі.

Оберіть усі правильні відповідіЗначуща взаємодія означає, що обидва головні ефекти варто інтерпретувати обережноНепаралельні лінії на графіку середніх комірок — візуальна ознака можливої взаємодіїДвофакторний ANOVA може виявляти лише головні ефекти, але не взаємодіюЗа значущої взаємодії єдине загальне рішення про запуск може бути хибним для деяких сегментівГоловні ефекти й взаємодію завжди перевіряють одним і тим самим значенням F-статистики

Alex Tutor

Один банер, дві дуже різні історії: +2 долари на десктопі, +12 на мобільному. Єдиний вердикт «працює» стирає цю різницю.

Щоразу, коли графік середніх груп показує лінії, що перетинаються або явно не паралельні, це сигнал шукати взаємодію, перш ніж повідомляти одне загальне число.

Ви

Зрозуміла: спершу дивитися на лінії, а тоді вже довіряти середньому.

Alex Tutor

Одне завдання, щоб сформулювати це своїми словами, а тоді складніший кейс із трьома каналами замість двох пристроїв.

Alex Tutor

Питання 7Коротка відповідь · Завдання з перевіркою ШІ

У 2–4 реченнях поясніть, чому Котокорму не варто дивитися лише на загальний середній приріст банера зі знижкою (+7 доларів), вирішуючи, чи запускати його і на десктопі, і на мобільному.

Напишіть відповідь і отримайте оцінку та відгук від нашого ШІ-рецензента.

Увійдіть, щоб отримати відгук ШІ

Чудово. Ще одне, де змішані і головні ефекти, і взаємодія.

Тут немає графіка, лише таблиця результатів. Читай її, як аналітик: по одному каналу за раз.

Ви

Без тиску, звісно.

Alex Tutor

Усе в тебе вийде, саме для цього і є цей курс.

Alex Tutor

Питання 8Кейс · Завдання з перевіркою ШІ

Що б ви порадили по кожному каналу окремо?

Котокорм протестував банер програми лояльності (вимкнено проти увімкнено) у трьох каналах залучення (пошук, соцмережі, email), вимірюючи середній чек. Середні комірок: Пошук вимк. $32 / увімк.$ 34; Соцмережі вимк. $28 / увімк.$ 40; Email вимк. $45 / увімк.$ 46. Двофакторний ANOVA показує значущу взаємодію банер × канал (F = 9,2, p = 0,002). Загальний середній приріст за всіма трьома каналами — близько +5 доларів, і маркетинг хоче увімкнути банер повсюдно, бо це середнє додатне.

Напишіть відповідь і отримайте оцінку та відгук від нашого ШІ-рецензента.

Увійдіть, щоб отримати відгук ШІ

Alex Tutor

На цьому все. Ви відповіли на всі завдання — чудова робота.

Наступний урок: Парні тести: до і після