зміщення вибірки
Систематична відмінність між вибіркою і генеральною сукупністю через спосіб відбору спостережень.
Зміщення вибірки — це систематична відмінність між людьми, яких ви виміряли, і людьми, про яких хочете робити висновки, через спосіб відбору. На відміну від випадкового шуму, воно не усереднюється: якщо збирати більше даних тим самим способом, та сама помилка лише повторюється з більшою впевненістю.
Воно має кілька знайомих форм. Самовідбір: люди самі вирішують відповісти, і ті, кому найбільше не байдуже (найзадоволеніші чи найсердитіші), відповідають частіше. Невідповідь: запрошені не відповідають, а ті, хто відповів, відрізняються від тих, хто промовчав. Охоплення: до частини сукупності неможливо дістатися, наприклад до клієнтів без електронної пошти. Ефект вцілілих: ви бачите лише тих, хто залишився, а не тих, хто пішов.
Похибка вибірки нічого з цього не враховує. Вона припускає, що відповіді — випадковий відбір із сукупності. Тому репрезентативна вибірка — це про те, хто відповідає, а не скільки.
Що допомагає: запрошувати випадковий список, а не тих, хто під рукою, надсилати нагадування, вказувати частку відповідей і порівнювати ранні відповіді з пізніми (ті, хто відповідає пізно, часто схожі на тих, хто не відповів).
Приклад
Котокорм публікує посилання на опитування про доставку у своїй спільноті клієнтів і отримує 600 відповідей: 70% хочуть вечірню доставку.
У спільноті проводять час найзалученіші клієнти, а відповіли ті, кому тема доставки не байдужа. Випадкова вибірка з 400 підписників, запрошених поштою з одним нагадуванням, дає 38%. 600 відповідей зі спільноти не помилялися щодо тих, хто їх дав; вони просто не представляли всіх підписників. Жодна похибка вибірки не могла про це попередити.
Типові помилки
- Лікувати зміщення обсягом. 10 000 самовідібраних відповідей не репрезентативніші за 500.
- Ігнорувати частку відповідей. Якщо відповіли 5%, то наскільки ви помиляєтеся, вирішують мовчазні 95%.
- Питати про відтік лише активних користувачів. Саме тих, хто пішов, і бракує.
- Довіряти похибці вибірки на зручній вибірці. Вона описує лише випадкові вибірки.
Вивчити в курсі
- Вибірки, генеральні сукупності та нормальний розподіл · Чому ми вивчаємо вибірки, щоб дізнатися про всіх користувачів, і чому дзвоноподібна крива трапляється всюди.