Підготовка до опитування — це вісім рішень, які варто ухвалити ще до того, як ви напишете перше питання, і саме в такому порядку: що вам потрібно дізнатися і що покаже звіт; кого опитати, усіх чи вибірку; чи зможуть люди відповісти; як до них дістатися; що вони отримають від участі; у якому порядку ставити питання; якої довжини буде анкета; як ви її перевірите. Кожне рішення запобігає одній поширеній помилці, а більшість таких помилок уже не виправиш, коли відповіді зібрано. Стаття для всіх, хто складає опитування сам.
Коротко
- Перш ніж писати питання, запишіть, яке рішення ви ухвалите за результатами опитування і який рядок звіту дасть кожне питання.
- Обсяг вибірки визначає точність результату лише тоді, коли вибірка випадкова; ті, хто відповідає за відкритим посиланням, вирішили відповісти самі.
- Жоден канал не робить опитування анонімним: скажіть, хто бачитиме окремі відповіді і що результати ви подаєте лише в узагальненому вигляді.
- Починайте з легких питань на тему опитування, а демографічні ставте ближче до кінця.
- Дайте заповнити анкету кільком людям, схожим на ваших респондентів, і запишіть, скільки часу їм знадобилося.
1. Вирішіть, що потрібно дізнатися і що має показати звіт
Напишіть одне речення: яке рішення ухвалять за результатами опитування і хто його ухвалить. «Дізнатися, що думають працівники» — це ще не рішення, а «вирішити, чи переходити з січня на новий графік роботи» — уже рішення.
Потім перелічіть, яка інформація для цього потрібна, і біля кожного пункту запишіть речення чи таблицю звіту, куди вона піде: «такий-то відсоток працівників підтримує новий графік», «за відділами». Питання, яке не дає жодного рядка звіту, викресліть уже зараз.
Так само заздалегідь вирішіть, які групи ви порівнюватимете: відділи, магазини, вікові групи. В eSurvey.ua «Перехресна табуляція» працює лише між питаннями з вибором відповіді («Тільки одна відповідь», «Множинні відповіді», «Розкривні списки» і питання із зображеннями), тож про належність до групи питайте питанням з вибором відповіді, а не в текстовому полі. Докладніше — у статті про те, як обрати тип кожного питання під звіт.
2. Кого опитати: усіх чи вибірку
Спершу визначте групу, яку мають описати результати (хто до неї входить, а хто ні), а тоді оберіть:
- Усіх, якщо група досить мала, щоб звернутися до кожного, як-от 80 працівників компанії. Похибки вибірки тоді немає взагалі, і залишається перевірити, хто не відповів.
- Випадкову вибірку, якщо група завелика, щоб опитати всіх, і у вас є список усіх її членів, з якого можна вибирати (а якщо ви можете звернутися до кожного зі списку, опитайте всіх). Лише за такого відбору обсяг вибірки показує, наскільки велика випадкова похибка результату, але й тоді важить, хто не відповів.
Американська асоціація дослідників громадської думки (AAPOR) наводить такі значення граничної похибки (тут округлено) для випадкової вибірки з великої групи, з довірчою ймовірністю 95 %, коли відповіді розділилися 50 на 50:
| Скільки людей відповіли | Гранична похибка, відсоткових пунктів |
|---|---|
| 100 | близько ±10 |
| 400 | близько ±5 |
| 1 000 | близько ±3 |
Коли група в багато разів більша за вибірку, як-от населення країни чи міста, її розмір мало змінює ці цифри; щоб удвічі зменшити похибку, потрібно приблизно вчетверо більше респондентів. Але систематичної похибки (зміщення) більша кількість відповідей не зменшує; докладніше — у статті про те, що виправляє більша кількість відповідей, а що ні.
Більшість опитувань за посиланням — це третій випадок: люди, які відповіли за посиланням на вебсайті чи в соціальній мережі, вирішили відповісти самі. Таку вибірку називають стихійною. Гранична похибка до неї не застосовується, і самі відповіді не покажуть, наскільки вони відхиляються від дійсності. Не допоможе й підігнати кілька співвідношень під склад населення, наприклад частку жінок: Статистичне управління Канади (Statistics Canada) застерігає, що так можна приховати зміщення вибірки. Відомі співвідношення використовуйте для перевірки: порівняйте склад тих, хто відповів, зі складом усієї групи.
3. Перевірте, чи люди можуть і хочуть відповісти
Чи можуть вони відповісти? Питайте тих, у кого є потрібна інформація: працівники, яких розпитують про умови договору з постачальником, можуть хіба що здогадуватися. Статистичне управління Канади додає, що вже перші питання мають дати респондентам упевненість, що з рештою вони впораються.
Чи відповідатимуть вони чесно? Чутлива тема, як-от зарплата, здоров’я чи поведінка керівника, — не причина відмовлятися від опитування. Без інтерв’юера люди рідше дають соціально бажані відповіді, тобто такі, що мають добрий вигляд в очах інших. Крім того, допоможуть виважені формулювання і чітка вказівка, хто бачитиме відповіді. Про це — у статті про те, як поставити чутливе питання. Інший канал замість опитування потрібен лише тоді, коли група така мала, що відповідь вказала б на конкретну людину.
4. Як дістатися до респондентів і що залежить від каналу
Від того, як провести опитування, залежить, хто відповідатиме. Якщо у вас є список, користуйтеся ним, а відкриті канали додавайте лише для тих, кого в ньому немає. В eSurvey.ua всі канали зібрано на вкладці опитування «Поширення»:
- «Надіслати по електронній пошті» — запрошення з посиланням надходить людям із вашого списку. Ви знаєте, кого запросили, тож можете назвати відсоток відповідей і написати людям ще раз. Відстеження відповідей за замовчуванням вимкнене: тоді відповідь не прив’язується до адреси одержувача, і eSurvey.ua не знає, хто відповів. Якщо поставити позначку «Увімкнути відстеження відповідей», кожен одержувач отримає персональне посилання, через яке відповідь пов’язується з адресою, на яку надіслано запрошення, і про це буде сказано внизу листа. Докладніше — у статті про запрошення електронною поштою і відстеження відповідей.
- «Посилання на опитування» — адреса, яку можна вставити будь-куди: у розсилку, груповий чат чи оголошення на дошці.
- «Інтеграція з вебсайтом» (опитування, вбудоване в сторінку, бічна кнопка чи спливаюче вікно) і «Поширити через соціальні мережі» (Facebook, X і LinkedIn) — так ви звертаєтеся до тих, хто відвідує ваш сайт або стежить за вами. Ці люди вирішили відповісти самі, тож відповіді описують саме їх, а не всіх ваших відвідувачів чи підписників. Відсоток відповідей тут назвати неможливо: ніхто не знає, скільки людей бачили посилання.
Жоден канал не робить відповіді анонімними. Загальне посилання не містить імені, але на людину може вказати мала група, коментар, поле з контактами чи поєднання відповідей (відділ плюс вікова група), а eSurvey.ua з кожною відповіддю зберігає час заповнення, пристрій, браузер, країну (якщо її вдається визначити) і сайт, з якого людина перейшла. Тож анонімності не обіцяйте. Скажіть респондентам, хто бачитиме окремі відповіді і що результати ви подаєте лише в узагальненому вигляді, для груп щонайменше з 10 осіб. eSurvey.ua жодного мінімуму не застосовує, тож, перш ніж показувати результати за групами, самі перевірте, скільки відповідей у кожній.
5. Скажіть респондентам, що вони отримають від участі
Одним конкретним реченням скажіть у запрошенні та у вступі, що ви вирішите за відповідями: «чи переходити з січня на новий графік», а не «щоб покращити нашу роботу». Називайте, для чого потрібні відповіді, і ніколи — яку відповідь ви сподіваєтеся почути.
Згідно з оглядом Cochrane (Edwards і колеги, 2023), у дослідженнях онлайн-анкет гроші й невеликі подарунки збільшували кількість відповідей, хоча результати дуже різнилися. Проте більше відповідей ще не означає, що вони репрезентативніші. Якщо пропонуєте винагороду, напишіть, що це, хто її отримає і коли; розіграші призів можуть підпадати під окремі правила, тож перевірте ті, що стосуються вас. eSurvey.ua не надсилає респондентові жодного повідомлення, коли той завершує опитування, і розіграшів не проводить, тож винагороду ви вручаєте самі. Попросіть адресу електронної пошти в необов’язковому питанні на останній сторінці, щоб відповісти можна було й не претендуючи на винагороду, і скажіть, що адреса зберігається разом із відповідями та потрібна лише для цього. Що ще допомагає, зібрано в дев’яти порадах, як отримати відповіді від запрошених.
6. Порядок питань і структура анкети
Починайте з простих питань на тему опитування, на які легко й цікаво відповідати, ідіть від загального до конкретного, а демографічні питання (вік, стать, місце проживання) ставте ближче до кінця, якщо тільки одне з них не визначає, хто відповідатиме далі, як це робить питання-фільтр. Так радять і Pew Research Center, і Статистичне управління Канади.
Причина в тому, що попереднє питання створює контекст для наступних і може змінити відповіді на них. Тож питання, за яким ви стежите від опитування до опитування, щоразу ставте на те саме місце.
Почніть опитування з короткого вступу на першому екрані: хто питає, для чого потрібні відповіді, скільки часу забере опитування і хто бачитиме відповіді. Наприкінці подякуйте за участь. Що саме написати, пояснює стаття про вступ та інструкції до опитування.
7. Коротка анкета і виміряний час
Приберіть усе, що не дає жодного рядка звіту: у дослідженнях онлайн-анкет з огляду Cochrane коротші анкети збирали більше відповідей, хоча результати дуже різнилися.
За довжину доводиться платити двічі: що довший заявлений час, то менше людей починають і завершують опитування, а відповіді наприкінці довгої анкети стають швидшими, коротшими й одноманітнішими (Galesic і Bosnjak, 2009). Найдорожче коштують відкриті питання. У понад 40 опитуваннях ймовірнісної онлайн-панелі American Trends Panel дослідницького центру Pew Research Center з вересня 2018 до липня 2021 року відкрите питання пропускали в середньому близько 18 % респондентів, а закрите — 1–2 %. Залишайте лише ті відкриті питання, відповіді на які ви справді прочитаєте.
Надійного правила, скільки питань уміщується в хвилину, немає. Виміряйте час під час пробного заповнення, вкажіть його в запрошенні та у вступі, а якщо він здається задовгим, скорочуйте анкету, а не число.
8. Пробне заповнення перед розсиланням
Перш ніж розсилати опитування, попросіть заповнити його кількох людей, схожих на ваших респондентів: для опитування клієнтів це мають бути клієнти, а не лише колеги. Колеги помітять друкарські помилки, але не те, що клієнт зрозуміє неправильно. AAPOR, Pew Research Center і Статистичне управління Канади вважають таку перевірку стандартним кроком у підготовці анкети.
Стежте, де люди вагаються, що їм незрозуміло чи неприємно і над яким питанням доводиться зупинитися й подумати. Перевірте також, чи розуміють вони, чого від них чекають, і чи є серед запропонованих варіантів такий, що відповідає їхній думці.
В eSurvey.ua «Попередній перегляд» показує опитування так, як його бачать респонденти, але відповідей не приймає. Щоб виміряти час, поставте на вкладці «Налаштування» позначку «Активне», надішліть посилання тим, хто тестуватиме, і подивіться «Час відповіді» кожного з них у розділі «Індивідуальні відповіді». Потім відкрийте результати й спробуйте написати речення звіту, які ви запланували: якщо якесь не виходить, відповідне питання треба змінити. Перед справжнім розсиланням видаліть пробні відповіді в розділі «Індивідуальні відповіді»: доти вони рахуються разом зі справжніми і зараховуються до ліміту відповідей опитування. Видалення остаточне. І перевірте опитування на телефоні.
Підсумок
Підготовка до опитування — це вісім рішень, від плану звіту до пробного заповнення. Найдорожче обходиться пропустити два з них: план звіту дає кожному питанню мету, а пробне заповнення показує те, чого ви не бачите у власній чернетці. Хоч би який канал ви обрали, анонімності не обіцяйте: скажіть, хто бачитиме відповіді.
Щоб не починати з чистого аркуша, перегляньте приклади анкет і готові шаблони за темами.
Приклади анкет і готові шаблони за темами
Оберіть сферу свого опитування, відкрийте шаблон і пристосуйте питання до списку рішень, який ви склали.
Дивитися шаблони