Як скласти анкету, яка допоможе щось вирішити? Пройдіть десять кроків: від рішення, для якого потрібні відповіді, до змін після опитування. Самі питання займають лише два кроки з десяти; решта визначає, хто відповість, чи можна довіряти відповідям і чи щось зміниться. Статистичне управління Канади (Statistics Canada) радить дбати про якість на кожному етапі, а не лише в анкеті. Для кожного кроку — що зробити, якої поширеної помилки уникнути і, для більшості кроків, де прочитати докладніше.
Коротко
- Почніть із рішення і викресліть питання, що не дають жодного рядка звіту.
- Ті, хто відповідає за відкритим посиланням, вирішили відповісти самі: якщо маєте список адрес, запрошуйте за ним.
- Протестуйте активне опитування на кількох людях, схожих на респондентів, і видаліть пробні відповіді.
- Скажіть, хто бачитиме відповіді і чи пов’язані вони з електронною адресою; результати показуйте лише для груп щонайменше з 10 осіб і розкажіть, що змінилося.
1. Запишіть, яке рішення ви ухвалите за результатами
Одним реченням назвіть рішення і того, хто його ухвалює, наприклад: «У грудні правління спортивного клубу вирішить, чи відчиняти зал о 6:30 у будні». Потім перелічіть, що треба дізнатися, і біля кожного пункту запишіть рядок звіту; питання без такого рядка викресліть.
Мета на кшталт «дізнатися, що думають члени клубу» породжує непотрібні питання: якщо людина поза проєктом, прочитавши мету, не скаже, що буде вирішено, перепишіть її. Докладніше — про рішення, які варто ухвалити до першого питання.
2. Оберіть, хто має відповісти і як ви до них дістанетеся
Визначте групу, яку мають описати результати, і опитайте всіх або випадкову вибірку зі списку всієї групи. Запрошуйте насамперед людей зі свого списку адрес, а посилання на сайті чи в соціальній мережі — лише для тих, кого в ньому немає.
Поширена помилка — вважати репрезентативними тих, хто відповів за відкритим посиланням. Вони вирішили відповісти самі: граничну похибку для них обчислити неможливо, а відсотка відповідей немає, бо невідомо, скільки людей бачили посилання. Навіть для випадкової вибірки важить, хто не відповів (див. крок «Перевірте, хто відповів, перш ніж читати результати»). Прочитайте, що виправляє більша кількість відповідей, а що ні.
3. Пишіть питання, які всі розуміють однаково
Пишіть короткі питання простими словами, по одній думці в кожному. Pew Research Center радить уникати жаргону й незнайомих скорочень; потрібний термін поясніть там, де він з’являється вперше.
Типова пастка — питання про дві речі одразу: «Чи влаштовують вас години роботи й ціни?» Хто задоволений лише одним із двох, не зможе відповісти чесно, а ви не знатимете, чого стосується відповідь.
4. Обирайте тип кожного питання з огляду на аналіз
Тип питання залежить від того, що воно має дати у звіті (частку, середнє, порівняння груп): закриті — для того, що рахуватимете, відкриті — лише там, де відповіді хтось прочитає, бо їх, за даними Pew Research Center, пропускають набагато частіше.
Одна з помилок — питати про групу для порівняння (вид членства, вік) у текстовому полі: «Перехресна табуляція» в eSurvey.ua працює лише між питаннями з вибором відповіді. Інша — варіанти, серед яких дехто не знаходить свого: додайте варіант і для них, як-от «Я не відвідую клуб у будні». Докладніше — як вибрати тип питання з огляду на аналіз.
5. Сплануйте порядок питань і перший екран
Почніть із легких питань на тему, ідіть від загального до конкретного, а демографічні ставте ближче до кінця. Ім’я чи контакти питайте лише за потреби: вони пов’язують відповіді з конкретною людиною.
На першому екрані скажіть, хто питає, для чого потрібні відповіді, скільки часу забере заповнення, до кого звертатися, хто бачитиме окремі відповіді і що участь добровільна. Якщо ввімкнете відстеження відповідей (див. крок «Надішліть запрошення і напишіть ще раз тим, хто не відповів»), скажіть і те, що відповіді будуть пов’язані з адресою електронної пошти.
Помилка — обіцяти «повну конфіденційність» чи анонімність. Скажіть натомість, що результати ви подаєте лише в узагальненому вигляді, для груп щонайменше з 10 осіб; eSurvey.ua мінімуму не застосовує, тож відповіді в кожній групі рахуйте самі. Докладніше — про вступ та інструкції до опитування.
6. Налаштуйте опитування в eSurvey.ua
Почніть із шаблону («Використати професійний шаблон»), зі свого попереднього опитування («Використати мої попередні опитування») або з нуля; окремі питання можна брати й з бібліотеки. Нове опитування не приймає відповідей, поки на вкладці «Налаштування» не поставлено позначку «Активне»; доти його посилання показує «Це опитування не активне.»
Спокуса — зробити всі питання обов’язковими. Американська асоціація дослідників громадської думки (AAPOR) застерігає: обов’язкова відповідь підвищує ризик, що людина покине опитування раніше. Обов’язковим робіть лише те, без чого аналіз неможливий, а «Відмітити всі питання як обов'язкові» вмикайте рідко.
7. Протестуйте анкету на кількох людях, схожих на ваших респондентів
Дайте заповнити анкету кільком членам клубу, а не лише колегам. Одні нехай заповнюють самі, без коментарів, а ви виміряйте час; з іншими сядьте поруч і подивіться, де вони вагаються, що розуміють не так і чи кожен знаходить свою відповідь. Виміряний час укажіть у запрошенні та у вступі; якщо він задовгий, скорочуйте питання, а не названий час.
Перевірку часто псують дві речі: тест у режимі «Попередній перегляд», який відповідей не приймає, і забуті в результатах пробні відповіді. Тестуйте активне опитування, дивіться «Час відповіді» в розділі «Індивідуальні відповіді», а перед розсиланням видаліть пробні відповіді: доти вони рахуються разом зі справжніми, а видалення остаточне.
8. Надішліть запрошення і напишіть ще раз тим, хто не відповів
Надішліть опитування своєму списку через «Надіслати по електронній пошті». Щоб пізніше написати лише тим, хто не відкрив свого персонального посилання, ще до надсилання поставте позначку «Увімкнути відстеження відповідей»: кожен одержувач отримає персональне посилання, а примітка внизу листа скаже, що автор опитування зможе побачити відповіді з цієї адреси. В опитуванні працівників чи на чутливу тему зважте, чи варто це робити: ви бачитимете відповіді кожної людини. Повторний лист додає відповідей; зазвичай надсилають один-два.
Не чекайте автоматичних нагадувань: eSurvey.ua їх не надсилає. Повторний лист ви пишете самі й надсилаєте одержувачам, що «Не відповіли на запрошення на електронну пошту»; без відстеження це весь список, тож почніть лист словами «Якщо ви вже відповіли, дякуємо». Докладніше — як надсилати запрошення до опитування електронною поштою.
9. Перевірте, хто відповів, перш ніж читати результати
Порівняйте, скільки людей відповіло і хто вони (вікові групи, види членства), з тим, що ви знаєте про всіх запрошених. З увімкненим відстеженням екран «Статистичні показники електронних листів» показує відсоток проходження: кількість опитувань, пройдених за посиланням із запрошення, поділена на кількість одержувачів запрошення.
Відсоток відповідей сам нічого не доводить: низький — це попередження, а високий не виключає зміщення. Важить, чи відрізняються ті, хто відповів, від решти в тому, про що ви питали; для відкритого посилання відсотка відповідей немає. Докладніше — як перевірити упередженість через відсутність відповідей.
10. Складіть звіт, дійте й розкажіть людям, що змінилося
У звіті, запланованому в кроці 1, укажіть, скільки людей запросили, скільки відповіли, коли й як проводили опитування. Результати за групами показуйте лише для груп щонайменше з 10 респондентів, а відкриті відповіді читайте заради спільних тем, ніколи — щоб дізнатися автора. Потім дійте й скажіть респондентам, що ви дізналися, що зміниться, а що ні й чому.
Часто все псує звіт, за яким нічого не роблять, або зміни, про які не дізнаються респонденти: наступного разу відповість менше людей. Не вмикайте «Зробити результати опитування загальнодоступними», якщо не хочете, щоб кожен, хто має посилання, бачив усі відкриті відповіді. Для опитування працівників — як від результатів перейти до плану дій.
Підсумок
Тож як правильно скласти анкету? Рішення, люди, питання, їхні типи, перший екран, налаштування, тест, розсилання, перевірка того, хто відповів, звіт і дії.
Щоб не починати з чистого аркуша, оберіть шаблон зі сфери, найближчої до вашого рішення.
Почніть із готового шаблону
Оберіть сферу, найближчу до вашого рішення, відкрийте шаблон і пристосуйте його питання до списку з кроку 1.
Дивитися шаблони