Подвійне питання — це питання про дві речі, на яке можна дати лише одну відповідь. Наприклад: «Наскільки ви задоволені зарплатою і пільгами?» Людина, яку влаштовує зарплата, але не влаштовують пільги, не може відповісти чесно, а з відповіді «Задоволений» не видно, якої половини вона стосується. Коли анкету вже надіслано, таких відповідей не розплутати. Щоб знайти подвійні питання у своїй анкеті, шукайте дві речі, з’єднані сполучником «і» чи «або», дві якості в одній оцінці й пропозицію разом зі способом її здійснення. Тоді розділіть питання на два, залиште лише потрібну половину або поставте другу частину тільки тим, кого вона стосується. Стаття для всіх, хто сам складає анкету для працівників, клієнтів чи учнів.
Коротко
- Подвійне питання стосується двох речей, а відповідь на нього можлива лише одна.
- Жоден фільтр чи експорт не розділить такі відповіді згодом: виправте формулювання до надсилання.
- Шукайте «і» чи «або» між двома речами, дві якості в одній оцінці, пропозицію зі способом її здійснення — у питаннях, варіантах відповіді й рядках матриці.
- Розділіть питання, залиште одну половину або покажіть уточнювальне питання лише тим, кого воно стосується.
- Перевірте кожне питання: чи може хтось відповісти «так» на одну його частину і «ні» на іншу?
Що таке подвійне питання і чому відповідь на нього нічого не каже
Подвійне питання просить респондента оцінити дві чи більше речей, але залишає місце лише для однієї відповіді. Pew Research Center описує його як питання, у якому треба «оцінити більше ніж одне поняття». Австралійське бюро статистики додає, що респондента часто стосується лише одна з частин, а на такі питання респонденти частіше відповідають неправильно або взагалі їх пропускають. Не плутайте його з двозначним питанням: двозначне питає про одне, але його слова можна зрозуміти по-різному.
Відповідь на подвійне питання неможливо витлумачити. Візьмімо питання «Наскільки ви задоволені нашими тарифами і роботою служби підтримки?» з п’ятибальною шкалою. Кого влаштовують тарифи, але дратує підтримка, той не може відповісти чесно, і, судячи з досліджень, багато людей оцінюють лише одну з двох речей. У двох рандомізованих експериментах (Menold, Journal of Official Statistics, 2020) подвійні питання не вимірювали того самого, що версії про одну з двох речей, а щонайменше одна з таких версій краще вимірювала те, що мала виміряти.
Згодом цього не виправити: фільтри, перехресні таблиці й експорт лише перегруповують ті відповіді, які люди вже дали, а більша кількість відповідей не виправляє помилку у формулюванні. Виправляйте питання до того, як надішлете посилання, і обирайте тип питання з огляду на майбутній аналіз.
Чотири ознаки подвійного питання
Ознака — не саме слово «і», а дві речі, про які людина може захотіти відповісти по-різному: у питанні, у рядку матриці чи у варіанті відповіді.
Сполучник «і» чи «або» між двома речами
За спостереженням Австралійського бюро статистики, дві речі в такому питанні зазвичай з’єднує «і» або «або». «Чи потрібно учням більше уроків історії та географії?» питає про два предмети, а відповідь «так» на питання «Чи користуєтеся ви шкільною їдальнею або буфетом?» не каже, чим саме. Подвійним буває й питання про дві величини: у прикладі бюро «Як часто і скільки часу ви займаєтеся в спортзалі протягом тижня?» поєднано частоту і тривалість.
«І» не шкодить, коли входить у назву однієї речі («Міністерство освіти і науки») або з’єднує дві сторони одного порівняння («Чи однаково тут ставляться до чоловіків і до жінок?»). Перевірка проста: чи може респондент захотіти відповісти по-різному про кожну річ, про яку його питають? Якщо так, це два питання.
Дві якості в одній оцінці
Це найчастіший випадок у шкалах і рядках матриці: «Наскільки цікавим і корисним був тренінг?» або рядок «Швидкий і привітний персонал». Тренінг може бути цікавим, але марним, а персонал — привітним, але повільним. Кожній якості потрібне окреме питання або окремий рядок.
Пропозиція і спосіб її здійснення в одному питанні
Деякі питання просять схвалити дві речі одразу: «Чи варто ЦНАПу скоротити черги, перейшовши лише на запис онлайн?» Людина може хотіти коротших черг, але бути проти того, щоб записуватися тільки онлайн. Розділіть таке питання на два.
Де проходить межа з іншою помилкою: якщо питання запитує про дві речі, воно подвійне; якщо ж одну річ воно приймає як даність і запитує лише про іншу («Наскільки ви задоволені нашим новим застосунком, з яким замовляти стало швидше?»), це вже провокаційне питання — інша помилка.
Дві речі в одному варіанті відповіді
Помилка може ховатися у варіантах відповіді. У питанні «Що вас тримає на цій роботі?» варіант «Добрі колеги і гідна зарплата» не залишає чесного вибору тому, хто лишається через колег, попри зарплату. Дайте кожній причині окремий варіант і дозвольте обрати кілька (тип питання «Множинні відповіді» в eSurvey.ua) або оцініть кожен чинник в окремому рядку. Якщо розділити варіант, а відповідь залишити одну, помилка просто переміститься.
Як виправити: розділити, залишити половину або додати уточнювальне питання
Найчастіше подвійне питання просто стає двома. Пробуйте три способи в такому порядку.
Розділіть питання. Поставте два питання, по одному про кожну річ, як радить Pew Research Center. Кілька речей з однією шкалою зберіть в одну матрицю: на вкладці «Матриця» оберіть тип «Одна відповідь на рядок» і дайте кожній речі свій рядок. Зазвичай питання об’єднують, щоб анкета була коротшою, але два короткі рядки забирають у респондента лише кілька секунд. Дві альтернативи, як-от їдальню і буфет, перетворіть на одне питання «Множинні відповіді» з варіантом для кожної і варіантом «Жодним із них». Відсотки в ньому — частки від усіх позначок, тож пишіть «x % позначок», а не «x % респондентів».
Залиште одну половину. Якщо для вашого рішення потрібна лише одна з двох речей, видаліть другу. Про кожну половину спитайте себе: що я робитиму з цією відповіддю?
Поставте уточнювальне питання тим, кого воно стосується. Коли друга частина має сенс лише після певної відповіді, показуйте її тільки тим, хто дав цю відповідь. Спитайте «Наскільки великою проблемою є паркування у вашому районі?» («Велика проблема», «Невелика проблема», «Не проблема», «Важко відповісти»), а після перших двох варіантів — «Чи має місцева влада щось із цим робити?». В eSurvey.ua поставте обидва питання на одну сторінку, натисніть «Логіка опитування» вгорі редактора і додайте до першого питання правило «Показати питання» з умовою «дорівнює», позначивши обидва ці варіанти: уточнення з’явиться, щойно людина обере будь-який із них. Докладніше про такі правила — у статті «Логіка опитування: як налаштувати розгалуження анкети». Якщо вам потрібна думка всіх про другу частину, поставте обидва питання всім.
Приклади подвійних питань: було і стало
У стовпці «Було» кожне питання стосується двох речей, у стовпці «Стало» — однієї.
| Анкета | Було | Стало |
|---|---|---|
| Працівники | «Наскільки ви задоволені зарплатою і пільгами?» | «Наскільки ви задоволені зарплатою?» і «Наскільки ви задоволені пільгами?» (два рядки однієї матриці) |
| Працівники | «Наскільки зрозумілий і своєчасний зворотний зв’язок від вашого безпосереднього керівника?» | «Наскільки зрозумілий зворотний зв’язок від вашого безпосереднього керівника?» і «Як швидко після виконаної роботи ви зазвичай його отримуєте?» |
| Працівники | Варіант «Добрі колеги і гідна зарплата» | Два варіанти, «Добрі колеги» і «Гідна зарплата», з можливістю обрати кілька |
| Клієнти | «Наскільки ви задоволені нашими цінами й обслуговуванням?» | «Наскільки ви задоволені нашими цінами?» і «Наскільки ви задоволені обслуговуванням?» |
| Клієнти | «Чи доставили ваше замовлення вчасно і без пошкоджень?» (Так/Ні) | «Чи доставили ваше замовлення вчасно?» і «Чи прибуло воно без пошкоджень?» |
| Клієнти | «Чи варто нам пришвидшити доставку, запровадивши за неї невелику плату?» | «Чи хотіли б ви швидшої доставки?» і «Чи готові ви доплатити за неї невелику суму?» (Так/Ні для кожного) |
| Школа | «Чи потрібно учням більше уроків історії та географії?» | «Чи потрібно учням більше уроків історії?» і «Чи потрібно учням більше уроків географії?» |
| Школа | «Наскільки цікаві й корисні уроки?» | «Наскільки цікаві уроки?» і «Наскільки корисні уроки?» |
| Школа | «Чи варто школі зменшити домашні завдання, подовживши навчальний день?» | «Чи варто школі зменшити домашні завдання?» і «Чи варто подовжити навчальний день?» |
Так побудовано й шаблон «Опитування для оцінки задоволеності працівників» в eSurvey.ua: спілкування керівників із підлеглими і підлеглих із керівниками в ньому оцінюють у двох окремих рядках.
Перевірка за дві хвилини перед надсиланням
Прочитайте кожне питання, рядок і варіант відповіді по одному разу й перевірте таке.
- Чи може хтось відповісти «так» на одну річ, про яку питають, і «ні» на іншу? Якщо одну з речей питання не запитує, а лише приймає як даність, перечитайте розділ «Пропозиція і спосіб її здійснення в одному питанні».
- Позначте кожне «і», «або» та скісну риску й вирішіть, чи це частина назви однієї речі, чи зв’язок між двома.
- Дайте чернетку кільком людям, схожим на ваших респондентів, і попросіть їх своїми словами сказати, про що питає кожне питання. Де їхні пояснення розходяться або хтось перепитує «а про що саме?», питання, ймовірно, подвійне. Як організувати таку перевірку, описано в статті «Як підготуватися до створення опитування: 8 рішень».
Підсумок
Одне питання — одна річ. Шукайте «і» чи «або» між двома речами, дві якості в одній оцінці, пропозицію разом зі способом її здійснення і варіанти відповіді, що поєднують дві причини. Розділіть питання, залиште потрібну половину або покажіть другу частину лише тим, кого вона стосується, а перед надсиланням дайте чернетку кільком людям. Щоб побачити окремі рядки в готовій анкеті, відкрийте шаблон анкети задоволеності працівників нижче.
Готовий шаблон: анкета задоволеності працівників
15 питань. Подивіться, як спілкування керівників із підлеглими і підлеглих із керівниками оцінюють у двох окремих рядках.
Дивитися шаблон