Неясният въпрос в анкета е въпрос, който различните хора разбират по различен начин. Един въпрос върши работа само когато всички респонденти го разбират еднакво и така, както е замислен. Три неща пречат на това: прекалено сложна формулировка (жаргон, съкращения, двойно отрицание), неясно какво се пита (размита тема, думи като „често“, липсващ период) и твърде дълъг въпрос (с обяснение вътре в него или матрица с много редове). Който не е разбрал въпроса, може да налучка, да го пропусне или да прекъсне анкетата, а отговорът на погрешно разбран въпрос изглежда в резултатите като всеки друг. Две прости проверки – да прочетете въпросите на глас и да ги дадете на няколко души, подобни на респондентите – откриват голяма част от онова, което не виждате в собствената си чернова.
Най-важното
- Пишете с думите на хората, които ще отговарят: без жаргон, без съкращения, без двойно отрицание.
- Назовете темата, периода и какво точно да се брои; когато ви трябва число, заменете „често“ или „редовно“ с брой за посочен период.
- Нека въпросът е едно изречение, а определението сложете преди него или в описанието на въпроса. Матрицата също е въпрос: малко и кратки редове.
- Прочетете всеки въпрос на глас, после помолете няколко души, подобни на респондентите, да мислят на глас, докато отговарят.
Сложни формулировки: жаргон, съкращения и двойно отрицание
Въпросът е прекалено сложен, когато използва думи, които респондентът не употребява, или конструкция, която той трябва да разплете, преди да отговори. Pew Research Center и Американската асоциация за изследване на общественото мнение (AAPOR) съветват едно и също: кратки въпроси с прости и конкретни думи, познати на хората, до които е насочена анкетата.
Вместо: „Смятате ли, че дистрибуцията на слабоалкохолни напитки с плодов вкус е адекватна?“
Попитайте: „Колко лесно или трудно намирате бира с плодов вкус в магазините близо до вас?“ (от „Много лесно“ до „Много трудно“ и „Не търся такава бира“)
Адекватна за кого? Доставчикът и купувачът оценяват дистрибуцията различно, затова питайте за собствения опит на респондента. Последният вариант спестява налучкването на онези, които не търсят такава бира.
Канадската статистическа служба Statistics Canada съветва всяко съкращение да се изписва изцяло („обученията по безопасност на труда“, а не „обученията по ЗБУТ“), а специализираните термини да се заменят с обикновени думи. Жаргон са и думите, които се използват само във вашия екип: кодовите имена на продукти, съкращенията на отдели.
Pew предупреждава, че двойното отрицание обърква респондентите. В анкетите то се появява най-често, когато отрицателно твърдение се оценява по скала „съгласен – несъгласен“: тогава „несъгласен“ е отрицание на отрицанието.
Вместо: „Доколко сте съгласни, че столовата не бива да спира да предлага топла храна?“
Попитайте: „Да продължи ли столовата да предлага топла храна, или да спре?“ („Да продължи“, „Да спре“)
Неясни въпроси: размита тема, думи като „често“ и липсващ период
Въпросът е неясен, когато двама респонденти могат с основание да го разберат като два различни въпроса; тогава отговорите им не могат да се броят заедно. Statistics Canada съветва такъв въпрос да се преформулира, така че да назовава всички подробности: за какво, къде и за кой период пита.
Първата причина за неяснота е размитата тема. „Какво мислите за паркирането?“ може да е въпрос за свободните места в центъра, за цената на синята зона или за колите, паркирани по тротоарите.
Попитайте: „В обикновен делничен ден колко лесно или трудно ви е да намерите място за паркиране в центъра на града?“ (от „Много лесно“ до „Много трудно“ и „Не паркирам в центъра“)
Втората: не е казано какво се брои и за кой период. На въпроса „Колко често ремонтирахте колата си през последната година?“ едни ще преброят посещенията в сервиза, други – ремонтите, които са направили сами, а „последната година“ може да е миналата календарна година или последните 12 месеца. За собственика на нов автосервиз, който провежда анкетата, тази разлика е съществена.
Попитайте: „През последните 12 месеца колко пъти сте давали колата си за ремонт в автосервиз? Не броете редовното обслужване и ремонтите, които сте направили сами.“
Третата: думи като „често“ и „редовно“, които не означават определен брой. В едно изследване сред студенти значението на „често“ като вариант за отговор се е променяло според това за какво пита въпросът (Rocconi и колеги, 2020). В самия въпрос такава дума оставя всеки сам да реши колко е „често“. Когато ви трябва числото, което ще отчетете, питайте за брой в посочен период.
Вместо: „Спортувате ли редовно?“
Попитайте: „През последните 7 дни в колко от дните отделихте поне 30 минути за спорт, бързо ходене или каране на колело?“ (от 0 до 7)
Общото правило за периода е в статията с основните правила за формулиране на въпроси.
Многословни въпроси: когато обяснението е в самия въпрос
Дългият въпрос кара хората да четат повече и пак ги оставя сами да решат какво се брои. AAPOR съветва въпросите да са кратки, за да не натоварват респондентите. Решението е въпросът да е едно изречение, а определението да стои преди него или в описанието на въпроса, което Survey.bg показва под самия въпрос (в редактора: „Добави допълнително описание на въпроса (незадължително)“).
Вместо: „Следващият ни въпрос касае дейностите в дома, които изискват физическо усилие. Под дейности, които изискват физическо усилие, имаме предвид такива като копаене на земята в градината, сечене на дърва, тупане на килими, местене на мебели и др. Колко често извършвате дейности, които изискват физическо усилие, в рамките на седмицата?“
Попитайте: „Помислете за физическата работа вкъщи или в градината, при която се задъхвате, например копаене, цепене на дърва, тупане на килими или местене на мебели. През последните 7 дни в колко от дните сте вършили такава работа поне 10 минути без почивка?“
Първото изречение е определение, което всеки може да приложи към себе си.
Примерите променят какво хората броят. В изследване с въпроси за храненето примерите са увеличили отчетената консумация на изброените храни, необичайните – повече от очевидните, и изглежда са подобрили точността, когато са напомняли за неща, които хората иначе биха пропуснали (Tourangeau и колеги, 2014). Затова подбирайте примерите целенасочено: случаите, които хората забравят, въведени с „например“, а не списък, който накланя отговора. Формулировката, която тласка към определен отговор, е друг проблем: на сугестивните въпроси е посветена отделна статия.
Дългата матрица също е дълъг въпрос
Матричен въпрос с много редове и дълги твърдения е дълъг въпрос в друга форма. В дълга матрица някои хора дават един и същ отговор на всеки ред (straightlining) – знак, че са спрели да четат твърденията. Слагайте по една идея на ред (ред с две неща в едно е двоен въпрос), пишете кратки твърдения и оставяйте малко редове и малко колони с кратки заглавия. Дългата матрица разделете по теми, а най-важните твърдения задайте като отделни въпроси. Как се показва матрицата на телефон и какво дава разделянето ѝ, е описано в частта за матричните въпроси на телефон.
Как да откриете неясните въпроси, преди да изпратите анкетата
Неяснотата в собствените си въпроси не виждате, защото знаете какво сте имали предвид. Две проверки откриват много от тези проблеми.
Първо, прочетете всеки въпрос на глас. Дългите изречения, думите, в които се запъвате, и двойните отрицания се чуват. После проверете всеки въпрос: кого питам, за какво, за кой период и какво трябва да преброи човекът? Могат ли двама души да го разберат различно?
Второ, преди да пуснете анкетата, дайте я на няколко души, подобни на респондентите, както съветват AAPOR и Pew Research Center. Най-много разкрива когнитивното интервю: според Националния център за здравна статистика на САЩ (NCHS) то разкрива как хората разбират въпросите, как разсъждават върху тях и как отговарят. Човекът попълва анкетата и казва на глас какво мисли. След отговора, а не преди него, задайте няколко уточняващи въпроса: „Какво означава за вас „редовно“ тук?“, „Какво преброихте?“, „За кой период помислихте?“, „Имаше ли дума, в която не бяхте сигурни?“. Въпрос, който двама души са разбрали различно, пренапишете.
В Survey.bg „Преглед“ показва анкетата с очите на респондентите, без да приема отговори; отворете я и на телефон. Как да тествате анкетата с няколко души, преди да я изпратите, с истински отговори и измерено време, е описано в ръководството за подготовка на анкета.
| Проверка | Какво открива | Как да поправите |
|---|---|---|
| Прочетете въпроса на глас | Дълги изречения, думи, в които се запъвате, двойни отрицания | Съкратете, разделете, кажете го утвърдително |
| Потърсете съкращения и думи, известни само в екипа | Жаргон | Изпишете съкращението, използвайте думите на респондентите |
| Попитайте „за какво, къде, за кой период?“ | Размита тема, липсващ период | Назовете ситуацията и периода |
| Подчертайте „често“, „редовно“, „напоследък“ | Думи без определено количество | Брой за посочен период |
| Преброете изреченията в самия въпрос | Многословен въпрос | Въпрос в едно изречение, определението преди него или в описанието |
| Преброете редовете на всяка матрица и прочетете твърденията | Дълга матрица | По-малко и по-кратки редове, разделяне по теми |
| Помолете няколко души да мислят на глас, докато отговарят | Онова, което сами не виждате | Пренапишете и изпробвайте променените въпроси отново |
Накратко
Сложният въпрос се поправя с думите на респондентите, неясният – с назована тема, период и брой, а многословният – с едно изречение и определение преди него или в описанието му. Прочетете въпросите на глас и ги изпробвайте с няколко души, подобни на респондентите, преди да изпратите анкетата. За начало отворете готов шаблон по вашата тема и проверете въпросите му по същия начин.
Примерни анкети и готови шаблони по теми
Отворете шаблон по вашата тема и проверете всеки въпрос по същия начин: една тема, прости думи, ясен период.
Вижте шаблоните