Подготовката на анкета се състои от осем решения, които вземате, преди да напишете първия въпрос, и то в този ред: какво трябва да научите и какво ще отчетете, дали ще питате всички или извадка, дали хората могат да отговорят, как ще стигнете до тях, каква полза имат от участието, в какъв ред ще са въпросите, колко дълга ще е анкетата и как ще я изпробвате. Всяко решение предпазва от една честа грешка, а повечето от тези грешки не могат да се поправят, след като отговорите са събрани. Ръководството е за всеки, който сам подготвя анкетно проучване: във фирма, в училище, в община или в сдружение.
Най-важното
- Преди да напишете въпросите, запишете решението, което анкетата трябва да подпомогне, и изречението от отчета, което ще даде всеки въпрос.
- Броят на отговорилите показва колко точен е резултатът само при случайна извадка; хората, които отговарят на публикуван линк, сами са решили да участват.
- Никой канал не прави анкетата анонимна: кажете кой ще вижда индивидуалните отговори и че резултатите се отчитат само обобщено.
- Започнете с лесни въпроси по темата, а демографските оставете към края.
- Изпробвайте анкетата с няколко души, подобни на респондентите, и запишете колко време им е отнела.
1. Какво трябва да научите и какво ще отчетете
Напишете едно изречение: за кое решение ще помогне анкетата и кой ще го вземе. „Да разберем какво мислят служителите“ не е такова изречение, а „да решим дали от януари да преминем към новото работно време“ е.
После избройте информацията, която е нужна за това решение, и до всяка точка запишете изречението или таблицата от отчета, в които тя ще влезе: „Х % от служителите предпочитат новото работно време“, „по отдели“. Въпрос, който не дава нищо за отчета, отпада още сега.
Решете и кои групи ще сравнявате: отдели, обекти, възрастови групи. В Survey.bg „Крос табулация“ работи само между въпроси с избор („Един отговор само“, „Множество отговори“, „Падащи менюта“ и въпросите с изображения), затова питайте за групата с въпрос с избор, а не с текстово поле. Вижте как да планирате отчета и вида на всеки въпрос още преди да напишете въпросите.
2. Кого да питате: всички или извадка
Определете групата, която резултатите трябва да описват (кой влиза в нея и кой не), и изберете:
- Всички, когато групата е достатъчно малка, за да стигнете до всеки, например 80-те служители на една фирма. Тогава извадкова грешка няма; остава да проверите кой не е отговорил.
- Случайна извадка, когато групата е твърде голяма, за да питате всички, и имате списък на всички в нея, от който да изтеглите извадката (ако можете да стигнете до всеки в списъка, питайте всички). Само при такова теглене размерът на извадката показва каква е случайната грешка на резултата, а кой не е отговорил, пак има значение.
Американската асоциация за изследване на общественото мнение (AAPOR) дава следната допустима грешка, тук закръглена, за случайна извадка от голяма група при ниво на доверие 95 % и отговори, които се делят 50 на 50:
| Брой отговорили | Допустима грешка, в процентни пунктове |
|---|---|
| 100 | около ±10 |
| 400 | около ±5 |
| 1000 | около ±3 |
Когато групата е много пъти по-голяма от извадката, както е при населението на една страна или един град, размерът на групата почти не променя тези числа; за да намалите грешката наполовина, ви трябват приблизително четири пъти повече отговорили. Повече отговори обаче не намаляват отклонението: вижте какво поправят повече отговори и какво не.
Повечето анкети с линк са трети случай: хората, които отговарят на линк в уебсайт или в социална мрежа, сами са решили да участват. За тях допустима грешка не може да се изчисли, а самите отговори не показват колко са далеч от истината. Ако изравните няколко съотношения с тези в цялата група, например дела на жените, това не решава проблема: канадската статистическа служба Statistics Canada предупреждава, че така може да се прикрие отклонение, дължащо се на подбора. Използвайте известните съотношения за проверка: сравнете кой е отговорил с това кой е в групата. Вижте и как да намерите подходящите респонденти.
3. Проверете дали хората могат и искат да отговорят
Могат ли да отговорят? Питайте хората, които имат информацията: служителите, попитани за условията в договора с някой доставчик, могат само да гадаят. Statistics Canada добавя, че първите въпроси трябва да дадат на респондентите увереност, че ще могат да отговорят и на останалите.
Ще отговорят ли честно? Чувствителна тема като заплатите, здравето или поведението на прекия ръководител не е причина да се откажете от анкетата. Когато никой не задава въпросите на глас, хората по-рядко избират отговора, който ги показва в добра светлина, а внимателната формулировка и ясното указание кой ще вижда отговорите вършат останалото; вижте как да зададете чувствителен въпрос. Друг канал вместо анкетата търсете само когато групата е толкова малка, че един отговор би посочил конкретен човек.
4. Как да стигнете до респондентите и какво ви казва всеки канал
Където имате списък, тръгнете от него, а отворени канали добавете само за хората, които липсват в него: каналът решава кой ще отговори. В Survey.bg каналите са в раздела „Разпространи“ на анкетата:
- „Изпрати по имейл“ изпраща анкетата до списък, който имате (служители, клиенти, членове). Знаете кого сте поканили, затова можете да посочите процента на отговорилите и да пишете отново на списъка. Следенето на отговорите е изключено по подразбиране: тогава отговорът не се свързва с адреса на получателя и Survey.bg не знае кой е отговорил. Ако отбележите „Следете получените отговори“, всеки получател ще има личен линк, който свързва отговора му с неговия адрес, а бележката, която Survey.bg добавя в края на поканата, му казва това. Вижте поканата по имейл и следенето на отговорите.
- „Линк към анкетата“ е адресът, който поставяте, където пожелаете: в бюлетин, в група във Viber, в обява на хартия.
- „Интеграция с уебсайт“ (анкета в страница на сайта, бутон отстрани или изскачащ прозорец) и „Сподели чрез социални мрежи“ (Facebook, X и LinkedIn) стигат до хората, които посещават сайта ви или ви следват. Те сами решават да участват, затова отговорите описват тях, а не всички посетители или последователи, и процент на отговорилите не може да се посочи: никой не знае колко души са видели линка.
Никой канал не прави отговорите анонимни. Общият линк не носи име, но малка група, написан коментар, поле за контакт или съчетание от отговори (отдел и възрастова група) могат да посочат човека, а Survey.bg пази с всеки отговор времето за попълване, устройството, браузъра, държавата (когато може да се определи) и сайта, от който е дошъл респондентът. Затова не обещавайте анонимност. Кажете на респондентите кой ще вижда индивидуалните отговори и че резултатите се отчитат само обобщено, за групи от поне 10 души. Survey.bg не налага минимален брой, затова проверявайте колко души има във всяка група, преди да споделите разбивка.
5. Каква полза имат респондентите от участието
Кажете с едно конкретно изречение, в поканата и във въведението, какво ще решите въз основа на отговорите: „дали от януари преминаваме към новото работно време“, а не „за да подобрим услугите си“. Казвайте за какво са отговорите, но никога кой отговор очаквате.
В преглед на Cochrane на рандомизирани изпитвания (Edwards и колеги, 2023) паричните стимули и малките подаръци са увеличили броя на отговорите на онлайн въпросници, макар резултатите да се различават силно. Повече отговори обаче не означават непременно по-представителни отговори. Ако предлагате стимул, кажете какъв е, кой го получава и кога; за томболите с награди може да важат отделни правила, затова проверете кои се отнасят до вас. Survey.bg не изпраща на респондента съобщение, когато той завърши анкетата, и не тегли награди, затова раздавате стимула сами: поискайте имейл адрес с незадължителен въпрос на последната страница, за да може човек да отговори и без да иска наградата, и кажете, че адресът се пази заедно с отговорите и се използва само за това. Вижте и още съвети как повече от поканените да отговорят.
6. Подредете въпросите
Започнете с прости въпроси по темата на анкетата, на които хората отговарят лесно и с интерес, вървете от общото към конкретното и оставете демографските въпроси (възраст, пол, населено място) към края, освен ако някой от тях решава кой продължава нататък, както прави филтриращият въпрос. Същото съветват Pew Research Center и Statistics Canada.
Причината е, че всеки по-ранен въпрос дава контекст на следващите и може да промени отговорите им. Затова въпрос, който следите във времето, задавайте на едно и също място във всяко издание на анкетата.
Започнете анкетата с кратко въведение на първия екран: кой пита, за какво ще послужат отговорите, колко време отнема попълването и кой ще вижда отговорите. В края благодарете на хората. Какво точно да напишете, ще намерите в статията за въведението на анкетата.
7. Кратка анкета и измерено време за попълване
Махнете всеки въпрос, който не дава нищо за отчета: в онлайн изпитванията от прегледа на Cochrane по-кратките въпросници са получили повече отговори, макар резултатите да се различават силно.
Дължината ви струва по два начина. Колкото по-дълго е обявеното време, толкова по-малко хора започват и завършват анкетата, а отговорите към края на дългия въпросник стават по-бързи, по-кратки и по-еднообразни (Galesic и Bosnjak, 2009). Най-скъпо струват отворените въпроси. В над 40 анкети на American Trends Panel, вероятностния онлайн панел на Pew Research Center, от септември 2018 до юли 2021 г. средно около 18 % от респондентите са пропуснали отворен въпрос, срещу 1–2 % при затворените.
Няма надеждно правило колко въпроса се попълват за минута. Измерете времето при пробното попълване, посочете го в поканата и във въведението, а ако ви се струва много, съкратете анкетата, а не числото.
8. Предварително тестване на анкетата
Преди анкетата да тръгне, дайте черновата на няколко души, подобни на респондентите: на клиенти, ако анкетата е за клиенти, а не само на колеги. Колегите забелязват печатните грешки, но не и онова, което клиентът ще разбере погрешно. AAPOR, Pew Research Center и Statistics Canada смятат това изпробване за основна стъпка при съставянето на въпросник.
Гледайте къде хората се колебаят, кое им е неясно или неудобно, кой въпрос ги кара да спрат и да се замислят, дали разбират какво се иска от тях и дали мнението им се побира в някой от предложените отговори.
В Survey.bg „Преглед“ показва анкетата така, както я виждат респондентите, но не приема отговори. За пробно попълване с измерено време направете анкетата „Активна“, изпратете линка на хората, които ще я изпробват, и вижте „Време за попълване“ на всеки отговор в „Индивидуални отговори“. После отворете резултатите и опитайте да напишете изреченията от отчета, които сте планирали: изречение, което не може да се напише, означава въпрос, който трябва да промените. Преди истинското изпращане изтрийте пробните отговори в „Индивидуални отговори“, защото дотогава те се броят заедно с истинските, включително към лимита за отговори на анкетата. Изтриването е окончателно. Отворете анкетата и на телефон: вижте какво прави анкетата удобна за телефон.
Накратко
Подготовката на анкета се свежда до осем решения, от плана на отчета до пробното попълване. Най-скъпо струва пропускането на две от тях: планът на отчета дава цел на всеки въпрос, а пробното попълване показва онова, което не виждате в собствената си чернова. Какъвто и канал да изберете, не обещавайте анонимност, а кажете кой ще вижда отговорите.
За начало разгледайте примерните анкети и готовите шаблони по теми.
Примерни анкети и готови шаблони по теми
Изберете областта на проучването, отворете шаблон и приспособете въпросите му към отчета, който сте планирали.
Вижте шаблоните