Как да достигнем до правилната аудитория на анкетата

Да достигнете до правилната аудитория на анкетата, без да имате панел от респонденти, означава да свършите две неща: да стигнете до хората, които отговарят на условията ви, и да не допуснете в резултатите онези, които не отговарят. Запишете кой е подходящ респондент, потърсете тези хора там, където наистина са, и проверете условието с един задължителен филтриращ въпрос в началото. Свържете въпроса с логиката на анкетата, за да излизат неподходящите веднага и да бъдат отчетени правилно. Малка пилотна анкета след това показва колко от поканените започват, колко отговарят на условието и колко стигат до края, а оттам и колко души да поканите. Статията е за всеки, който търси респонденти сред своите клиенти, членове, родители или състуденти: малка фирма, училище, отдел „Човешки ресурси“, студент, който пише дипломна работа.

Най-важното

• Запишете кой е подходящ респондент, преди да изпратите каквото и да било.
• Отсявайте с един неутрален, задължителен въпрос от типа „Един отговор само“, сам на първата страница.
• На отговорите, които не отговарят на условието, задайте правило „Подай и прекрати анкетата“ и отчитайте отсетите отделно от подходящите попълнени анкети.
• За имейл списък: покани = нужни подходящи попълнени анкети ÷ (дял започнали × дял подходящи × дял завършили), с дяловете от пилотна анкета. За отворен линк покани не се планират.
• Споделеният линк дава самоизбрала се извадка, затова не посочвайте допустима грешка за нея.

Решете кой е подходящ респондент, преди да го търсите

Целевата аудитория на анкетата започва с писмено правило кой участва: филтриращият въпрос, логиката и всяко преброяване зависят от него. Използвайте критерии, които човек може сам да потвърди, с ясен период: „пазарувал е от нас поне веднъж през последните 12 месеца“, „родител е на дете в 1.–4. клас в нашето училище“. Стандартните определения на Американската асоциация за изследване на общественото мнение (AAPOR) също искат изследователят да реши още преди събирането на отговорите кое се брои за попълнена анкета и кой – за отсят.

Предположението за канала („последователите ни в Instagram са предимно жени около 30-те“) показва къде да търсите, а не кой отговаря на условието. Условието се потвърждава само като попитате за самия критерий, независимо дали е демографски (възрастова група, населено място, образование, доходи) или поведенчески (покупка през последната година).

Преценете колко често се срещат хората, които търсите

Преди да изберете канали, преценете дали групата ви е често срещана или рядка: за рядка група трябват много повече покани.

• Собствените ви данни обикновено са най-добрият ориентир: например делът на клиентите, пазарували миналата година, според данните за продажбите.
• По-ранни проучвания на същата група, направени от Националния статистически институт (НСИ), университети или социологически агенции, показват как други са стигнали до нея.
• Официалната статистика на НСИ, а за ЕС и на Евростат, помага само за широки групи, като възрастова група или област. Посочвайте число само от таблица, която сте отворили сами.

Изберете канали, в които са точно тези хора

Собственият ви списък с контакти е най-силният канал за група, която вече познавате. Отвореният линк стига до повече хора, но губите контрол върху това кой отговаря.

Вашият списък: покани по имейл

Поканите се изпращат от раздела „Изпрати по имейл“. Проследяването на отговорите е изключено по подразбиране; за да свържете всеки отговор с получателя му, включете „Следете получените отговори“. Тогава списъкът „Имейл получатели“ може да се филтрира по „Завършили анкетата“, „Неотговорили“ и „Отговорили частично“, а повторната покана може да отиде само до онези, които не са отговорили: изберете „Изпрати имейл до получатели, които“ и след това „Не са отговорили на досегашна имейл покана“.

Без проследяване всички получават един и същ общ линк и никой отговор не е свързан с получател. Тогава „Неотговорили“ показва целия списък, другите два филтъра не показват никого, а повторната покана стига до всички, включително до вече отговорилите. При включено проследяване виждате кой е отговорил и поканата съобщава това на получателите. Затова не наричайте такава анкета анонимна, а кажете, че отговорите се отчитат само обобщено. Вижте как да напишете и изпратите поканата по имейл.

Линк, анкета в уебсайта и споделяне

Разделът „Линк към анкетата“ дава един линк за всички. Можете да вградите анкетата в уебсайта си („Интеграция с уебсайт“): вградената анкета събира отговори от хората, които в момента разглеждат сайта. Можете също да използвате бутоните за Facebook, X и LinkedIn или да поставите линка в бюлетин, във Viber или във Facebook група. За плакат направете QR код от линка с външен генератор: Survey.bg не създава QR кодове.

Споделеният линк носи повече отговори, но не по-представителни

Всяко споделяне добавя отговори от хора, които сами са решили да участват: самоизбрала се, или удобна, извадка. Отклонението при подбора може да е голямо, а вероятността всеки човек да попадне в извадката е неизвестна, заключава работната група на AAPOR за невероятностните извадки от 2013 г. Затова допустима грешка за цялата извадка няма смисъл: тя описва само случайните колебания при случаен подбор (Pew Research Center, 2016). Защо отклонението не се вижда в нея, обяснява статията за разликата между статистическата грешка и отклоненията.

Молбата към респондентите да препратят линка (извадка „снежна топка“) може да стигне до рядка група, но намира хора, подобни на първите отговорили. Затова оставете филтриращия въпрос на мястото му и не наричайте резултата представителен. Ако ви трябват повече отговори, вижте тези девет съвета за увеличаване на броя респонденти.

Филтриращ въпрос, който не издава търсения отговор

Започнете анкетата с един задължителен затворен въпрос с неутрални отговори, така че нито един от тях да не изглежда като желания. Поканата казва каква е темата на анкетата, но не и кой отговор води към основната анкета; не обяснявайте и защо някой е бил отсят.

Използвайте типа „Един отговор само“ с включен „Задължителен отговор“. Правило върху такъв въпрос може да изброи няколко отговора и се задейства, ако е избран който и да е от тях. Задължителният отговор е важен, защото бутонът „Напред“ първо проверява страницата и едва след това изпълнява правилата, а условие „е равен на“ не съвпада с празен отговор: който пропусне незадължителен филтриращ въпрос, влиза направо в основната анкета. Избягвайте „Множество отговори“: там правилото съвпада само с точно същата комбинация от отметнати отговори.

Колко пъти сте пазарували от [вашия магазин] през последните 12 месеца? Нито веднъж / Веднъж / 2–5 пъти / Повече от 5 пъти

Всеки отговор освен „Нито веднъж“ отговаря на условието, докато „Клиент ли сте на [вашия магазин]? Да / Не“ подсказва на хората какво искате да чуете. Важат и обичайните правила за ясни и неутрални въпроси.

Наградата увеличава риска от неверни отговори. Chandler и Paolacci (2017) установяват, че когато платени участници в онлайн проучвания сами съобщават дали отговарят на очевидни критерии, част от тях отговарят невярно, за да бъдат допуснати, особено когато групата е рядка. Ако има награда или заплащане, поставете филтриращия въпрос сред два-три подобни въпроса, с няколко правдоподобни неподходящи отговора, например като питате за два-три магазина. Да скриете темата изцяло не помага: така хабите покани за хора, които не могат да отговорят на условието.

Как да отсеете неподходящите с логиката на анкетата

Поставете задължителния филтриращ въпрос сам на първата страница и задайте на неподходящите отговори правило „Подай и прекрати анкетата“. Правилото се изпълнява, когато респондентът натисне „Напред“, за да напусне страницата. Това е изходът по подразбиране; кратка страница за отсетите е алтернатива, когато искате да им зададете един-два въпроса.

В раздела „Логика на анкетата“ (основите са в статията как логиката задава подходящите въпроси на подходящите хора) действието на правилото може да е „Прескочи до страница“, „Препрати към URL“, „Скрий следната страница“, „Покажи тази страница“, „Покажи въпрос“, „Скрий въпрос“ или „Подай и прекрати анкетата“. Три подробности определят как се прави филтърът:

• „Прескочи до страница“, „Препрати към URL“ и „Подай и прекрати анкетата“ се изпълняват само при „Напред“, затова филтриращият въпрос има нужда от своя страница и тя не може да е последната: на последната страница вместо „Напред“ стои бутонът „Завърши“.
• Прескачането води до страница, никога до отделен въпрос.
• Всяко правило има една цел, а един въпрос може да има няколко правила.

„Подай и прекрати анкетата“ приключва анкетата, без да проверява оставащите въпроси. Анкетата има една заключителна страница („Заключителна страница по подразбиране“, „Собствена заключителна страница“, „Автоматично препрати към URL“ или „Препрати анкета на приятел“), затова я формулирайте така, че да подхожда и на двете групи.

Страницата за отсетите е последна и изисква още правила. За неподходящите отговори: „Прескочи до страница“ към нея плюс по едно правило „Скрий следната страница“ за всяка основна страница. За подходящите отговори: „Скрий следната страница“ за страницата на отсетите. Допълнителните правила са нужни, защото „Завърши“ проверява всяка страница, която логиката не е скрила. Без тях задължителен въпрос от основна страница спира отсетия човек при „Завърши“ с грешка на страница, която той изобщо не е видял. Проверете тази настройка в собствената си анкета, преди да я изпратите: попълнете я веднъж с подходящ и веднъж с неподходящ отговор, като на основна страница има задължителен въпрос.

„Препрати към URL“ не подава отговора, така че човекът липсва и от резултатите, и от броя. Дадените дотогава отговори може да се появят само с филтъра „Покажи незавършени отговори“, ако браузърът ги е изпратил. Използвайте този изход само когато изрично не искате отсетите в резултатите.

Отчитайте отсетите отделно

Отсетият човек не е попълнена анкета. Стандартните определения на AAPOR отнасят респондента, за когото е установено, че не отговаря на условията, към отсетите, тоест към неподходящите. Затова отчитайте „120 подходящи попълнени анкети, 212 отсети“, а не една обща сума.

При изхода по подразбиране и при страница за отсетите те стоят сред завършените отговори. За да видите само подходящата група, филтрирайте резултатите с „Покажи само отговори където“ и подходящите отговори на филтриращия въпрос. Задавайте на отсетите допълнителни въпроси (например защо не пазаруват от вас) само ако ще използвате отговорите.

Ако теглите награди, включете всички, които са отговорили на филтриращия въпрос, подходящи или не, и го кажете в поканата: награда, която могат да спечелят само подходящите, изкушава хората да твърдят, че отговарят на условието. Survey.bg няма вградено теглене на награди, а правилата за игри с награди се различават, затова проверете кои важат за вас.

Квоти по групи също няма: ако ви трябват 60 нови и 60 постоянни клиенти, следете броя им във филтрираните резултати и спрете да каните от дадена група, щом се запълни.

Измерете дела на подходящите с малка пилотна анкета

Преди основното изпращане поканете малка група през същия канал. Делът на подходящите е частта от отговорилите на филтриращия въпрос, които отговарят на условието. Пилотната анкета го измерва заедно с дела на започналите (поканените, които отговарят на филтриращия въпрос) и дела на завършилите (подходящите, които стигат до „Завърши“), и показва къде хората спират.

Добрите практики на AAPOR препоръчват предварителен тест с хора като бъдещите респонденти и пробно изпълнение на всяка процедура, но Presser и колеги (2004) отбелязват, че предварителното тестване много по-често се препоръчва, отколкото наистина се прави. Изпробвайте поканата, канала и всяко разклонение на логиката, включително изходите за отсетите.

Авторитетен минимален размер на пилотната анкета няма; направете я достатъчно голяма, за да се окажат подходящи немалко хора. Филтърът „Покажи незавършени отговори“ показва докъде са стигнали хората, а при имейл с включено проследяване „Отговорили частично“ показва кой е спрял. Дяловете от пилотната анкета са груби, затова изпратете основните покани на две-три вълни и ги преизчислете след първата. Какво причиняват на резултатите хората, които изобщо не отговарят, е описано в статията за отклоненията, породени от липса на отговори.

Колко души да поканите

Изчислението важи само за канали, в които броите поканите: имейл списъка ви, затворена група, код, отпечатан на известен брой касови бележки. За отворен линк покани не можете да планирате; следете как расте броят на подходящите попълнени анкети и спрете, когато са достатъчно.

Покани = нужни подходящи попълнени анкети ÷ (дял започнали × дял подходящи × дял завършили)

Броят на нужните подходящи попълнени анкети идва от анализа, който планирате, и най-вече от най-малката група, за която искате да отчетете резултат.

Пример, а не норма: трябват ви 120 подходящи попълнени анкети, а пилотната анкета е показала, че 20 % от поканените отговарят на филтриращия въпрос, 40 % от тях отговарят на условието и 85 % от подходящите стигат до края. 120 ÷ (0,20 × 0,40 × 0,85) ≈ 1 765 покани, закръглено нагоре.

Честото опростяване дели целта само на дела на подходящите (500 попълнени анкети при 50 % подходящи дават 1 000), но това е броят на хората, които трябва да отговорят на филтриращия въпрос. Поканите трябва да покрият и онези, които изобщо не започват, и подходящите, които се отказват по средата.

В безплатния план една анкета може да събере до 500 отговора (вижте лимитите на безплатния план). Към тях се броят хората, излезли през „Подай и прекрати анкетата“ или през страница за отсетите; не се броят пренасочените с „Препрати към URL“ и подходящите, които са се отказали. В примера се броят около 332 завършени отговора (212 отсети и 120 подходящи). На страницата с цените е посочен и месечният брой покани по имейл за всеки план.

Проверете анкетата на телефон, преди да я изпратите

Голяма част от хората отварят анкетите на телефон, а в комерсиалните онлайн проучвания често те са мнозинство, затова прегледайте своята анкета на телефон и я направете кратка. Хората, които отговарят само от телефон, обикновено са по-млади и приличат на трудно достижимите групи. По-голямата грешка в отговорите на потребителите на телефони и таблети идва от това кои са те, а не от екрана (Lugtig, Toepoel и Amin, 2016; Lugtig и Toepoel, 2016). Анкета, която не работи на телефон, губи определени хора, а не случайни.

Избягвайте широките таблици, например матричен въпрос („Матрици“) с много колони. „Преглед“ в редактора работи само когато сте влезли в профила си, затова влезте от телефона или попълнете анкетата на телефон по време на пилотната анкета. За идеи вижте тези примерни анкети за мобилни устройства.

От правилото до поканите

Запишете кой е подходящ респондент, изберете канали, в които са тези хора, отсявайте с един задължителен въпрос с правило „Подай и прекрати анкетата“, направете пилотна анкета и изчислете поканите за всеки канал, в който ги броите. Отчитайте отсетите отделно и помнете, че споделеният линк носи повече отговори, а не по-представителна извадка.

За да приложите това на практика, започнете от шаблона за пазарно проучване по-долу, добавете филтриращия си въпрос на нова първа страница и му задайте правило „Подай и прекрати анкетата“.

Още по темата

• Нужно ли е да „слушаме“ посетителите на уебсайтове и защо?
• Анкетата на малкия екран: кои правила се потвърждават от изследванията
• Какво да правим с чувствителните въпроси в анкетата?