- Un grup poate fi greu accesibil din patru motive diferite: este rar, nu are o listă, este greu de găsit sau refuză; fiecare motiv cere altă soluție.
- Când grupul este rar, un sondaj general costă mult în screening; stratificarea disproporționată acolo unde grupul este concentrat reduce costul fără a pierde caracterul probabilist.
- Listele multiple și eșantionarea pe locații și intervale de timp permit estimări cu probabilități cunoscute, dacă se calculează ponderile corespunzătoare.
- Eșantionarea „bulgăre de zăpadă" găsește oameni, dar nu produce un eșantion reprezentativ; respondent-driven sampling permite estimări doar în anumite condiții, care trebuie verificate.
- Limba, modul de interviu, intervievatorul și încrederea decid cine răspunde la fel de mult ca designul eșantionului.
1. Problema: grupurile care contează cel mai mult lipsesc din date
Un program pentru reintegrarea migranților care revin acasă, un serviciu pentru vârstnicii singuri din sate, o campanie de informare pentru o minoritate lingvistică sau un produs pentru moldovenii care lucrează în străinătate au o problemă comună: oamenii pe care trebuie să îi înțeleagă sunt exact cei pe care un sondaj obișnuit nu îi prinde. Un eșantion național de 1.000 de persoane conține prea puțini membri ai grupului pentru o analiză separată, iar cei pe care îi conține sunt adesea cei mai ușor de găsit, deci cei mai puțin tipici. Populații greu accesibile este denumirea generică pentru aceste grupuri, iar cercetarea lor cere un design diferit, nu doar un eșantion mai mare.
Acest articol explică de ce un grup devine greu accesibil, ce designuri de eșantionare există, ce poate fiecare să generalizeze și cum se organizează terenul. Este o continuare practică a ghidului despre sondajul de opinie publică, care descrie situația obișnuită, cu o populație generală și o bază de eșantionare bună.
2. Populații greu accesibile: patru probleme diferite
Expresia acoperă patru situații care se confundă des, deși cer soluții diferite.
- Grupul este rar. Reprezintă o mică parte din populație, de exemplu persoanele cu o anumită dizabilitate sau gospodăriile cu un membru plecat recent la muncă. Oamenii pot fi găsiți, dar trebuie verificate foarte multe gospodării pentru a-i identifica.
- Grupul nu are o listă. Nu există o bază de eșantionare: nici registru, nici bază de clienți, nici listă de membri. Este situația tipică a diasporei, a lucrătorilor informali, a micilor producători agricoli neînregistrați.
- Grupul este greu de găsit fizic. Oamenii sunt mobili, lucrează în schimburi, locuiesc în localități îndepărtate sau sunt plecați o parte din an. Vârstnicii din satele mici, sezonierii și navetiștii intră aici.
- Grupul este greu de convins. Membrii evită contactul cu străinii, se tem de consecințe sau au avut experiențe proaste cu instituțiile. Aici problema nu este eșantionul, ci încrederea.
Majoritatea grupurilor reale combină două sau trei dintre aceste probleme. Primul pas al designului este să stabilească care dintre ele domină, pentru că o soluție bună pentru un grup rar (mai mult screening) nu ajută deloc un grup care refuză.
3. Când ajunge un sondaj general și cât costă screeningul
Dacă grupul are o pondere cunoscută și nu foarte mică în populație, cea mai solidă soluție rămâne un eșantion probabilist al populației generale, cu întrebări de screening la începutul interviului. Calculul costului este simplu. Un grup care reprezintă, ipotetic, 5% din gospodării cere în medie 20 de contacte pentru fiecare interviu eligibil; pentru 300 de interviuri sunt necesare aproximativ 6.000 de gospodării contactate, la care se adaugă nonrăspunsul. Dacă grupul reprezintă 1%, costul se multiplică de cinci ori.
Screeningul are și o eroare proprie: respondenții trebuie să recunoască, la ușă sau la telefon, că aparțin grupului. Întrebările de eligibilitate trebuie formulate simplu, neutru și fără să sugereze avantaje, altfel unele persoane eligibile se declară neeligibile pentru a evita interviul, iar altele invers. Rata de eligibilitate obținută se compară cu orice sursă externă disponibilă.
4. Designuri probabiliste pentru grupuri rare
Trei designuri reduc costul screeningului fără a renunța la probabilități de selecție cunoscute.
Stratificarea disproporționată
Grupurile rare sunt rareori distribuite uniform. Dacă se știe, din date administrative sau dintr-un recensământ, că grupul este concentrat în anumite raioane sau localități, acestea devin straturi cu o fracție de eșantionare mai mare. Câștigul este real doar când diferențele de concentrare sunt mari, de câteva ori; la diferențe mici, avantajul dispare. Rezultatele se reunesc apoi prin ponderi de design, iar procedura este descrisă în articolul despre ponderarea datelor de sondaj.
Liste multiple
Uneori există liste parțiale: beneficiarii unui program, membrii unei asociații, clienții unui serviciu. Niciuna nu acoperă tot grupul, dar împreună acoperă o parte mare din el. Eșantionul se extrage din fiecare listă, iar o persoană care apare pe două liste are o probabilitate dublă de selecție. Corecția este fie eliminarea dublurilor la nivelul listelor, înainte de extragere, fie o pondere egală cu inversul numărului de liste pe care apare persoana. Eliminarea dublurilor găsite doar în eșantion nu corectează distorsiunea. Partea grupului care nu apare pe nicio listă rămâne neacoperită și trebuie estimată separat sau declarată.
Eșantionarea pe locații și intervale de timp
Pentru grupuri fără listă, dar care frecventează locuri cunoscute, se construiește o listă de locații și intervale de timp: o piață în zilele de vineri, o autogară în weekend, un centru comunitar seara. Se extrage aleatoriu un eșantion de combinații locație-interval, iar în fiecare se intervievează persoanele eligibile după o regulă fixă. Estimările sunt valide pentru populația care frecventează aceste locuri, nu pentru cea care le evită, iar persoanele care vin des au o șansă mai mare de selecție, corectată prin întrebarea despre frecvența vizitelor.
5. Eșantionarea prin rețele: bulgăre de zăpadă și respondent-driven sampling
Când nu există nici liste, nici locații, se folosesc rețelele sociale ale grupului. În eșantionarea „bulgăre de zăpadă", câțiva respondenți inițiali sunt rugați să recomande alți membri ai grupului, care recomandă la rândul lor alții. Metoda găsește oameni greu de găsit altfel și este foarte utilă pentru cercetarea calitativă și pentru studii exploratorii. Nu produce însă un eșantion reprezentativ: cei recomandați seamănă cu cei care recomandă, persoanele cu multe relații sunt suprareprezentate, iar cele izolate lipsesc aproape complet.
Respondent-driven sampling (eșantionarea condusă de respondenți) este o variantă controlată a aceleiași idei. Fiecare respondent primește un număr mic de cupoane, de regulă două sau trei, pe care le transmite altor membri ai grupului; se înregistrează cine pe cine a recrutat și câte persoane din grup cunoaște fiecare respondent. Recrutarea continuă în mai multe valuri, iar estimările se ponderează invers proporțional cu mărimea rețelei personale. Respondent-driven sampling a fost dezvoltat pentru grupuri stigmatizate sau ascunse și poate produce estimări, dar numai dacă sunt îndeplinite câteva condiții: grupul formează o rețea conectată, relațiile sunt reciproce, respondenții își raportează corect rețeaua, iar recrutarea a avut suficiente valuri pentru ca structura eșantionului să nu mai depindă de persoanele de pornire. Aceste condiții se verifică în date și se raportează; dacă nu sunt îndeplinite, rezultatele se tratează ca indicative.
6. Terenul: limba, modul de interviu și încrederea
Pentru populații greu accesibile, organizarea terenului contează la fel de mult ca designul eșantionului. Câteva reguli practice:
- Limba. Chestionarul se aplică în limba respondentului, cu versiuni traduse și verificate, iar intervievatorii vorbesc limba fluent. O echipă multilingvă nu este un detaliu de logistică, ci o condiție a calității datelor la minoritățile lingvistice.
- Modul de interviu. Vârstnicii din mediul rural se intervievează aproape întotdeauna față în față, prin CAPI, pentru că multe gospodării nu au internet și unele nu au telefon funcțional. Diaspora, dimpotrivă, este greu de atins față în față și se cercetează mai des online, cu toate limitele de reprezentativitate ale anchetei online.
- Intervievatorul. Pentru grupuri care se tem de instituții, un intervievator din comunitate sau recomandat de un lider local obține rate de răspuns mult mai bune. În schimb, poate influența răspunsurile la întrebări sensibile, iar acest risc se tratează prin instruire și supraveghere.
- Momentul. Sezonierii se găsesc acasă în anumite luni, migranții în perioada sărbătorilor, lucrătorii în schimburi la ore neobișnuite. Calendarul de teren se adaptează grupului, nu invers.
- Încrederea și protecția datelor. Scopul studiului, confidențialitatea și dreptul de a refuza se explică clar, iar datele de identificare se separă de răspunsuri. Pentru grupuri vulnerabile, regulile sunt detaliate în ghidul despre etica cercetării și protecția datelor.
7. Analiza: ce se poate generaliza și ce nu
Cifrele obținute pentru populații greu accesibile se interpretează după designul care le-a produs. Un eșantion probabilist cu screening sau cu stratificare disproporționată permite estimări cu marjă de eroare, după ponderare și cu efectul de design calculat. Listele multiple și eșantionarea pe locații permit estimări pentru populația acoperită, cu condiția ca probabilitățile de selecție să fie reconstituite. Respondent-driven sampling permite estimări doar dacă ipotezele sale sunt verificate, iar intervalele de încredere sunt de regulă mult mai largi decât la un eșantion aleatoriu de aceeași mărime. Eșantionarea „bulgăre de zăpadă" și recrutarea prin anunțuri permit descrieri și comparații interne, dar nu procente generalizabile.
O regulă utilă: dacă decizia cere o cifră pentru întregul grup (de exemplu, câți beneficiari potențiali are un serviciu), designul trebuie să fie probabilist. Dacă decizia cere înțelegerea nevoilor și a barierelor, o combinație de interviuri calitative și un eșantion prin rețele este adesea suficientă și mult mai ieftină. Pentru grupurile la care diferențele dintre femei și bărbați sunt esențiale, designul trebuie să asigure baze separate suficiente, așa cum arată ghidul despre cercetarea sensibilă la gen.
8. Comparația designurilor
| Design | Când se folosește | Ce poate generaliza | Limita principală |
|---|---|---|---|
| Sondaj general cu screening | Grup rar, dar nu foarte rar, fără listă | Întregul grup, cu marjă de eroare | Cost mare de contactare; eroare de declarare a eligibilității |
| Stratificare disproporționată | Grup concentrat geografic | Întregul grup, după ponderare | Câștig mic dacă concentrarea nu este puternică |
| Liste multiple | Există liste parțiale care se suprapun | Populația acoperită de liste | Partea de pe nicio listă; dublurile trebuie corectate |
| Locații și intervale de timp | Grupul frecventează locuri cunoscute | Populația care frecventează acele locuri | Exclude pe cei care le evită; corecție după frecvență |
| Respondent-driven sampling | Grup ascuns, conectat prin relații | Întregul grup, doar dacă ipotezele sunt îndeplinite | Ipoteze greu de verificat; intervale largi |
| Bulgăre de zăpadă | Explorare, cercetare calitativă | Nu generalizează procente | Eșantion dominat de persoanele bine conectate |
Pentru populații greu accesibile, alegerea nu este între „corect" și „greșit", ci între grade de certitudine și costuri. Important este ca raportul să spună clar pe care treaptă se află rezultatele.
9. Ce ceri agenției
- Definiția operațională a grupului și întrebările de eligibilitate, testate înainte de teren.
- Motivul pentru care grupul este greu accesibil (rar, fără listă, mobil, neîncrezător) și soluția propusă pentru fiecare.
- Designul eșantionului, cu populația acoperită numită explicit și estimarea părții neacoperite.
- Modul de calcul al ponderilor: pentru straturi, pentru liste multiple, pentru frecvența vizitelor sau pentru mărimea rețelei.
- Pentru respondent-driven sampling: numărul de cupoane, numărul de valuri, verificarea ipotezelor și intervalele de încredere.
- Limbile chestionarului, procedura de traducere și profilul intervievatorilor.
- Procedurile de consimțământ, confidențialitate și protecție a datelor, conforme GDPR și Legii nr. 133/2011.
- O secțiune de limite în raport, care spune ce cifre pot fi generalizate și care sunt doar indicative.
Populații greu accesibile nu înseamnă populații imposibil de cercetat. Înseamnă că designul, terenul și analiza trebuie construite în jurul grupului, iar promisiunile de reprezentativitate trebuie să fie pe măsura designului. Dacă pregătiți un studiu despre migranți, minorități sau comunități izolate, echipa noastră de sondaje sociale și politice vă poate ajuta să alegeți designul potrivit deciziei și bugetului.
Vezi și: Sondaje sociale și politice Echipă multilingvă CAPI și CATI Ponderarea datelor de sondaj Interviul față în față (CAPI) Cercetarea sensibilă la gen și incluzivă
Aveți o decizie de luat?
Spuneți-ne problema, nu metoda. Propunem designul de cercetare potrivit și vă explicăm ce poate și ce nu poate livra.