- Enkele algemene vragen
- Waarom word ik nooit gebeld om gepeild te worden?
- Kan ik mij vrijwillig aanmelden voor een enquête?
- Waarom geven uw opiniepeilingen nooit de meningen weer van mensen die ik ken?
- Waarom zou ik aan enquêtes moeten deelnemen?
- Wat voor nut hebben opiniepeilingen?
- Ik sta op een “niet bellen” lijst. Bel je me dan niet?
- Hebben opiniepeilers een ethische code? Zo ja, wat staat er in die code?
- Wat is het verschil tussen uw peilingen en marktonderzoek?
- Doet u onderzoek onder Aziatische Amerikanen?
- Verzameling van enquêtegegevens
- Hoe bent u aan mijn nummer gekomen?
- Hoe worden mensen geselecteerd voor uw peilingen?
- Wat als ik alleen een mobiele telefoon heb – ben ik vertegenwoordigd in uw enquêtes?
- Heeft u geen problemen om mensen te laten antwoorden op uw peilingen?
- Hoe zit het met mensen die geen telefoondienst hebben?
- Welke demografische vragen stelt u in uw enquêtes?
- Opzet vragenlijst
- Logen mensen tegen enquêteurs?
- Hebben mensen echt een mening over al deze vragen?
- Waarom vraagt u in de enquête meestal eerst naar de presidentiële goedkeuring?
- Waarom worden demografische vragen aan het eind van de enquête gesteld?
- Wat is dat allemaal voor geroteerde en willekeurige vragen in uw vragenlijsten?
- Waarin verschilt vorm 1 van vorm 2?
Enkele algemene vragen
Waarom word ik nooit gebeld om gepeild te worden?
U heeft ongeveer dezelfde kans om gebeld te worden als ieder ander die in de Verenigde Staten woont en een telefoon heeft. Deze kans is echter slechts ongeveer 1 op 154.000 voor een typische Pew Research Center-enquête. Om die ruwe schatting te verkrijgen, delen wij de huidige volwassen bevolking van de V.S. (ongeveer 235 miljoen) door de typische steekproefgrootte van onze opiniepeilingen (gewoonlijk ongeveer 1.500 mensen). Telefoonnummers voor Pew Research Center peilingen worden gegenereerd door middel van een proces dat probeert elk huishouden in de bevolking een bekende kans te geven om te worden opgenomen. Natuurlijk, als je helemaal geen telefoon hebt (ongeveer 2% van de huishoudens), dan heb je geen kans om te worden opgenomen in onze telefonische enquêtes.
Zodra we een enquête hebben voltooid, passen we de gegevens aan om te corrigeren voor het feit dat sommige individuen (bijv. degenen met zowel een mobiele telefoon als een vaste lijn) een grotere kans hebben om te worden opgenomen dan anderen. Zie voor meer informatie over hoe dit in zijn werk gaat de bespreking van de weging in onze gedetailleerde enquêtemethode.
Kan ik mij vrijwillig aanmelden voor een enquête?
Wij stellen het op prijs als mensen willen meedoen, maar wij kunnen onze enquêtes niet baseren op vrijwilligers. Een enquête onder vrijwilligers is een “niet-probability sample” en de resultaten kunnen niet worden gegeneraliseerd naar het publiek als geheel. De sleutel tot enquête-onderzoek is een aselecte steekproef, zodat ieder type persoon een gelijke kans heeft om zijn mening te laten vastleggen. Opiniepeilingen onder vrijwilligers zouden in strijd zijn met dit beginsel aangezien niet iedereen een gelijke kans zou hebben gehad om te worden opgenomen. (Zie waarschijnlijkheids- en onwaarschijnlijkheidssteekproeven voor meer informatie.) En meer specifiek, het soort mensen dat zich vrijwillig voor onze opiniepeilingen zou kunnen aanmelden is waarschijnlijk heel anders dan de gemiddelde Amerikaan – op zijn minst zouden ze waarschijnlijk meer politiek geïnteresseerd en geëngageerd zijn.
Waarom geven uw opiniepeilingen nooit de meningen weer van mensen die ik ken?
De kans is groot dat u niet omgaat met een groep vrienden die iedereen in Amerika vertegenwoordigt. Uw vrienden, collega’s en familie zijn waarschijnlijk in veel opzichten zoals u. Als u een groep vrienden zou hebben die het hele land vertegenwoordigt, zou u kennissen hebben die zwart, blank, Aziatisch, rijk, arm, moslim, katholiek, uit het zuiden, noordoosten, enz. zijn, of een combinatie van die kenmerken. Weinigen van ons hebben het geluk om zo’n diverse groep vrienden te hebben.
Waarom zou ik aan enquêtes moeten deelnemen?
U zou om vele redenen aan enquêtes moeten deelnemen. Peilingen zijn een manier voor u om uw mening te uiten aan de leiders van het land en het land als geheel. Ambtenaren en andere leiders letten op de resultaten van opiniepeilingen en houden er vaak rekening mee bij hun besluitvorming. Als bepaalde soorten mensen niet deelnemen aan de enquêtes, zullen de resultaten niet het volledige scala van meningen in het land vertegenwoordigen.
Wat voor nut hebben opiniepeilingen?
Polls zijn bedoeld om de publieke opinie te meten en de ervaringen van het publiek over een scala van onderwerpen vast te leggen. De resultaten leveren informatie op voor academici, onderzoekers en regeringsfunctionarissen en helpen beleidsmakers en anderen bij het nemen van besluiten. Veel van wat het land weet over zijn mediagebruik, arbeids- en banenmarkten, onderwijsprestaties, slachtofferschap van misdrijven en sociale omstandigheden is gebaseerd op gegevens die zijn verzameld via opiniepeilingen.
Ik sta op een “niet bellen” lijst. Bel je me dan niet?
Nee. Legitiem enquête-onderzoek is vrijgesteld van de Telemarketing Sales Rule, die is aangenomen door de Federal Trade Commission om fraude te bestrijden en consumenten te beschermen tegen intimidatie. De regel heeft betrekking op marketing, maar niet op opiniepeiling of marktonderzoek dat geen poging inhoudt om u iets te verkopen. Desalniettemin zullen onze centra voor telefonische enquêtes elk verzoek om niet te worden gebeld honoreren.
Hebben opiniepeilers een ethische code? Zo ja, wat staat er in die code?
De belangrijkste beroepsorganisaties van enquête-onderzoekers hebben zeer duidelijke ethische codes voor hun leden. Deze codes hebben betrekking op de verantwoordelijkheden van enquêteurs met betrekking tot de behandeling van respondenten, hun relaties met klanten en hun verantwoordelijkheden jegens het publiek bij het rapporteren over peilingen.
De meeste enquêteurs van het Pew Research Center behoren tot de American Association for Public Opinion Research (AAPOR) en onderschrijven de code van de AAPOR.
Enkele goede voorbeelden van de ethische code van een opiniepeiler zijn:
American Association for Public Opinion Research (AAPOR)
Council of American Survey Research Organizations (CASRO)
U kunt de missie en de ethische code van Pew Research Center hier lezen.
Wat is het verschil tussen uw peilingen en marktonderzoek?
Er zijn veel overeenkomsten, maar het belangrijkste verschil is het onderwerp. Marktonderzoek peilt naar meningen over producten en diensten en meet uw kooppatronen, bekendheid met producten en diensten of bereidheid om iets te kopen. Onze opiniepeilingen zijn doorgaans gericht op kwesties van openbaar beleid. We proberen ook onderwerpen te meten zoals hoe kiezers reageren op kandidaten in politieke campagnes en welke onderwerpen voor hen belangrijk zijn bij verkiezingen.
Doet u onderzoek onder Aziatische Amerikanen?
Ja. Onze enquêtes zijn representatief voor de gehele volwassen bevolking van de Verenigde Staten en houden nauwkeurig rekening met de diversiteit van de gehele bevolking naar leeftijd, geslacht, ras en etniciteit, regio, en sociaal-economische factoren zoals opleidingsniveau, huishoudinkomen en werkgelegenheidsstatus. Wij sluiten niemand uit van onze analyses op basis van zijn of haar demografische kenmerken. Aziatisch-Amerikaanse antwoorden worden (net als alle antwoorden uit onze enquêtes) opgenomen in de algemene bevolkingscijfers die wij rapporteren. We zijn echter vaak niet in staat om apart te rapporteren over Aziatische Amerikanen als een aparte groep op een statistisch verantwoorde manier vanwege verschillende beperkingen. Aziatische Amerikanen vormen een klein percentage van de Amerikaanse bevolking – ongeveer 5,6% van de nationale bevolking in de volkstelling van 2010 – wat het moeilijk maakt om een voldoende grote steekproef van Aziatische Amerikanen te krijgen in een nationale enquête met onze standaard steekproefgrootte. Bovendien vermindert de verscheidenheid aan talen die door recente Aziatisch-Amerikaanse immigranten worden gesproken het aantal mensen dat in staat is om te antwoorden op een typische enquête en maakt het moeilijker en duurder om een representatieve steekproef te krijgen. In 2012 hebben we een uitgebreide enquête onder Aziatische Amerikanen uitgevoerd in het Engels en in zeven Aziatische talen; u kunt hier meer lezen over de methodologie van de enquête.
Verzameling van enquêtegegevens
Hoe bent u aan mijn nummer gekomen?
De meeste goede telefonische enquêtes onder het grote publiek gebruiken een zogenaamde random digit dial (of “RDD”) steekproeftechniek om de steekproef van telefoonnummers te genereren die in de enquête worden gebruikt. Het doel is ervoor te zorgen dat uw telefoon dezelfde kans heeft om gekozen te worden als elke andere telefoon in de Verenigde Staten. Bij gebruik van dit type telefoonsteekproef kennen de enquêteurs de namen van de mensen die worden gebeld niet. Voor meer informatie over onze methode van het selecteren van telefoonnummers, zie random digit dialing.
Hoe worden mensen geselecteerd voor uw peilingen?
Als de nummers eenmaal zijn geselecteerd via random digit dialing, is het proces van het selecteren van respondenten verschillend voor vaste en mobiele telefoonnummers. Wanneer interviewers iemand bereiken op een vaste telefoon, vragen ze willekeurig aan de helft van de steekproef of ze kunnen spreken met “de jongste man, 18 jaar of ouder, die nu thuis is” en aan de andere helft van de steekproef om te spreken met “de jongste vrouw, 18 jaar of ouder, die nu thuis is”. Indien er geen in aanmerking komende persoon van het gevraagde geslacht thuis is, vragen de interviewers om te spreken met de jongste volwassene van het andere geslacht, die nu thuis is. Deze methode om respondenten binnen elk huishouden te selecteren verbetert de participatie onder jongeren, die door hun levensstijl vaak moeilijker te interviewen zijn dan ouderen. In tegenstelling tot een vaste telefoon wordt een mobiele telefoon in peilingen van het Pew Research Center beschouwd als een persoonlijk toestel. Dit betekent dat, voor degenen in de celsteekproef, interviewers vragen of de persoon die de mobiele telefoon beantwoordt 18 jaar of ouder is om te bepalen of de persoon in aanmerking komt om de enquête in te vullen.
Wat als ik alleen een mobiele telefoon heb – ben ik vertegenwoordigd in uw enquêtes?
Alle telefonische enquêtes die door Pew Research Center worden uitgevoerd, omvatten nu mensen die alleen een mobiele telefoon hebben (zie onze enquêtemethode in detail voor meer informatie). Aangezien het aandeel Amerikanen dat alleen of voornamelijk op mobiele telefoons vertrouwt, is blijven groeien, helpt het bemonsteren van zowel vaste als mobiele telefoonnummers om ervoor te zorgen dat Pew Research-enquêtes bijna alle volwassenen vertegenwoordigen. Er zijn echter verschillende uitdagingen en extra kosten verbonden aan het bemonsteren van mobiele telefoons en het uitvoeren van enquêtes met mobiele telefoons.
Heeft u geen problemen om mensen te laten antwoorden op uw peilingen?
Ja. Het percentage mensen dat we interviewen – van alle mensen die we proberen te interviewen – is de afgelopen tien jaar of langer gedaald. Daar zijn vele redenen voor. Een deel komt voort uit het feit dat mensen het thuis drukker hebben en moeilijker te bereiken zijn. Een deel heeft te maken met het gebruik van technologieën zoals nummerherkenning, voicemail en privacymanagers. En een deel is het gevolg van een groeiende onwil van sommige mensen om te worden geïnterviewd. Wij hebben veel onderzoek gedaan naar de vraag of dalende responspercentages de nauwkeurigheid van opiniepeilingen schaden. Gelukkig zijn er tot nu toe weinig aanwijzingen dat nonrespons de geldigheid van opiniepeilingen ernstig in het gedrang brengt. (Zie ook het probleem van de afnemende respons voor meer informatie)
Hoe zit het met mensen die geen telefoondienst hebben?
Voor de meeste van onze enquêtes geldt helaas dat mensen die geen telefoon hebben, niet in het steekproefkader zijn opgenomen. Daardoor hebben zij geen kans om in telefonische enquêtes te worden opgenomen. Slechts ongeveer 2% van de huishoudens heeft geen telefoondienst. Zonder persoonlijke interviews of een enquête per post is er geen manier om deze telefoonloze huishoudens te bereiken. Statistische weging van onze telefonische steekproeven helpt te corrigeren voor het weglaten van huishoudens zonder telefoondienst, maar er blijft ongetwijfeld een zekere vertekening bestaan voor bepaalde soorten vragen, vooral voor enquêtes gericht op bevolkingsgroepen met een laag inkomen. Omdat de kans dat mensen in huishoudens zonder telefoondienst gaan stemmen kleiner is dan bij anderen, heeft hun weglating geen ernstige schade toegebracht aan de nauwkeurigheid van de opiniepeilingen vóór de verkiezingen. Dit is een aanhoudend punt van zorg voor opiniepeilers. Er wordt veel onderzoek naar gedaan.
Welke demografische vragen stelt u in uw enquêtes?
Er zijn bepaalde demografische vragen die we in elke enquête stellen om de gegevens te wegen, om er zeker van te zijn dat ze representatief zijn voor het grote publiek. Deze omvatten vragen naar de leeftijd van elke respondent, opleiding, ras, Hispanic etniciteit en afkomst, grootte van het huishouden en postcode. Voor telefonische enquêtes vragen we respondenten ook of ze een vaste telefoon en/of een mobiele telefoon hebben. Andere demografische items die niet worden gebruikt voor weging, maar die vaak worden gebruikt voor analyse, zijn de burgerlijke staat van een respondent, religieuze overtuiging en aanwezigheid, inkomen, kiezersregistratiestatus, politieke partijlidmaatschap, politieke ideologie, overeenkomst met de Tea Party, lidmaatschap van een vakbond, of de respondent een ouder is en of de respondent zijn of haar huis bezit of huurt. We stellen deze demografische vragen in sommige, maar niet alle peilingen, afhankelijk van het onderwerp. U kunt de exacte vraagformulering van de Engelse telefonische demografische vragen hier bekijken en de Spaanse vertalingen ervan hier. Omdat voor web- en mailenquêtes een iets andere opmaak van de vragen nodig is dan voor telefonische enquêtes, zijn de web- en mailversies in het Engels hier beschikbaar, en hun Spaanse vertalingen hier.
Opzet vragenlijst
Logen mensen tegen enquêteurs?
We weten dat niet alle enquêtevragen accuraat worden beantwoord, maar het is onmogelijk om te zeggen dat een bepaald onnauwkeurig antwoord noodzakelijkerwijs liegen inhoudt. Het kan zijn dat mensen zich hun gedrag gewoon niet nauwkeurig herinneren.
Meer mensen zeggen dat ze bij een bepaalde verkiezing hebben gestemd dan er volgens de stemopnames daadwerkelijk hebben gestemd. In sommige gevallen hebben onderzoekers de stembescheiden van ondervraagde personen geverifieerd en vastgesteld dat sommigen zeiden dat ze hadden gestemd, maar dat niet deden. Stemmen wordt over het algemeen beschouwd als een sociaal wenselijk gedrag, net als naar de kerk gaan of geld schenken aan liefdadigheid. Studies suggereren dat dit soort gedrag wordt overgerapporteerd. Evenzo wordt sociaal ongewenst gedrag zoals illegaal drugsgebruik, bepaalde vormen van seksueel gedrag of rijden onder invloed ondergerapporteerd.
We nemen maatregelen om fouten met betrekking tot vragen over sociaal wenselijke of ongewenste activiteiten tot een minimum te beperken. Bijvoorbeeld, vragen over kiezersregistratie en stemmen erkennen meestal dat niet iedereen deelneemt aan verkiezingen. De vraag van het Pew Research Center over kiezersregistratie luidt als volgt:
“Tegenwoordig hebben veel mensen het zo druk dat ze geen tijd hebben om zich te laten registreren als kiezer, of ze verhuizen zo vaak dat ze niet de kans krijgen om zich opnieuw te laten registreren. Bent u NU geregistreerd om te stemmen in uw kiesdistrict of heeft u zich tot nu toe nog niet kunnen registreren?”
Hebben mensen echt een mening over al deze vragen?
Mensen hebben meningen of houdingen over zo ongeveer alles. Toch is “Ik weet het niet” een legitiem antwoord, en mensen die niet zeker zijn, geen mening hebben of ervoor kiezen om een vraag om welke reden dan ook niet te beantwoorden, krijgen altijd die mogelijkheid.
Waarom vraagt u in de enquête meestal eerst naar de presidentiële goedkeuring?
De vraag naar de presidentiële goedkeuring is een zeer belangrijke politieke indicator. Het is een nuttige samenvattende maatstaf voor de reputatie van de president bij het publiek, en kan als zodanig van invloed zijn op zijn macht in de omgang met het Congres, bedrijfsleiders en het buitenland. Wij stellen deze vraag meestal als eerste in de enquête omdat wij niet willen dat andere vragen de antwoorden van respondenten op die vraag beïnvloeden.
Als in de enquête bijvoorbeeld eerst naar de economie wordt gevraagd en vervolgens naar de goedkeuring van de president, kan het zijn dat de respondent nog steeds aan de economie denkt wanneer hij de laatste vraag beantwoordt. Hoewel de economische omstandigheden belangrijk kunnen zijn bij de beoordeling van de algehele prestaties van de president, zijn veel andere zaken dat ook. Als de respondent alleen aan de economie denkt omdat wij het onderwerp ter sprake hebben gebracht, kan zijn of haar antwoord over de president worden vertekend door wat wij een contexteffect noemen: in dit geval zouden wij de respondent aanzetten tot het in aanmerking nemen van de economie bij een beoordeling van de president.
Waarom worden demografische vragen aan het eind van de enquête gesteld?
Demografische vragen zijn vaak saai voor respondenten en kunnen ook ongepast en bedreigend overkomen als ze worden gesteld voordat er een vertrouwensniveau is bereikt in het interview. De interviewer wil de respondent vanaf het begin van het gesprek betrekken bij het onderzoek, zodat de respondent geïnteresseerd is in het onderzoek en vragen zal blijven beantwoorden. Als de interviewer de enquête begint met het vragen naar de leeftijd of het geslacht van de respondent, zou de respondent zich kunnen gaan vervelen en besluiten om niet verder te gaan met de enquête. Bovendien, als iemand u belt en eerst begint te vragen hoeveel geld u verdient, uw ras, hoeveel kinderen u heeft, enz., zou u kunnen worden afgeschrikt door deze persoonlijke vragen en besluiten niet verder te gaan met het onderzoek.
U kunt de exacte vraagformulering van de Engelse telefonische demografie hier bekijken en hun Spaanse vertalingen hier. Omdat voor web- en mailenquêtes een iets andere opmaak van vragen nodig is dan voor telefonische enquêtes, zijn de web- en mailversies in het Engels hier beschikbaar, en hun Spaanse vertalingen hier.
Wat is dat allemaal voor geroteerde en willekeurige vragen in uw vragenlijsten?
Roteren of randomiseren betekent dat vragen of items in een lijst niet in dezelfde volgorde aan elke respondent worden gesteld. We weten dat antwoorden op vragen soms worden beïnvloed door vragen die eraan voorafgaan. Door de vragen in een andere volgorde aan elke respondent voor te leggen, zorgen we ervoor dat elke vraag even vaak in dezelfde context als elke andere vraag wordt gesteld (bv. als eerste, laatste of elke positie daartussen). Dit neemt de mogelijke invloed van vorige vragen op de huidige vraag niet weg, maar zorgt er wel voor dat deze vertekening willekeurig wordt verspreid over alle vragen of items in de lijst.
Hetzelfde principe geldt voor de volgorde van antwoordopties in een enkele vraag. Voor veel vragen wordt de volgorde waarin de antwoordkeuzen worden gepresenteerd, willekeurig gekozen. Op die manier wordt elk effect dat de volgorde van de antwoordkeuzen op de antwoorden heeft, willekeurig over de opties verdeeld.
Zie ook vraagvolgorde en volgorde van antwoordcategorieën voor meer informatie.
Waarin verschilt vorm 1 van vorm 2?
Wij schrijven vaak twee versies van een vraag en stellen de helft van de steekproef één versie van de vraag en de andere helft de tweede versie. We zeggen dus dat we twee vormen van de vragenlijst hebben. De respondenten krijgen willekeurig vorm 1 of vorm 2 toegewezen, zodat we ervan kunnen uitgaan dat de twee groepen respondenten in wezen identiek zijn. Bij vragen waarbij twee versies worden gebruikt, wijzen significante verschillen in de antwoorden tussen formulier 1 en formulier 2 erop dat het verschil een gevolg is van de manier waarop we de twee versies hebben geformuleerd. Voor meer informatie over de experimenten met de vraagformulering die wij hebben uitgevoerd, zie vraagformulering.
Wij hebben ook verschillende vormen van de vragenlijst, zodat wij meer vragen kunnen stellen dan wij anders zouden kunnen doen. Als we vaststellen dat de helft van de steekproef genoeg interviews zal bevatten voor een betrouwbare schatting, zullen we vaak sommige vragen slechts aan de helft van de steekproef stellen. Dat stelt ons in staat meer vragen in de enquête op te nemen zonder een individuele respondent te belasten met een langer interview.