Peilingen-Bethlehem

Wat zijn goede peilingen?
Jelke Bethlehem
Centraal Bureau voor de Statistiek
Sector Methodologie
Centraal Bureau voor de Statistiek
Peilingen, polls, enquêtes, surveys, …


Centraal Bureau voor de Statistiek
Verschillende woorden voor hetzelfde begrip:
 Onderzoek van een groep personen.
 Aan een kleine selectie
(steekproef) uit de groep
worden vragen gesteld.
 De uitkomsten worden
gegeneraliseerd naar de
hele groep.
Kan dat zomaar?
 Ja, als het onderzoek goed is opgezet.
 Nee, als het onderzoek slecht is opgezet.
 Scheidt daarom het kaf van het koren
Wat is een goede peiling?


Centraal Bureau voor de Statistiek
Voorwaarden
 De steekproef moet worden
geloot uit de groep.
 Iedereen in de groep moet
dezelfde kans op selectie hebben.
Alleen dan …
 Kunnen betrouwbare (zuivere) schattingen
worden berekend.
 Kunnen de onzekerheidmarges in de
uitkomsten worden berekend.
Wat is een goede peiling?



Centraal Bureau voor de Statistiek
Principes van de kanssteekproeven
 Sinds 1934 de basis voor goed survey-onderzoek.
 Goede, inzichtelijke onderzoeksrapportage.
Nieuwe ontwikkeling: online-peilingen
 Instrument om eenvoudige, snel en goedkoop
veel gegevens te verzamelen.
Problemen met deze peilingen
 Niet iedereen heeft Internet.
 Zelfselectie van respondenten.
 Geen representatieve steekproef.
 Het is vaak niet duidelijk hoe het onderzoek is
uitgevoerd.
Voorbeeld 1: De maagden van Girlscene
Centraal Bureau voor de Statistiek
Voorbeeld 1: De maagden van Girlscene


Centraal Bureau voor de Statistiek
Vragen
 Hoe is de steekproef geselecteerd?
Antwoord: zelfselectie.
 Konden personen van buiten de doelgroep
meedoen? Antwoord: Ja.
 Konden personen meer dan 1 keer meedoen?
Antwoord: Ja.
Conclusie
 Geen representatieve steekproef.
Voorbeeld 2: De peiling van de ANWB
Centraal Bureau voor de Statistiek
Voorbeeld 2: De peiling van de ANWB

Centraal Bureau voor de Statistiek
De media
Voorbeeld 2: De peiling van de ANWB

Centraal Bureau voor de Statistiek
De media
Voorbeeld 2: De peiling van de ANWB

Centraal Bureau voor de Statistiek
De media
Voorbeeld 2: De peiling van de ANWB

Centraal Bureau voor de Statistiek
De onderzoekers zelf
Voorbeeld 3: De politieke peilingen


Centraal Bureau voor de Statistiek
Twee voorbeelden.
 Politieke Barometer (Synovate)
 Peil.nl (Maurice de Hond)
Uitvoering
 Web panel.
 Leden geworven via zelfselectie.
 Weegprocedure om te corrigeren voor
selectiviteit.
 Wegen geen garantie voor succes.
Voorbeeld 3: De politieke peilingen

Centraal Bureau voor de Statistiek
Voorbeeld: CDA
 Verschillen zijn groter dan onzekerheidmarges
 Welke peiling is juist?
Checklist
1. Is er een onderzoeksverantwoording?
 Ja
 Nee
2. Is duidelijk wat de doelgroep is?
 Ja
 Nee
3. Hoe is de steekproef getrokken
 Geloot uit de hele groep
 Geloot uit deel van de groep
 Zelfselectie via Internet
Centraal Bureau voor de Statistiek
Checklist
4. Is de omvang van de steekproef vermeld?
 Ja
 Nee
5. Is het percentage respons hoog?
 Ja
 Nee
6. Is er gecorrigeerd voor non-respons?
 Ja
 Nee
Centraal Bureau voor de Statistiek
Checklist
7. Worden er onzekerheidsmarges vermeld?
 Ja
 Nee
Marges vermelden kan.
Centraal Bureau voor de Statistiek
Geen zinloze discussie.
Tot slot: Internet-peilingen
Centraal Bureau voor de Statistiek