Achtduizendnegentien respondenten. Een kwart voelt zich bij één of beide ouders niet veilig. Vier op de tien voelt zich niet veilig op school. Meer dan de helft houdt de eigen seksuele oriëntatie of genderidentiteit verborgen voor de ouders. Het zijn alarmerende cijfers waarmee de NOS bij de start van WorldPride groot uitpakt.
Er is alleen één cruciaal probleem. Het onderzoek is niet representatief. Dat schrijft de NOS zelf. Helemaal onderaan het artikel, nadat de percentages, persoonlijke verhalen en reactie van het COC al uitgebreid zijn gepresenteerd.
En daarmee verandert de journalistieke betekenis van het verhaal fundamenteel.
Een vragenlijst via de eigen sociale media
NOS Stories verspreidde de vragenlijst via zijn eigen socialemediakanalen. Vervolgens konden jongeren tussen de 13 en 19 jaar die zichzelf als lhbti+ beschouwen de vragen invullen.
Dat leverde 8.019 reacties op. Dat is een groot aantal en de persoonlijke ervaringen van deze respondenten verdienen serieus genomen te worden.
Wie thuis wordt bedreigd, vernederd of mishandeld vanwege zijn geaardheid, verdient bescherming. Wie op school wordt uitgescholden of aangevallen, moet op docenten en politie kunnen rekenen.
Daar bestaat geen discussie over.
Maar een grote respons maakt een onderzoek nog niet representatief.
Mensen die de sociale kanalen van NOS Stories volgen, zich sterk bij het onderwerp betrokken voelen of negatieve ervaringen hebben, kunnen meer geneigd zijn de vragenlijst in te vullen. Er is geen willekeurige steekproef uit alle Nederlandse lhbti-jongeren getrokken.
De uitkomsten beschrijven daarom de ervaringen van de respondenten. Ze bewijzen niet dat exact dezelfde percentages gelden voor de gehele doelgroep.
De NOS erkent dat zelf: “Dit is geen representatief onderzoek.”
Waarom staat dat niet bovenaan?
Daarmee komen we bij de journalistieke kern.
Waarom wordt de belangrijkste methodologische beperking pas in de verantwoording onderaan vermeld?
Waarom luidt de kop niet: “Veel deelnemers aan NOS-vragenlijst voelen zich onveilig”?
Dat zou feitelijk preciezer zijn. Het maakt duidelijk dat het gaat om de antwoorden van een zelfgeselecteerde groep en niet om een wetenschappelijke meting onder alle Nederlandse jongeren.
Maar die kop klinkt natuurlijk minder dramatisch.
“Veel jonge lhbti’ers voelen zich onveilig” suggereert een breed vastgesteld maatschappelijk beeld. De gemiddelde lezer ziet percentages, een steekproef van meer dan achtduizend mensen en een reactie van een belangenorganisatie. Hij zal al snel denken dat dit een regulier representatief onderzoek betreft.
Pas wie helemaal naar beneden scrolt, ontdekt de beperking.
DE PUBLIEKE OMROEP HEEFT DE PLICHT OM FEITEN, ACTIVISME EN ZELFSELECTIE HELDER UIT ELKAAR TE HOUDEN. DDS weigert kritiek op mediamethodes te laten smoren door morele chantage. Help ons de NPO kritisch te blijven controleren via BackMe of NL95RABO0159098327 t.n.v. Liberty Media. Artikel gaat verder onder deze oproep.
De timing is geen toeval
Het artikel verschijnt precies bij de start van WorldPride in Amsterdam.
Daardoor functioneert de vragenlijst niet alleen als journalistiek onderzoek, maar ook als ondersteuning van een groter maatschappelijk verhaal: lhbti-jongeren zijn massaal onveilig, daarom is meer zichtbaarheid, meer bewustwording en meer Pride noodzakelijk.
Dat kan een legitieme politieke of maatschappelijke boodschap zijn. Maar de NOS is geen actiegroep. De NOS is een met belastinggeld gefinancierde journalistieke organisatie die juist extra zorgvuldig met cijfers moet omgaan.
Wanneer activistische organisaties een eigen achterban ondervragen, begrijpt iedereen dat de uitkomsten gekleurd kunnen worden door de manier waarop respondenten zijn geworven.
Bij de NOS krijgt dezelfde methode onmiddellijk het gezag van de publieke omroep.
Juist daarom moet de beperking niet worden weggestopt in een slotparagraaf.
Persoonlijke verhalen zijn geen bevolkingsstatistiek
Dit onderscheid is belangrijk.
Een persoonlijk verhaal kan volledig waar, aangrijpend en journalistiek relevant zijn zonder dat het iets bewijst over de omvang van een probleem in de hele bevolking.
Als honderd jongeren vertellen dat zij thuis worden afgewezen, zijn dat honderd echte verhalen. Maar om vast te stellen welk percentage van álle lhbti-jongeren thuis onveilig is, is een representatieve onderzoeksopzet nodig.
Dat is geen koud statistisch gemier.
Beleid, subsidies, schoolprogramma’s en publieke campagnes worden mede gebaseerd op cijfers. Wanneer percentages als maatschappelijke waarheid worden gepresenteerd, moet duidelijk zijn hoe betrouwbaar en generaliseerbaar ze zijn.
Anders verandert emotie in beleid zonder dat de tussenliggende bewijsstap deugt.
De NOS moet volledige openheid geven
De omroep zou de volledige vragenlijst, wervingsmethode en ruwe verdeling van respondenten moeten publiceren.
Hoeveel respondenten identificeerden zich als homo, lesbisch, biseksueel, transgender of anders? Hoe zijn dubbele deelnames voorkomen? Welke vragen zijn precies gesteld? Konden deelnemers meerdere antwoorden geven? Hoe verhouden leeftijd, geslacht en woonplaats zich tot de bredere doelgroep?
Dat is geen poging om problemen te ontkennen.
Het is de minimale controle die bij ieder onderzoek hoort.
Wie werkelijk om kwetsbare jongeren geeft, heeft niets aan opgeblazen of verkeerd geïnterpreteerde cijfers. Goed beleid begint met betrouwbare informatie.
Geen vrijbrief voor haat, wel ruimte voor kritiek
De voorspelbare reactie op dit artikel zal zijn dat kritiek op het onderzoek gelijkstaat aan kritiek op lhbti-jongeren.
Dat is onzin.
Geweld, bedreiging en vernedering zijn verkeerd. Ieder kind heeft recht op veiligheid. Maar niemand heeft recht op journalistiek onzorgvuldige statistiek.
De NOS mag de ervaringen van deze 8.019 jongeren publiceren. Graag zelfs.
Maar zet dan bovenaan wat de omroep zelf onderaan toegeeft: deze vragenlijst is niet representatief.
Dat ene zinnetje verandert alles.
DDS KOMT OP VOOR VRIJE MENINGSUITING, EERLIJKE CIJFERS EN JOURNALISTIEK ZONDER ACTIVISTISCH ROOKGORDIJN. Als jij vindt dat de publieke omroep kritisch gevolgd moet worden, steun ons dan via NL95RABO0159098327 t.n.v. Liberty Media of BackMe.
.
