ABOUT THE SPEAKER
Mona Chalabi - Data journalist
Mona Chalabi tries to take the numb out of numbers. She's left with lots of "ers."

Why you should listen

After working for a humanitarian organisation, Mona Chalabi saw how important data was, but also how easily it could be used by people with their own specific agendas. Since then, her work for organizations like Transparency International and The Guardian has had one goal: to make sure as many people as possible can find and question the data they need to make informed decisions about their lives.

Chalabi is currently the Data Editor of the Guardian US, where she writes articles, produces documentaries and turns data into illustrations and animations. In 2016, her data illustrations were commended by the Royal Statistical Society.

More profile about the speaker
Mona Chalabi | Speaker | TED.com
TEDNYC

Mona Chalabi: 3 ways to spot a bad statistic

Mona Chalabi: Drie manieren om slechte statistieken te herkennen

Filmed:
1,888,599 views

Het is soms moeilijk om te weten welke statistieken betrouwbaar zijn. Maar we mogen statistieken ook niet volledig links laten liggen ... in plaats daarvan zouden we voorbij de statistieken moeten leren kijken. In deze verrukkelijke, grappige talk deelt datajournaliste Mona Chalabi handige tips om je te helpen cijfer te betwisten, te interpreteren en werkelijk te begrijpen wat ze willen zeggen.
- Data journalist
Mona Chalabi tries to take the numb out of numbers. She's left with lots of "ers." Full bio

Double-click the English transcript below to play the video.

Ik zal het vandaag
over statistieken hebben.
00:12
Now, I'm going to be talkingpratend
about statisticsstatistieken todayvandaag.
0
884
2763
Als je daarvan onmiddellijk
wantrouwig wordt dan is dat normaal,
00:15
If that makesmerken you immediatelyper direct feel
a little bitbeetje waryomzichtig, that's OK,
1
3671
3138
dat maakt van jou geen gestoorde
aanhanger van samenzweringstheorieën,
00:18
that doesn't make you some
kindsoort of crazygek conspiracysamenzwering theoristtheoreticus,
2
6833
2859
00:21
it makesmerken you skepticalsceptisch.
3
9716
1296
het maakt jou sceptisch.
00:23
And when it comeskomt to numbersgetallen,
especiallyvooral now, you should be skepticalsceptisch.
4
11036
3886
En als we het over cijfers hebben,
zeker nu, is het goed sceptisch te zijn.
Maar je zou een onderscheid
moeten kunnen maken
00:26
But you should alsoook be ablein staat to tell
whichwelke numbersgetallen are reliablebetrouwbaar
5
14946
3011
tussen betrouwbare
en onbetrouwbare cijfers.
00:29
and whichwelke onesdegenen aren'tzijn niet.
6
17981
1160
00:31
So todayvandaag I want to try to give you
some toolsgereedschap to be ablein staat to do that.
7
19165
3206
Vandaag wil ik je wat handvatten
geven om dit te kunnen doen.
Maar voor ik begin,
00:34
But before I do,
8
22395
1169
wil ik even verduidelijken
over welke cijfers ik het hier heb.
00:35
I just want to clarifyverduidelijken whichwelke numbersgetallen
I'm talkingpratend about here.
9
23588
2839
Ik heb het niet over beweringen als:
00:38
I'm not talkingpratend about claimsvorderingen like,
10
26451
1635
'9 op 10 vrouwen raden
deze antirimpelcrème aan.'
00:40
"9 out of 10 womenvrouw recommendaanbevolen
this anti-agingAnti-veroudert creamroom."
11
28110
2449
Ik denk dat de meesten van ons
deze cijfers niet ernstig nemen.
00:42
I think a lot of us always
rollrollen our eyesogen at numbersgetallen like that.
12
30583
2972
Tegenwoordig betwisten mensen
statistieken als:
00:45
What's differentverschillend now is people
are questioningOndervragen statisticsstatistieken like,
13
33579
2984
'De werkloosheidsgraad in de VS is 5%.'
00:48
"The US unemploymentwerkloosheid
ratetarief is fivevijf percentprocent."
14
36587
2014
Het verschil hier is
dat ze niet van een privébedrijf komt,
00:50
What makesmerken this claimvordering differentverschillend is
it doesn't come from a privateprivaat companybedrijf,
15
38625
3516
maar van de overheid.
00:54
it comeskomt from the governmentregering.
16
42165
1388
Ongeveer 4 op 10 Amerikanen
wantrouwen de economische informatie
00:55
About 4 out of 10 AmericansAmerikanen
distrustwantrouwen the economiceconomisch datagegevens
17
43577
3336
die de overheid rapporteert.
00:58
that getskrijgt reportedgerapporteerd by governmentregering.
18
46937
1573
Bij de supporters van President Trump
ligt dit zelfs hoger,
01:00
AmongOnder supportersaanhangers of PresidentDe Voorzitter TrumpTrump
it's even higherhoger;
19
48534
2491
01:03
it's about 7 out of 10.
20
51049
1633
ongeveer 7 op 10.
01:04
I don't need to tell anyoneiedereen here
21
52706
1804
Ik hoef hier niemand te vertellen
01:06
that there are a lot of dividingverdeling lineslijnen
in our societymaatschappij right now,
22
54534
3011
dat er momenteel veel breuklijnen
in onze samenleving zijn
01:09
and a lot of them startbegin to make sensezin,
23
57569
1825
en veel daarvan worden begrijpelijker
01:11
onceeen keer you understandbegrijpen people'sPeople's relationshipsrelaties
with these governmentregering numbersgetallen.
24
59418
3687
wanneer je weet welke relatie
mensen met deze overheidscijfers hebben.
Enerzijds zijn er mensen die beweren
dat statistieken essentieel zijn,
01:15
On the one handhand-, there are those who say
these statisticsstatistieken are crucialbeslissend,
25
63129
3336
dat we ze nodig hebben
om de samenleving te begrijpen,
01:18
that we need them to make sensezin
of societymaatschappij as a wholegeheel
26
66489
2630
iets wat verder gaat
dan emotionele anekdotes
01:21
in orderbestellen to moveverhuizing beyondvoorbij
emotionalemotioneel anecdotesanekdotes
27
69143
2164
01:23
and measuremaatregel progressvooruitgang in a subjectivesubjectief way.
28
71331
2410
en vooruitgang [objectief] kan meten.
01:25
And then there are the othersanderen,
29
73765
1467
En dan zijn er de anderen
01:27
who say that these statisticsstatistieken are elitistelitaire,
30
75256
2156
die beweren dat statistieken elitair zijn
en misschien zelfs gemanipuleerd.
01:29
maybe even riggedopgetuigd;
31
77436
1208
01:30
they don't make sensezin
and they don't really reflectreflecteren
32
78668
2394
Ze houden geen steek en geven
de dagdagelijkse realiteit niet weer.
01:33
what's happeninggebeurtenis
in people'sPeople's everydayelke dag liveslevens.
33
81086
2296
Het lijkt erop dat de tweede groep
het debat momenteel aan het winnen is.
01:35
It kindsoort of feelsvoelt like that secondtweede groupgroep
is winningwinnend the argumentargument right now.
34
83406
3487
We leven in een wereld
van alternatieve feiten,
01:38
We're livingleven in a worldwereld-
of alternativealternatief factsfeiten,
35
86917
2108
waarbij statistieken
niet worden geaccepteerd
01:41
where people don't find statisticsstatistieken
this kindsoort of commongemeenschappelijk groundgrond,
36
89049
2935
als gemeenschappelijke
basis voor een debat.
01:44
this startingbeginnend pointpunt for debatedebat.
37
92008
1636
01:45
This is a problemprobleem.
38
93668
1286
Dit is een probleem.
Op dit moment worden er
in de VS zelfs stappen genomen
01:46
There are actuallywerkelijk
movesmoves in the US right now
39
94978
2067
01:49
to get ridbevrijden of some governmentregering
statisticsstatistieken altogetherover het geheel genomen.
40
97069
2861
om sommige overheidsstatistieken
volledig te elimineren.
Momenteel is er een wet in het congres
over het meten van rassenongelijkheid.
01:51
Right now there's a billBill in congresscongres
about measuringmeten racialras- inequalityongelijkheid.
41
99954
3387
01:55
The draftdroogte lawwet sayszegt that governmentregering
moneygeld should not be used
42
103365
2801
Het wetsontwerp bepaalt
dat overheidsgeld niet mag worden gebruikt
01:58
to collectverzamelen datagegevens on racialras- segregationsegregatie.
43
106190
1902
voor onderzoek naar rassensegregatie.
02:00
This is a totaltotaal disasterramp.
44
108116
1885
Dit is een ramp.
Als we deze gegevens niet hebben,
02:02
If we don't have this datagegevens,
45
110025
1748
hoe kunnen we dan discriminatie
waarnemen, laat staan oplossen?
02:03
how can we observeobserveren discriminationdiscriminatie,
46
111797
1778
02:05
let alonealleen fixrepareren it?
47
113599
1278
Ofwel: hoe kan de overheid
een rechtvaardig beleid voeren
02:06
In other wordstekst:
48
114901
1188
02:08
How can a governmentregering createcreëren faireerlijk policiesbeleid
49
116113
2059
als ze de huidige situatie
niet kan meten?
02:10
if they can't measuremaatregel
currentactueel levelslevels of unfairnessoneerlijkheid?
50
118196
2771
En dan gaat het
niet alleen over discriminatie.
02:12
This isn't just about discriminationdiscriminatie,
51
120991
1794
02:14
it's everything -- think about it.
52
122809
1670
Hoe kunnen we ooit
een gezondheidszorgbeleid voeren
02:16
How can we legislatewetten maken on healthGezondheid carezorg
53
124503
1690
zonder data over gezondheid en armoede?
02:18
if we don't have good datagegevens
on healthGezondheid or povertyarmoede?
54
126217
2271
Hoe kunnen we een publiek debat
over immigratie voeren
02:20
How can we have publicopenbaar debatedebat
about immigrationimmigratie
55
128512
2198
als we het niet eens kunnen worden
02:22
if we can't at leastminst agreemee eens
56
130734
1250
over hoeveel mensen er
het land binnenkomen en verlaten?
02:24
on how manyveel people are enteringinvoeren
and leavingverlaten the countryland?
57
132008
2643
Statistieken komen van de staat;
ze zijn ernaar genoemd.
02:26
StatisticsStatistieken come from the statestaat;
that's where they got theirhun namenaam.
58
134675
3058
Het was de bedoeling
om de bevolking beter te meten
02:29
The pointpunt was to better
measuremaatregel the populationbevolking
59
137757
2157
om ze zo beter te kunnen dienen.
02:31
in orderbestellen to better servedienen it.
60
139938
1357
We hebben deze cijfers dus nodig,
02:33
So we need these governmentregering numbersgetallen,
61
141319
1725
maar we mogen ze ook
niet zomaar blind aanvaarden
02:35
but we alsoook have to moveverhuizing
beyondvoorbij eithereen van beide blindlyblindelings acceptingaccepteren
62
143068
2647
of ze blind verwerpen.
02:37
or blindlyblindelings rejectingafwijzing van them.
63
145739
1268
02:39
We need to learnleren the skillsvaardigheden
to be ablein staat to spotplek badslecht statisticsstatistieken.
64
147031
2997
We moeten slechte statistieken
leren herkennen.
Ik leerde enkele technieken
02:42
I startedbegonnen to learnleren some of these
65
150052
1528
toen ik bij de afdeling Statistiek
van de Verenigde Naties werkte.
02:43
when I was workingwerkend
in a statisticalstatistisch departmentafdeling
66
151604
2166
02:45
that's partdeel of the UnitedVerenigd NationsNaties.
67
153794
1643
Wij moesten onderzoeken hoeveel Irakezen
02:47
Our jobbaan was to find out how manyveel IraqisIrakezen
had been forcedgedwongen from theirhun homeshuizen
68
155461
3406
omwille van de oorlog
hun woning moesten verlaten
02:50
as a resultresultaat of the waroorlog,
69
158891
1158
en wat hun behoeften waren.
02:52
and what they needednodig.
70
160073
1158
02:53
It was really importantbelangrijk work,
but it was alsoook incrediblyongelooflijk difficultmoeilijk.
71
161255
3178
Het was belangrijk
maar ook heel moeilijk werk.
Elke dag namen we beslissingen
02:56
EveryElke singlesingle day, we were makingmaking decisionsbeslissingen
72
164457
2018
die invloed op de juistheid
van onze cijfers hadden.
02:58
that affectedgetroffen the accuracynauwkeurigheid
of our numbersgetallen --
73
166499
2157
Bijvoorbeeld naar welke delen
van het land we zouden gaan,
03:00
decisionsbeslissingen like whichwelke partsonderdelen
of the countryland we should go to,
74
168680
2744
met wie we zouden praten,
03:03
who we should speakspreken to,
75
171448
1156
welke vragen we zouden stellen.
03:04
whichwelke questionsvragen we should askvragen.
76
172628
1568
03:06
And I startedbegonnen to feel
really disillusionedgedesillusioneerd with our work,
77
174220
2680
En ik geraakte teleurgesteld in ons werk,
03:08
because we thought we were doing
a really good jobbaan,
78
176924
2518
want wij dachten
uitstekend werk te leveren,
maar diegenen die ons dit werkelijk
konden vertellen, waren de Irakezen
03:11
but the one groupgroep of people
who could really tell us were the IraqisIrakezen,
79
179466
3278
en zij hadden zelden
toegang tot onze analyses,
03:14
and they rarelyzelden got the chancekans to find
our analysisanalyse, let alonealleen questionvraag it.
80
182768
3540
dus konden ze ook niet betwisten.
Ik raakte ervan overtuigd
03:18
So I startedbegonnen to feel really determinedvastbesloten
81
186332
1831
dat we alleen nauwkeuriger
cijfers konden krijgen
03:20
that the one way to make
numbersgetallen more accurateaccuraat
82
188187
2311
03:22
is to have as manyveel people as possiblemogelijk
be ablein staat to questionvraag them.
83
190522
3053
als zoveel mogelijk mensen
ze zouden kunnen betwisten.
03:25
So I becamewerd a datagegevens journalistjournalist.
84
193599
1434
Dus werd ik een datajournaliste.
03:27
My jobbaan is findingbevinding these datagegevens setssets
and sharingdelen them with the publicopenbaar.
85
195057
3904
Het is mijn taak om deze datasets
te vinden en te delen met de bevolking.
Iedereen kan dit doen,
je hoeft er geen nerd voor te zijn.
03:30
AnyoneIedereen can do this,
you don't have to be a geekgeek or a nerdnerd.
86
198985
3173
Negeer zo'n woord;
het wordt door mensen gebruikt
03:34
You can ignorenegeren those wordstekst;
they're used by people
87
202182
2355
die beweren slim te zijn
terwijl ze bescheidenheid veinzen.
03:36
tryingproberen to say they're smartslim
while pretendingzogenaamd they're humblevernederen.
88
204561
2822
Werkelijk iedereen kan dit.
03:39
AbsolutelyAbsoluut anyoneiedereen can do this.
89
207407
1589
03:41
I want to give you guys threedrie questionsvragen
90
209020
2067
Ik wil jullie drie vragen aanreiken
03:43
that will help you be ablein staat to spotplek
some badslecht statisticsstatistieken.
91
211111
3005
die kunnen helpen bij het ontdekken
van slechte statistieken.
03:46
So, questionvraag numberaantal one
is: Can you see uncertaintyonzekerheid?
92
214140
3507
De eerste vraag is:
is de onzekerheid aangegeven?
Als er iets is dat de relatie van mensen
met cijfers heeft veranderd,
03:49
One of things that's really changedveranderd
people'sPeople's relationshipverhouding with numbersgetallen,
93
217671
3364
en zelfs hun vertrouwen in de media,
03:53
and even theirhun trustvertrouwen in the mediamedia,
94
221059
1641
is het gebruik van politieke peilingen.
03:54
has been the use of politicalpolitiek pollsopiniepeilingen.
95
222724
2258
Persoonlijk ben ik
tegen politieke peilingen,
03:57
I personallypersoonlijk have a lot of issueskwesties
with politicalpolitiek pollsopiniepeilingen
96
225006
2538
want ik geloof dat het de rol is
van journalisten om feiten te verslaan
03:59
because I think the rolerol of journalistsjournalisten
is actuallywerkelijk to reportrapport the factsfeiten
97
227568
3376
en niet om ze te voorspellen.
04:02
and not attemptpoging to predictvoorspellen them,
98
230968
1553
Vooral als voorspellingen
de democratie kunnen schaden
04:04
especiallyvooral when those predictionsvoorspellingen
can actuallywerkelijk damageschade democracydemocratie
99
232545
2996
door mensen aan te geven:
04:07
by signalingsignalering to people:
don't botherde moeite to votestemmen for that guy,
100
235565
2732
stem niet voor deze man,
want hij maakt toch geen kans.
04:10
he doesn't have a chancekans.
101
238321
1205
Dit terzijde, laten we het nu hebben over
de nauwkeurigheid van deze onderneming.
04:11
Let's setreeks that asideterzijde for now and talk
about the accuracynauwkeurigheid of this endeavorEndeavor.
102
239550
3654
Uit de nationale verkiezingen
in het VK, Italië, Israel
04:15
BasedOp basis on nationalnationaal electionsverkiezingen
in the UKVERENIGD KONINKRIJK, ItalyItalië, IsraelIsraël
103
243228
4608
04:19
and of courseCursus, the mostmeest recentrecent
US presidentialpresidentiële electionverkiezing,
104
247860
2764
en natuurlijk de voorbije
presidentsverkiezingen in de VS,
04:22
usinggebruik makend van pollsopiniepeilingen to predictvoorspellen electoralelectorale outcomesuitkomsten
105
250648
2137
blijkt dat peilingen net zoveel
zeggen over verkiezingen
04:24
is about as accurateaccuraat as usinggebruik makend van the moonmaan
to predictvoorspellen hospitalziekenhuis admissionsAdmissions.
106
252809
3812
als de maan over
het aantal ziekenhuisopnames.
04:28
No, seriouslyernstig, I used actualwerkelijk datagegevens
from an academicacademische studystudie to drawtrek this.
107
256645
4200
Echt, dit plaatje is gemaakt
op basis van echte gegevens
van een academisch onderzoek.
04:32
There are a lot of reasonsredenen why
pollingpolling has becomeworden so inaccurateonjuiste.
108
260869
3727
Er zijn veel redenen waarom peilingen
zo onnauwkeurig zijn geworden.
04:36
Our societiessamenlevingen have becomeworden really diverseverschillend,
109
264620
1970
Onze samenleving is zo divers geworden
dat het moeilijk is voor opiniepeilers
om een goede steekproef
04:38
whichwelke makesmerken it difficultmoeilijk for pollstersenquêteurs
to get a really niceleuk representativevertegenwoordiger samplemonster
110
266614
3821
van de populatie voor
hun opiniepeiling te krijgen.
04:42
of the populationbevolking for theirhun pollsopiniepeilingen.
111
270459
1627
Mensen nemen niet graag
de telefoon op voor opiniepeilers
04:44
People are really reluctantonwillig to answerantwoord
theirhun phonestelefoons to pollstersenquêteurs,
112
272110
3006
en, verbazend genoeg,
kunnen mensen liegen.
04:47
and alsoook, shockinglyschokkend enoughgenoeg,
people mightmacht lieliggen.
113
275140
2276
Maar dat weet je niet
als je naar de media kijkt.
04:49
But you wouldn'tzou het niet necessarilynodig
know that to look at the mediamedia.
114
277440
2811
04:52
For one thing, the probabilitywaarschijnlijkheid
of a HillaryHillary ClintonClinton winwinnen
115
280275
2761
Bijvoorbeeld, de waarschijnlijkheid
dat Hillary Clinton zou winnen
04:55
was communicatedgecommuniceerd with decimaldecimale placesplaatsen.
116
283060
2791
werd uitgedrukt in decimalen.
We gebruiken geen decimalen
om de temperatuur aan te duiden.
04:57
We don't use decimaldecimale placesplaatsen
to describebeschrijven the temperaturetemperatuur-.
117
285875
2621
05:00
How on earthaarde can predictingvoorspellen the behaviorgedrag
of 230 millionmiljoen voterskiezers in this countryland
118
288520
4228
Hoe kun je dan het stemgedrag
van 230 miljoen kiezers in dit land
05:04
be that precisenauwkeurig?
119
292772
1829
zo precies voorspellen?
En dan waren er
die gestroomlijnde grafieken.
05:06
And then there were those sleekglad chartsgrafieken.
120
294625
2002
05:08
See, a lot of datagegevens visualizationsvisualisaties
will overstateoverdrijven certaintyzekerheid, and it workswerken --
121
296651
3973
Kijk, veel visuele datavoorstellingen
suggereren zekerheid, en dat werkt.
05:12
these chartsgrafieken can numbverdoven
our brainshersenen to criticismkritiek.
122
300648
2620
Zulke grafieken kunnen
ons kritiekloos maken.
05:15
When you hearhoren a statisticstatistisch,
you mightmacht feel skepticalsceptisch.
123
303292
2558
Als je een statistiek hoort,
ben je sceptisch.
Zodra ze in een grafiek staat,
05:17
As soonspoedig as it's buriedbegraven in a charttabel,
124
305874
1635
voelt het als objectieve wetenschap aan
05:19
it feelsvoelt like some kindsoort
of objectivedoelstelling sciencewetenschap,
125
307533
2129
05:21
and it's not.
126
309686
1249
en dat is het niet.
05:22
So I was tryingproberen to find waysmanieren
to better communicatecommuniceren this to people,
127
310959
3103
Ik zocht naar manieren
om dit aan mensen duidelijker te maken,
05:26
to showtonen people the uncertaintyonzekerheid
in our numbersgetallen.
128
314086
2504
om de onzekerheid
van cijfers te laten zien.
05:28
What I did was I startedbegonnen takingnemen
realecht datagegevens setssets,
129
316614
2246
Ik deed het volgende:
ik nam reële datasets
05:30
and turningdraaien them into
hand-drawnhandgetekende visualizationsvisualisaties,
130
318884
2652
en veranderde ze
in handgetekende voorstellingen,
zodat mensen kunnen zien
hoe onnauwkeurig de gegevens zijn.
05:33
so that people can see
how impreciseonnauwkeurig the datagegevens is;
131
321560
2672
Zodat ze zien dat dit
door iemand gemaakt is,
05:36
so people can see that a humanmenselijk did this,
132
324256
1996
05:38
a humanmenselijk foundgevonden the datagegevens and visualizedgevisualiseerd it.
133
326276
1972
een mens maakte een plaatje van de data.
05:40
For examplevoorbeeld, insteadin plaats daarvan
of findingbevinding out the probabilitywaarschijnlijkheid
134
328272
2672
Bijvoorbeeld, in plaats van te berekenen
wat je kans op griep is in een maand,
05:42
of gettingkrijgen the flugriep in any givengegeven monthmaand,
135
330968
2126
kan je de ruwe verdeling
van het griepseizoen zien.
05:45
you can see the roughruw
distributiondistributie of flugriep seasonseizoen.
136
333118
2792
Dit is ---
05:47
This is --
137
335934
1167
(Gelach)
dit is een slechte dia om
in februari te laten zien.
05:49
(LaughterGelach)
138
337125
1018
05:50
a badslecht shotschot to showtonen in FebruaryFebruari.
139
338167
1486
Maar het werkt ook verantwoordelijker,
05:51
But it's alsoook more responsibleverantwoordelijk
datagegevens visualizationvisualisatie,
140
339677
2455
want als ik je de exacte
kansberekening zou laten zien,
05:54
because if you were to showtonen
the exactexact probabilitieswaarschijnlijkheden,
141
342156
2455
dan zou dit mensen kunnen stimuleren
05:56
maybe that would encourageaanmoedigen
people to get theirhun flugriep jabsjabs
142
344635
2592
om hun griepprik
op het verkeerde moment te halen.
05:59
at the wrongfout time.
143
347251
1456
Het doel van deze beverige lijnen
06:01
The pointpunt of these shakywankel lineslijnen
144
349163
1693
is dat mensen denken
aan deze onnauwkeurigheden,
06:02
is so that people rememberonthouden
these imprecisionsonnauwkeurigheden,
145
350880
2911
maar ook dat ze niet noodzakelijk
een specifiek cijfer moeten hebben,
06:05
but alsoook so they don't necessarilynodig
walklopen away with a specificspecifiek numberaantal,
146
353815
3227
maar dat ze de belangrijke
feiten kunnen onthouden.
06:09
but they can rememberonthouden importantbelangrijk factsfeiten.
147
357066
1866
Feiten als onrechtvaardigheid en
ongelijkheid laten sporen na in ons leven.
06:10
FactsFeiten like injusticeonrecht and inequalityongelijkheid
leavehet verlof a hugereusachtig markMark on our liveslevens.
148
358956
4024
06:15
FactsFeiten like BlackZwart AmericansAmerikanen and NativeNative
AmericansAmerikanen have shorterkortere life expectanciesverwachtingen
149
363004
4189
Zoals het feit dat zwarte
en inheemse Amerikanen
een lagere levensverwachting
dan andere rassen hebben
06:19
than those of other racesraces,
150
367217
1400
en dat dit niet op punt
staat te veranderen.
06:20
and that isn't changingveranderen anytimeop elk gewenst moment soonspoedig.
151
368641
2138
Zoals het feit dat gevangenen in de VS
vastgehouden kunnen worden
06:22
FactsFeiten like prisonersgevangenen in the US
can be keptgehouden in solitaryeenzame confinementopsluiting cellscellen
152
370803
3901
in isoleercellen die kleiner zijn
dan een gemiddelde parkeerplaats.
06:26
that are smallerkleiner than the sizegrootte
of an averagegemiddelde parkingparkeren spaceruimte.
153
374728
3342
Het doel van deze voorstellingen
is ook om mensen
06:30
The pointpunt of these visualizationsvisualisaties
is alsoook to remindherinneren people
154
378535
3335
aan enkele belangrijke statistische
concepten te herinneren,
06:33
of some really importantbelangrijk
statisticalstatistisch conceptsconcepten,
155
381894
2350
06:36
conceptsconcepten like averagesgemiddelden.
156
384268
1636
zoals gemiddelden.
Stel je voor dat je
de volgende stelling hoort:
06:37
So let's say you hearhoren a claimvordering like,
157
385928
1668
06:39
"The averagegemiddelde swimmingzwemmen poolzwembad in the US
containsbevat 6.23 fecalfecal accidentsongevallen."
158
387620
4434
"Het gemiddelde zwembad in de VS
heeft 6,23 fecale ongelukken."
Dat wil niet zeggen
dat elk zwembad in het land
06:44
That doesn't mean everyelk singlesingle
swimmingzwemmen poolzwembad in the countryland
159
392078
2797
exact 6,23 drollen bevat.
06:46
containsbevat exactlyprecies 6.23 turdsTurds.
160
394899
2194
Dus om dat aan te tonen,
bekeek ik de originele data
06:49
So in orderbestellen to showtonen that,
161
397117
1417
06:50
I wentgegaan back to the originalorigineel datagegevens,
whichwelke comeskomt from the CDCCDC,
162
398558
2841
van het centrum voor ziektebestrijding
dat die zwembaden onderzocht.
06:53
who surveyedondervraagde 47 swimmingzwemmen facilitiesuitrusting.
163
401423
2065
Ik heb vervolgens een avond
poep zitten herverdelen,
06:55
And I just spentdoorgebracht one eveningavond
redistributingherverdeling poopkak.
164
403512
2391
zodat je kan zien hoe misleidend
gemiddelden kunnen zijn.
06:57
So you can kindsoort of see
how misleadingmisleidende averagesgemiddelden can be.
165
405927
2682
07:00
(LaughterGelach)
166
408633
1282
(Gelach)
07:01
OK, so the secondtweede questionvraag
that you guys should be askingvragen yourselvesuzelf
167
409939
3901
Ok, de volgende vraag
die jullie jezelf moeten stellen
om slechte cijfers te herkennen is:
07:05
to spotplek badslecht numbersgetallen is:
168
413864
1501
07:07
Can I see myselfmezelf in the datagegevens?
169
415389
1967
herken ik mezelf in de data?
07:09
This questionvraag is alsoook
about averagesgemiddelden in a way,
170
417380
2913
Deze vraag gaat eigenlijk
ook over gemiddelden,
want één van de redenen
waarom mensen zo gefrustreerd zijn
07:12
because partdeel of the reasonreden
why people are so frustratedgefrustreerd
171
420317
2605
over deze nationale statistieken,
07:14
with these nationalnationaal statisticsstatistieken,
172
422946
1495
07:16
is they don't really tell the storyverhaal
of who'swie is winningwinnend and who'swie is losingverliezen
173
424465
3273
is dat ze niet echt vertellen
wie er wint en wie er verliest
ten gevolge van overheidsbeleid.
07:19
from nationalnationaal policyhet beleid.
174
427762
1156
Het is begrijpelijk
dat mensen gefrustreerd zijn
07:20
It's easygemakkelijk to understandbegrijpen why people
are frustratedgefrustreerd with globalglobaal averagesgemiddelden
175
428942
3318
over globale gemiddelden
als ze niet op hun eigen
ervaringen gelijken.
07:24
when they don't matchbij elkaar passen up
with theirhun personalpersoonlijk experienceservaringen.
176
432284
2679
Ik wou laten zien hoe data
in verband staat met het dagelijks leven.
07:26
I wanted to showtonen people the way
datagegevens relatesbetrekking to theirhun everydayelke dag liveslevens.
177
434987
3263
Ik startte een adviescolumn 'Dear Mona',
07:30
I startedbegonnen this adviceadvies columnkolom
calledriep "DearLieve MonaMona,"
178
438274
2246
naar waar mensen schrijven
met vragen en zorgen
07:32
where people would writeschrijven to me
with questionsvragen and concernszorgen
179
440544
2726
en ik probeerde met data te antwoorden.
07:35
and I'd try to answerantwoord them with datagegevens.
180
443294
1784
Mensen vragen me van alles.
07:37
People askedgevraagd me anything.
181
445102
1200
Vragen zoals: "Is het normaal om
in een ander bed dan je vrouw te slapen?"
07:38
questionsvragen like, "Is it normalnormaal to sleepslaap
in a separatescheiden bedbed to my wifevrouw?"
182
446326
3261
"Hebben mensen spijt van hun tattoos?"
07:41
"Do people regretspijt theirhun tattoostatoeages?"
183
449611
1591
07:43
"What does it mean to diedood gaan
of naturalnatuurlijk causesoorzaken?"
184
451226
2164
"Wat betekent
een natuurlijke dood sterven?"
Al deze vragen zijn geweldig,
want ze doen je nadenken
07:45
All of these questionsvragen are great,
because they make you think
185
453414
2966
over nieuwe manieren
om cijfers te communiceren.
07:48
about waysmanieren to find
and communicatecommuniceren these numbersgetallen.
186
456404
2336
Als iemand je vraagt:
"Hoeveel plas is veel plas?"
07:50
If someoneiemand asksvraagt you,
"How much peeplas is a lot of peeplas?"
187
458764
2503
wat een echte vraag is die ik kreeg,
07:53
whichwelke is a questionvraag that I got askedgevraagd,
188
461291
2458
07:55
you really want to make sure
that the visualizationvisualisatie makesmerken sensezin
189
463773
2980
dan wil je zeker zijn
dat de datavoorstellingen
voor zoveel mogelijk mensen
begrijpelijk zijn.
07:58
to as manyveel people as possiblemogelijk.
190
466777
1747
Deze cijfers zijn niet onbeschikbaar.
08:00
These numbersgetallen aren'tzijn niet unavailableniet beschikbaar.
191
468548
1575
08:02
SometimesSoms they're just buriedbegraven
in the appendixaanhangsel of an academicacademische studystudie.
192
470147
3507
Soms zijn ze begraven in een bijlage
van een academisch onderzoek.
08:05
And they're certainlyzeker not inscrutableInscrutable;
193
473678
1839
En ze zijn zeker niet ondoorzichtig.
08:07
if you really wanted to testtest
these numbersgetallen on urinationurineren volumevolume,
194
475541
2975
Als je werkelijk
deze cijfers wil uittesten
kan je altijd een fles pakken
en het zelf uitproberen.
08:10
you could grabgrijpen a bottlefles
and try it for yourselfjezelf.
195
478540
2257
(Gelach)
08:12
(LaughterGelach)
196
480821
1008
Het is niet de bedoeling
08:13
The pointpunt of this isn't necessarilynodig
197
481853
1694
dat elke dataset specifiek
op jou betrekking heeft.
08:15
that everyelk singlesingle datagegevens setreeks
has to relatebetrekking hebben specificallyspecifiek to you.
198
483571
2877
Ik wou weten hoeveel vrouwen
in Frankrijk boetes kregen
08:18
I'm interestedgeïnteresseerd in how manyveel womenvrouw
were issueduitgegeven finesboetes in FranceFrankrijk
199
486472
2880
voor het dragen van een sluier, of niqab,
08:21
for wearingvervelend the facegezicht veilsluier, or the niqabniqab,
200
489376
1959
ook al woon ik niet in Frankrijk
of draag ik geen sluier.
08:23
even if I don't liveleven in FranceFrankrijk
or wearslijtage the facegezicht veilsluier.
201
491359
2618
Door je af te vragen hoe je in het plaatje
past, creëer je zoveel mogelijk context.
08:26
The pointpunt of askingvragen where you fitpassen in
is to get as much contextcontext as possiblemogelijk.
202
494001
3835
Het gaat om het uitzoomen
van dat ene datapunt,
08:29
So it's about zoomingzoomen out
from one datagegevens pointpunt,
203
497860
2191
08:32
like the unemploymentwerkloosheid ratetarief
is fivevijf percentprocent,
204
500075
2104
zoals de werkloosheidsgraad is 5%,
08:34
and seeingziend how it changesveranderingen over time,
205
502203
1757
en hoe het met de tijd verandert,
08:35
or seeingziend how it changesveranderingen
by educationalleerzaam statusstaat --
206
503984
2650
of hoe het verandert volgens opleiding --
08:38
this is why your parentsouders always
wanted you to go to collegecollege --
207
506658
3104
dit is waarom je ouders wilden
dat je naar de universiteit ging --
08:41
or seeingziend how it variesvarieert by gendergeslacht.
208
509786
2032
of hoe het verandert volgens geslacht.
08:43
NowadaysTegenwoordig, malemannetje unemploymentwerkloosheid ratetarief is higherhoger
209
511842
2127
Vandaag is de werkloosheid
bij mannen hoger dan bij vrouwen.
08:45
than the femalevrouw unemploymentwerkloosheid ratetarief.
210
513993
1700
08:47
Up untiltot the earlyvroeg '80s,
it was the other way around.
211
515717
2695
Tot de jaren 80 was dit omgekeerd.
Dit gaat over één van de grootste
veranderingen in samenleving in de VS
08:50
This is a storyverhaal of one
of the biggestgrootste changesveranderingen
212
518436
2117
08:52
that's happenedgebeurd in AmericanAmerikaanse societymaatschappij,
213
520577
1720
en het staat allemaal in deze grafiek
zodra je voorbij de gemiddelden kijkt.
08:54
and it's all there in that charttabel,
onceeen keer you look beyondvoorbij the averagesgemiddelden.
214
522321
3276
De assen zijn heel belangrijk:
08:57
The axesas are everything;
215
525621
1165
08:58
onceeen keer you changeverandering the scaleschaal,
you can changeverandering the storyverhaal.
216
526810
2669
als je de schaal verandert,
verander je het verhaal.
Oké, de derde en laatste vraag
waar je moet over nadenken
09:01
OK, so the thirdderde and finallaatste questionvraag
that I want you guys to think about
217
529503
3380
als je naar statistieken kijkt,
is de volgende:
09:04
when you're looking at statisticsstatistieken is:
218
532907
1819
hoe werden de gegevens verzameld?
09:06
How was the datagegevens collectedverzamelde?
219
534750
1873
Tot nu toe sprak ik enkel over
hoe data gecommuniceerd worden,
09:09
So farver, I've only talkedgesproken about the way
datagegevens is communicatedgecommuniceerd,
220
537667
2939
maar hoe ze worden
verzameld is even belangrijk.
09:12
but the way it's collectedverzamelde
mattersaangelegenheden just as much.
221
540630
2276
Ik weet dat dit moeilijk is,
09:14
I know this is toughtaai,
222
542930
1167
want methodes kunnen
nogal ondoorzichtig en saai zijn,
09:16
because methodologiesmethodologieën can be opaqueondoorzichtig
and actuallywerkelijk kindsoort of boringsaai,
223
544121
3081
maar er zijn enkele eenvoudige stappen
die je kan nemen om dit na te gaan.
09:19
but there are some simpleeenvoudig stepsstappen
you can take to checkcontroleren this.
224
547226
2873
09:22
I'll use one last examplevoorbeeld here.
225
550123
1839
Ik zal een laatste voorbeeld gebruiken.
Uit een peiling bleek dat 41%
van de moslims in de VS de jihad steunt,
09:24
One pollPoll foundgevonden that 41 percentprocent of MuslimsMoslims
in this countryland supportondersteuning jihadJihad,
226
552309
3887
09:28
whichwelke is obviouslyduidelijk prettymooi scaryeng,
227
556220
1525
wat behoorlijk beangstigend is,
09:29
and it was reportedgerapporteerd everywhereoveral in 2015.
228
557769
2642
en dit werd in 2015 overal bericht.
09:32
When I want to checkcontroleren a numberaantal like that,
229
560435
2615
Als ik zo'n cijfer wil nakijken dan begin
ik met de oorspronkelijke vragenlijst.
09:35
I'll startbegin off by findingbevinding
the originalorigineel questionnairevragenlijst.
230
563074
2501
09:37
It turnsbochten out that journalistsjournalisten
who reportedgerapporteerd on that statisticstatistisch
231
565599
2926
Blijkt dat de journalist
die over deze statistiek berichtte
09:40
ignoredbuiten beschouwing gelaten a questionvraag
lowerlager down on the surveyenquête
232
568549
2231
een volgende vraag
in het onderzoek negeerde
die vroeg hoe de ondervraagden
'jihad' omschrijven.
09:42
that askedgevraagd respondentsrespondenten
how they definedbepaald "jihadJihad."
233
570804
2346
09:45
And mostmeest of them definedbepaald it as,
234
573174
1981
En de meerderheid omschreef het als
09:47
"Muslims'Moslims personalpersoonlijk, peacefulvredig struggleworstelen
to be more religiousreligieus."
235
575179
3942
'De persoonlijke, vredevolle strijd
van moslims om religieuzer te zijn.'
09:51
Only 16 percentprocent definedbepaald it as,
"violentgewelddadig holyHeilige waroorlog againsttegen unbelieversongelovigen."
236
579145
4194
Slechts 16% omschreef het als:
'gewelddadige oorlog tegen ongelovigen'.
09:55
This is the really importantbelangrijk pointpunt:
237
583363
2430
Dit is belangrijk:
gebaseerd op die cijfers
is het goed mogelijk
09:57
basedgebaseerde on those numbersgetallen,
it's totallyhelemaal possiblemogelijk
238
585817
2155
dat niemand van diegenen
die dit als heilige oorlog beschrijven,
09:59
that no one in the surveyenquête
who definedbepaald it as violentgewelddadig holyHeilige waroorlog
239
587996
3105
ook zeiden dat ze die steunden;
10:03
alsoook said they supportondersteuning it.
240
591125
1332
misschien overlappen
deze groepen dus helemaal niet.
10:04
Those two groupsgroepen mightmacht not overlapoverlappen at all.
241
592481
2208
We moeten ons ook afvragen
hoe de enquête werd uitgevoerd.
10:07
It's alsoook worthwaard askingvragen
how the surveyenquête was carriedgedragen out.
242
595122
2637
Hier ging het om een open enquête,
10:09
This was something calledriep an opt-inopt-in pollPoll,
243
597783
1998
wat betekent dat iedereen hem
op het internet kon vinden en invullen.
10:11
whichwelke meansmiddelen anyoneiedereen could have foundgevonden it
on the internetinternet and completedvoltooid it.
244
599805
3402
Je kan zelfs onmogelijk weten
of deze mensen wel moslims zijn.
10:15
There's no way of knowingwetende
if those people even identifiedgeïdentificeerd as MuslimMoslim.
245
603231
3339
En tenslotte beantwoorden
600 mensen de enquête.
10:18
And finallyTenslotte, there were 600
respondentsrespondenten in that pollPoll.
246
606594
2612
Er zijn, volgens het Pew Research Center,
ongeveer drie miljoen moslims in dit land.
10:21
There are roughlyongeveer threedrie millionmiljoen
MuslimsMoslims in this countryland,
247
609230
2654
10:23
accordingvolgens to PewPew ResearchOnderzoek CenterCenter.
248
611908
1607
Dit wil zeggen dat de enquête ongeveer met
één op 5.000 moslims in dit land sprak.
10:25
That meansmiddelen the pollPoll spokespaak to roughlyongeveer
one in everyelk 5,000 MuslimsMoslims
249
613539
2993
10:28
in this countryland.
250
616556
1168
Dit is één van de redenen
10:29
This is one of the reasonsredenen
251
617748
1266
waarom overheidsstatistieken normaal
gezien beter zijn dan privé-statistieken.
10:31
why governmentregering statisticsstatistieken
are oftenvaak better than privateprivaat statisticsstatistieken.
252
619038
3607
Een enquête praat met een paar honderd,
misschien duizend mensen,
10:34
A pollPoll mightmacht speakspreken to a couplepaar
hundredhonderd people, maybe a thousandduizend,
253
622669
3035
10:37
or if you're L'OrealL ' Oréal, tryingproberen to sellverkopen
skinhuid carezorg productsproducten in 2005,
254
625728
3058
of als je L'Oreal bent
en huidverzorging wilt verkopen in 2005
dan praat je met 48 vrouwen
die beweren dat ze werken.
10:40
then you spokespaak to 48 womenvrouw
to claimvordering that they work.
255
628810
2417
(Gelach)
10:43
(LaughterGelach)
256
631251
1026
10:44
PrivatePrivé companiesbedrijven don't have a hugereusachtig
interestinteresseren in gettingkrijgen the numbersgetallen right,
257
632301
3556
Bedrijven hebben weinig interesse
om de cijfers juist te krijgen,
zij hebben enkel
de 'juiste' cijfers nodig.
10:47
they just need the right numbersgetallen.
258
635881
1755
10:49
GovernmentRegering statisticiansstatistici aren'tzijn niet like that.
259
637660
2020
Overheidsstatistici zijn anders.
Ze zijn, in theorie alleszins,
volledig onafhankelijk.
10:51
In theorytheorie, at leastminst,
they're totallyhelemaal impartialonpartijdige,
260
639704
2447
10:54
not leastminst because mostmeest of them do
theirhun jobsjobs regardlessachteloos of who'swie is in powermacht.
261
642175
3501
Vooral omdat de meesten hun werk doen
onafhankelijk van wie aan de macht is.
10:57
They're civilciviel servantspersoneelsleden.
262
645700
1162
Ze zijn ambtenaren.
10:58
And to do theirhun jobsjobs properlynaar behoren,
263
646886
1964
En om hun werk degelijk te kunnen doen,
praten ze niet slechts
met enkele honderden mensen.
11:00
they don't just speakspreken
to a couplepaar hundredhonderd people.
264
648874
2363
11:03
Those unemploymentwerkloosheid numbersgetallen
I keep on referencingverwijzen naar
265
651261
2318
De werkloosheidsgraad
waar ik steeds naar verwijs
komt van het Bureau
van Arbeidsstatistieken
11:05
come from the BureauBureau of LaborArbeid StatisticsStatistieken,
266
653603
2004
en om hun schattingen te maken,
11:07
and to make theirhun estimatesramingen,
267
655631
1335
11:08
they speakspreken to over 140,000
businessesondernemingen in this countryland.
268
656990
3489
spreken zij met meer
dan 140.000 bedrijven in dit land.
11:12
I get it, it's frustratingfrustrerend.
269
660503
1725
Ik weet het, het is frustrerend.
Als je een privé statistiek wil testen
11:14
If you want to testtest a statisticstatistisch
that comeskomt from a privateprivaat companybedrijf,
270
662252
3115
kan je samen met vrienden
gezichtscrème kopen en uittesten:
11:17
you can buykopen the facegezicht creamroom for you
and a bunchbos of friendsvrienden, testtest it out,
271
665391
3361
werkt het niet dan weet je
dat de cijfers verkeerd zijn.
11:20
if it doesn't work,
you can say the numbersgetallen were wrongfout.
272
668776
2591
Maar hoe doe je dat met
overheidsstatistieken?
11:23
But how do you questionvraag
governmentregering statisticsstatistieken?
273
671391
2146
Je moet simpelweg alles blijven nakijken.
11:25
You just keep checkingcontroleren everything.
274
673561
1630
Kom te weten hoe ze
hun gegevens verzamelden.
11:27
Find out how they collectedverzamelde the numbersgetallen.
275
675215
1913
Kom te weten of je alles
op de grafiek ziet wat je moet zien.
11:29
Find out if you're seeingziend everything
on the charttabel you need to see.
276
677152
3125
Maar geef cijfers niet gewoon op,
11:32
But don't give up on the numbersgetallen
altogetherover het geheel genomen, because if you do,
277
680301
2965
want als je dat doet,
dan moeten we politieke beslissingen
in het ongewisse nemen
11:35
we'llgoed be makingmaking publicopenbaar policyhet beleid
decisionsbeslissingen in the darkdonker,
278
683290
2439
met enkel privé-interesses
om ons te leiden.
11:37
usinggebruik makend van nothing but privateprivaat
interestsbelangen to guidegids us.
279
685753
2262
Dank je.
11:40
Thank you.
280
688039
1166
(Applaus)
11:41
(ApplauseApplaus)
281
689229
2461
Translated by Sofie Vandenberghe
Reviewed by Peter Van de Ven

▲Back to top

ABOUT THE SPEAKER
Mona Chalabi - Data journalist
Mona Chalabi tries to take the numb out of numbers. She's left with lots of "ers."

Why you should listen

After working for a humanitarian organisation, Mona Chalabi saw how important data was, but also how easily it could be used by people with their own specific agendas. Since then, her work for organizations like Transparency International and The Guardian has had one goal: to make sure as many people as possible can find and question the data they need to make informed decisions about their lives.

Chalabi is currently the Data Editor of the Guardian US, where she writes articles, produces documentaries and turns data into illustrations and animations. In 2016, her data illustrations were commended by the Royal Statistical Society.

More profile about the speaker
Mona Chalabi | Speaker | TED.com