god videnskab kræver gyldige foranstaltninger. Denne erklæring er næppe kontroversiel. Ikke overraskende hævder alle forfattere af en psykologisk foranstaltning, at deres foranstaltning er gyldig. Valideringsundersøgelser er dog dyre og vanskelige at offentliggøre i prestigefyldte tidsskrifter. Som et resultat har psykologisk videnskab en gyldighedskrise., Mange foranstaltninger anvendes i hundredvis af artikler uden klare definitioner af konstruktioner og uden kvantitative oplysninger om deres gyldighed (Schimmack, 2010).
den implicitte Associationstest (at) er ingen undtagelse. IAT blev indført i 1998 med stærke og meget reproducerbare beviser, at den gennemsnitlige holdning til objekter par (fx, blomster vs. edderkopper) kan måles med reaktionstider i en opgave (Greenwald et al., 1998)., Selvom titlen på artiklen lovede et mål for individuelle forskelle, var de vigtigste beviser i artiklen gennemsnitlige forskelle mellem grupper. Således gav den oprindelige artikel lidt bevis for, at IAT er et gyldigt mål for individuelle forskelle.
brugen af IAT som et mål for individuelle forskelle i holdninger kræver videnskabelig dokumentation for, at testresultater er knyttet til variation i holdninger., Det vigtigste bevis for gyldigheden af en test er pålidelighed, konvergent gyldighed, diskriminerende gyldighed og inkrementel forudsigelig gyldighed (Campbell & Fiske, 1959).
gyldigheden af IAT som et mål for holdninger skal undersøges fra sag til sag, fordi forbindelsen mellem foreninger og holdninger kan variere afhængigt af holdningsobjektet. For holdningsobjekter som popdrikke, koks vs. Pepsi, foreninger kan være stærkt relateret til holdninger., I virkeligheden, IAT har god forudsigende gyldighed for valg mellem to pop drikkevarer (Hofmann, Gawronski, Gschwendner, & Schmitt, 2005). Det mangler dog konvergent gyldighed, når det bruges til at måle selvværd (Bosson & Svane, & Pennebaker, 2000).
IAT er bedst kendt som et mål for fordomme, racefordomme eller holdninger fra hvide amerikanere til afroamerikanere. På den ene side hævder opfinderen af iat, Green .ald, at race IAT har forudsigelig gyldighed (Green .ald et al., 2009)., Andre tager spørgsmålstegn ved beviserne:” implicitte Associeringstestresultater tillader ikke forudsigelse af adfærd på individuelt niveau ” (Blanton et al., 2009, s. 567); “IAT giver lidt indsigt i, hvem der vil diskriminere hvem, og giver ikke mere indsigt end eksplicitte foranstaltninger af bias” (os .ald et al., 2013).ni år senere præsenterer Green .ald og kolleger en ny metaanalyse af forudsigelig gyldighed af IAT (Kurdi et al., 2018) baseret på 217 forskningsrapporter og en samlet prøvestørrelse på N = 36,071 deltagere. Resultaterne af denne meta-analyse er rapporteret abstrakt.,
Vi fandt betydelige implicitte– kriterium korrelationer (ICCs) og eksplicitte– kriterium korrelationer (ECCs), med unikke bidrag af implicit (beta = .14) og eksplicitte foranstaltninger (beta = .11) afsløret ved strukturel ligning modellering.
problemet med meta-analyser er, at de samler information med forskellige metoder, mål og kriterievariabler, og metaanalysen viste stor variation i forudsigelig validitet. Således giver overskriftsfindingen ikke oplysninger om den forudsigelige gyldighed af løbet IAT., Som bemærket af forfatterne, “statistisk set antyder den høje grad af heterogenitet, at ethvert enkelt punktestimat af det implicitte kriterium– forhold ville være vildledende” (s. 7). et andet problem med metaanalyse er, at det er svært at finde pålidelige moderatorvariabler, hvis originale undersøgelser har små prøver og stor prøveudtagningsfejl. Som et resultat kan en ikke-signifikant moderatoreffekt ikke fortolkes som bevis for, at resultaterne er homogene. En bedre måde at undersøge den forudsigelige gyldighed af race iat er således at begrænse meta-analysen til undersøgelser, der brugte race iat.,
et andet problem med små undersøgelser er, at de introducerer meget støj, fordi punktestimater er partisk ved prøveudtagningsfejl. Stanley, Jarrell, and Doucouliagos (2010) fremsatte det geniale forslag om at begrænse meta-analyse til top 10% af undersøgelserne med de største stikprøvestørrelser. Da disse undersøgelser har lille prøveudtagningsfejl til at begynde med, aggregering af dem vil producere estimater med endnu mindre prøveudtagningsfejl, og det er ikke nødvendigt at medtage mange små undersøgelser med høj heterogenitet., Et mindre antal undersøgelser gør det også lettere at evaluere kvaliteten af undersøgelser og undersøge kilder til heterogenitet på tværs af studier. Jeg brugte denne tilgang til at undersøge den forudsigelige gyldighed af løbet IAT ved hjælp af undersøgelserne inkluderet i Kurdi et al.s (2018) meta-analyse (data).
beskrivelse af dataene
datafilen indeholdt den variable gruppestemcat2, der kodede de grupper, der blev sammenlignet i iat. Kun undersøgelser klassificeret som gruppestemcat2 = = “afroamerikaner og afrikanere” blev valgt, hvilket efterlod 1328 poster (rækker)., Dernæst valgte jeg kun undersøgelser med en iat-kriterium korrelation, hvilket efterlod 1004 poster. Dernæst valgte jeg kun poster med en mindste prøvestørrelse på N = 100, hvilket efterlod 235 poster (mere end 10%).
de 235 poster var baseret på 21 undersøgelser, hvilket indikerer, at metaanalysen i gennemsnit kodede mere end 10 forskellige effekter for hver undersøgelse.
den mediane iat-kriterium korrelation i alle 235 undersøgelser var r = .070. Til sammenligning var medianen r for de 769 undersøgelser med n < 100 r = .044., Valg til undersøgelser med stort N reducerede således ikke effektstørrelsesestimatet.
da jeg først beregnede medianen for hver undersøgelse og derefter medianen på tværs af studier, opnåede jeg en lignende median korrelation af r = .065. Der var ingen signifikant korrelation mellem stikprøvestørrelse og median ICC-kriterium korrelation i de 21 undersøgelser, r = .12. Der er således ingen tegn på offentliggørelse bias.
jeg gennemgår nu de 21 undersøgelser i faldende rækkefølge af median iat-kriterium korrelation. Jeg vurderer kvaliteten af undersøgelserne med 1 til 5 stjerner, der spænder fra laveste til højeste kvalitet., Da nogle undersøgelser ikke var beregnet til at være valideringsundersøgelser, afspejler denne evaluering ikke kvaliteten af en undersøgelse i sig selv. Evalueringen er baseret på en undersøgelses evne til at validere IAT som et mål for racemæssig bias.
1. * Ma et al. (Forsøg 2), N = 303, r = .34
Ma et al. (2012) brugte flere iat ‘ er til at forudsige stemmeintentioner i det amerikanske præsidentvalg i 2012. Det er vigtigt, at undersøgelse 2 ikke inkluderede race iat, der blev brugt i undersøgelse 1 (#15, median r = .03). I stedet, race IAT blev ændret til at omfatte billeder af de to kandidater Obama og Romney., Selv om det er interessant, at en IAT, der kræver race klassifikationer af kandidater forudsagt stemmer hensigter, denne undersøgelse kan ikke bruges til at hævde, at den race IAT som en foranstaltning af racemæssige fordomme har forudsigende gyldighed, fordi den IAT foranstaltninger, der er specifikke holdninger til kandidater snarere end holdninger over for den Afrikanske Amerikanere i almindelighed.
2. *** Kno .les et al., N = 285, r=.26
denne undersøgelse brugte race IAT til at forudsige stemmeintentioner og godkendelse af Obamas sundhedsreformer., Det vigtigste resultat var, at race IAT var en betydelig forudsigelse af stemmeintentioner (Odds Ratio = .61; r = .20), og at dette forhold forblev signifikant efter at have inkluderet den moderne Racismeskala som forudsigelse (Odds Ratio = .67, effekt størrelse r = .15). Korrelationen ligner resultatet opnået i den næste undersøgelse med en større prøve.
3. ***** Green .ald et al. (2009), N = 1,057, r = .17
de mest afgørende resultater kommer fra Green .ald et al.s (2009) undersøgelse med den største stikprøvestørrelse af alle undersøgelser., I en stikprøve på n = 1,057 deltagere forudsagde race IAT stemmeintentioner i 2008-valget (Obama vs McCain), r = .17. I en model, der inkluderede politisk orientering som forudsigelse af stemmeintentioner, tilføjede kun eksplicitte holdningstiltag trinvis forudsigelig gyldighed, B = .10, SE = .03, T = 3.98, men IAT gjorde det ikke, b=.00, SE = .02, T = 0,18.
4. * Cooper et al. N = 178, r = .12
prøvestørrelsen i metaanalysen svarer ikke til prøvestørrelsen i den oprindelige undersøgelse., Selvom 269 patienter var involveret, blev race iat administreret til 40 primære klinikere. Således kan forudsigelig validitet kun vurderes på en lille prøve af N = 40 læger, der leverede uafhængige iat-scoringer. Tabel 3 viser syv afhængige variabler og viser to signifikante resultater (p=.02, p = .02) for sorte patienter.
5. * Biernat et al. (Undersøgelse 1), N = 136, r =.10
undersøgelse 1 omfattede race iat og donationer til en sort vs. andre studenterorganisationer som kriterievariablen. Det negative forhold var ikke signifikant (effektstørrelse r =.05)., Meta-analysen omfattede også den skiftende standardvariabel (effektstørrelse r =.14). Shifting standarder refererer til, i hvilket omfang deltagerne skiftede standarder i deres domme af sorte versus hvide mål’ akademiske evne. Hovedpointen i artiklen var, at skiftende standarder snarere end implicitte holdningstiltag forudsiger racemæssig bias i faktisk adfærd. “I tre undersøgelser var tendensen til at skifte standarder ukorreleret med andre fordomsforanstaltninger, men forudsagde reduceret tildeling af midler til en sort studentorganisation.,”Det ser således ud til at være diskutabelt at bruge skiftende standarder som et valideringskriterium for race IAT, fordi nøglekriterievariablen var donationerne, mens skiftende standarder var et konkurrerende indirekte mål for fordomme.
6. ** Zhang et al. (Forsøg 2), N = 196, r = .10
denne undersøgelse undersøgte tankeoversigter, efter at deltagerne så en forbrydelse begået af en sort lovovertræder På lov og orden. “På tværs af to programmer blev der ikke fundet nogen statistisk signifikante forhold mellem tankernes natur og scoringerne på iat, f(2, 85) = 2, 4, p < .,11 for program 1 og F(2, 84) = 1.98, p < .53 Til program 2.”Hovedbegrænsningen af denne undersøgelse er, at tankeoversigter ikke er en reel social opførsel. Da effektstørrelsen for denne undersøgelse er tæt på medianen, udelukker den ingen mærkbar effekt på det endelige resultat.
7. * Ashburn et al. N = 300, r = .09
titlen på denne artikel er “Race og den psykologiske sundhed af afroamerikanere.”Prøven består af 300 afroamerikanske deltagere., Selv om det er interessant at undersøge racemæssige holdninger af afroamerikanere, denne undersøgelse behandler ikke spørgsmålet om, hvorvidt race IAT er et gyldigt mål for fordomme mod afroamerikanere.
8. *** Eno et al. (Forsøg 1), N = 105, r = .09
Denne artikel undersøger svar på et filmsæt i Borgerrettighedsperioden; “husk titanerne.”Efter at have set filmen lavede deltagerne flere vurderinger om fortolkninger af begivenheder. Kun en begivenhed, der tilskriver Emmas handlinger til en ulykke, viste en signifikant sammenhæng med iat, r = .,20, Men tilskrivninger til racisme viste også en sammenhæng i samme retning, r =.10. For de andre begivenheder havde tilskrivninger den samme ikke-signifikante effektstørrelse, piger interesserer r =.12, piger race, r = .07; mursten racisme, r = -.10, Brick Black coach ‘ s handlinger, r= -.10.
9. *** Aberson & Haag, N = 153, r = .07
Abserson og Haag administrerede løbet IAT til 153 deltagere og stillede spørgsmål om mængde og kvalitet af kontakt med afroamerikanere. De fandt ikke-signifikante korrelationer med mængde, r = -.12 og kvalitet, r = -.,10, og en signifikant positiv korrelation med interaktionen, r = .17. Den positive interaktionseffekt antyder, at personer med lav kontakt, hvilket også indebærer kontakt med lav kvalitet, ikke adskiller sig fra personer med hyppig kontakt af høj kvalitet.
10. * Hagi .ara et al. N = 106, r = .07
denne undersøgelse er en anden undersøgelse af sorte patienter og ikke-Sort læge. Hovedbegrænsningen er, at der kun var 14 læger, og kun 2 var hvide.
11. **** Bar-Anan & Nosek, N = 397, r = .,06
denne undersøgelse anvendte kontakt som valideringskriterium. Løbet iat viste en sammenhæng mellem r = -.14 med gruppekontakt. , N i området fra 492-647. Den korte IAT viste praktisk talt det samme forhold, r = -.13. Tillægget rapporterer, at kontakten var stærkere korreleret med de eksplicitte foranstaltninger; termometer r = .27, præference r = .31. Ved hjælp af structural equation modeling, som anbefalet af Greenwald og kolleger, jeg fandt ingen beviser for, at IAT har unikke forudsigende gyldighed i forudsigelsen af kontakt, når eksplicitte foranstaltninger blev inkluderet som prædiktorer, b = .03, SE = .,07 , T = 0,37.
12. *** Aberson & Gaffney, N = 386, median r = .05
denne undersøgelse relaterede race IAT til målinger af positiv og negativ kontakt, r = .10, r = -.01, henholdsvis. Korrelationer med en eksplicit foranstaltning var betydeligt stærkere, r = .38, r = -.35, henholdsvis. Disse resultater afspejler resultaterne præsenteret ovenfor.
13. * Orey et al. N = 386, median r = .04
denne undersøgelse undersøgte racemæssige holdninger blandt sorte respondenter., Selvom dette er et interessant spørgsmål, dataene kan ikke bruges til at undersøge den forudsigelige gyldighed af race IAT som et mål for fordomme.
14. * Krieger et al. N = 708, median r = .04
denne undersøgelse brugte race iat med 442 sorte deltagere og kriteriemål for opfattet diskrimination og sundhed. Selvom dette er et værdifuldt forskningsemne, kan resultaterne ikke bruges til at evaluere gyldigheden af race IAT som et mål for fordomme.
15. *** Ma et al. (Forsøg 1), N = 335, median r = .,03
denne undersøgelse brugte race IAT til at forudsige vælgerens intentioner i præsidentvalget i 2012. Undersøgelsen fandt ingen signifikant sammenhæng. “Men hverken Kategori-niveau foranstaltninger var relateret til hensigt at stemme for Obama (rs..06, ps ≥ .26)” (S. 31). Meta-analysen registrerede en korrelation af r = .045, baseret på e-mail-korrespondance med forfatterne. Det er ikke klart, hvorfor race IAT ikke ville forudsige stemmeintentioner i 2012, da det forudsagde stemmeintentioner i 2008., En mulighed er, at Obama nu blev betragtet som et individ snarere end som medlem af en bestemt gruppe, så generelle holdninger til afroamerikanere ikke længere påvirkede stemmeintentioner. Uanset hvad årsagen er, giver denne undersøgelse ikke bevis for den forudsigelige gyldighed af race IAT.
16. **** Oliver et al. N = 105, median r = .02
denne undersøgelse var på online-undersøgelse af 543 familie-og internmedicinske læger. De afsluttede løbet IAT og gav behandlingsanbefalinger til en hypotetisk sag. Race af patienten blev eksperimentelt manipuleret., Abstrakt siger, at “læger havde eksplicitte og implicitte racemæssige forstyrrelser, men disse forstyrrelser forudsagde ikke
behandlingsanbefalinger” (s. 177). Prøvestørrelsen i meta-analysen er mindre, fordi den samlede prøve blev opdelt i mindre undergrupper.
17. * Nosek & Hansen, N = 207, median r = .01
denne undersøgelse omfattede ikke et klart valideringskriterium. Målet var at undersøge forholdet mellem race iat og kulturel viden om stereoetyper., “I syv undersøgelser (158 prøver, n = 107.709) var IAT pålideligt og variabelt relateret til eksplicitte holdninger, og eksplicitte holdninger tegnede sig for forholdet mellem iat og kulturel viden.”De kulturelle vidensforanstaltninger blev brugt som kriterievariabler. En positiv relation, r = .10, blev opnået for varen ” hvis det blev valgt, hvem ville de fleste arbejdsgivere vælge at ansætte, en sort amerikaner eller en hvid amerikaner? (1 bestemt hvid til 7 bestemt sort).”En negativ relation, r = -.,09, blev opnået for varen “Hvem er mere tilbøjelig til at være et mål for forskelsbehandling, en sort amerikaner eller en hvid amerikaner? (1 bestemt hvid til 7 bestemt sort).”
18. * Plant et al. N = 229, median r = .00
Denne artikel undersøgte stemmeintentioner i en stikprøve på 229 studerende. Resultaterne er ikke rapporteret i artiklen. Meta-analysen rapporterede en positiv r = .04 og en negativ r = -.04 for to separate poster med forskellige eksplicitte foranstaltninger, som skal være en kodningsfejl., Da stemmeadfærd er blevet undersøgt i større og mere repræsentative prøver (#3, #15), kan disse resultater ignoreres.
19. * Krieger et al. (2011), N = 503, r =.00
denne undersøgelse rekrutterede 504 afroamerikanere og 501 hvide amerikanere. Alle deltagere afsluttede løbet IAT. Undersøgelsen omfattede imidlertid ikke klare valideringskriterier. Meta-analysen brugte selvrapporterede erfaringer med diskrimination som valideringskriterium. Det vigtige spørgsmål er imidlertid, om race IAT forudsiger adfærd hos mennesker, der diskriminerer, ikke oplevelsen af ofre for forskelsbehandling.,
20. * Fiedoro .ic,, N = 257, r = -.01
denne undersøgelse er en afhandling, og valideringskriteriet var religiøs fundamentalisme.
21. *Heider & Skowronski, N = 140, r = -.02
Denne undersøgelse adskilte måling af fordomme, med race IAT og måling af kriteriet variabler ved flere uger. Kriteriet var samarbejdsadfærd i et fangedilemma-spil. Resultaterne viste, at ” både iat (B = -.21, t = -2, 51, p=.013) og den Pro-sorte subscore (B = .17, T = 2.10, p = .,037) var betydelige forudsigere for mere samarbejde med de sorte konfødererede. Disse resultater var imidlertid falske og er blevet korrigeret (se Carlsson et al., 2018, for en detaljeret diskussion).
Heider, J. D., & Skowronski, J. J. (2011). Addendum to Heider and sko .ronski (2007): forbedring af den forudsigelige gyldighed af den implicitte Associationstest., North American Journal of Psychology, 13, 17-20
Diskussion
sammenfattende viser en detaljeret undersøgelse af race iat-undersøgelserne inkluderet i metaanalysen betydelig heterogenitet i kvaliteten af undersøgelserne og deres evne til at undersøge den forudsigelige gyldighed af race iat. Den bedste undersøgelse er Green .ald et al.’s (2009) undersøgelse med en stor prøve og afstemning i Obama vs McCain race som kriterium variabel. En anden afstemningsundersøgelse undlod imidlertid at gentage disse fund i 2012., Den næstbedste undersøgelse var BarAnan og Noseks undersøgelse med intergroup-kontakt som et valideringskriterium, men det viste ikke trinvis forudsigelig gyldighed af IAT.
undersøgelser med læger viser ingen klare beviser for racemæssig bias. Dette kan skyldes lægernes professionalisme, og resultaterne bør ikke generaliseres til den generelle befolkning. De resterende undersøgelser blev betragtet som uegnede til at undersøge forudsigelig validitet. For eksempel brugte nogle undersøgelser med afroamerikanske deltagere ikke IAT til at måle fordomme.,
baseret på dette begrænsede bevis er det umuligt at drage stærke konklusioner om den forudsigelige gyldighed af løbet IAT. Min vurdering af de beviser, der er temmelig konsekvent med forfatterne i den meta-analyse, der viste, at “ud af 2,240 ICCs inkluderet i denne metaanalysis, var der kun 24 effekt størrelser fra 13 undersøgelser, som (a) havde forholdet mellem implicit kognition og adfærd som deres primære fokus” (s. 13)., dette bekræfter min observation i introduktionen, at psykologisk videnskab har en valideringskrise, fordi forskere sjældent udfører valideringsundersøgelser. På trods af alle bekymringer om replikabilitet er manglen på replikationsundersøgelser faktisk meget mere talrige end valideringsundersøgelser. Konsekvenserne af valideringskrisen er, at psykologer rutinemæssigt fremsætter teoretiske påstande baseret på foranstaltninger med ukendt gyldighed. Som vist her gælder dette også for iat., På nuværende tidspunkt er det umuligt at fremsætte bevisbaserede påstande om gyldigheden af IAT, fordi det ikke er kendt, hvad IAT måler, og hvor godt det måler, hvad det måler.
Teoretisk Forvirring om Implicitte Foranstaltninger
Den manglende teoretiske forståelse af IAT er tydeligt i Greenwald og Banaji s (2017) de seneste artikel, hvor de viser, at “implicit kognition påvirkninger eksplicitte erkendelse, som igen drev adfærd” (Kurdi et al., s. 13)., Denne model indebærer, at implicitte foranstaltninger som IAT ikke har et direkte link til adfærd, fordi bevidste processer i sidste ende bestemmer handlinger. Denne spekulative model er illustreret med Bar-Anan og Noseks (#11) data, der ikke viste nogen inkrementel forudsigelig gyldighed ved kontakt. Modellen kan omdannes til en årsagskæde ved at ændre den bidiretionelle vej til et antaget årsagsforhold mellem implicitte og eksplicitte holdninger.,
det er Dog også muligt at ændre modellen til en enkelt faktor model, der mener, unikke varians i implicitte og eksplicitte foranstaltninger, som en simpel metode varians.
Derfor, at eventuelle krav om implicit bias og eksplicitte bias er for tidligt, fordi de eksisterende data er i overensstemmelse med forskellige teoretiske modeller., At fremsætte videnskabelige påstande om implicitte former for racemæssig bias, det ville være nødvendigt at indhente data, der kan skelne empirisk mellem enkeltkonstruktion og dobbeltkonstruktionsmodeller.
konklusion
løbet IAT er 20 år gammel. Det er blevet brugt i hundredvis af artikler til at gøre empiriske påstande om fordomme. Forvirringen mellem foranstaltninger og konstruktioner har skabt en offentlig diskurs om implicit racemæssig bias, der kan forekomme uden for bevidstheden. Denne diskurs fjernes imidlertid fra de empiriske fakta., Det vigtigste fund af den nylige metaanalyse er, at en omhyggelig søgning i litteraturen kun afslørede en håndfuld seriøse valideringsundersøgelser, og at resultaterne af disse undersøgelser i bedste fald er suggestive. Selv hvis fremtidige undersøgelser ville give mere afgørende bevis for trinvis forudsigelig validitet, ville denne konstatering være utilstrækkelig til at hævde, at IAT er et gyldigt mål for implicit bias. IAT kunne have trinvis forudsigelig gyldighed, selvom det kun var et komplementært mål for bevidst tilgængelig fordom, der ikke deler metodevarians med eksplicitte foranstaltninger., En multi-metode tilgang er nødvendig for at undersøge konstruktionen gyldighed af IAT som et mål for implicit race bias. Sådanne beviser eksisterer simpelthen ikke. Green .ald og kolleger havde 20 år og rigelig finansiering til at gennemføre sådanne valideringsundersøgelser, men de undlod at gøre det. I modsætning til deres artikler konsekvent forvirre foranstaltninger og konstruktioner og give indtryk af, at IAT foranstaltninger, der er ubevidste processer, der er skjult fra introspektion (“bevidst oplevelse giver kun et lille vindue i, hvordan sindet virker”, “klik her for at opdage dine skjulte tanker”).,
Greenwald og Banaji er godt klar over, at deres krav i sagen. “Forskning om implicit social kognition har været vidne til højere opmærksomhedsniveauer både fra offentligheden og fra statslige og kommercielle enheder, hvilket gør regelmæssig rapportering af det, der er kendt, til et ekstra ansvar” (Kurdi et al., 2018, s. 3). Jeg er enig. Jeg tror dog ikke, at deres meta-analyse opfylder dette løfte., En objektiv vurdering af beviserne viser ingen overbevisende beviser for, at race IAT er et gyldigt mål for implicit racemæssig bias; og uden et gyldigt mål for implicit racemæssig bias er det umuligt at afgive videnskabelige udsagn om implicit racemæssig bias. Jeg tror, at offentligheden fortjener at vide dette. Desværre er der ikke behov for videnskabelig dokumentation for, at fordomme og diskrimination stadig eksisterer., Ideelt, psykologer vil bruge mere indsats i at udvikle gyldige foranstaltninger af racisme, der kan give troværdige oplysninger om variation på tværs af individer, geografiske regioner, grupper, og tid. Mange mennesker tror, at psykologer allerede gør det, men denne gennemgang af litteraturen viser, at dette ikke er tilfældet. Det er på høje tid at gøre, hvad offentligheden forventer af os.