Tag-arkiv: evidens

Post hoc ergo propter hoc

Dagens talemåde på latin betyder ”efter dette, derfor på grund af det.” Den udtrykker en meget intuitiv måde at tænke på årsagssammenhænge: Hvis noget kommer før noget andet, må det første være årsagen til det andet. Sex kommer før graviditet, alkohol kommer før fuldskab og freden kommer efter krigen. Sådan tænker mange mennesker, og det er i mange tilfælde helt korrekt. Der er dog tale om en klassisk misforståelse i etableringen af evidens, hvis man tror at post hoc ergo propter hoc altid gælder.

Lad mig tage et standardeksempel fra undervisning: Et billede af en bebumset 15-årig dreng, en lovprisning af en ny bumsecreme, og et billede af den samme 16-årige dreng uden bumser. Forsvandt bumserne på grund af bumsecremen? Svaret er nej, da reduktionen af bumser i stedet skyldes en anden udvikling der falder sammen med brugen af bumsecreme – naturlige hormonændringer hos teenagere. Økonomer bruger derfor ofte de nedsættende begreber bumsecreme- eller shampooevalueringer om de typer analyser, der begår fejltagelsen.

Det præcist samme gælder politiske indgreb, hvor politikere efterfølgende tager æren for at have opnået dette og hint. Hvis man for eksempel forestiller sig et samfundsproblem, der kan være af et omfang mellem 0 og 150, omfanget er på 100 før et politisk indgreb, og på 80 efter indgrebet, vil mange nok konkludere, at indgrebet virkede fordi problemet er blevet mindre efter indgrebet. Det vil til enhver tid også være de ’ansvarlige’ politikeres påstand.

Men hvad hvis problemets omfang blev reduceret med 10 i ugerne op til indgrebet og med 10 i ugerne efter – skal man så også konkludere, at indgrebet virkede? Hvad hvis problemet blev reduceret med 10 i ugerne efter indgrebet, men lignende lande også oplevede en tilsvarende reduktion uden at have ført nogen politik mod det? Hvad hvis vi havde erfaring for, at denne type problem forsvinder af sig selv og måske hurtigst uden politisk indblanding – som f.eks. udsving i landbrugets priser og indtjening?

Svaret er, at man altid skal være skeptisk når en påstand om effekt ikke er ledsaget af nationaløkonomers yndlingsspørgsmål: Sammenlignet med hvad? For at kunne hævde noget om effekt, må man sammenligne med noget og sammenligning må være direkte relevant. Det bliver således ofte til at spørgsmål om at etablere en korrekt ’counterfactual’: Hvad ville der være sket med dette land / denne virksomhed /disse borgere på dette bestemte tidspunkt, hvis man ikke havde foretaget det politiske indgreb?

Jo større problemerne er, og jo mere et politisk indgreb sælges som enten ’visionært’ eller ’uundgåeligt’, jo mere bør man holde fast i at stille krav om evidens. Ord som visionær, indlysende nødvendig og uundgåelig dækker forbløffende ofte over, at politikerne der foreslår politikken ingen evidens har, og endda i mange tilfælde at den tilgængelige evidens direkte modsiger visionen og dens effekt.

Man kan høre politikernes påstande, der ofte viderebringes ukritisk af medierne, man kan selv mene, at indgrebet burde virke, og man kan håbe på at ’this time is different’. Men man bliver nødt til at holde fast i, at intet af det er evidens. Uden en korrekt sammenligning eller en overbevisende counterfactual er det bare løse påstande som ingen intelligent borger bør tro på.