Känslighetsanalys av CIA-antagandet i observationsstudier

Varför är CIA-antagandet viktigt?

När man utvärderar effekter av program där deltagande inte är slumpmässigt brukar behandlade och icke-behandlade individer matchas med avseende på individkaraktäristika, t.ex. kön och tidigare utbildning, som tros påverka såväl behandlingsval som utfall. För att detta ska fungera behöver man göra ett s.k. CIA-antagande. Det betyder att det inte får finnas några fler störande variabler (än dem man matchat på) som påverkar både behandlingsval och utfall.

Om det efter matchning fortfarande finns icke-observerade egenskaper som systematiskt skiljer sig åt i behandlings- och kontrollgruppen (och dessa egenskaper påverkar både behandlingsval och utfall) så är CIA-antagandet inte uppfyllt. I sådana fall blir skattningen av behandlingseffekten snedvriden.

En standardiserad känslighetsanalys

CIA-antagandet kan inte testas. Rapporten föreslår därför en standardiserad känslighetsanalys av hur små avvikelser från antagandet påverkar slutsatserna. Metoden går ut på att föra in en ytterligare icke-observerad egenskap. Denna nya egenskap antas påverka både behandlingsval och utfall så att en viss systematisk skillnad mellan grupperna uppstår. Den skattning som görs med denna nya information jämförs sedan med den ursprungliga skattningen vilket ger en uppfattning om hur känsliga resultaten är.

Två tillämpningar

Metoden tillämpas på två frågeställningar. Den första frågeställningen är om val av högskola påverkar framtida inkomster. Tidigare studier visar ofta på en positiv inkomsteffekt av att ha studerat vid de traditionella universiteten i jämförelse med de nyare universiteten i Sverige. Känslighetsanalysen visar att detta resultat är känsligt men den övergripande slutsatsen framstår ändå som rimlig. Den andra tillämpningen kommer från en mycket känd studie som undersöker inkomsteffekten av en arbetsmarknadsutbildning i USA (Lalonde, 1986, American Economic Review). Skattningen har i detta fall en mycket låg känslighet för små avvikelser från CIA-antagandet.