Kritisk diskussion av populär utvärderingsmetod

Matchningsmetoder har blivit populära vid utvärdering av olika offentliga program. Detta hänger samman med att metoderna är lätta att förstå och använda. Särskilt populär är s k Propensity score matching. ”Propensity score” är sannolikheten att en individ deltar i ett program. Om denna sannolikhet är känd (eller kan skattas) och om övriga villkor för matchning är uppfyllda, så kan man i en analys av programeffekter kontrollera för propensity score och undvika de svåra selektionsproblem som är utvärderingsforskningens största utmaning.

Propensity score spelar också en viktig roll i andra utvärderingsmetoder. I IFAU-rapporten ”Using matching, instrumental variables and control functions to estimate economic choice models” diskuterar författarna, James Heckman och Salvador Navarro-Lozano (University of Chicago), vilka antaganden som berättigar användandet av propensity score inom ramen för olika vanliga utvärderingsmetoder.

Ett viktigt resultat är att de populära matchningsmetoderna är känsliga för vilken information utvärderaren har tillgång till. Under vissa omständigheter, och till skillnad från många andra metoder, kan tillgång till utökad information till och med ge ”sämre” resultat.