9
Randomiserte kontrollerte studier et nyttig redskap i evalueringer? Evalueringskonferansen 2013 Evelyn Dyb Norsk institutt for by- og regionforskning

Evalueringskonferansen 2013: Evelyn Dyb

Embed Size (px)

DESCRIPTION

Evelyn Dyb 19.09.13: Randomiserte kontrollerte studier – et nyttig redskap i evalueringer?

Citation preview

Page 1: Evalueringskonferansen 2013: Evelyn Dyb

Randomiserte kontrollerte

studier – et nyttig redskap i

evalueringer?

Evalueringskonferansen 2013

Evelyn Dyb

Norsk institutt for by- og regionforskning

Page 2: Evalueringskonferansen 2013: Evelyn Dyb

Hva er RCT? Randomised controlled trials

• Gullstandarden i (naturvitenskaplig/

medisinsk) forskning

• Evidensbasert

• Sammenligne et inngrep, et

medikament, tiltak med et annet eller

ingen inngrep

• Kvantitative metoder – måle resultatene

• Forsøk over en viss tid

Page 3: Evalueringskonferansen 2013: Evelyn Dyb

Basiselementene i RCT

• Forskningsdesign

• Utvalg

• Blinding

• Datainnsamling

• Frafall

• Analyse

Page 4: Evalueringskonferansen 2013: Evelyn Dyb

Evaluering av tiltak, prosjekt,

programmer o.l. for utsatte grupper

• Hva virker?

• Er det tiltaket, prosjektet, programmet?

• Eller at noe blir gjort ut over et

minimum?

• Hawthorn-effekten?

• Prislappen for et tiltak

Page 5: Evalueringskonferansen 2013: Evelyn Dyb

RCT og utsatte grupper

• Vise at noe virker ved anerkjente

forskningsmetoder – kan ha stor

gjennomslagskraft

• Eksempel: Housing First – tiltak for

bostedsløse med rusavhengighet/psykiske

lidelser (Tsemberis et al 2004, Stefancic & Tsemberis 2007)

• Sammenligne ulike tilnærminger – modeller

og tiltak for etablering av hjemløse – fant

svært lite som kunne sammenlignes (Benjaminsen & Dyb x)

Page 6: Evalueringskonferansen 2013: Evelyn Dyb

Kritikk mot RCT i

samfunnsvitenskap • Uetisk – bryter med god forskningsetikk:

• La noen få sukkerpiller – eller fortsette å bo

på hospits mens de er med i en undersøkelse

• Kvasieksperiment – eksperimentelt

forskningsdesign

• I hvor stor utstrekning kan virkeligheten

”holdes konstant”?

• Medisinske/naturvit. forskningsidealer –

premiss i samfunnsforskning?

Page 7: Evalueringskonferansen 2013: Evelyn Dyb
Page 8: Evalueringskonferansen 2013: Evelyn Dyb

Omgå det etiske

– fiktive forsøkspersoner • Kostnader og innsparinger ved boligsosialt

arbeid (Barlindhaug, Johannessen, Dyb 2011)

• En mulighet – fulgt noen som får aktiv innsats

og andre som får ”det vanlige” eller minimum

• Konstruerte klienthistorier med to forløp

- lovpålagte tjenester og lite inngrep

- aktiv innsats mot kvalifisering, bolig, tjenester

• Regnestykke – fanger ikke hva klientene ”vinner”

eller ”taper” personlig

Page 9: Evalueringskonferansen 2013: Evelyn Dyb

Systematikk – hva virker

• Følgeevaluering av et nasjonalt prosjekt mot

bostedsløshet

- et forsøksprosjekt over fire år

- ikke brukerundersøkelse

- vekten på organisatoriske elementer

• Evaluering av nasjonal strategi mot

bostedsløshet