Metode & Forskningsdesign

Web versus papir: En sammenligning af kvalitet i surveydata

Sanne Lund Clement — 2015-01-26

Surveyforskningen står overfor en række udfordringer i form af eksempelvis faldende svarprocenter og øget skævhed i data. Dette har medført en stigende afprøvning af nye indsamlingsformer, hvor særligt de web-baserede surveys har vundet frem. I den videnskabelige litteratur er der dog en vis skepsis overfor dataindsamling online, da der argumenteres for, at kvaliteten af datamaterialet forringes, primært fordi respondenten på nettet ikke gør sig samme kognitive indsats for at besvare spørgsmålene, og derfor er mere tilbøjelig til ”satisficing”, end hvis de havde besvaret skemaet eksempelvis i et telefoninterview.

Denne artikel stiller imidlertid spørgsmålstegn ved, om eventuelle forskelle i datakvalitet på baggrund af indsamlingsmetode kan tilskrives brugen af nettet per se, da andre faktorer, som eksempelvis tilstedeværelsen af en interviewer i processen, ligeledes menes at kunne influere på de svar, som respondenterne giver. Vi har derfor foretaget et lille eksperimentelt studie, hvor eneste varierende faktor mellem to tilfældigt udvalgte grupper af studerende er brugen af indsamlingsmetoden. Resultaterne viser, at der ikke kan genfindes den såkaldte ”web mode effekt”, idet intet tyder på, at de respondenter, der har udfyldt den online udgave af spørgeskemaet, har større tendens til ”satisficing” end de respondenter, der har udfyldt skemaet i papirform.

Kompleks evaluering – tre metodiske læringspunkter fra en case

Ulf Hjelmar — 2016-06-29

Kompleks evaluering er en type af evaluering, der som genstandsfelt har sammensatte og bredspektrede indsatser, hvor det er vanskeligt på en entydig måde at sammenfatte, hvad der kommer ud af indsatserne – i artiklen betegnet som en evaluering af ”wicked problems”.

En central udfordring i denne type af evaluering er at finde troværdige indikatorer for indsat-sernes virkning. Artiklen tager denne udfordring op ved at se nærmere på en evaluering af en kompleks case, der drejer sig om opsøgende sociale og sundhedsmæssige indsatser over for socialt udsatte borgere, og som har forsøgt at opgøre virkningen af indsatsen ud fra en overve-jende surveybaseret tilgang.

På baggrund af evalueringen peges der på tre evalueringsmæssige læringspunkter i kompleks evaluering: behovet for et kompleksitetsreducerende evalueringsdesign, behovet for validerede måleinstrumenter og værdien af en kritisk dimension i denne type af evaluering.

Et billede siger mere end 1000 ord

Linda Ejlskov — 2016-06-29

Denne artikel demonstrerer, hvordan en analyse og formidling af resultater fra en multilevelanalyse med fordel kan suppleres med grafiske illustrationer.

Ved brug af data fra European Social Survey demonstreres det, hvordan man grafisk kan forenkle både fortolkning og formidling af ellers forholdsvist komplicerede resultater som eksempelvis Random Intercept-, Random Slope- og cross-level interaktionseffekter.

Demonstrationen foretages gennem en analyse af sammenhængen mellem individuel social kapital og jobtilfredshed på tværs af 23 europæiske lande. Det undersøges hertil, hvordan denne sammenhæng varierer alt efter de specifikke kulturelle forhold, der er til stede i de enkelte lande.