Informationsbrev om forskningsmetodik


 
Utges av avdelningen för allmänmedicin vid Samhällsmedicinska institutionen
Sahlgrenska akademien, Göteborgs Universitet.

Antal prenumeranter: 182 st

Tanken är att detta infobrev skall komma ut en ungefär en gång i kvartalet. Senaste infobrevet skickades ut 2001-11-01.

Innehåll i detta brev:
1) VALIDITET OCH RELIABILITET
3) KURSER I REFERENSHANTERING
4) KURSER I FORSKNINGSMETODIK
5) OM WEBBPLATSEN
6) OM INFOBREVET



1) VALIDITET OCH RELIABILITET
Kvantitativa och kvalitativa forskningsmetoder använder olika datainsamlingstekniker för att få fram sina resultat. För alla datainsamlingstekniker vill man försöka få en uppfattning om hur väl de mäter det man vill mäta. Man använder då begreppen validitet och reliabilitet för att beskriva hur bra vår datainsamling/test har fungerat. God validitet och reliabilitet är en förutsättning för att våra resultat skall kunna generaliseras till att gälla även andra än de som är undersökta.
    Begreppen validitet och reliabilitet används ibland lite olika i litteraturen. Det finns vissa skillnader (men också likheter) i hur begreppen används inom forskning med kvantitativ respektive kvalitativ ansats. I en studie med kvantitativ ansats har man i regel före datainsamlingen påbörjas valt en datainsamlingsmetod med känd och acceptabel validiteten och reliabiliteten för det syfte man vill nå. I en studie med kvalitativ ansats arbetar man kontinuerligt med validiteten och reliabiliteten under hela projektet.
    Nedanstående sammanställning gör inte anspråk på att vara det enda sättet att bringa ordning bland begreppen.

Valididet och reliabilitet
Validitet avser att jag mäter det som är relevant i sammanhanget medan reliabilitet avser att jag mäter på ett tillförlitligt sätt. Man bör alltid sträva efter hög validitet och reliabilitet.
    Validitet handlar om att använda rätt sak vid rätt tillfälle. För att enkelt förstå begreppet validitet kan vi jämföra med exempelvis kreditkort eller busskort. De är giltiga i vissa situationer men inte i andra. Man kan använda busskortet på en buss men inte i en taxi. Ibland finns det t.o.m. ett datum då giltigheten upphör. Inom forskning handlar validitet om att kunna ange i vilken situation och för vilken population resultaten är giltiga.
    Reliabilitet handlar om pålitlighet. Kan jag lita på en reparatör som lagar min bil? Vad kan hända om bilreparatören inte är pålitlig? Vilka beslut kan fattas om de baseras på mätningar som man inte kan lita på?
    Antag att jag vill mäta graden av övervikt hos människor. Att då mäta fotstorlek hos varje individ gör mig sannolikt inte klokare. Det hjälper inte att hävda att jag gjorde mina mätningar mycket noggrant. Hög reliabilitet är alltså ingen garanti för att vi får hög validitet. Antag att vi istället hade mätt längd och vikt för att räkna ut body mass index (BMI). Då mäter vi något som är mer relevant i sammanhanget än skostorlek. Antag vidare att vi gör vår mätning genom att hastigt titta på individen och sedan skatta längd och vikt. Vår mätning görs då med låg tillförlitlighet (låg reliabilitet). Även om vi då mätte rätt sak så blev den så dåligt mätt att vi inte fick ett bra mått på övervikt. Låg reliabilitet medför alltså alltid låg validitet. Följande två regler är bra att komma ihåg:
* Hög reliabilitet garanterar inte hög validitet.
* Hög validitet förutsätter hög reliabilitet.

Validitet inom forskning med kvantitativ ansats
Vill vi mäta kroppsvikt är det inte så svårt att veta när det vi mäter ger ett mått på det vi vill mäta. Om vi istället vill mäta trivsel, intelligens, kunskaper, uppfattningar eller upplevelser blir det svårare. Begreppet validitet används lite olika beroende på om studien har kvantitativ eller kvalitativ ansats. Nedan beskrivs de vanligaste begreppen för validitet som används i studier med kvantitativ inriktning (några kommentarer om kvalitativa studier finns inom parantes).

  1. Först måste vi bestämma om vår datainsamlingsteknik ger oss information om det fenomen som intresserar oss. Jämför med exemplet om övervikt och fotstorlek. Enklast sker denna bedömning av "innehållsvaliditeten" (=face validity) genom att be några utomstående, väl insatta i problematiken, att uttala sig. Detta görs med fördel i kvantitativa studier (kan även göras i kvalitativa studier).
  2. För det andra bör vi om möjligt säkerställa den samtidiga validiteten (=korrespondensvaliditet =kriterievaliditet =criterion validity), det vill säga att det resultat vi får fram stämmer överens med resultatet från undersökningar gjorda av andra eller samtidiga mätningar med en annan metod/teknik. I studier med kvantitativ inriktning använder man ofta mått som kappa, sensitivitet, specificitet, likelihood ratio och prediktiva värden. (Inom studier med kvalitativ inriktning är det inte möjligt att bestämma den samtidiga validiteten).
  3. För det tredje vill vi se om relaterade begrepp stämmer överens med våra mätningar. Detta kallas "construct validity". Antag att vi undersöker förekomsten av blodbrist hos kvinnor. Samtidigt som vi tar vårt blodprov får de besvara en enkät där de bland annat får ange sin upplevda grad av energi. Om vi såg att individer med lågt blodvärde angav upplevelse av hög energi och tvärtom talar det för att, antingen så fungerar inte vår apparat för att mäta blodvärde, eller, så mäter inte vår fråga upplevelsen av energi. (Construct validity är sällan tillämpbart i studier med kvalitativ inriktning).
  4. För det fjärde kan vi tala om kommunikativ validitet. Forskarens förmåga att kommunicera sin vandring under forskningsprocessen påverkar kunskapens giltighet. Kommunikativ validitet innebär i en kvantitativ studie att ha en fyllig metodbeskrivning och bortfallsanalys. (Detta finns även i kvalitativa studier, se nedan).
  5. För det femte kan man tala om en pragmatisk validitet. Är den kunskap man kommer fram till användbar? Utan användbarhet är kunskapen begränsad. Detta är en känslig punkt som kan misstolkas som att grundforskning är fel. Så är det inte. Även inom grundforskning är det dock angeläget att kunskapen förr eller senare på något sätt blir användbar. Det är alltså viktigt att man i redovisningen av ett projekt försöker peka på betydelsen av de resultat som har kommit fram.

Reliabilitet inom forskning med kvantitativ ansats
Med reliabilitet menar vi att den kunskap som kommer fram är framtagen på ett tillförlitligt sätt, att det inte finns okontrollerade tillfälliga fel som grumlar kunskapsutvecklingen. Inom kvantitativ forskning är reliabilitet lika med reproducerbarhet, något som ofta kan skattas och ges ett siffermått. För att utreda hur väl mätningen i en kvantitativ studie kan reproduceras kan man diskutera reliabiliteten från tre olika synvinklar:

  1. Är mätningen fri från bias av personen som mäter? Detta kallas inter-rater reliability (=inter-rater agreement) och kan testas genom att låta flera personer mäta och sedan jämföra hur de olika personernas mätningar stämmer överens.
  2. Påverkas mätningen av tiden. Om samma person gör flera mätningar, hur väl stämmer de överens? Detta kallas test-retest reliability.
  3. Finns det en samstämmighet i utfallet mellan olika delar i en enkät som tar upp samma fenomen? Detta kallas internal consistency reliability och kan skattas med Chronbach's alpha.

Inter-rater reliability, test-retest reliability och internal consistency reliability är begrepp som bara används i studier med kvalitativ inriktning. (Information om reliabilitet i kvalitativa studier ses nedan.)

Validitet & reliabilitet vid kvalitativ ansats
Validitet och reliabilitet måste värderas på ett delvis annorlunda sätt i studier med kvalitativ inriktning jämfört med studier med kvantitativ inriktning. Inom kvalitativ forskning kan man inte skatta tillförlitligheten med siffror.
    Validitet och reliabilitet i studier med kvalitativ inriktning handlar om att kunna beskriva att man har samlat in och bearbetat data på ett systematiskt och hederligt sätt. I den slutliga rapporten beskriver man även förutsättningarna inför projektet och hur resultaten under processen har vuxit fram. Man använder andra, delvis överlappande, begrepp.
    Nedan följer ett försök att ge en översikt över dessa begrepp. Översikten gör inte anspråk på att vara det enda sättet att presentera hur begreppen förhåller sig till varandra. Inte heller gör översikten anspråk på att vara fullständig.

I. Inre (intern) validitet [=trovärdighet =credibility]
  *

Kommunikativ validitet
Forskarens förmåga att kommunicera hur forskningsprocessen påverkar kunskapens giltighet. Den kommunikativa validiteten består av:

- Beskrivning av förförståelse
Författaren beskriver sin egen förförståelse (förförståelse=fördomar). Vilken bakgrund, utbildning och egna erfarenheter författaren har.
    - Beskrivning av datainsamling
Hur datainsamlingen gjorts måste beskrivas i detalj. Om datainsamlingen har gjorts över en längre tid kan det ibland öka trovärdigheten eftersom erfarenheter från den första delen av datainsamlingen hunnit förbättra datainsamlingen mot slutet.
    - Beskrivning av urval
Hur deltagarna valts ut måste beskrivas detaljerat.
    - Beskrivning av analysprocessen
En detaljerad beskrivning av vad som hänt under analysprocessen. Hur gjorde man och vilka beslut togs. Vad visar sig direkt i materialet och vad är tolkningar?
  *

Deltagarkontroll
Om informanterna (de som lämnar information, exempelvis personer som blir intervjuade) själva kan rätta felaktiga uppfattningar och missförstånd kan det ibland vara positivt. Om detta görs redan under en intervju kallas det dialogisk validering (=klarifiering =clarification). Ett annat alternativ är att den som intervjuats får läsa en utskrift av hela intervjun för att korrigera missuppfattningar och göra förtydliganden.

  *

Triangulering
Innebär att man ser på problemet ur flera synvinklar. Exempelvis kan man intervjua personer med olika relation till problemet (källtriangulering)
. Olika forskare med olika yrkesperspektiv kan delta i datainsamling (observatörstriangulering). Under analysfasen kan man analysera materialet med olika paradigm (teoritriangulering). Exempel på det sistnämnda kan vara att först analysera materialet utifrån ett systemteoretiskt perspektiv och sedan att analysera samma material från ett livsvärldsperspektiv.

II. Yttre (extern) validitet [=överförbarhet /tillämpning =transferability]
 

Förenklat kan man säga att i en studie med kvantitativ ansats är det forskaren/författaren som definierar generaliserbarheten. Läsaren kan sedan avgöra om de håller med författaren eller ej. I en kvalitativ studie definierar inte forskaren/författaren generaliserbarheten utan presenterar vägen och de fynd som gjordes vid slutet av vägen. Läsaren avgör sedan generaliserbarheten.
    Möjligheten för tillämpning är beroende på om fynden erbjuder en innebörd som överskrider sin egen horisont. När man bedömer hur resultaten kan tillämpas frågar man sig vad av resultaten kan tillämpas? ...för vem/vilka är resultaten tillämpbara? ...under vilka förutsättningar går resultaten att tillämpa?

III. Reliabilitet [=pålitlighet/rimlighet =dependability]
  Är mätinstrumenten pålitliga? I studier med kvalitativ ansats används både teknisk utrustning och människor som "instrument". Båda måste fullgöra sin uppgift på ett pålitligt sätt. Reliabiliteten består av:
  * Kvaliteten på teknisk utrustning
Ofta används bandspelare. Beroende på bandspelaren och val av mikrofon får man varierande ljudkvalitet. Data blir sämre om man har svårt att höra vad som faktiskt sägs på bandet. Vilken bandspelare användes? Inbyggd mikrofon eller separat mikrofon?
  *

Kvaliteten på forskaren

- Beskrivning av förförståelse
(se ovan)
    - Forskarens förmåga att göra bra observationer/intervjuer
Detta är svårt att efteråt beskriva.
    - Forskarens förmåga till följsamhet mot data
Har erfarenheter från början av datainsamlingen påverkat resten av datainsamlingen?
    - Kvaliteten på forskarens handledning
Vem/vilka handleder forskaren och vilket renommé har de?
IV. Objektivitet [=bekräftelsebarhet =confirmability]
  Detta är till stor del samma som den interna validiteten beskriven ovan. Med detta menas forskarens förmåga att vara neutral och inte färga data med sin egen förförståelse. I vissa typer av projekt kan man undersöka objektiviteten genom att välja ut utskrift av några intervjuer och låta olika forskare bedöma dessa utskrifter. Man jämför sedan vad de kom fram till.


2) NYHETER PÅ WEBBPLATSEN

Sedan föregående nyhetsbrev 2001-11-01 har följande ändringar gjorts:

Länkarna på sidan om etisk bedömning rättas till och ytterligare en länk läggs till.

På sidan om centralmått under rubriken Medianvärde stod tidigare "Vid udda antal mätvärden är medianvärdet medelvärdet mellan de två mittersta mätvärdena." Udda antal var fel och har bytts till jämt antal. En del andra små förbättringar av texten görs samtidigt.

Sidan om fenomenologi revideras och utökas. 

På sidan om litteratursökning blir avsnittet om Cochrane klart. Sist läggs till ett avsnitt (för ovana) om var man lämpligen börjar leta.
 
Vägbeskrivning till nya kurslokaler på Annedal läggs upp.
 
En mängd brutna hyperlänkar på många sidor lagas eller tas bort. Ytterligare ett antal trasiga länkar är ej åtgärdade men bevakas ett tag eftersom de kanske bara tillfälligt är ur funktion.
 
Strukturen på sidorna som berättar om vilka ändringar som gjorts görs om.
 
Tidigare utskickade infobrev läggs upp.
 
På startsidan läggs in en ruta med tankeväckande citat. Varje gång man går in på startsidan presenteras ett slumpmässigt valt citat (finns f.n. c:a 75 st inlagda).
 
Sidan om att söka pengar uppdateras. Information om det nya vetenskapsrådet läggs till.
 
En ny sektion om etiologiskt prediktivt värde läggs till. Denna del är på engelska och lite mer avancerad.
 
Sidan om översikt över datainsamlingstekniker ändras genom att hänvisningen till datatriangulering tas bort. Information om datatriangulering läggs istället in på sidan om validitet och reliabilitet.
 
Sidan om validitet och reliabilitet skrivs om för att bättre beskriva hur man resonerar när det gäller studier med kvalitativ ansats.

Tidigare gjorda förändringar finns listade på sidan "Nyheter".



3) KURSER I REFERENSHANTERING

Senaste kursen i referenshantering och GetARef var 2002-01-15. Kursen i referenshantering innebär föreläsning, diskussion och att kursdeltagarna sedan får prova olika praktiska övningsuppgifter. Deltagarna hämtar referenser från internet, importerar dem i referenshanteringsprogrammet och skriver sedan en liten test-artikel med referenslista. Eftersom alla sitter vid en egen dator är antalet platser begränsat till 10. Under kursen använder vi den senaste versionen av GetARef (version 5). Avgiften för kursen i referenshantering är 1.500:-. Nästa kurstillfälle är inte bokat men titta gärna emellanåt på webbplatsen. Där kommer först information om nästa kurstillfälle.



4) KURSER I FORSKNINGSMETODIK

Grundkursen i forskningsmetodik (5p) sträcker sig över en termin medan kurserna i kvalitativa respektive kvantitativa metoder (5p vardera) sträcker sig över två terminer.

Nästa kurs i grundläggande forskningsmetodik 5p börjar 2002-09-03. Kursen ger en översikt över kvantitativa och kvalitativa forskningsmetoder. Kursen innehåller bland annat: vetenskapsteori, likheter och skillnader mellan kvantitativa och kvalitativa forskningsmetoder, kvantitativa forskningsmetoder - design och grundläggande statistik, kvalitativa forskningsmetoder, forskningsetik och sekretess, personuppgiftslagen, skriftlig och muntlig presentationsteknik, granskning av andras vetenskapliga arbeten, att söka pengar för en vetenskaplig studie, etc.
    Kursen bygger mycket på strukturerade hemstudier, grupparbeten och gemensamma diskussioner kring olika exempel. Kursen har en egen lösenordsskyddad hemsida där man kan läsa referat av vad som gjordes vid senaste kurstillfället.

Vi erbjuder en påbyggnadskurs om 5p i kvantitativa forskningsmetoder med start september 2002. Under kursen kommer vi bland annat att behandla: signifikansanalys, testers egenskaper, skattning av stickprovsstorlek, powerberäkning, regressionsanalys, variansanalys, Kaplan-Meyers kurvor, matchade försök - hur gör man, litteratursökning på internet, praktiska övningar med statistikprogram och att värdera en publikation.

Påbyggnadskursen i kvalitativa forskningsmetoder 5p med start september 2002 kommer bland annat att innehålla: Den kvalitativa metodens grundstenar, kvalitativ deskriptiv metod, grounded theory, innehållsanalys / begreppsanalys, fenomenologi, fenomenografi, hermeneutik, kvalitativ datainsamling - framför allt intervju, kvalitativ dataanalys, den kvalitativa forskningens tillförlitlighet och giltighet samt redovisning av kvalitativ forskning i artikel / rapport.

Kurserna i forskningsmetodik innebär 8 schemalagda träffar, oftast kl 15.45-18.45. Resterande tid är självstudier och arbete med egen projektplan. Information om kurserna med detaljerade scheman, kursplaner, kursavgifter, anmälningsblanketter, vägbeskrivningar, kurslitteratur  och annan information finns ute på vår webbplats. Låter detta intressant? Informera gärna kollegor om kurserna.

Vill du gå någon av kurserna och vara säker på att få kursplats? Då är det dags att skicka in ansökan nu!



5) OM WEBBPLATSEN

Adressen till webbplatsen för forskningsmetodik är:

 http://www.infovoice.se/fou

Besöksfrekvensen har stigit under de senaste fem månaderna (den tid vi har tillförlitlig statistik).
 
Månad Antal besök Antal webbsidor*
Oktober 5472 42546
November 5932 45298
December 4135 26471
Januari 6970 51133
Februari 7129 50199
*Antal webbsidor som bläddrats fram under besöken
 
Många går in direkt på enskilda sidor istället för att gå in via huvudmenyn och dessa besök registreras inte av räknaren som finns på huvudmenyn (men de syns i loggfilerna).

Alla sidor visas inte i innehållsförteckningen eftersom den då skulle bli för lång. Dessa sidor når du via länkar från andra sidor. Funderingar finns på att göra om innehållsförteckningen så att den blir kortare och mer lättanvänd. Det kommer att dröja innan vi bestämt oss för det alternativ vi tycker är bäst. För att underlätta har vi lagt upp en kraftfull sökmotor för att söka information på webbsiten. Sökfunktionen nås genom att i menyn klicka på "Sök på denna webb". Du har väl provat den!

Besök vår webbplats! Tipsa gärna andra du känner om vår webbplats!



6) OM INFOBREVET

OBS!! - Byter du e-mail adress? Då är det viktigt att du skickar ett e-mail och berättar så vi kan hålla vår adresslista aktuell. - OBS!!

Detta infobrev skickas ut ungefär en gång i kvartalet. Om du vill sluta prenumerera på detta informationsbrev så skicka ett svar på detta e-mail med texten: "Sluta prenumerera".


Vänliga hälsningar

Ronny Gunnarsson
Distriktsläkare
Avd. för allmänmedicin
Inst. för Samhällsmedicin
Sahlgrenska akademien
Göteborgs Universitet

 


Denna webbsida är författad av
Doc. Ronny Gunnarsson
Distriktsläkare/Familjeläkare

Läs om regler för ansvar och copyright som gäller för denna webbsida.