1) VALIDITET OCH
RELIABILITET
Kvantitativa och kvalitativa forskningsmetoder använder olika
datainsamlingstekniker för att få fram sina resultat. För alla
datainsamlingstekniker vill man försöka få en uppfattning om hur väl de mäter
det man vill mäta. Man använder då begreppen validitet och reliabilitet för att
beskriva hur bra vår datainsamling/test har fungerat. God validitet och
reliabilitet är en förutsättning för att våra resultat skall kunna generaliseras
till att gälla även andra än de som är undersökta.
Begreppen validitet och reliabilitet används ibland lite olika i litteraturen.
Det finns vissa skillnader (men också likheter) i hur begreppen används inom
forskning med kvantitativ respektive kvalitativ ansats. I en studie med
kvantitativ ansats har man i regel före datainsamlingen påbörjas valt en
datainsamlingsmetod med känd och acceptabel validiteten och reliabiliteten för
det syfte man vill nå. I en studie med kvalitativ ansats arbetar man
kontinuerligt med validiteten och reliabiliteten under hela
projektet.
Nedanstående sammanställning gör inte anspråk
på att vara det enda sättet att bringa ordning bland begreppen.
Valididet och
reliabilitet
Validitet avser att jag mäter det som är relevant i
sammanhanget medan reliabilitet avser att jag mäter på ett tillförlitligt sätt.
Man bör alltid sträva efter hög validitet och
reliabilitet.
Validitet handlar om att använda rätt sak
vid rätt tillfälle. För att enkelt förstå begreppet validitet kan vi jämföra med
exempelvis kreditkort eller busskort. De är giltiga i vissa situationer men inte
i andra. Man kan använda busskortet på en buss men inte i en taxi. Ibland finns
det t.o.m. ett datum då giltigheten upphör. Inom forskning handlar validitet om
att kunna ange i vilken situation och för vilken population resultaten är
giltiga.
Reliabilitet handlar om pålitlighet. Kan jag lita
på en reparatör som lagar min bil? Vad kan hända om bilreparatören inte är
pålitlig? Vilka beslut kan fattas om de baseras på mätningar som man inte kan
lita på?
Antag att jag vill mäta graden av övervikt hos
människor. Att då mäta fotstorlek hos varje individ gör mig sannolikt inte
klokare. Det hjälper inte att hävda att jag gjorde mina mätningar mycket
noggrant. Hög reliabilitet är alltså ingen garanti för att vi får hög validitet.
Antag att vi istället hade mätt längd och vikt för att räkna ut body mass index
(BMI). Då mäter vi något som är mer relevant i sammanhanget än skostorlek. Antag
vidare att vi gör vår mätning genom att hastigt titta på individen och sedan
skatta längd och vikt. Vår mätning görs då med låg tillförlitlighet (låg
reliabilitet). Även om vi då mätte rätt sak så blev den så dåligt mätt att vi
inte fick ett bra mått på övervikt. Låg reliabilitet medför alltså alltid låg
validitet. Följande två regler är bra att komma ihåg:
* Hög reliabilitet
garanterar inte hög validitet.
* Hög validitet förutsätter hög
reliabilitet.
Validitet inom forskning med kvantitativ
ansats
Vill vi mäta kroppsvikt är det inte
så svårt att veta när det vi mäter ger ett mått på det vi vill mäta. Om vi
istället vill mäta trivsel, intelligens, kunskaper, uppfattningar eller
upplevelser blir det svårare. Begreppet validitet används lite olika beroende på
om studien har kvantitativ eller kvalitativ ansats. Nedan beskrivs de vanligaste
begreppen för validitet som används i studier med kvantitativ inriktning (några
kommentarer om kvalitativa studier finns inom parantes).
- Först måste vi bestämma om vår
datainsamlingsteknik ger oss information om det fenomen som intresserar oss.
Jämför med exemplet om övervikt och fotstorlek. Enklast sker denna bedömning
av "innehållsvaliditeten" (=face validity) genom att be några
utomstående, väl insatta i problematiken, att uttala sig. Detta görs med
fördel i kvantitativa studier (kan även göras i kvalitativa studier).
- För det andra bör vi om möjligt säkerställa den
samtidiga validiteten (=korrespondensvaliditet =kriterievaliditet
=criterion validity), det vill
säga att det resultat vi får fram stämmer överens med resultatet från
undersökningar gjorda av andra eller samtidiga mätningar med en annan
metod/teknik. I studier med kvantitativ inriktning använder man ofta mått som
kappa, sensitivitet, specificitet, likelihood
ratio och prediktiva värden. (Inom studier med kvalitativ
inriktning är det inte möjligt att bestämma den samtidiga validiteten).
- För det tredje vill vi se om relaterade begrepp
stämmer överens med våra mätningar. Detta kallas "construct validity". Antag att vi
undersöker förekomsten av blodbrist hos kvinnor. Samtidigt som vi tar vårt
blodprov får de besvara en enkät där de bland annat får ange sin upplevda grad
av energi. Om vi såg att individer med lågt blodvärde angav upplevelse av hög
energi och tvärtom talar det för att, antingen så fungerar inte vår apparat
för att mäta blodvärde, eller, så mäter inte vår fråga upplevelsen av energi.
(Construct validity är sällan
tillämpbart i studier med kvalitativ inriktning).
- För det fjärde kan vi tala om kommunikativ
validitet. Forskarens förmåga att kommunicera sin vandring under
forskningsprocessen påverkar kunskapens giltighet. Kommunikativ validitet
innebär i en kvantitativ studie att ha en fyllig metodbeskrivning och
bortfallsanalys. (Detta finns även i kvalitativa studier, se nedan).
- För det femte kan man tala om en pragmatisk
validitet. Är den kunskap man kommer fram till användbar? Utan
användbarhet är kunskapen begränsad. Detta är en känslig punkt som kan
misstolkas som att grundforskning är fel. Så är det inte. Även inom
grundforskning är det dock angeläget att kunskapen förr eller senare på något
sätt blir användbar. Det är alltså viktigt att man i redovisningen av ett
projekt försöker peka på betydelsen av de resultat som har kommit fram.
Reliabilitet inom forskning med kvantitativ
ansats
Med reliabilitet menar vi att den kunskap
som kommer fram är framtagen på ett tillförlitligt sätt, att det inte finns
okontrollerade tillfälliga fel som grumlar kunskapsutvecklingen. Inom
kvantitativ forskning är reliabilitet lika med reproducerbarhet, något som ofta
kan skattas och ges ett siffermått. För att utreda hur väl mätningen i en
kvantitativ studie kan reproduceras kan man diskutera reliabiliteten från tre
olika synvinklar:
- Är mätningen fri från bias av personen som
mäter? Detta kallas inter-rater reliability
(=inter-rater agreement) och kan testas genom att låta
flera personer mäta och sedan jämföra hur de olika personernas mätningar
stämmer överens.
- Påverkas mätningen av tiden. Om samma person
gör flera mätningar, hur väl stämmer de överens? Detta kallas test-retest reliability.
- Finns det en samstämmighet i utfallet mellan
olika delar i en enkät som tar upp samma fenomen? Detta kallas internal consistency reliability och kan
skattas med Chronbach's alpha.
Inter-rater reliability, test-retest
reliability och internal consistency reliability
är begrepp som bara används i studier med kvalitativ inriktning. (Information om
reliabilitet i kvalitativa studier ses nedan.)
Validitet & reliabilitet vid kvalitativ
ansats
Validitet och reliabilitet måste värderas
på ett delvis annorlunda sätt i studier med kvalitativ inriktning jämfört med
studier med kvantitativ inriktning. Inom kvalitativ forskning kan man inte
skatta tillförlitligheten med siffror.
Validitet och
reliabilitet i studier med kvalitativ inriktning handlar om att kunna beskriva
att man har samlat in och bearbetat data på ett systematiskt och hederligt sätt.
I den slutliga rapporten beskriver man även förutsättningarna inför projektet
och hur resultaten under processen har vuxit fram. Man använder andra, delvis
överlappande, begrepp.
Nedan följer ett försök att ge en
översikt över dessa begrepp. Översikten gör inte anspråk på att vara det enda
sättet att presentera hur begreppen förhåller sig till varandra. Inte heller gör
översikten anspråk på att vara fullständig.
| I. |
Inre (intern) validitet [=trovärdighet
=credibility] |
| |
* |
Kommunikativ validitet Forskarens förmåga att kommunicera hur forskningsprocessen påverkar
kunskapens giltighet. Den kommunikativa validiteten består
av: |
|
|
- |
Beskrivning av förförståelse Författaren
beskriver sin egen förförståelse (förförståelse=fördomar). Vilken
bakgrund, utbildning och egna erfarenheter författaren har. |
| |
|
- |
Beskrivning av datainsamling Hur
datainsamlingen gjorts måste beskrivas i detalj. Om datainsamlingen har
gjorts över en längre tid kan det ibland öka trovärdigheten eftersom
erfarenheter från den första delen av datainsamlingen hunnit förbättra
datainsamlingen mot slutet. |
| |
|
- |
Beskrivning av urval Hur deltagarna valts
ut måste beskrivas detaljerat. |
| |
|
- |
Beskrivning av analysprocessen En
detaljerad beskrivning av vad som hänt under analysprocessen. Hur gjorde
man och vilka beslut togs. Vad visar sig direkt i materialet och vad är
tolkningar? |
| |
* |
Deltagarkontroll Om informanterna (de som
lämnar information, exempelvis personer som blir intervjuade) själva kan
rätta felaktiga uppfattningar och missförstånd kan det ibland vara
positivt. Om detta görs redan under en intervju kallas det dialogisk
validering (=klarifiering =clarification). Ett annat alternativ är att den som
intervjuats får läsa en utskrift av hela intervjun för att korrigera
missuppfattningar och göra förtydliganden. |
| |
* |
Triangulering Innebär att man ser på
problemet ur flera synvinklar. Exempelvis kan man intervjua personer med
olika relation till problemet (källtriangulering).
Olika forskare med olika yrkesperspektiv kan delta i datainsamling
(observatörstriangulering). Under analysfasen kan man
analysera materialet med olika paradigm (teoritriangulering). Exempel på det sistnämnda kan vara att först analysera materialet
utifrån ett systemteoretiskt perspektiv och sedan att analysera samma
material från ett livsvärldsperspektiv. |
| II. |
Yttre (extern) validitet [=överförbarhet
/tillämpning =transferability] |
| |
Förenklat kan man säga att i en studie med
kvantitativ ansats är det forskaren/författaren som definierar
generaliserbarheten. Läsaren kan sedan avgöra om de håller med författaren
eller ej. I en kvalitativ studie definierar inte forskaren/författaren
generaliserbarheten utan presenterar vägen och de fynd som gjordes vid
slutet av vägen. Läsaren avgör sedan generaliserbarheten. Möjligheten för tillämpning är
beroende på om fynden erbjuder en innebörd som överskrider sin egen
horisont. När man bedömer hur resultaten kan tillämpas
frågar man sig vad av resultaten kan tillämpas? ...för vem/vilka är
resultaten tillämpbara? ...under vilka förutsättningar går resultaten att
tillämpa? |
| III. |
Reliabilitet [=pålitlighet/rimlighet =dependability] |
| |
Är mätinstrumenten pålitliga?
I studier med kvalitativ ansats används både teknisk
utrustning och människor som "instrument". Båda måste fullgöra sin uppgift
på ett pålitligt sätt. Reliabiliteten består av: |
| |
* |
Kvaliteten på teknisk
utrustning Ofta används bandspelare. Beroende på
bandspelaren och val av mikrofon får man varierande ljudkvalitet. Data
blir sämre om man har svårt att höra vad som faktiskt sägs på bandet.
Vilken bandspelare användes? Inbyggd mikrofon eller separat
mikrofon? |
| |
* |
Kvaliteten på forskaren |
|
|
- |
Beskrivning av förförståelse (se
ovan) |
| |
|
- |
Forskarens förmåga att göra bra
observationer/intervjuer Detta är svårt att efteråt
beskriva. |
| |
|
- |
Forskarens förmåga till följsamhet mot data Har erfarenheter från början av datainsamlingen påverkat resten av
datainsamlingen? |
| |
|
- |
Kvaliteten på forskarens handledning Vem/vilka handleder forskaren och vilket renommé har
de? |
| IV. |
Objektivitet [=bekräftelsebarhet =confirmability] |
| |
Detta är till stor del
samma som den interna validiteten beskriven ovan. Med detta menas
forskarens förmåga att vara neutral och inte färga data med sin egen
förförståelse. I vissa typer av projekt kan man undersöka objektiviteten
genom att välja ut utskrift av några intervjuer och låta olika forskare
bedöma dessa utskrifter. Man jämför sedan vad de kom fram
till. |
2) NYHETER PÅ WEBBPLATSEN
Sedan föregående
nyhetsbrev 2001-11-01 har följande ändringar gjorts:
Länkarna på sidan om etisk bedömning rättas
till och ytterligare en länk läggs till.
På
sidan om centralmått under rubriken Medianvärde stod tidigare "Vid udda
antal mätvärden är medianvärdet medelvärdet mellan de två mittersta mätvärdena."
Udda antal var fel och har bytts till jämt antal. En del andra små förbättringar
av texten görs samtidigt.
Sidan om fenomenologi
revideras och utökas.
På sidan om
litteratursökning blir avsnittet om Cochrane klart. Sist läggs till ett avsnitt
(för ovana) om var man lämpligen börjar leta.
Vägbeskrivning till nya
kurslokaler på Annedal läggs upp.
En mängd brutna hyperlänkar på
många sidor lagas eller tas bort. Ytterligare ett antal trasiga länkar är ej
åtgärdade men bevakas ett tag eftersom de kanske bara tillfälligt är ur
funktion.
Strukturen på sidorna som berättar
om vilka ändringar som gjorts görs om.
Tidigare utskickade infobrev läggs
upp.
På startsidan läggs in en ruta med
tankeväckande citat. Varje gång man går in på startsidan presenteras ett
slumpmässigt valt citat (finns f.n. c:a 75 st
inlagda).
Sidan om att söka pengar
uppdateras. Information om det nya vetenskapsrådet läggs
till.
En ny sektion om etiologiskt prediktivt värde läggs till. Denna del
är på engelska och lite mer avancerad.
Sidan om översikt över
datainsamlingstekniker ändras genom att hänvisningen till datatriangulering tas
bort. Information om datatriangulering läggs istället in på sidan om validitet
och reliabilitet.
Sidan om validitet och
reliabilitet skrivs om för att bättre beskriva hur man resonerar när det gäller
studier med kvalitativ ansats.
Tidigare gjorda förändringar
finns listade på sidan "Nyheter".
3) KURSER I REFERENSHANTERING
Senaste kursen i
referenshantering och GetARef var 2002-01-15. Kursen i referenshantering
innebär föreläsning, diskussion och att kursdeltagarna sedan får prova olika
praktiska övningsuppgifter. Deltagarna hämtar referenser från internet,
importerar dem i referenshanteringsprogrammet och skriver sedan en liten
test-artikel med referenslista. Eftersom alla sitter vid en egen dator är
antalet platser begränsat till 10. Under kursen använder vi den senaste
versionen av GetARef (version 5). Avgiften för kursen i referenshantering är
1.500:-. Nästa kurstillfälle är inte bokat men titta gärna emellanåt på
webbplatsen. Där kommer först information om nästa kurstillfälle.
4) KURSER I FORSKNINGSMETODIK
Grundkursen i
forskningsmetodik (5p) sträcker sig över en termin medan kurserna i kvalitativa
respektive kvantitativa metoder (5p vardera) sträcker sig över två terminer.
Nästa kurs i grundläggande forskningsmetodik 5p börjar 2002-09-03.
Kursen ger en översikt över kvantitativa och kvalitativa forskningsmetoder.
Kursen innehåller bland annat: vetenskapsteori, likheter och skillnader mellan
kvantitativa och kvalitativa forskningsmetoder, kvantitativa forskningsmetoder -
design och grundläggande statistik, kvalitativa forskningsmetoder,
forskningsetik och sekretess, personuppgiftslagen, skriftlig och muntlig
presentationsteknik, granskning av andras vetenskapliga arbeten, att söka pengar
för en vetenskaplig studie, etc.
Kursen bygger mycket på
strukturerade hemstudier, grupparbeten och gemensamma diskussioner kring olika
exempel. Kursen har en egen lösenordsskyddad hemsida där man kan läsa referat av
vad som gjordes vid senaste kurstillfället.
Vi erbjuder en påbyggnadskurs om 5p i kvantitativa forskningsmetoder
med start september 2002. Under kursen kommer vi bland annat att behandla:
signifikansanalys, testers egenskaper, skattning av stickprovsstorlek,
powerberäkning, regressionsanalys, variansanalys, Kaplan-Meyers kurvor, matchade
försök - hur gör man, litteratursökning på internet, praktiska övningar med
statistikprogram och att värdera en publikation.
Påbyggnadskursen i
kvalitativa forskningsmetoder 5p med start september 2002 kommer bland annat att
innehålla: Den kvalitativa metodens grundstenar, kvalitativ deskriptiv metod,
grounded theory, innehållsanalys / begreppsanalys, fenomenologi, fenomenografi,
hermeneutik, kvalitativ datainsamling - framför allt intervju, kvalitativ
dataanalys, den kvalitativa forskningens tillförlitlighet och giltighet samt
redovisning av kvalitativ forskning i artikel / rapport.
Kurserna i
forskningsmetodik innebär 8 schemalagda träffar, oftast kl 15.45-18.45.
Resterande tid är självstudier och arbete med egen projektplan. Information om
kurserna med detaljerade scheman, kursplaner, kursavgifter,
anmälningsblanketter, vägbeskrivningar, kurslitteratur och annan
information finns ute på vår webbplats. Låter detta intressant? Informera gärna
kollegor om kurserna.
Vill du gå någon av kurserna och vara säker på att
få kursplats? Då är det dags att skicka in ansökan nu!
5) OM
WEBBPLATSENAdressen till webbplatsen för forskningsmetodik
är:
http://www.infovoice.se/fou

Besöksfrekvensen har stigit under de senaste fem
månaderna (den tid vi har tillförlitlig statistik).
| Månad |
Antal besök |
Antal webbsidor* |
| Oktober |
5472 |
42546 |
| November |
5932 |
45298 |
| December |
4135 |
26471 |
| Januari |
6970 |
51133 |
| Februari |
7129 |
50199 |
*Antal webbsidor som bläddrats fram under
besöken
Många går in direkt på enskilda sidor istället för att gå in via
huvudmenyn och dessa besök registreras inte av räknaren som finns på huvudmenyn
(men de syns i loggfilerna).
Alla
sidor visas inte i innehållsförteckningen eftersom den då skulle bli för lång.
Dessa sidor når du via länkar från andra sidor. Funderingar finns på att göra om
innehållsförteckningen så att den blir kortare och mer lättanvänd. Det kommer
att dröja innan vi bestämt oss för det alternativ vi tycker är bäst. För att
underlätta har vi lagt upp en kraftfull sökmotor för att söka information på
webbsiten. Sökfunktionen nås genom att i menyn klicka på "Sök på denna webb". Du
har väl provat den!
Besök vår webbplats! Tipsa gärna andra du känner om
vår webbplats!
6) OM INFOBREVET
OBS!! - Byter
du e-mail adress? Då är det viktigt att du skickar ett e-mail och berättar så vi
kan hålla vår adresslista aktuell. - OBS!!
Detta infobrev skickas
ut ungefär en gång i kvartalet. Om du vill sluta prenumerera på detta
informationsbrev så skicka ett svar på detta e-mail med texten: "Sluta
prenumerera".
Vänliga hälsningar
Ronny
Gunnarsson
Distriktsläkare
Avd. för allmänmedicin
Inst. för
Samhällsmedicin
Sahlgrenska akademien
Göteborgs
Universitet
Denna webbsida är författad av
Doc. Ronny Gunnarsson
Distriktsläkare/Familjeläkare
Läs om
regler för ansvar
och copyright
som gäller för denna webbsida.