Vi kommer ha driftstörningar under en tid framöver (se "Uppdateringar").
(antal aktiva besökare uppdateras automatiskt var 4:e minut)
Om du vill informera om att denna webbsida finns...
Denna webbsida ger dig en förståelse för vad pilotstudier (genomförbarhetsstudier) är. Den klargör också skillnaden mellan en planerad pilotstudie och en studie som saknar tillräcklig statistisk styrka.
Denna sida syftar till att tydliggöra skillnaden mellan en pilotstudie och andra studier. Denna diskussion är oftast relevant i relation till studier med en empirisk-atomistisk ansats som syftar till att utvärdera effekten av ett läkemedel eller någon annan intervention. Den kan dock även tillämpas på observationsstudier. Resten av denna sida kommer att fokusera diskussionen på situationen där pilotstudier banar väg för en större studie för att fastställa effekten av en intervention.
Det är en vanlig missuppfattning att små studier med otillräcklig statistisk styrka (underpowered), som försöker bevisa effekten av en intervention jämfört med placebo eller en annan intervention, är pilotstudier . Detta stämmer inte. Om de syftar till att bevisa effekt men har otillräcklig styrka, innebär det antingen att de misslyckades med att rekrytera deltagare upp till sitt förberäknade mål, eller att det helt enkelt var en dåligt designad studie, inte en pilotstudie.
Effectiveness och efficacy
Efficacy är ett mått på interventionens effekt under ideala förhållanden, medan effectiveness är ett mått på effekten om den implementeras i verkligheten. Pilotstudier syftar inte till att uppskatta varken efficacy eller effectiveness.
Syftet med en pilotstudie
En pilotstudie syftar till att besvara frågor såsom:
- Kommer en stor eller liten andel av de tillfrågade individerna att tacka ja till deltagande? Kommer randomiseringen att få potentiella deltagare att tveka?
- Är effektmätningen praktisk och genomförbar? Vilken enkät är lämplig i denna situation? Bör ett nytt mätinstrument konstrueras?
- Är interventionen rimligt enkel att genomföra givet de resurser vi kan förvänta oss att ha i en större studie?
- Kommer en stor eller liten andel av patienterna att hoppa av studien av olika anledningar?
- Vilken nivå av slumpmässig variation och vilka ungefärliga förändringar eller effekter kan ses efter interventionen? (För att användas som underlag för skattning av stickprovsstorlek inför den större studien med tillräcklig statistisk styrka.)
- Hur vanliga är oförutsedda problem (som kan motivera exkludering av en patient eller, än värre, att studien måste avbrytas)?
En pilotstudie syftar till att ge svar på några eller alla dessa frågor, men den har inte statistisk styrka nog att besvara den stora frågan om det finns en effekt av interventionen. Därför bör rapporteringen av en äkta pilotstudie helt avstå från att försöka förkasta en nollhypotes rörande eventuell effekt av studiens intervention. Effektstorlek (effect size) får beräknas endast för att tjäna som vägledning för en skattning av stickprovsstorlek inför den slutliga studien.
| Pilotstudie | “Den riktiga studien” | |
|---|---|---|
| Skattning av stickprovsstorlek före satainsamling | Görs sällan (se nedan). | Skall alltid göras. |
| Antal deltagare | Vanligen litet. | Oftast ganska många. |
| Randomisering | Görs ofts om det är en interventionsstudie. | Görs oftast om syftet är att utvärdera effekt av en intervention. |
| Syftar till att klarlägga effekt av interventionen | Aldrig! (men man kan göra en preliminär uppskattning av effektstorlek för att ligga till grund för en skattning av stickprovsstorlek inför den slutliga studien.) | Att fastställa effekt av en intervention (eller jämföra olika interventioner) är huvudsyftet med studien (Det kan inkludera superiority, equivalence och non-inferiority studier) |
| Syftar till att klarlägga genomförbarhet | Att klarlägga den praktiska genomförbarheten är huvudsyftet med en pilotstudie. | Practical feasibility should be sorted out before the real study is done. |
| Användande av analytisk statistik | Görs för att få mer information inför skattning av stickprovsstorlek inför huvudstudien som sedan avser att klarlägga effekten av en (eller flera) interventioner. | Görs alltid för att besvara frågan om effekt av interventionen |
Vad händer om min pilotstudie visar en effekt?
Syftet med en pilotstudie är aldrig att bevisa en effekt av en intervention. När man beräknar effektstorleken (för att använda den i en skattning av stickprovsstorlek för den riktiga studien) säger därför ett fynd där man inte ser någon statistisk skillnad mellan grupperna ingenting om den sanna effektstorleken. Pilotstudien var aldrig utformad för att upptäcka en skillnad mellan grupperna. Ibland visar dock pilotstudien en statistiskt signifikant skillnad mellan grupperna. Om så är fallet indikerar det sannolikt att den nya interventionen har en stor effekt jämfört med jämförelsealternativet, eftersom den visar sig vara statistiskt signifikant redan i en liten pilotstudie.
Stickprovsstorlek i pilotstudier
Olika rekommendationer anger ett antal på mellan 10–50 deltagare eller fler. En korrekt beräkning av urvalsstorlek (sample size calculation) kan dock endast göras för forskningsfråga 6 ovan . Det finns inget rimligt sätt att göra en korrekt beräkning av urvalsstorlek för forskningsfråga 1–5.
CONSORT 2010: tillägg för randomiserade pilot- och genomförbarhetsstudier
De vanliga riktlinjerna för randomiserade kontrollerade studier (CONSORT 2010) fokuserar på att rapportera resultat gällande effekten av en intervention. Pilot- och genomförbarhetsstudier är dock inte utformade för att testa effekt, utan snarare för att undersöka huruvida en fullskalig studie låter sig göras. Den huvudsakliga skillnaden mellan detta tillägg och det vanliga CONSORT-uttalandet är skiftet i fokus från hypotestestning (fungerar interventionen?) till bedömning av genomförbarhet.
Detta tillägg är viktigt eftersom många forskare tidigare maskerade små pilotstudier som fullskaliga RCT-studier, vilket ledde till negativa studier med otillräcklig statistisk styrka (‘underpowered’) som fyllde den vetenskapliga litteraturen. Detta tillägg uppmuntrar forskare att vara ärliga med att deras studie är en pilotstudie och att rapportera den baserat på vad den faktiskt uppnådde (data om genomförbarhet) snarare än vad den misslyckades med att uppnå (statistisk signifikans gällande kliniska utfall). Jag rekommenderar att läsa mer på webbplatsen för CONSORT extension.
Exempel
- En pilotstudie: “A feasibility study for a triple‐blind randomized controlled trial investigating the effects of oral isotretinoin on mood and quality of life in patients with acne vulgaris” .
- En studie som misslyckades med att rekrytera tillräcklingt antal deltagare: “Oral corticosteroids for painful acute otitis externa (swimmer’s ear): A triple-blind randomised controlled trial” . Resultatet kan dock användas som en pilotstudie, även om det inte var avsikten, för att finjustera skattningen av stickprovsstorlek inför en ny riktig studie med bättre förutsättningar att lyckas (mer pengar).