Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) •...

59
Leggere tra le righe: letteratura e pratica clinica Giorgio Costantino Nicola Montano Gian Marco Podda Elisa Ceriani In collaborazione con Gruppo Autoformazione Metodologica

Transcript of Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) •...

Page 1: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

Leggere tra le righe: letteratura e pratica clinica

Giorgio Costantino Nicola Montano Gian Marco Podda Elisa Ceriani

In collaborazione con

Gruppo Autoformazione Metodologica

Page 2: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

PERCHE’ LEGGERE UN ARTICOLO

• Necessità di aggiornamento

• Risposta ad un problema clinico specifico

• Conoscere esaustivamente un argomento

• Problemi di insonnia

Page 3: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’
Page 4: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’
Page 5: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

CONSIGLI PER LA LETTURA DI UN ARTICOLO SCIENTIFICO

CHI NON PUÒ SCANSARE IL PERICOLO, LO AFFRONTI !!!

Page 6: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

1) A buon intenditor, poche parole

(ovvero il titolo)

Page 7: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

1) IL TITOLO

LEGGI L’ABSTRACT

si

SCARTA L’ARTICOLO!PASSA A QUELLO

SUCCESSIVO

no

Leggi il titolo degli articoli che hai selezionato:appare interessante o utile?

Page 8: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

2) Non e’ tutto orocio’ che luccica

(ovvero il razionale)

Page 9: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

• Ha senso porsi questa domanda?

• Esiste una plausibilità biologica?

2: RAZIONALE DELLO STUDIO

Page 10: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

BMJ 2001;323:1450–1

Page 11: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

1: GUARDA IL TITOLO:appare interessante o utile?

LEGGI L’ABSTRACT:2: lo studio ha una plausibilità scientifica?

si

si

no

CONSIGLI PER LA LETTURA DI UN ARTICOLO SCIENTIFICO

SCARTA L’ARTICOLO!PASSA A QUELLO

SUCCESSIVO

RILEGGI L’ABSTRACT

Page 12: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

3) L’occhio del padroneingrassa il cavallo

OVVERO GLI END POINT

Page 13: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

Gli end point (indicatori di esito) rappresentano eventi che possono essere misurati in maniera oggettiva per valutare l’obiettivo dello studio

• Qual è l’end point primario?• E’ semplice o composito?• E’ un end point hard o surrogato?

3: LEGGI ABSTRACTGUARDA END POINT

Page 14: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

• L’interpretazione clinica dello studio si basa sugli end point primari

• E’ su di esso che ci si basa per calcolare la numerosità minima del campione idonea a testare l’ipotesi statistica lo studio in pratica è “costruito” sull’end point primario

END POINT PRIMARIO

Page 15: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

END POINT SECONDARI

• Sono altre misure di esito che possono essere valutate in uno studio

• Tuttavia lo studio non viene disegnato sugli end point secondari, in particolare per quanto riguarda la numerosità campionaria

• I risultati su un end point secondario non possono essere “probanti” per la pratica clinica

Page 16: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

Purtroppo, solo i primari contano…!

Page 17: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

HARD: quando misurano eventi che hanno un impatto diretto e rilevante sulla vita del paziente (es: mortalità, infarti, ictus, fratture, ricoveri)

SURROGATI (o MINORI): marker indiretti dell’efficacia di un intervento (es: riduzione della PA, della colesterolemia, delle aritmie all’ECG).

ENDPOINT HARD vs SURROGATI

Page 18: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

Alcuni esempi...

Encainide flecainide

BEV nel periinfarto

Doxasin Pressione arteriosa

Estroprogestinici in menopausa

Colesterolo

Page 19: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

Encainideflecainide

BEV nel periinfarto

mortalità

Doxazosin pressione Scompenso cardiaco

Estroprogestiniciin menopausa

Colesterolo stroke, demenza, K mammario

Alcuni esempi...

Page 20: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

Attenzione ai surrogati!

Page 21: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

Analisi per sottogruppi

• Analisi fatte in un sottogruppo di pazienti definito dalle sue caratteristiche di base

• Servono a esplorare se il risultato dello studio varia a seconda delle caratteristiche dei pazienti

• Dovrebbero essere decisi a priori e non a posteriori solo per cercare un sottogruppo in cui il risultato venga significativo

Page 22: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

ATTENZIONE AI SOTTOGRUPPI...

The Challenge of Subgroup Analyses — reporting without distorting. NEJM 2006. 354(16):1667

Page 23: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’
Page 24: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

1: GUARDA IL TITOLO:appare interessante o utile?

LEGGI L’ABSTRACT:2: lo studio ha una plausibilita’ scientifica?gli end point se validi sarebbero utili?

si

si

CONSIGLI PER LA LETTURA DI UN ARTICOLO SCIENTIFICO

SCARTA L’ARTICOLO!PASSA A QUELLO

SUCCESSIVO3:

si no

gli end point se validi sarebbero utili?

Page 25: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

4) Chi ciuco si corica ciuco si ritrova

(ovvero la validita’ dei risultati)

Page 26: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

• Qual e’ il disegno dello studio?

• Come sono espressi i risultati?

4: VALIDITA’ INTERNA:I RISULTATI SONO VALIDI?

Page 27: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

TIPO DI STUDIO

DIAGNOSI TERAPIA

Disegno dello studioa. Il test diagnostico oggetto dello studio è stato paragonato a un reference standard adeguato?b.La comparazione col reference standard è stata fatta in modo adeguato?c. Il test in questione è descritto in modo sufficiente da poter essere replicato?Risultatid. Come sono espressi i risultati: SE, SP, VPP, VPNe. E’ riportata la concordanza (K)?

Disegno dello studioa. E’ uno studio randomizzato controllato?b. E’ in doppio cieco?Risultatic. La popolazione trattata e il gruppo di controllo sono risultate simili?d. Come sono espressi i risultati? RA, RR, RRA, RRR, NNT, NNH

Page 28: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

DIAGNOSI: RISULTATI

• SE• SP• VPP• VPN• LR+• LR-• Concordanza

Page 29: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

TERAPIA: DISEGNO

• a. E’ uno studio randomizzato controllato?• b. E’ in doppio cieco?

Page 30: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

TERAPIA: RISULTATI

• I 2 gruppi (controllo vs trattamento) sono simili tra loro?

GUARDARE QUELLA CHE E’ SOLITAMENTE LA “TABELLA 1”

Page 31: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

TERAPIA: modalità report risultati• RISCHIO ASSOLUTO• RIDUZIONE RISCHIO ASSOLUTO• RISCHIO RELATIVO• RIDUZIONE RISCHIO RELATIVO• NNT

Page 32: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

Tutto ha un prezzoSono riportati gli effetti collaterali?

Page 33: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

1: GUARDA IL TITOLO:appare interessante o utile?

LEGGI L’ABSTRACT:2: lo studio ha una plausibilita’ scientifica?

si

si

CONSIGLI PER LA LETTURA DI UN ARTICOLO SCIENTIFICO

3: gli end point se validi sarebbero utili?

si

4: LEGGENDO L’ARTICOLOi risultati dello studio sono validi?

SCARTA L’ARTICOLO!PASSA A QUELLO

SUCCESSIVO

no

Page 34: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

1: GUARDA IL TITOLO:appare interessante o utile?

LEGGI L’ABSTRACT:2: gli end point se validi sarebbero utili?

si

si

CONSIGLI PER LA LETTURA DI UN ARTICOLO SCIENTIFICO

3: lo studio ha una plausibilita’ scientifica?

si

4: LEGGENDO L’ARTICOLOi risultati dello studio sono validi?

si

Page 35: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

5) MOGLI E BUOI DEI PAESI TUOIovvero la validità esterna

Page 36: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

Se validi, questi risultati potrebbero essere applicati nella tua pratica corrente?

criteri inclusione/esclusione tabella con caratteristiche della

popolazione

5: VALIDITA’ ESTERNA:

Page 37: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

1: GUARDA IL TITOLO:appare interessante o utile?

LEGGI L’ABSTRACT:2: lo studio ha una plausibilita’ scientifica?

si

si

CONSIGLI PER LA LETTURA DI UN ARTICOLO SCIENTIFICO

3: gli end point se validi sarebbero utili?

si

4: LEGGENDO L’ARTICOLOi risultati dello studio sono validi?

si

5: i risultati dello studio sono applicabili nella tuapratica clinica?

si

Page 38: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

6) UNA RONDINE NON FA PRIMAVERAOvvero la generalizzabilità dei risultati

Page 39: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

6.RISULTATI SONO CONCORDI CON ALTRE EVIDENZE?

• Confrontare risultati con studi precedenti

• Leggere sempre gli editoriali e i comments che appaiono nei numeri successivi

Page 40: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

La piramide dell’evidenza

Systematic Reviews

Randomised Control Trials

Cohort Studies

Case-Control Studies

Cross Sectional Surveys

Case Studies

FORTE

DEBOLE

Page 41: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

1: GUARDA IL TITOLO:appare interessante o utile?

LEGGI L’ABSTRACT:2: lo studio ha una plausibilita’ scientifica?

si

si

CONSIGLI PER LA LETTURA DI UN ARTICOLO SCIENTIFICO

3: gli end point se validi sarebbero utili?

si

4: LEGGENDO L’ARTICOLOi risultati dello studio sono validi?

si

5: i risultati dello studio sono applicabili nella tuapratica clinica?

6: considera se i risultati dello studio concordanocon altre evidenze

Page 42: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

7)A CAVAL DONATO... NON SI GUARDA IN BOCCA

Ovvero il conflitto d’interesse

Page 43: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

7.CONFLITTO DI INTERESSE

• Quale è lo sponsor?• In che misura è entrato nella gestione

dello studio?• La presenza di uno sponsor può avere

influenzato i risultati?

Page 44: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

1: GUARDA IL TITOLO:appare interessante o utile?

LEGGI L’ABSTRACT:2: lo studio ha una plausibilita’ scientifica?

si

si

CONSIGLI PER LA LETTURA DI UN ARTICOLO SCIENTIFICO

3: gli end point se validi sarebbero utili?

si

4: LEGGENDO L’ARTICOLOi risultati dello studio sono validi?

si

5: i risultati dello studio sono applicabili nella tuapratica clinica?

6: considera se i risultati dello studio concordanocon altre evidenze

7: considera il conflittod’interessi

Page 45: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

Finalmente puoi fidarti, ma…

Page 46: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

I 7 PECCATI CAPITALIdel lettore scientifico

Page 47: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

GOLAleggere tutto quello che troviamo senza criterio

Page 48: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

AVARIZIAcomprare per buoni i

“surrogati” perché costano meno (fatica, investimenti)

Page 49: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

IRADelusi e arrabbiati non

leggere più niente!!

Page 50: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

ACCIDIAper pigrizia e mancanza di tempo non analizzare bene

i risultati

Page 51: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

INVIDIAfingere che i nostri pazienti siano ugualmente “belli” rispetto a quelli dei trials!

Page 52: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

SUPERBIApensare sulla scorta di un singolo articolo di poter cambiare la nostra

pratica clinica senza confronto con il resto della letteratura e con i colleghi

Page 53: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

LUSSURIAFarsi corrompere dal conflitto di

interesse

Page 54: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

GLI ANGELI CUSTODI DEL LETTORE SCIENTIFICO

Page 55: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

Errore e pregiudizio

• 200 articoli consecutivi da:– NEJM– Lancet– JAMA

• Obiettivo:quanti errori incontrovertibili ci sono negli articoli delle riviste più prestigiose?

Page 56: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

125 articoli inclusi (gli altri non analizzabili)

• Errori in 102 (82%)– Errori di battitura in 9 (7%)– Errori numerici 92 (74%)– Errori metodologici 22 (18%)– Errori gravi (numeri completamente

diversi tra abstract e testo) 5 (4%)

Page 57: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

Fidarsi è bene…

Page 58: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

Ma controllare i dati è meglio!

Page 59: Leggere tra le righe: letteratura e pratica clinica · (ovvero la validita’ dei risultati) • Qual e’ il disegno dello studio? • Come sono espressi i risultati? 4: VALIDITA’

conflitto di interesse o pubblicità progresso?