Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia,...

71
Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite nella ricerca biomedica La campagna Lancet-REWARD Bologna, 9 novembre 2016

Transcript of Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia,...

Page 1: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Raccomandazioni REWARD. Sessione II

Metodologia, regolamentazione e gestione della ricerca

Aumentare il value delle risorse

investite nella ricerca biomedica La campagna Lancet-REWARD

Bologna, 9 novembre 2016

Page 2: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

DISCUSSANT

Gualberto Gussoni Direttore scientifico Fondazione FADOI

Paolo Giorgi Rossi Comitato Etico Provinciale di Reggio Emilia

Aldo Maggioni Direttore Centro Studi ANMCO

Pier Mannuccio Mannucci Fondazione IRCCS Ca’ Granda Ospedale Maggiore Policlinico Editor in Chief European Journal of Internal Medicine

Page 3: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 4: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 5: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

METODOLOGIA

Il disegno dello studio, i metodi e le analisi

statistiche sono adeguati?

• Assenza di adeguate misure per ridurre i bias in

oltre il 50% degli studi

• Inadeguata potenza statistica

• Inadeguata replicazione di risultati preliminari

Page 6: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 7: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Published Research Published Research

Page 8: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Preliminary

Not applicable

Best evidence

Not relevant

Not valid

BIAS

COIs

Critical appraisal

Page 9: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 10: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 11: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 12: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Methodological issues

• La maggior parte degli effetti terapeutici sono modesti

• E' difficile distinguere gli effetti modesti dai bias

• Nei trial randomizzati effetti del trattamento influenzati da:

- modalità di generazione della sequenza di assegnazione

- occultamento della lista di randomizzazione

- blinding, in particolare se outcome soggettivi

• La ricerca è distorta da numerosi bias

Page 13: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

The problems

• Development of protocols and improvement of designs

• Effect-to-bias ratio: la maggior parte degli effetti terapeutici sono modesti ed è difficile distinguerli dai bias

• Reproducibility practices and reward systems

Page 14: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 15: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 16: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Linee guida protocolli trial clinici

• Notevole variabilità di obiettivi e raccomandazioni

• Metodologie di sviluppo spesso non descritte

• Raramente riportano:

- adeguato coinvolgimento degli stakeholders

- evidenze scientifiche a supporto delle raccomandazioni

Page 17: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 18: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 19: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

www.gimbe.org/spirit

Page 20: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Priorità raccomandazioni REWARD

•20

%

•20

%

•20

%

•20

%

•20

% 5= Indispensabile

4= Priorità elevata

3= Priorità intermedia

2= Priorità bassa

1= Non è una priorità

Page 21: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

METODOLOGIA

5. Rendere pubblicamente disponibili per tutti gli

studi disegnati e condotti: protocolli integrali,

analisi pianificate o sequenza delle analisi previste

e dati grezzi

Page 22: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Std Deviation 0.83 1. 1

2. 2

3. 3

4. 4

5. 5

Raccomandazione 5

1% 2% 11% 34% 52%

EdiVoteStart EdiVoteStop

97

Standard METODOLOGIA

Media DS Average 4.33 ±

Page 23: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

The problems

• Development of protocols and improvement of designs

• Effect-to-bias ratio: la maggior parte degli effetti terapeutici sono modesti ed è difficile distinguerli dai bias

• Reproducibility practices and reward systems

Page 24: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 25: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 26: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 27: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 28: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

The Cochrane Collaboration’s tool for assessing risk of bias

Page 29: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 30: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 31: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 32: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Priorità raccomandazioni REWARD

•20

%

•20

%

•20

%

•20

%

•20

% 5= Indispensabile

4= Priorità elevata

3= Priorità intermedia

2= Priorità bassa

1= Non è una priorità

Page 33: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

METODOLOGIA

6. Massimizzare il rapporto effetto/bias attraverso:

• aderenza a standard rigorosi nel disegno e nella

conduzione degli studi

• utilizzo di ricercatori con adeguate competenze di

metodologia della ricerca

• sviluppo professionale continuo

• coinvolgimento di stakeholders senza conflitti di

interesse

Page 34: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Std Deviation 0.72 1. 1

2. 2

3. 3

4. 4

5. 5

Raccomandazione 6

2% 0% 2% 24% 72%

EdiVoteStart EdiVoteStop

97

Standard METODOLOGIA

Media DS Average 4.64 ±

Page 35: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

The problems

• Development of protocols and improvement of designs

• Effect-to-bias ratio: la maggior parte degli effetti terapeutici sono modesti ed è difficile distinguerli dai bias

• Reproducibility practices and reward systems

Page 36: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 37: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 38: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 39: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 40: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Priorità raccomandazioni REWARD

•20

%

•20

%

•20

%

•20

%

•20

% 5= Indispensabile

4= Priorità elevata

3= Priorità intermedia

2= Priorità bassa

1= Non è una priorità

Page 41: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

METODOLOGIA

7. Incentivare (con finanziamenti, riconoscimenti

accademici o di altra natura) pratiche di

riproducibilità e studi riproducibili e sensibilizzare

sulla necessità di replicare la ricerca

Page 42: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Std Deviation 1.07 1. 1

2. 2

3. 3

4. 4

5. 5

Raccomandazione 7

5% 4% 10% 37% 44%

EdiVoteStart EdiVoteStop

98

Standard METODOLOGIA

Media DS Average 4.10 ±

Page 43: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 44: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 45: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

REGOLAMENTAZIONE

La regolamentazione e la gestione della

ricerca sono efficienti?

• Corresponsabilità con altre fonti di sprechi e

inefficienze

• Sproporzione rispetto ai rischi della ricerca

• Processi di regolamentazione e gestione gravosi

ed eterogenei

Page 46: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 47: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

• Approvazione di protocolli di trial

senza alcuna rilevanza clinica

• Approvazione di protocolli di trial

con disegno inadeguato

• Incapacità di mettere in atto azioni

concrete per ridurre il bias di

pubblicazione

Tre motivazioni principali

Page 48: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 49: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Warning to trial protocols… …che non fanno riferimento a revisioni sistematiche

…con outcome surrogati, di rilevanza clinica non provata

…in cui lo sponsor mantiene la proprietà dei dati

…vs placebo in presenza di trattamenti efficaci

…con disegno di non-inferiorità

…di disseminazione (seeding trials)

Page 50: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 51: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

• Finti studi scientifici il cui vero obiettivo non è produrre

nuove conoscenze, ma far familiarizzare i medici con l’uso

di un farmaco in arrivo sul mercato

• Non sono etici ed espongono i partecipanti a inutili rischi

• N° elevato di centri sperimentali

• Pochi pazienti richiesti per ogni centro

• Compensi spropositati

Seeding trials (trial di "disseminazione")

Page 52: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 53: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Priorità raccomandazioni REWARD

•20

%

•20

%

•20

%

•20

%

•20

% 5= Indispensabile

4= Priorità elevata

3= Priorità intermedia

2= Priorità bassa

1= Non è una priorità

Page 54: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

REGOLAMENTAZIONE

8. I soggetti coinvolti nella regolamentazione della

ricerca, forti del loro ruolo, dovrebbero limitare

altre cause di sprechi e inefficienze

Page 55: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Std Deviation 1.07 1. 1

2. 2

3. 3

4. 4

5. 5

Raccomandazione 8

4% 5% 10% 34% 47%

EdiVoteStart EdiVoteStop

94

Standard REGOLAMENTAZIONE

Media DS Average 4.14 ±

Page 56: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 57: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 58: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Waste in independent drug research in Italy: a cross-sectional study

Nino Cartabellotta

GIMBE Foundation

Page 59: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Results: time gap

Grant

approval

Contract with AIFA

Ethical approval

Administrative approval§

Start

§From the research center of the PI

Mean (± SD) 515 (± 318) days*

Range 7-2.058 days*

*Data available for 140/204 (69%) studies

Page 60: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 61: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Per prepararsi al Regolamento EU

• Utilizzo dei dati della ricerca clinica

• Assicurazione per la sperimentazione clinica

• Protezione dei dati personali pazienti

• Utilizzo materiale biologico residuo a scopo di ricerca

• Idoneità centri partecipanti a sperimentazioni cliniche

• Valutazione delle sperimentazioni e comitati etici

Page 62: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

La ricerca no profit e il SSN

• Ruolo della ricerca no profit per il SSN

• Formazione per la ricerca: metodologia, procedure

• Sistemi premianti, re-investimento utili da ricerca

• Figure professionali di supporto alla ricerca

Page 63: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Priorità raccomandazioni REWARD

•20

%

•20

%

•20

%

•20

%

•20

% 5= Indispensabile

4= Priorità elevata

3= Priorità intermedia

2= Priorità bassa

1= Non è una priorità

Page 64: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

REGOLAMENTAZIONE

9. Enti regolatori e policy maker dovrebbero

collaborare con ricercatori, pazienti e professionisti

sanitari per snellire e armonizzare normative,

regolamenti, linee guida e processi che regolano

approvazione e conduzione della ricerca,

assicurando che siano proporzionati ai rischi

verosimili per i partecipanti

Page 65: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Std Deviation 0.80 1. 1

2. 2

3. 3

4. 4

5. 5

Raccomandazione 9

2% 0% 7% 15% 76%

EdiVoteStart EdiVoteStop

94

Standard REGOLAMENTAZIONE

Media DS Average 4.62 ±

Page 66: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

REGOLAMENTAZIONE

10. Ricercatori e soggetti coinvolti nella gestione

della ricerca dovrebbero:

• aumentare l’efficienza dei processi di

reclutamento, mantenimento, monitoraggio e

condivisione dei dati della ricerca, utilizzando

disegni di studio in grado di ridurre le inefficienze

• condurre ulteriori studi sui metodi per aumentare

l’efficienza

Page 67: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Std Deviation 1.12 1. 1

2. 2

3. 3

4. 4

5. 5

Raccomandazione 10

8% 0% 14% 33% 45%

EdiVoteStart EdiVoteStop

93

Standard REGOLAMENTAZIONE

Media DS Average 4.09 ±

Page 68: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

REGOLAMENTAZIONE

11. Tutti, in particolare chi gestisce organizzazioni

sanitarie, possono contribuire a migliorare

l’efficienza della ricerca clinica, promuovendo

l’integrazione dei suoi risultati nella pratica clinica

quotidiana

Page 69: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite

Std Deviation 0.92 1. 1

2. 2

3. 3

4. 4

5. 5

Raccomandazione 11

1% 4% 13% 24% 59%

EdiVoteStart EdiVoteStop

85

Standard REGOLAMENTAZIONE

Media DS Average 4.35 ±

Page 70: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite
Page 71: Raccomandazioni REWARD. Sessione II Metodologia ...Raccomandazioni REWARD. Sessione II Metodologia, regolamentazione e gestione della ricerca Aumentare il value delle risorse investite