Vuoi collaborare con noi?
Con un impegno crescente:

  • Iscriviti come Fellow
  • Iscriviti alle Aree di EcoCardioChirurgia®
Cerca

Lettura magistrale: dovremmo implementare i risultati di uno studio nella nostra pratica quotidiana?

Autore/Autori:

ID 20260322.06–Lettura-magistrale-Giorgio-Costantino Categorie , , , ,

Relazioni storiche – Congresso 2026

Giorgio Costantino spiega come decidere se applicare i risultati di uno studio clinico alla propria pratica quotidiana. Partendo da due abstract votati dalla platea, sulla procalcitonina per ridurre la terapia antibiotica e sul trial ANDROMEDA-SHOCK, mette in guardia da mode, conflitti di interesse, principio di autorità e fiducia cieca nella significatività statistica, privilegiando gli intervalli di confidenza. Propone poi le domande chiave per valutare un articolo: razionale fisiopatologico, solidità del disegno, rilevanza degli outcome, effetti collaterali e somiglianza dei pazienti arruolati con i propri. La lettura critica è presentata come una tecnica clinica da imparare, al pari dell’ecografia o dell’emogasanalisi.

Informazioni aggiuntive

Anno

Autore

Tag

, , , , , , , , ,

Abstract

Introduzione (00:00:04)

La lettura magistrale affronta il passaggio dalla letteratura scientifica alla pratica clinica quotidiana. Dopo un video ironico sulle ricerche contraddittorie, la platea vota a occhi chiusi su due abstract: uno studio pubblicato su JAMA sulla procalcitonina per ridurre la durata della terapia antibiotica (9,8 contro 10,7 giorni, mortalità 20,9% contro 19,4%, non inferiore) e il trial ANDROMEDA-SHOCK, che confronta il refill capillare con i lattati nello shock settico (mortalità 34,9% contro 43,4%, p = 0,06). In entrambi i casi la maggioranza non cambierebbe pratica. Un sondaggio mostra che i clinici decidono soprattutto in base a colleghi, consulenti, linee guida e manuali, raramente su studi originali.

Meccanismi fisiopatologici (00:07:03)

Più che di fisiopatologia, la relazione tratta i meccanismi che distorcono le decisioni cliniche. L’esperienza del COVID, con terapie usate senza alcuna evidenza per il bisogno di “fare qualcosa”, è l’esempio di ciò da evitare. Pesano le spinte esterne: mode, conflitti di interesse, conflitti di autorevolezza e il delegare ad altri (riviste prestigiose, linee guida spesso discordanti tra loro, primari, consulenti, informatori farmaceutici, ChatGPT) la propria decisione. Un ulteriore errore è affidarsi alla sola significatività statistica: in ANDROMEDA-SHOCK una riduzione assoluta di 8 punti di mortalità, con un intervallo di confidenza compreso tra un possibile danno del 2% e un beneficio fino al 50%, merita considerazione anche con p = 0,06.

Diagnostica (00:09:53)

Valutare uno studio richiede una serie di domande. È sensato e ha un razionale fisiopatologico? Lo studio sulla preghiera retroattiva pubblicato sul British Medical Journal era statisticamente significativo ma privo di senso. Il disegno è solido? Nello studio di non inferiorità su edoxaban contro eparina a basso peso molecolare nella TVP associata a tumore, il trattamento durava sei mesi ma l’outcome era valutato a dodici, favorendo l’equivalenza. Gli outcome sono rilevanti per i pazienti e non surrogati? Gli esempi del dronedarone nella fibrillazione atriale e dell’ivabradina nella cardiopatia ischemica mostrano come un beneficio su un endpoint intermedio possa accompagnarsi a un aumento della mortalità.

Trattamento (00:12:31)

Prima di applicare un risultato vanno considerati gli effetti collaterali, che emergono soprattutto dagli studi di registro dopo l’immissione in commercio, e va verificato che i pazienti arruolati siano simili ai propri: solo il 15-30% dei pazienti della pratica quotidiana sarebbe eleggibile per i principali trial. Superati questi filtri, si leggono lettere, commenti, editoriali e articoli simili; se tutto convince, è importante osare e cambiare la pratica clinica.

Conclusioni (00:13:25)

La lettura critica degli articoli scientifici è una tecnica da imparare come interpretare un’emogasanalisi, eseguire un’ecografia o posizionare un catetere venoso centrale. Permette di superare il principio di autorità, di essere gli avvocati dei propri pazienti e di agire in autonomia secondo il loro maggior bene, senza fidarsi ciecamente neppure dei propri maestri.

Introduction (00:00:04)

This keynote lecture addresses the transition from the scientific literature to everyday clinical practice. After an ironic video about contradictory research reported in the media, the audience votes with eyes closed on two abstracts: a study published in JAMA on procalcitonin to shorten antibiotic therapy (9.8 versus 10.7 days, mortality 20.9% versus 19.4%, non-inferior) and the ANDROMEDA-SHOCK trial, comparing capillary refill with lactate in septic shock (mortality 34.9% versus 43.4%, p = 0.06). In both cases most attendees would not change their practice. A poll also shows that clinicians decide mainly on the basis of colleagues, consultants, guidelines and textbooks, and rarely on original studies.

Pathophysiology (00:07:03)

Rather than pathophysiology, the lecture deals with the mechanisms that distort clinical decisions. The COVID experience, with therapies used without any evidence out of the need to “do something”, is the example of what to avoid. External pressures matter: trends, conflicts of interest, conflicts of authority, and delegating one’s decision to others (prestigious journals, frequently discordant guidelines, heads of department, consultants, pharmaceutical representatives, ChatGPT). A further error is relying on statistical significance alone: in ANDROMEDA-SHOCK an 8-point absolute reduction in mortality, with a confidence interval ranging from a possible 2% harm to a benefit of up to 50%, deserves consideration even with p = 0.06.

Diagnosis (00:09:53)

Appraising a study requires a series of questions. Does it make sense and have a pathophysiological rationale? The retroactive prayer study published in the British Medical Journal was statistically significant but meaningless. Is the design robust? In the non-inferiority study of edoxaban versus low-molecular-weight heparin for cancer-associated DVT, treatment lasted six months but the outcome was assessed at twelve, favoring equivalence. Are the outcomes relevant to patients rather than surrogate? The examples of dronedarone in atrial fibrillation and ivabradine in ischemic heart disease show how a benefit on an intermediate endpoint may be accompanied by increased mortality.

Treatment (00:12:31)

Before applying a result, one must consider side effects, which emerge mainly from registry studies after marketing approval, and check that the enrolled patients resemble one’s own: only 15-30% of everyday patients would be eligible for the main trials. Once these filters are passed, it is worth reading letters, comments, editorials and similar articles; if everything is convincing, it is important to dare and change clinical practice.

Conclusions (00:13:25)

Critical appraisal of scientific articles is a technique to be learned just like interpreting a blood gas analysis, performing an ultrasound scan or placing a central venous catheter. It allows clinicians to overcome the principle of authority, to truly be their patients’ advocates and to act autonomously in their best interest, without blindly trusting even their own mentors.

Trascrizione

Presentazione del relatore (00:00:04)

Dopo questa interessantissima relazione di Benjamin Sun passiamo all’ultima sessione di questa giornata. Sono molto emozionata a presentare il professor Giorgio Costantino, che ha formato intere generazioni di studenti e specializzandi di medicina d’urgenza e di medicina interna. Se sono qui oggi, laureata e specializzata, è per merito suo. Voi dovete sapere una cosa: Giorgio, a differenza di tutti noi mortali che facciamo colazione con pane e marmellata o pane e Nutella, è stato svezzato con pane e metodologia. Quindi chi meglio di lui può spiegarci come applicare la letteratura scientifica alla nostra pratica clinica? Grazie, Giorgio.

Grazie mille, Ila, mi prendi in giro. Grazie tantissimo, e grazie di avermi invitato. Vorrei partire con un video, se parte.

Ricerche che “danno i numeri”: should I stay or should I go? (00:01:30)

[Video] “L’olio di palma contenuto nella cioccolata aumenta del 56% la possibilità di morte precoce. Un’altra ricerca afferma che una mela al giorno toglie il medico di torno. Senza buccia, altrimenti cancro. Una ricerca neozelandese dice che l’acqua si può bere. Anzi, un’altra ricerca dice che un bicchiere d’acqua con mezzo cucchiaino di bicarbonato e succo di limone aiuta a curare il cancro. La stessa ricerca dice però che, se il cancro non ce l’hai, te lo fa venire. Se certe ricerche sembrano dare i numeri, vieni a scoprire…”

Ecco qui. Nella mia esperienza, questo è un po’ quello che mi succede quando leggo un articolo: sono in dubbio se fare quella cosa, should I stay or should I go? Faccio quella cosa oppure non la faccio? Allora, prima volevo proporvi di leggere insieme due brevissimi abstract e di scegliere insieme.

Primo abstract: la procalcitonina per ridurre la durata della terapia antibiotica (00:02:34)

Vi farò votare, non con l’app perché non sono capace, ma chiudendo gli occhi e alzando le mani: cosa fareste dopo aver letto questi articoli? Questo è un articolo uscito circa un anno fa su JAMA che parla dell’utilizzo della procalcitonina per decidere la riduzione del tempo di terapia antibiotica nei pazienti. Gli autori concludono che c’era una riduzione significativa della durata della terapia antibiotica in chi utilizzava un protocollo guidato dalla procalcitonina rispetto allo standard care: 10,7 giorni nello standard care e 9,8 con la procalcitonina. La mortalità nei due gruppi era non inferiore rispetto allo standard care: 19,4% con il protocollo standard e 20,9% con il protocollo guidato dalla procalcitonina, differenza non statisticamente significativa. Quindi gli autori dicono: utilizziamo la procalcitonina per ridurre la durata della terapia antibiotica.

Quello che vi chiedo di fare adesso è chiudere tutti gli occhi e decidere se, dopo aver letto questo articolo, usereste la procalcitonina per sospendere la terapia antibiotica oppure no. Chiudete gli occhi: chi utilizzerebbe la procalcitonina alzi la mano. Giù le mani. Chi non utilizzerebbe la procalcitonina alzi la mano. Ok, la maggior parte di voi non utilizzerebbe la procalcitonina dopo aver letto questo articolo; poi magari ne parliamo. Vi faccio chiudere gli occhi non soltanto perché sono un idiota e mi diverto se tutti voi avete gli occhi chiusi, ma anche perché così non vi influenzate gli uni con gli altri.

Secondo abstract: il trial ANDROMEDA-SHOCK, refill capillare contro lattati (00:04:17)

Questo invece è un articolo che forse avete già visto: è il trial ANDROMEDA-SHOCK, sullo shock. Gli autori hanno provato a valutare, tra l’altro in Sud America, se la valutazione del refill capillare rispetto ai lattati può migliorare la mortalità. E cosa trovano? Che muore il 34,9% dei pazienti nel gruppo refill capillare, mentre muore il 43,4% dei pazienti gestiti con i lattati. Questa differenza non è significativa, la p è 0,06, e concludono dicendo che, purtroppo, una strategia basata sul refill capillare per trattare i pazienti in shock non riduce la mortalità a 28 giorni.

Anche qui vi chiedo: usereste il refill capillare per gestire i pazienti con sepsi? Chiudete gli occhi. Chi utilizzerebbe il refill capillare alzi la mano. Giù le mani. Chi non utilizzerebbe il refill capillare alzi la mano. Ok. Prima quasi tutti hanno detto di no; anche qui la maggior parte ha detto di no, ma non in modo così schiacciante. Mi sembra di capire che praticamente non facciamo niente di quello che ci dicono gli articoli.

In base a cosa decidiamo di cambiare la pratica clinica? (00:05:37)

L’altra domanda è: in base a cosa decidiamo di implementare i risultati di uno studio clinico nella nostra pratica clinica? Qui potete tenere gli occhi aperti e alzare le mani. Perché l’avete letto in un blog: chi utilizza i blog per decidere cosa fare? Alzate le mani. Nessuno. Un collega: siete di guardia, avete un caso clinico, chiedete a un collega che vi dice “Ho letto questo articolo, mi sembra molto bello, trattiamo questo paziente in questo modo”. Alzi la mano chi si affida a un collega. Ok. Un consulente: il primo era un collega, questo è un consulente; più o meno uguale. Delle linee guida: quindi leggete un sacco di linee guida. Uno studio originale, cioè leggete uno studio sul New England Journal of Medicine che dice una cosa e quindi cambiate la vostra pratica clinica: alzate le mani. Pochi. Un libro di testo, per esempio UpToDate oppure un manuale: alzate le mani. Molti. ChatGPT, dite la verità: alzate le mani. Un pochino. Va bene: mi sembra che vadano per la maggiore i consulenti, i colleghi, le linee guida e i libri di testo.

Cosa non fare: la lezione del COVID e le spinte esterne (00:07:03)

Ora vi dico cosa tendenzialmente vi propongo di non fare. Una delle cose che vi propongo di non fare è quello che è successo durante il COVID. Secondo me il problema del COVID non è stato il COVID di per sé, ma siamo stati noi, quello che abbiamo fatto rispetto al COVID: abbiamo fatto delle cose da matti, abbiamo usato terapie a muzzo, quando non c’era nessuna evidenza, perché il messaggio era “bisogna fare qualcosa”. C’era un cartone animato che diceva così, Mogli, non so se era La corsa più pazza del mondo; comunque volevamo fare qualcosa e abbiamo fatto delle cose oscene. Questa secondo me è una cosa assolutamente da non fare: bisogna pensare prima di mettere in pratica qualcosa.

Una delle cose che io non farei è farsi influenzare da spinte esterne: le mode, che sono molto importanti (uno vede che tutti fanno quella cosa lì e allora la facciamo anche noi); i conflitti di interesse, ma anche i conflitti di autorevolezza o di autorità, cioè fare quello che fa una persona che stimiamo molto, solo perché abbiamo visto che lui lo fa. Oppure, la cosa più importante da non fare, secondo me: far decidere altri al posto nostro. Una rivista prestigiosa: quasi nessuno di voi ha detto che cambierebbe la pratica clinica sulla base di un articolo del New England. Le linee guida: secondo me hanno un senso, ma bisogna interpretarle. Sapete che, se confrontiamo cinque linee guida diverse, nella metà dei casi dicono cose assolutamente diverse, a volte opposte. Non dovete ascoltare il primario: assolutamente non ascoltatelo. Un consulente, dipende. Un informatore farmaceutico. E su ChatGPT e OpenAI, dal mio punto di vista, bisogna avere qualche perplessità.

Non fidarsi della significatività statistica: gli intervalli di confidenza (00:08:42)

L’altra cosa che secondo me non dovete assolutamente fare è fidarvi della significatività statistica. Vi ho fatto vedere questo trial, l’ANDROMEDA-SHOCK, che confrontava il refill capillare con i lattati per vedere se migliorava la mortalità. C’era una differenza di mortalità dal 35% al 43%, cioè 8 punti percentuali in valore assoluto: vuol dire che ogni 10-12 pazienti che trattiamo uno lo potremmo salvare. Non è che, siccome la p è 0,06, questo trial non funziona. È molto meglio, per esempio, guardare gli intervalli di confidenza, e così potete anche ragionare in questo modo: nella peggiore delle ipotesi l’intervallo di confidenza arriva a 1,02, quindi potrei aumentare la mortalità di quei pazienti del 2%, ma nella migliore delle ipotesi posso ridurla del 50%. Quindi, se io andassi in pronto soccorso e avessi uno shock […], direi: guardami il refill capillare insieme ai lattati. Quindi non fidatevi della significatività statistica.

Cosa chiedersi: lo studio è sensato e ha un razionale fisiopatologico? (00:09:53)

Cosa fare e cosa chiedersi, allora, per decidere di applicare i risultati di uno studio nella vostra pratica clinica? La prima cosa è capire se lo studio vi sembra sensato e se c’è un razionale fisiopatologico. Questo studio pubblicato sul British Medical Journal mi era piaciuto un sacco. Cosa avevano fatto? Avevano analizzato un database di pazienti ricoverati anni prima e, anni dopo, li avevano randomizzati in due gruppi: in un gruppo c’erano dei clinici che pregavano per quei pazienti, nell’altro dei clinici che non pregavano, guardavano la foto e non facevano niente. E cosa hanno visto? Che i pazienti randomizzati al gruppo della preghiera avevano un esito migliore, cioè una durata minore della degenza in terapia intensiva. Ed era statisticamente significativo, quindi ottimo. Ovviamente un trial di questo tipo non ha nessun senso, perché non ha un razionale fisiopatologico, anche se adesso io facessi andare alcuni dei miei medici e infermieri in una stanzetta a pregare per tutti i pazienti che entrano.

Il disegno dello studio e la rilevanza degli outcome (00:11:00)

L’altra cosa è chiedersi se il disegno dello studio è solido. Questo è uno studio che forse conoscete sull’edoxaban, uno dei nuovi anticoagulanti orali, nel trattamento delle TVP associate a tumore. Hanno fatto uno studio di non inferiorità e l’hanno concepito in questo modo: per sei mesi i pazienti erano randomizzati a edoxaban oppure a eparina a basso peso molecolare, poi potevano fare quello che volevano; e però hanno valutato l’outcome a 12 mesi, cioè sei mesi dopo l’interruzione del trattamento. Era uno studio di non inferiorità: cosa verrà fuori? Che i due farmaci sono non inferiori, nel senso che, se fai un trattamento per sei mesi, poi non fai niente e controlli gli outcome a dodici mesi, è probabile che i due trattamenti risultino simili. Quindi bisogna chiedersi com’è il disegno dello studio e se ha dei bias oppure no.

L’altra cosa è se gli outcome sono rilevanti, perché moltissimi degli studi che leggiamo hanno outcome surrogati; in parte l’ha detto prima anche Benjamin Sun. Anche la coronarografia potrebbe essere un outcome surrogato. Ci sono un sacco di esempi in letteratura: il dronedarone, ve lo ricordate, nella fibrillazione atriale sembrava fantastico, e poi alcuni studi hanno mostrato che riduceva l’incidenza di fibrillazione atriale ma poteva aumentare la mortalità. L’ivabradina nella cardiopatia ischemica, eccetera. Quindi l’outcome deve essere un outcome importante per noi, ma soprattutto per i nostri pazienti.

Effetti collaterali, pazienti simili ai nostri e il coraggio di osare (00:12:31)

Poi bisogna chiedersi se ci sono effetti collaterali: questo non si vede tanto nei trial randomizzati controllati, ma soprattutto negli studi di registro, cioè vedendo cosa succede quando un farmaco viene immesso sul mercato. E poi se i pazienti sono simili ai vostri. Sapete che molti studi hanno provato a vedere quanti dei pazienti visti nella pratica clinica quotidiana sarebbero arruolabili nei principali trial, e questo numero è tipo 30%, 15%. Quindi attenzione, perché a volte prendiamo decisioni basate su pazienti completamente diversi dai nostri: bisogna essere critici da questo punto di vista. Una volta che avete fatto tutte queste cose e tutte vanno bene, potete leggere le lettere, i commenti, gli editoriali ed eventualmente altri articoli simili. Ma se tutti vi convincono, io penso che sia importante osare, cioè fare la cosa che leggete nell’articolo scientifico o sulla rivista.

Conclusioni: la lettura critica come tecnica clinica (00:13:25)

Oggi abbiamo parlato di eco, e parlerete tanto di eco, di emogasanalisi e di altre cose. Io penso che la lettura critica degli articoli scientifici sia proprio come le altre cose che facciamo tutti i giorni, interpretare un’emogasanalisi, fare un’ecografia, mettere un catetere venoso centrale: è una tecnica che dobbiamo assolutamente imparare per essere medici migliori. Ma anche perché è una cosa bellissima: ci permette di abbattere tutto ciò che è autorità e autorevolezza, di essere davvero gli avvocati dei nostri pazienti e di agire in autonomia rispetto a quello che pensiamo sia il bene maggiore per loro. Grazie mille.

Ci sono domande? Qua non abbiamo nessuna domanda. Nel frattempo, mentre ci pensate, Giorgio, vorrei chiederti una cosa: hai detto che in realtà non dobbiamo fidarci di quello che dicono i capi, i primari. Ma allora io, che per tutta la vita dico ai miei studenti “si fa così perché lo dice Giorgio Costantino”, sbaglio o è giusto?

Allora, devo confessarti una cosa: ti ho preso in giro per un sacco di anni, ti ho detto cose assolutamente assurde, come faccio di solito. Quindi sì, non devi fidarti. Grazie.

Introduction of the speaker (00:00:04)

After this very interesting talk by Benjamin Sun, we move on to the last session of the day. I am very moved to introduce Professor Giorgio Costantino, who has trained entire generations of students and residents in emergency medicine and internal medicine. If I am here today, with my degree and my specialization, it is thanks to him. You should know one thing: unlike the rest of us mortals, who have bread and jam or bread and Nutella for breakfast, Giorgio was weaned on bread and methodology. So who better than him to explain how to apply the scientific literature to our clinical practice? Thank you, Giorgio.

Thank you very much, Ila, you are teasing me. Thank you so much, and thank you for inviting me. I would like to start with a video, if it plays.

Research that “goes crazy with numbers”: should I stay or should I go? (00:01:30)

[Video] “The palm oil contained in chocolate increases the chance of early death by 56%. Another study claims that an apple a day keeps the doctor away. Without the peel, otherwise cancer. A New Zealand study says that water is safe to drink. Actually, another study says that a glass of water with half a teaspoon of baking soda and lemon juice helps cure cancer. The same study says, however, that if you don’t have cancer, it gives it to you. If some research seems to go crazy with numbers, come and find out…”

There you go. In my experience, this is more or less what happens to me when I read an article: I am unsure whether to do that thing, should I stay or should I go? Do I do it or not? So first I wanted to suggest that we read together two very short abstracts and decide together.

First abstract: procalcitonin to shorten antibiotic therapy (00:02:34)

I will make you vote, not with the app because I don’t know how to use it, but by closing your eyes and raising your hands: what would you do after reading these articles? This is an article published about a year ago in JAMA on the use of procalcitonin to guide shortening of antibiotic therapy. The authors conclude that there was a significant reduction in the duration of antibiotic therapy in patients managed with a procalcitonin-guided protocol compared with standard care: 10.7 days with standard care versus 9.8 days with procalcitonin. Mortality in the two groups was non-inferior compared with standard care: 19.4% with the standard protocol and 20.9% with the procalcitonin-guided protocol, a difference that was not statistically significant. So the authors say: let us use procalcitonin to reduce the duration of antibiotic therapy.

What I am asking you to do now is to close your eyes and decide whether, after reading this article, you would use procalcitonin to stop antibiotic therapy or not. Close your eyes: whoever would use procalcitonin, raise your hand. Hands down. Whoever would not use procalcitonin, raise your hand. OK, most of you would not use procalcitonin after reading this article; maybe we will discuss it later. I make you close your eyes not only because I am an idiot and enjoy seeing all of you with your eyes closed, but also so that you do not influence one another.

Second abstract: the ANDROMEDA-SHOCK trial, capillary refill versus lactate (00:04:17)

This, on the other hand, is an article you may have already seen: the ANDROMEDA-SHOCK trial, on shock. The authors tried to assess, in South America by the way, whether assessing capillary refill compared with lactate could improve mortality. And what did they find? That 34.9% of patients in the capillary refill group died, while 43.4% of patients managed with lactate died. This difference is not significant, the p value is 0.06, and they conclude that, unfortunately, a strategy of using capillary refill to treat patients in shock does not reduce 28-day mortality.

Here too I ask you: would you use capillary refill to manage patients with sepsis? Close your eyes. Whoever would use capillary refill, raise your hand. Hands down. Whoever would not use capillary refill, raise your hand. OK. Before, almost everyone said no; here too most of you said no, but not so overwhelmingly. It seems to me that we do practically nothing of what the articles tell us.

What do we base changes in clinical practice on? (00:05:37)

The other question is: on what basis do we decide to implement the results of a clinical study in our clinical practice? Here you can keep your eyes open and raise your hands. Because you read it on a blog: who uses blogs to decide what to do? Raise your hands. Nobody. A colleague: you are on call, you have a clinical case, you ask a colleague who tells you “I read this article, it looks very good, let’s treat this patient this way”. Raise your hand if you rely on a colleague. OK. A consultant: the first was a colleague, this is a consultant; more or less the same. Guidelines: so you read a lot of guidelines. An original study, that is, you read a study in the New England Journal of Medicine that says something and you change your clinical practice: raise your hands. Few. A textbook, for example UpToDate or a textbook: raise your hands. Many. ChatGPT, tell the truth: raise your hands. A few. All right: it seems that consultants, colleagues, guidelines and textbooks are the most popular.

What not to do: the lesson of COVID and external pressures (00:07:03)

Now I will tell you what I generally suggest you do not do. One of the things I suggest you do not do is what happened during COVID. In my opinion, the problem with COVID was not COVID itself, it was us, what we did in response to COVID: we did crazy things, we used therapies at random, when there was no evidence whatsoever, because the message was “we have to do something”. There was a cartoon that said that, Mowgli, I don’t know if it was Wacky Races; anyway, we wanted to do something and we did obscene things. In my opinion this is something absolutely not to do: we must think before putting something into practice.

One of the things I would not do is let myself be influenced by external pressures: trends, which are very powerful (you see everyone doing that thing, so we do it too); conflicts of interest, but also conflicts of authoritativeness or authority, that is, doing what a person we greatly respect does just because we saw him do it. Or, the most important thing not to do, in my opinion: letting others decide for us. A prestigious journal: almost none of you said you would change your clinical practice based on a New England article. Guidelines: in my opinion they make sense, but they must be interpreted. You know that if we compare five different guidelines, in half of the cases they say completely different, sometimes opposite, things. You must not listen to the head of department: absolutely do not listen to him. A consultant, it depends. A pharmaceutical sales representative. And regarding ChatGPT and OpenAI, from my point of view some skepticism is warranted.

Do not trust statistical significance: confidence intervals (00:08:42)

The other thing that, in my opinion, you absolutely must not do is trust statistical significance. I showed you this trial, ANDROMEDA-SHOCK, which compared capillary refill with lactate to see whether it improved mortality. There was a difference in mortality from 35% to 43%, that is, 8 percentage points in absolute terms: it means that for every 10-12 patients we treat, we could save one. The fact that the p value is 0.06 does not mean that the trial does not work. It is much better, for example, to look at confidence intervals, and then you can also reason this way: in the worst case the confidence interval goes up to 1.02, so I could increase mortality in those patients by 2%, but in the best case I can reduce it by 50%. So if I went to the emergency department and had a patient in shock […], I would say: check capillary refill for me together with lactate. So do not trust statistical significance.

What to ask: does the study make sense and have a pathophysiological rationale? (00:09:53)

So what should you do and ask yourselves in order to decide whether to apply the results of a study in your clinical practice? The first thing is to understand whether the study makes sense to you and whether there is a pathophysiological rationale. I really liked this study published in the British Medical Journal. What did they do? They analyzed a database of patients who had been hospitalized years earlier and, years later, randomized them into two groups: in one group there were clinicians who prayed for those patients, in the other clinicians who did not pray, looked at the photo and did nothing. And what did they find? That patients randomized to the prayer group had a better outcome, that is, a shorter length of stay in the intensive care unit. And it was statistically significant, so excellent. Obviously a trial of this kind makes no sense, because it has no pathophysiological rationale, even if I now had some of my doctors and nurses go into a little room and pray for all incoming patients.

Study design and relevance of outcomes (00:11:00)

The other thing is to ask whether the study design is robust. This is a study you may know on edoxaban, one of the new oral anticoagulants, in the treatment of cancer-associated DVT. They carried out a non-inferiority study and designed it this way: for six months patients were randomized to edoxaban or low-molecular-weight heparin, after which they could do whatever they wanted; however, they assessed the outcome at 12 months, that is, six months after treatment was stopped. It was a non-inferiority study: what will come out? That the two drugs are non-inferior, in the sense that if you treat for six months, then do nothing and check the outcomes at twelve months, the two treatments are likely to look similar. So you need to ask yourselves what the study design is and whether it is biased or not.

The other thing is whether the outcomes are relevant, because a great many of the studies we read have surrogate outcomes; Benjamin Sun partly mentioned this earlier as well. Even coronary angiography could be a surrogate outcome. There are lots of examples in the literature: dronedarone, you remember, in atrial fibrillation seemed fantastic, and then some studies showed that it reduced the incidence of atrial fibrillation but could increase mortality. Ivabradine in ischemic heart disease, and so on. So the outcome must be an important outcome for us, but above all for our patients.

Side effects, patients similar to ours and the courage to act (00:12:31)

Then you need to ask whether there are side effects: this is not seen much in randomized controlled trials, but mainly in registry studies, that is, by looking at what happens once a drug is on the market. And then whether the patients are similar to yours. You know that many studies have tried to determine how many of the patients seen in everyday clinical practice would be eligible for the main trials, and this figure is around 30%, 15%. So be careful, because sometimes we make decisions based on patients who are completely different from ours: we need to be critical in this respect. Once you have done all these things and they all check out, you can read the letters, the comments, the editorials and possibly other similar articles. But if they all convince you, I think it is important to dare, that is, to do what you read in the scientific article or in the journal.

Conclusions: critical appraisal as a clinical technique (00:13:25)

Today we have talked about echo, and you will talk a lot about echo, blood gas analysis and other things. I think that the critical appraisal of scientific articles is just like the other things we do every day, interpreting a blood gas analysis, performing an ultrasound scan, placing a central venous catheter: it is a technique we absolutely must learn in order to be better doctors. But also because it is a wonderful thing: it allows us to break down all forms of authority and authoritativeness, to truly be our patients’ advocates and to act autonomously according to what we believe is in their best interest. Thank you very much.

Are there any questions? We have no questions here. In the meantime, while you think about it, Giorgio, I would like to ask you something: you said that we should not actually trust what our bosses, the heads of department, say. But then I, who all my life have been telling my students “this is how it’s done because Giorgio Costantino says so”, am I wrong or right?

Well, I have to confess something: I have been teasing you for years, I told you absolutely absurd things, as I usually do. So yes, you should not trust me. Thank you.

Nuove funzionalità
nella fruizione dei contenuti su
ECOCARDIOCHIRURGIA.it

Stiamo aggiornando gradualmente tutti i contenuti esistenti e già 1/5 dell’archivio contiene due importanti novità.

La prima è che i video gradualmente saranno tutti disponibili, salvo alcuni contenuti soggetti a restrizioni, direttamente su YouTube.

Questo porta diversi vantaggi: sottotitoli disponibili e traducibili in varie lingue, maggiore velocità di riproduzione e alleggerimento del server da compiti gravosi.

Ma soprattutto, ogni relazione sarà accompagnata da un Abstract e dalla trascrizione completa, entrambi disponibili in italiano e in inglese.

All’interno dei testi saranno presenti anche i riferimenti temporali dei principali passaggi della relazione. Questo significa che, cliccando su un timecode, ad esempio (09:48), sarà possibile avviare il video esattamente da quel punto.

Un altro grande vantaggio è la possibilità di cercare parole o frasi presenti nei contributi, cosa che prima non era possibile.

Non dimenticate inoltre di iscrivervi al nostro canale YouTube: cliccando qui sotto:

una volta aperto Youtube, selezionate Iscriviti e attivate la campanella 🔔 per ricevere gli aggiornamenti sui nuovi contenuti pubblicati.