Come vengono valutati gli studi
Le valutazioni utilizzano uno schema semplificato a quattro livelli (Alta, Moderata, Bassa, Molto bassa) ispirato al GRADE working group. La valutazione riflette quanto si possa applicare con fiducia ciò che lo studio rileva, non la qualità degli autori o del loro lavoro. Una valutazione Molto bassa non significa che lo studio sia scadente; spesso significa che si tratta di uno studio pilota o di una serie di casi, esattamente ciò che serve agli inizi di un campo di ricerca.
Distribuzione attuale
Cosa significa ciascuna valutazione
Certezza alta
Forte fiducia che l'effetto reale si collochi vicino alla stima. Si attende per risultati in cui più RCT di alta qualità convergono, su sedi e gruppi di ricerca diversi, con rischio minimo di bias, incoerenza o indirezza. Un singolo studio raramente raggiunge da solo la valutazione Alta; l'eccezione è un ampio trial multicentrico con rischio minimo di bias; per il resto, l'Alta riflette un corpus di evidenze, non un singolo paper.
Certezza moderata
Ragionevole fiducia nell'effetto stimato; l'effetto reale è probabilmente vicino, ma plausibilmente potrebbe differire. Tipica per RCT singoli ben progettati con campioni adeguati e per revisioni sistematiche di studi primari eterogenei.
Certezza bassa
Fiducia limitata. L'effetto reale potrebbe essere sostanzialmente diverso dalla stima. Comune per RCT con campioni piccoli, disegni quasi-sperimentali e studi qualitativi. Tutti contribuiscono a una conoscenza reale, ma non possono da soli sostenere conclusioni ferme.
Certezza molto bassa
Pochissima fiducia in qualsiasi stima dell'effetto. Qui si collocano studi di caso, piccoli pilota e contributi narrativi o concettuali. Questi studi restano preziosi: stabiliscono la fattibilità, sollevano domande e gettano le basi per il successivo lavoro controllato. Non costituiscono però evidenza di efficacia.
Da dove arrivano le valutazioni Alta
Dei 111 studi attualmente presenti nell'hub, 9 (8%) sono valutati Alta. La certezza Alta riflette quasi sempre un corpus di evidenze convergenti più che un singolo paper, quindi la maggior parte è costituita da revisioni sistematiche e meta-analisi che aggregano risultati provenienti da molti studi. Un singolo studio primario raggiunge Alta solo come rara eccezione, ossia un ampio trial multicentrico con rischio minimo di bias; per il resto, al massimo uno studio a sé stante ottiene qui Moderata.
Ecco perché la distribuzione si colloca dove si colloca: 8% Alta, 36% Moderata, 35% Bassa e 21% Molto bassa. La VR per il lavoro su parlato, voce e comunicazione è ancora un campo di ricerca giovane, quindi la maggior parte delle evidenze è costituita da studi piccoli, iniziali e monocentrici: esattamente ciò che ci si aspetterebbe, ed esattamente ciò su cui si costruiscono i successivi trial controllati e le revisioni. Una distribuzione onesta come questa è più utile, e più affidabile, di valutazioni gonfiate che sarebbero più gradevoli all'occhio.
Cosa serve per raggiungere Alta
Per una specifica domanda clinica, una valutazione Alta richiede un corpus convergente di evidenze di alta qualità, in genere:
- Una revisione Cochrane o una revisione sistematica equivalente di più RCT di alta qualità in un'area pertinente (VR per balbuzie, lavoro sulla voce, afasia, deglutizione, comunicazione sociale) con effetti coerenti tra gli studi.
- Meta-analisi che sintetizzino diversi RCT preregistrati con campioni adeguati, eterogeneità minima e risultati che convergono per direzione e ampiezza.
- Più ampi RCT multicentrici (n > 200 per braccio) che replichino uno specifico effetto della pratica basata su VR su un esito comunicativo rilevante per i clienti.
Per la maggior parte delle affermazioni cliniche specifiche nella VR in logopedia, questa profondità di evidenze è ancora in costruzione. Una domanda che converge in modo costante è se i pubblici virtuali producano risposte comunicative paragonabili a quelle reali, via via che nuovi lavori replicano risultati precedenti: una revisione sistematica formale di questa domanda sarebbe benvenuta.
Come vengono decise le valutazioni
La valutazione di ciascuno studio è assegnata editorialmente da withVR, sulla base del disegno del paper (RCT / quasi-sperimentale / caso / revisione), della dimensione del campione, della popolazione e dei limiti dichiarati nel paper stesso. Una breve motivazione accompagna ogni valutazione, visibile nella pagina dello studio espandendo "Come è stata assegnata questa valutazione".
Le valutazioni riflettono un giudizio editoriale, non un processo formale di valutazione GRADE come quello utilizzato nelle revisioni Cochrane. Lo schema è volutamente semplificato: quattro livelli sono sufficienti per segnalare con quanta fiducia clinici e ricercatori dovrebbero applicare un risultato, senza implicare una precisione che il processo editoriale non possiede.
Correzioni e suggerimenti benvenuti
Se ritieni che uno studio sia stato valutato in modo errato, o se uno studio meritevole è stato omesso, scrivi a hello@withvr.app. Lo schema vuole essere trasparente e correggibile.
Letture di approfondimento
- GRADE working group, la collaborazione internazionale che ha sviluppato la metodologia a cui si ispira questo schema.
- GRADE: an emerging consensus on rating quality of evidence (Guyatt et al., BMJ 2008), il paper fondativo.
- Glossario dell'Evidence Hub, definizioni di termini correlati (livelli di evidenza, rischio di bias, PEDro, PICO).
Conosci ricerche che dovrebbero essere qui? Se uno studio peer-reviewed sulla VR in logopedia, voce, udito o comunicazione non è elencato, invia il riferimento a hello@withvr.app.