Jak jsou studie hodnoceny
Hodnocení používají zjednodušené čtyřúrovňové schéma (Vysoká, Střední, Nízká, Velmi nízká) inspirované pracovní skupinou GRADE. Hodnocení odráží, jak s jistotou lze zjištění studie aplikovat, nikoli kvalitu autorů studie nebo jejich práce. Hodnocení Velmi nízká neznamená, že je studie špatná; často znamená, že jde o pilotní studii nebo kazuistickou sérii, což je přesně to, co v raných fázích oboru chcete.
Současné rozložení
Co každé hodnocení znamená
Vysoká jistota
Velmi vysoká důvěra, že skutečný účinek leží blízko odhadu. Očekává se u zjištění, kde se shoduje více vysoce kvalitních randomizovaných kontrolovaných studií, na různých pracovištích a od různých výzkumných skupin, s minimálním rizikem zkreslení, nekonzistence nebo nepřímosti. Jediná studie sama o sobě jen zřídka dosáhne hodnocení Vysoká - výjimkou je rozsáhlá, vícepracovištní studie s nízkým rizikem zkreslení; jinak Vysoká odráží soubor důkazů, ne jeden článek.
Střední jistota
Přiměřená důvěra v odhadovaný účinek; skutečný účinek je pravděpodobně blízký, ale mohl by se věrohodně lišit. Typické pro dobře navržené jednotlivé RCT s odpovídajícími vzorky a pro systematické přehledy heterogenních primárních studií.
Nízká jistota
Omezená důvěra. Skutečný účinek se může od odhadu podstatně lišit. Běžné u RCT s malým vzorkem, kvazi-experimentálních designů a kvalitativních studií, které všechny přispívají reálnými poznatky, ale samy o sobě nemohou podpořit pevné závěry.
Velmi nízká jistota
Velmi malá důvěra v jakýkoli odhad účinku. Patří sem případové studie, malé pilotní studie a narativní nebo koncepční práce. Tyto studie mají stále hodnotu; prokazují proveditelnost, otevírají otázky a tvoří základ pro pozdější kontrolovanou práci, ale nejsou důkazem účinku.
Odkud pocházejí hodnocení Vysoká
Z 111 studií, které jsou v hubu aktuálně, je 9 (8 %) hodnoceno jako Vysoká. Vysoká jistota téměř vždy odráží shodující se soubor důkazů, ne jediný článek, takže většinu z nich tvoří systematické přehledy a metaanalýzy, které spojují zjištění z mnoha studií. Jediná primární studie dosáhne Vysoká jen jako vzácná výjimka; rozsáhlá, multicentrická studie s nízkým rizikem zkreslení; jinak nejvýše, čeho zde samostatná studie dosáhne, je Střední.
Proto rozložení vypadá tak, jak vypadá: 8 % Vysoká, 36 % Střední, 35 % Nízká a 21 % Velmi nízká. VR v práci s řečí, hlasem a komunikací je stále mladý výzkumný obor, takže většinu důkazů tvoří malé, rané, jednocentrické studie, což je přesně to, co byste očekávali, a přesně to, na čem pozdější kontrolované studie a přehledy staví. Upřímné rozložení, jako je toto, je užitečnější a důvěryhodnější než nadhodnocená hodnocení, která by byla snadnější na pohled.
Co je potřeba k dosažení Vysoká
U konkrétní klinické otázky vyžaduje hodnocení Vysoká shodující se soubor vysoce kvalitních důkazů, obvykle:
- Cochrane review nebo ekvivalentní systematický přehled více vysoce kvalitních RCT v relevantní oblasti (VR pro koktavost, hlasovou práci, afázii, polykání, sociální komunikaci) s konzistentními účinky napříč studiemi.
- Metaanalýzy, které syntetizují několik předregistrovaných RCT s odpovídajícími velikostmi vzorků, minimální heterogenitou a zjištěními, která se shodují ve směru i velikosti.
- Více velkých multicentrických RCT (n > 200 na rameno), které replikují konkrétní účinek praxe založené na VR na komunikační výsledek důležitý pro klienty.
U většiny konkrétních klinických tvrzení ve VR logopedii se tato hloubka důkazů teprve buduje. Jednou otázkou, u které se důkazy postupně spojují, je, zda virtuální publika vyvolávají komunikativní reakce srovnatelné se skutečnými, jak nové práce replikují dřívější zjištění; formální systematický přehled této otázky by byl vítaný.
Jak se rozhoduje o hodnocení
Hodnocení každé studie přiděluje redakčně withVR, přičemž vychází z designu článku (RCT / kvazi-experimentální / kazuistika / přehled), velikosti vzorku, populace a vlastních uvedených limitů článku. Ke každému hodnocení je připojeno krátké odůvodnění, viditelné na stránce studie po rozbalení sekce "Jak bylo hodnoceno".
Hodnocení odrážejí redakční úsudek, ne formální proces hodnocení GRADE typu používaného v Cochrane review. Schéma je úmyslně zjednodušené: čtyři úrovně stačí k tomu, aby naznačily, jak s jistotou by kliničtí pracovníci a výzkumníci měli zjištění aplikovat, aniž by implikovaly přesnost, kterou redakční proces nemá.
Opravy a návrhy vítány
Pokud se domníváte, že studie byla hodnocena nesprávně, nebo že byla opomenuta studie, která si zaslouží zařazení, napište na hello@withvr.app. Schéma má být transparentní a opravitelné.
Další četba
- GRADE working group, mezinárodní spolupráce, která vyvinula metodologii, z níž toto schéma vychází.
- GRADE: an emerging consensus on rating quality of evidence (Guyatt et al., BMJ 2008), zakládající článek.
- Slovník Evidence Hubu, definice souvisejících termínů (úrovně důkazů, riziko zkreslení, PEDro, PICO).
Víte o výzkumu, který by zde měl být? Pokud recenzovaná studie o VR v práci s řečí, hlasem, sluchem nebo komunikací není uvedena, pošlete referenci na hello@withvr.app.