Co studie hodnotila
Studie hodnotila, zda Carebot AI Bones zlepšuje schopnost kliniků odhalovat zlomeniny na muskuloskeletálních rentgenových snímcích.
Celkem 726 rentgenových snímků z pěti českých nemocnic bylo dvakrát interpretováno sedmi klinickými lékaři. V první fázi čtení lékaři interpretovali snímky bez AI. Po 30denním období interpretovali stejné případy znovu s podporou rozhodování AI.
Primární analýza využila 630 rentgenových snímků, u nichž se odborný traumatolog a odborný radiolog shodli na přítomnosti nebo nepřítomnosti zlomeniny. Tento soubor zahrnoval 197 rentgenových snímků s přítomnou zlomeninou a 433 rentgenových snímků bez zlomeniny.
Výsledky studie v klinické praxi
Hodnocení s podporou AI bylo spojeno s jasným snížením počtu přehlédnutých zlomenin. Celková senzitivita vzrostla z 86,26 % bez AI na 94,56 % s AI, zatímco počet přehlédnutých zlomenin klesl ze 190 na 75 napříč všemi hodnoceními hodnotitel–případ.
Toto zlepšení bylo doprovázeno mírným poklesem ve specificitě, která klesla z 93,79 % na 90,21 %, což odráží více falešně pozitivních nálezů. Efekt se lišil podle čtenáře, přičemž největší zlepšení bylo pozorováno u čtenáře s nejnižší výchozí senzitivitou.
V praxi tato zjištění podporují Carebot AI Bones jako nástroj pro podporu rozhodování. Pozitivní doporučení AI by měla být chápána spíše jako podnět k pečlivému opětovnému přezkoumání než jako definitivní diagnózy.
Klíčová čísla
Primární analytický soubor: 630 rentgenových snímků
Hodnotitelé: 7 lékařů
Nemocnice: 5 českých nemocnic
Design studie: multicentrická crossover studie s 30denním washoutem
Změna senzitivity: +8,30 procentního bodu, p < 0,001
Změna specificity: -3,58 procentního bodu, p = 0,035
Přehlédnuté zlomeniny: snížení z 190 na 75
Největší nárůst senzitivity na úrovni čtenáře: 50,76 % na 90,36 %
Abstrakt
Přehlédnutí fraktur na rentgenových snímcích pohybového aparátu zůstává závažným diagnostickým problémem, zejména v akutních a vysoce vytížených klinických zařízeních. Tato multicentrická crossover studie hodnotila, zda může systém Carebot AI Bones zlepšit výkonnost klinických lékařů při detekci fraktur. Studie zahrnovala 726 rentgenových snímků pohybového aparátu z pěti českých nemocnic. Sedm klinických lékařů vyhodnotilo všechny snímky dvakrát: nejprve bez podpory umělé inteligence a poté, po 30denní přestávce, s rozhodovací podporou umělé inteligence. Primární analýza byla provedena na 630 rentgenových snímcích se stanovenou základní pravdou, včetně 197 případů s pozitivním nálezem fraktury a 433 případů s negativním nálezem. Interpretace s podporou AI zvýšila celkovou senzitivitu z 86,26 % na 94,56 %, což odpovídá zlepšení o 8,30 procentních bodů. Počet přehlédnutých fraktur se snížil ze 190 bez AI na 75 s AI. Specifita klesla z 93,79 % na 90,21 %, což naznačuje nárůst falešně pozitivních nálezů zlomenin v závislosti na čtenáři. Poměr negativní pravděpodobnosti se zlepšil z 0,15 na 0,06, což podporuje lepší výkon při vyloučení diagnózy s podporou AI. Senzitivita se zvýšila u šesti ze sedmi hodnotitelů, přičemž největší přínos byl zaznamenán u hodnotitele s nejnižší výchozí senzitivitou. Tyto výsledky podporují Carebot AI Bones jako nástroj podporující rozhodování, který může pomoci snížit počet přehlédnutých fraktur, přičemž AI-pozitivní nálezy by měly i nadále podléhat ověření klinickým lékařem.
