MétaCan
Menu
← Retour à la cohorte
Enregistrement W4389992484 · doi:10.1101/2023.12.18.23300180

Clinical Uncertainty In Large Vessel Occlusion Ischemic Stroke (CULVO): An Intrarater And Interrater Agreement Study

2023· preprint· en· W4389992484 sur OpenAlexaffabout
Jose Danilo Bengzon Diestro, Robert Fahed, Abdelsimar T. Omar, Christine Hawkes, Eef J. Hendriks, Clare Angeli G. Enriquez, Muneer Eesa, Grant Stotts, Hubert Lee, Shashank Nagendra, Alexandre Y. Poppe, Célina Ducroux, Timothy Lim, Karl Narvacan, Michael Rizutto, Afra Alfalahi, Hidehisa Nishi, Pragyan Sarma, Vladislav Ze’ev Itsekzon-Hayosh, Katrina Hannah D. Ignacio, William Boisseau, Eduardo Pimenta Ribeiro Pontes Almeida, Anass Benomar, Mohammed Almekhlafi, Genvieve Milot, Aviraj S. Deshmukh, Kislay Kishore, Donatella Tampieri, Jeffrey Z. Wang, Abhilekh Srivastava, Daniel Roy, Federico Carpani, Nima Kashani, Claudia Candale-Radu, Nishita Singh, Maria Bres-Bullrich, Robert Joseph Sarmiento, Ryan T. Muir, Carmen Parra-Fariñas, Stephanie Reiter, Yan Deschaintre, Ravinder‐Jeet Singh, Vivel Bodani, Aristeidis H. Katsanos, Ronit Agid, Atif Zafar, Vítor Mendes Pereira, Julian Spears, Thomas R. Marotta, Pascal Djiadeu, Sunjay Sharma, Forough Farrokhyar

Notice bibliographique

RevuemedRxiv · 2023
Typepreprint
Langueen
DomaineMedicine
ThématiqueAcute Ischemic Stroke Management
Établissements canadiensSickKids FoundationHospital for Sick ChildrenWestern UniversityUniversity of ManitobaUniversity of SaskatchewanRoyal University HospitalQueen's UniversityNOSM UniversityHealth Sciences NorthCentre Hospitalier de l’Université de MontréalUniversité de MontréalImpactTrillium Health CentreUniversity Health NetworkOttawa HospitalUniversity of CalgaryHealth Sciences CentreSt. Michael's HospitalSunnybrook Health Science CentreCentre hospitalier de l'Université LavalUniversity of British ColumbiaToronto Western HospitalKingston Health Sciences CentreUniversity of OttawaVancouver General HospitalHamilton General HospitalToronto General HospitalMcMaster UniversityUniversity of Toronto
Organismes subventionnairesnon disponible
Mots-clésInter-rater reliabilityNeuroimagingStroke (engine)Perfusion scanningMedicinePerfusionRadiologyIntra-rater reliabilityConfidence intervalOcclusionNuclear medicinePsychologyCardiologyRating scaleInternal medicinePsychiatry

Résumé

récupéré en direct d'OpenAlex

Abstract Background Limited research exists regarding the impact of neuroimaging modality on endovascular thrombectomy (EVT) decisions for late window large vessel occlusion (LVO) stroke cases. Purpose This study assesses whether perfusion CT imaging: 1) alters the proportion of recommendations for EVT, and 2) enhances the reliability of EVT decision-making compared to non-contrast CT and CT angiography. Materials and Methods We conducted an online survey using 30 patients drawn from an institutional database of 3144 acute stroke cranial CT scans. These cases were presented to 29 stroke or neurointerventional physicians from Canada across two sessions. Physicians evaluated each patient both with and without perfusion imaging and gave EVT recommendations. We used non-overlapping 95% confidence intervals and difference in agreement classification as criteria to suggest a difference between the Gwet AC1 statistics (κ G ). Our outcomes were: 1) the proportion of EVT recommendations, and 2) interrater and intrarater agreement, with or without perfusion imaging. Results In the first round, 29 raters completed the assessment, with 28 finishing the second round. The percentage of EVT recommendations differed by 1.1% with or without perfusion imaging. However, individual decisions changed in 21.4% of cases, with 11.3% against EVT and 10.1% in favor. Interrater agreement (κG) among the 29 raters was similar between non-perfusion CT neuroimaging and perfusion CT neuroimaging (κG = 0.487; 95% CI 0.327, 0.647 and κG = 0.552; 95% CI 0.430, 0.675). The 95% CIs overlapped with moderate agreement in both. Intrarater agreement exhibited overlapping 95% CIs for all 28 raters. κG was either substantial or excellent (0.81-1) for 71.4% (20/28) of raters in both groups. Conclusion The difference in EVT recommendations is minimal with either neuroimaing protocol. Regarding agreement we found that use of automated CT perfusion images does not significantly impact the reliability of EVT decisions for late window LVO patients.

Récupéré en direct depuis OpenAlex et désinversé. Les résumés ne sont pas conservés dans cette base de données : les index inversés représentent 8,6 Go des 9,3 Go de texte de la base, et le serveur dispose de 13 Go libres.

Comment cette classification a été obtenuedéplier

Prédiction machine sur la base complète

Imitation des enseignants

Ni prévalence calibrée, ni vérité terrain. Validation humaine à venir. Le volet Gemma est une étiquette directe du modèle pour chaque travail de la base, lue sur la notice réduite au titre. Le volet Codex est un classifieur appris des 10 348 étiquettes directes de Codex et calibré sur les taux pondérés de l'échantillon; les champs sans appui suffisant ne portent aucun appel Codex. Le mode candidate est l'union des deux volets; le consensus est leur intersection. Ces sorties portent le statut machine_predicted_unvalidated et ne sont pas des étiquettes humaines.

score de la tête « metaresearch » (Codex)0,088
score de la tête « metaresearch » (Gemma)0,248
Version: metacan-v3-hybrid-931329e0061cStatut de validation: machine_predicted_unvalidated
Catégories candidatesMétarecherche
Catégories consensuellesaucune
DomaineSignal candidat: Méthodes · Signal consensuel: aucune
Devis d'étudeSignal candidat: Observationnel · Signal consensuel: Observationnel
GenreSignal candidat: Empirique · Signal consensuel: Empirique
Score de désaccord entre enseignants0,912
Score d'incertitude au seuil0,467

Scores du classifieur distillé par catégorie (deux têtes)

CatégorieCodexGemma
Métarecherche0,0880,248
Méta-épidémiologie (sens strict)0,0010,001
Méta-épidémiologie (sens large)0,0010,002
Bibliométrie0,0030,002
Études des sciences et des technologies0,0010,002
Communication savante0,0020,002
Science ouverte0,0010,004
Intégrité de la recherche0,0010,001
Charge utile insuffisante (le modèle a refusé de juger)0,0010,000

Scores machine (provisoires)

Les deux têtes enseignantes du modèle étudiant, lues sur ce travail. Un score ordonne la base pour la relecture; il n'affirme jamais une catégorie, et le statut de validation accompagne chaque rangée tel quel.

Scores de référence d'un modèle non mature (critères de maturité non atteints, 7 itérations). Un score ordonne; il n'affirme jamais une catégorie.

Tête enseignante Opus0,052
Tête enseignante GPT0,361
Écart entre enseignants0,309 · la distance entre les deux têtes enseignantes sur ce seul travail
Statut de validationscore_only:v0-immature-baseline · tel quel depuis la passe de notation : score_only signifie que le nombre peut ordonner les travaux, et qu'aucune étiquette de catégorie n'en découle

Classification

machine, non validée

Prédiction automatique; un appel candidat d’une seule source (Gemma direct ou Codex distillé), pas un consensus.

Devis d'étudeObservationnel
DomaineMéthodes
GenreEmpirique

Le détail, modèle par modèle et score par score, se trouve en fin de page sous « Comment cette classification a été obtenue ».

En bref

Citations0
Publié2023
Routes d'admission2
Résumé présentoui

Explorer davantage

Même revuemedRxiv→Même sujetAcute Ischemic Stroke Management→Travaux en français237 207→