MétaCan
Menu
Retour à la cohorte
Enregistrement W4402557249 · doi:10.1002/gin2.70003

MATCH‐IT: A decision support tool for multiple comparisons presenting data from network meta‐analysis to facilitate guideline development

2024· article· en· W4402557249 sur OpenAlexaff
Birk Stokke Hunskaar, Per Olav Løvsletten, Frankie Achille, Anja Fog Heen, Thomas Agoritsas, Per Olav Vandvik

Notice bibliographique

RevueClinical and Public Health Guidelines · 2024
Typearticle
Langueen
DomaineDecision Sciences
ThématiqueMeta-analysis and systematic reviews
Établissements canadiensMcMaster UniversityImpact
Organismes subventionnairesNorges ForskningsrådUniversitetet i Oslo
Mots-clésGuidelineComputer scienceMeta-analysisDecision support systemData miningData scienceMedicine

Résumé

récupéré en direct d'OpenAlex

Abstract Introduction Network meta‐analysis (NMA) provides unprecedented opportunities to compare multiple treatment options (multiple comparisons) and are increasingly being used to inform clinical practice guidelines. However, the overwhelming amount of data generated from NMAs is challenging to present in comprehensible overviews for end‐users, guideline panelists included. Acknowledging these challenges, we developed MATCH‐IT—an interactive evidence summary displaying NMA results for multiple comparisons. In this study, we conducted user‐testing and further developed MATCH‐IT to support guideline panels in moving from NMA evidence to recommendations. Methods We user‐tested the tool with guideline panelists and observed the use of the tool in panel meetings. User‐testing sessions and guideline meetings were recorded, transcribed, and analyzed. The analysis informed the iterative development in the tool. Results We included four guideline panels and tested the tool with 15 panelists (four chairs, four methodologists, five clinical experts and two patient partners). User testing revealed both positive aspects and limitations of the tool. Interactivity allowed for dynamic display of the evidence during panels meetings and was highlighted as valuable. Further, participants felt that the tool provided overview of complex evidence, further facilitated by categorization of effects through colour coding. The inclusion of information on burden of treatment was highlighted as relevant and valuable. Regarding limitations, some users had issues discovering the interactive features. Earlier versions of MATCH‐IT did not include sufficiently detailed information, such as the imprecision of effect estimates, which the users felt was needed for decision making. These findings led to refinements of the tool, including a new tutorial, inclusion of confidence intervals, and a new layer displaying more detailed information. Discussion Our study suggests that MATCH‐IT may play a role in facilitating guideline development by easing understanding of NMA evidence and alleviating information overload in guideline panelists.

Récupéré en direct depuis OpenAlex et désinversé. Les résumés ne sont pas conservés dans cette base de données : les index inversés représentent 8,6 Go des 9,3 Go de texte de la base, et le serveur dispose de 13 Go libres.

Comment cette classification a été obtenuedéplier

Prédiction distillée sur la base complète

Imitation des enseignants

Ni prévalence calibrée, ni vérité terrain. Validation humaine à venir. Apprise à partir de 10 348 étiquettes directes de Codex et de 10 348 étiquettes directes de Gemma. Le mode candidate est l'union des têtes enseignantes seuillées; le consensus est leur intersection. Ces sorties portent le statut machine_predicted_unvalidated et ne sont ni des étiquettes humaines ni des étiquettes directes de modèles de pointe.

score de la tête « metaresearch » (Codex)0,332
score de la tête « metaresearch » (Gemma)0,176
Version: codex-gemma-dda1882f352aStatut de validation: machine_predicted_unvalidated
Catégories candidatesMétarecherche, Méta-épidémiologie (sens strict), Communication savante, Charge utile insuffisante (le modèle a refusé de juger)
Catégories consensuellesMétarecherche, Charge utile insuffisante (le modèle a refusé de juger)
DomaineSignal candidat: aucune · Signal consensuel: aucune
Devis d'étudeSignal candidat: Sans objet · Signal consensuel: Sans objet
GenreSignal candidat: Méthodes · Signal consensuel: Méthodes
Score de désaccord entre enseignants0,305
Score d'incertitude au seuil1,000

Scores Codex et Gemma par catégorie

CatégorieCodexGemma
Métarecherche0,3320,176
Méta-épidémiologie (sens strict)0,0010,000
Méta-épidémiologie (sens large)0,0080,003
Bibliométrie0,0010,003
Études des sciences et des technologies0,0010,000
Communication savante0,0030,001
Science ouverte0,0030,002
Intégrité de la recherche0,0000,000
Charge utile insuffisante (le modèle a refusé de juger)0,0070,001

Scores machine (provisoires)

Les deux têtes enseignantes du modèle étudiant, lues sur ce travail. Un score ordonne la base pour la relecture; il n'affirme jamais une catégorie, et le statut de validation accompagne chaque rangée tel quel.

Scores de référence d'un modèle non mature (critères de maturité non atteints, 7 itérations). Un score ordonne; il n'affirme jamais une catégorie.

Tête enseignante Opus0,973
Tête enseignante GPT0,679
Écart entre enseignants0,295 · la distance entre les deux têtes enseignantes sur ce seul travail
Statut de validationscore_only:v0-immature-baseline · tel quel depuis la passe de notation : score_only signifie que le nombre peut ordonner les travaux, et qu'aucune étiquette de catégorie n'en découle

Classification

machine, non validée

Prédiction automatique; les deux têtes enseignantes s’accordent sur ce qui est montré ici.

Devis d'étudeSans objet
Domainenon disponible
GenreMéthodes

Le détail, modèle par modèle et score par score, se trouve en fin de page sous « Comment cette classification a été obtenue ».

En bref

Citations1
Publié2024
Routes d'admission1
Résumé présentoui

Explorer davantage

Même revueClinical and Public Health GuidelinesMême sujetMeta-analysis and systematic reviewsTravaux en français237 207