When and how to establish a new reference standard for medical tests: a scoping review identifying methodological priorities
Notice bibliographique
Résumé
BACKGROUND AND OBJECTIVE: The reference standard, defined as the best available test or test strategy for diagnosing a target disease/condition in a specific clinical population, is rarely perfectly accurate. This imperfection raises the question of when (and how) to establish a new test as the reference standard test. The objective of this scoping review was to assess methodological priorities for establishing a new reference standard for medical tests. METHODS: This scoping review was performed using JBI methodology and reported in accordance with the Preferred Reporting Items for Systematic Reviews and Meta-analyses extension for scoping reviews reporting guideline. We included sources describing methodological approaches to establishing a new reference standard across all healthcare populations and settings. Data were analyzed using a combination of descriptive and qualitative content and thematic analyses. RESULTS: We screened 5396 studies and included 13 in our final analysis (7 methodological studies and 6 applied studies). Three main methodological themes emerged: (1) demonstrating the imperfectness of the current reference standard, (2) comparing candidate reference standard tests, and (3) decision principles for accepting a new reference standard. Among the six applied studies that established reference standards for specific conditions, five used composite reference standards. CONCLUSION: Based on the findings of our review, we define a potential workflow for structuring decision-making relating to whether to accept a new test as the reference standard. Development of formal methodological guidance for when and how to establish or replace a reference standard would likely benefit guideline developers, clinicians, technology assessors, and, ultimately, patients. PLAIN LANGUAGE SUMMARY: "Reference standard" tests are considered the best available method to determine whether someone has a particular health condition. However, these tests are often imperfect, and there is little guidance on when a new test should replace the current reference standard. We reviewed published research to understand how new reference standards have been created or evaluated. Thirteen studies met our search criteria. Together, they showed four key steps: first, defining the purpose of the reference standard (for clinical care or research); second recognizing when the current reference standard is imperfect; third, comparing potential new tests; and fourth, deciding whether adopting a new test will improve patient care. Our findings highlight the need for formal guidance to support groups creating new reference standards in the future.
Récupéré en direct depuis OpenAlex et désinversé. Les résumés ne sont pas conservés dans cette base de données : les index inversés représentent 8,6 Go des 9,3 Go de texte de la base, et le serveur dispose de 13 Go libres.
Comment cette classification a été obtenuedéplier
Prédiction machine sur la base complète
Imitation des enseignantsNi prévalence calibrée, ni vérité terrain. Validation humaine à venir. Le volet Gemma est une étiquette directe du modèle pour chaque travail de la base, lue sur la notice réduite au titre. Le volet Codex est un classifieur appris des 10 348 étiquettes directes de Codex et calibré sur les taux pondérés de l'échantillon; les champs sans appui suffisant ne portent aucun appel Codex. Le mode candidate est l'union des deux volets; le consensus est leur intersection. Ces sorties portent le statut machine_predicted_unvalidated et ne sont pas des étiquettes humaines.
Scores du classifieur distillé par catégorie (deux têtes)
| Catégorie | Codex | Gemma |
|---|---|---|
| Métarecherche | 0,581 | 0,800 |
| Méta-épidémiologie (sens strict) | 0,003 | 0,005 |
| Méta-épidémiologie (sens large) | 0,012 | 0,015 |
| Bibliométrie | 0,039 | 0,035 |
| Études des sciences et des technologies | 0,007 | 0,011 |
| Communication savante | 0,026 | 0,035 |
| Science ouverte | 0,011 | 0,014 |
| Intégrité de la recherche | 0,011 | 0,012 |
| Charge utile insuffisante (le modèle a refusé de juger) | 0,004 | 0,002 |
Scores machine (provisoires)
Les deux têtes enseignantes du modèle étudiant, lues sur ce travail. Un score ordonne la base pour la relecture; il n'affirme jamais une catégorie, et le statut de validation accompagne chaque rangée tel quel.
Scores de référence d'un modèle non mature (critères de maturité non atteints, 7 itérations). Un score ordonne; il n'affirme jamais une catégorie.
score_only:v0-immature-baseline · tel quel depuis la passe de notation : score_only signifie que le nombre peut ordonner les travaux, et qu'aucune étiquette de catégorie n'en découleClassification
machine, non validéePrédiction automatique; l’étiquette directe de Gemma et le classifieur distillé Codex s’accordent sur ce qui est montré ici.
Le détail, modèle par modèle et score par score, se trouve en fin de page sous « Comment cette classification a été obtenue ».