MétaCan
Menu
Retour à la cohorte
Enregistrement W1518867746 · doi:10.1108/09526861311297325

A comparison of two diagnostic performance measures

2013· article· en· W1518867746 sur OpenAlexaff
Mehmet Tolga Taner, Bülent Sezen, Kamal Atwat

Notice bibliographique

RevueInternational Journal of Health Care Quality Assurance · 2013
Typearticle
Langueen
DomaineDecision Sciences
ThématiqueReliability and Agreement in Measurement
Établissements canadiensUniversity of Toronto
Organismes subventionnairesnon disponible
Mots-clésMeasure (data warehouse)Point (geometry)Receiver operating characteristicSignal-to-noise ratio (imaging)Taguchi methodsNoise (video)Diagnostic accuracyComputer scienceIndex (typography)StatisticsMathematicsArtificial intelligenceData miningMedicineRadiology

Résumé

récupéré en direct d'OpenAlex

PURPOSE: This paper aims to compare two diagnostic performance measures, i.e. signal-to-noise ratio (S/N ratio) and partial area under receiver operating characteristic curves (pAUC). It proposes the use of S/N ratio rather than pAUC for establishing optimal cut-off point for diagnostic biomarkers. DESIGN/METHODOLOGY/APPROACH: This paper discusses the properties, uses, advantages and shortcomings of the two performance measures, namely the partial area under receiver operating characteristic curve (pAUC) and Taguchi's signal-to-noise (S/N) ratio. The benefits of S/N ratio have been illustrated in a sample of four biomarkers, each having five cut-off points. The S/N ratio is compared to the pAUC index. The SAS software is employed to calculate pAUC and AUC. FINDINGS: This paper shows that S/N ratio can be used as a measure of diagnostic accuracy. The cut-off point with the highest S/N ratio is the optimal cut-off point for the biomarker. The proposed method has the advantages of being easier, more practical and less costly than that of pAUC. PRACTICAL IMPLICATIONS: This paper includes implications for the development of a more practical, equally powerful and less costly means of measuring clinical accuracy thereby reducing the costs and risks resulting from wrong selection of cut-off point can be decreased. ORIGINALITY/VALUE: This paper supports suggestions in the recent literature to replace pAUC with a new, more meaningful index.

Récupéré en direct depuis OpenAlex et désinversé. Les résumés ne sont pas conservés dans cette base de données : les index inversés représentent 8,6 Go des 9,3 Go de texte de la base, et le serveur dispose de 13 Go libres.

Comment cette classification a été obtenuedéplier

Prédiction distillée sur la base complète

Imitation des enseignants

Ni prévalence calibrée, ni vérité terrain. Validation humaine à venir. Apprise à partir de 10 348 étiquettes directes de Codex et de 10 348 étiquettes directes de Gemma. Le mode candidate est l'union des têtes enseignantes seuillées; le consensus est leur intersection. Ces sorties portent le statut machine_predicted_unvalidated et ne sont ni des étiquettes humaines ni des étiquettes directes de modèles de pointe.

score de la tête « metaresearch » (Codex)0,010
score de la tête « metaresearch » (Gemma)0,011
Version: codex-gemma-dda1882f352aStatut de validation: machine_predicted_unvalidated
Catégories candidatesMétarecherche
Catégories consensuellesaucune
DomaineSignal candidat: aucune · Signal consensuel: aucune
Devis d'étudeSignal candidat: Observationnel · Signal consensuel: Observationnel
GenreSignal candidat: Empirique · Signal consensuel: Empirique
Score de désaccord entre enseignants0,317
Score d'incertitude au seuil0,998

Scores Codex et Gemma par catégorie

CatégorieCodexGemma
Métarecherche0,0100,011
Méta-épidémiologie (sens strict)0,0000,000
Méta-épidémiologie (sens large)0,0010,000
Bibliométrie0,0000,000
Études des sciences et des technologies0,0000,000
Communication savante0,0000,001
Science ouverte0,0010,000
Intégrité de la recherche0,0000,000
Charge utile insuffisante (le modèle a refusé de juger)0,0000,000

Scores machine (provisoires)

Les deux têtes enseignantes du modèle étudiant, lues sur ce travail. Un score ordonne la base pour la relecture; il n'affirme jamais une catégorie, et le statut de validation accompagne chaque rangée tel quel.

Scores de référence d'un modèle non mature (critères de maturité non atteints, 7 itérations). Un score ordonne; il n'affirme jamais une catégorie.

Tête enseignante Opus0,232
Tête enseignante GPT0,521
Écart entre enseignants0,289 · la distance entre les deux têtes enseignantes sur ce seul travail
Statut de validationscore_only:v0-immature-baseline · tel quel depuis la passe de notation : score_only signifie que le nombre peut ordonner les travaux, et qu'aucune étiquette de catégorie n'en découle

Classification

machine, non validée

Prédiction automatique; un appel candidat d’une seule tête enseignante, pas un consensus.

Devis d'étudeObservationnel
Domainenon disponible
GenreEmpirique

Le détail, modèle par modèle et score par score, se trouve en fin de page sous « Comment cette classification a été obtenue ».

En bref

Citations2
Publié2013
Routes d'admission1
Résumé présentoui

Explorer davantage

Même revueInternational Journal of Health Care Quality AssuranceMême sujetReliability and Agreement in MeasurementTravaux en français237 207