MétaCan
Menu
Retour à la cohorte
Enregistrement W2983818347 · doi:10.3138/ptc-2018-0110

How to Optimize Measurement Protocols: An Example of Assessing Measurement Reliability Using Generalizability Theory

2019· article· en· W2983818347 sur OpenAlexaffvenue
Anthony A. Gatti, Paul W. Stratford, Nicholas M. Brisson, Monica R. Maly

Notice bibliographique

RevuePhysiotherapy Canada · 2019
Typearticle
Langueen
DomaineDecision Sciences
ThématiqueReliability and Agreement in Measurement
Établissements canadiensUniversity of WaterlooMcMaster University
Organismes subventionnairesnon disponible
Mots-clésGeneralizability theoryReliability (semiconductor)Computer scienceObservational errorTerminologyReliability engineeringMeasurement uncertaintyStandard errorData miningStatisticsPower (physics)Mathematics

Résumé

récupéré en direct d'OpenAlex

Purpose: This article identifies how to assess multiple sources of measurement error and identify optimal measurement strategies for obtaining clinical outcomes. Method: Obtaining, interpreting, and using information gained from measurements is instrumental in physiotherapy. To be useful, measurements must have a sufficiently small measurement error. Traditional expressions of reliability include relative reliability in the form of an intra-class correlation coefficient and absolute reliability in the form of the standard error of measurement. Traditional metrics are limited to assessing one source of error; however, real-world measurements consist of many sources of error. The measurement framework generalizability theory (GT) allows researchers to partition measurement errors into multiple sources. GT further allows them to calculate the relative and absolute reliability of any measurement strategy, thereby allowing them to identify the optimal strategy. We provide a brief comparison of classical test theory and GT, followed by an overview of the terminology and methodology used in GT, and then an example showing how GT can be used to minimize error associated with measuring knee extension power. Conclusion: The methodology described provides tools for researchers and clinicians that enable detailed interpretation and understanding of the error associated with their measurements.

Récupéré en direct depuis OpenAlex et désinversé. Les résumés ne sont pas conservés dans cette base de données : les index inversés représentent 8,6 Go des 9,3 Go de texte de la base, et le serveur dispose de 13 Go libres.

Comment cette classification a été obtenuedéplier

Prédiction distillée sur la base complète

Imitation des enseignants

Ni prévalence calibrée, ni vérité terrain. Validation humaine à venir. Apprise à partir de 10 348 étiquettes directes de Codex et de 10 348 étiquettes directes de Gemma. Le mode candidate est l'union des têtes enseignantes seuillées; le consensus est leur intersection. Ces sorties portent le statut machine_predicted_unvalidated et ne sont ni des étiquettes humaines ni des étiquettes directes de modèles de pointe.

score de la tête « metaresearch » (Codex)0,025
score de la tête « metaresearch » (Gemma)0,001
Version: codex-gemma-dda1882f352aStatut de validation: machine_predicted_unvalidated
Catégories candidatesMéta-épidémiologie (sens strict)
Catégories consensuellesaucune
DomaineSignal candidat: aucune · Signal consensuel: aucune
Devis d'étudeSignal candidat: Expérimental (laboratoire) · Signal consensuel: Expérimental (laboratoire)
GenreSignal candidat: Empirique · Signal consensuel: Empirique
Score de désaccord entre enseignants0,341
Score d'incertitude au seuil1,000

Scores Codex et Gemma par catégorie

CatégorieCodexGemma
Métarecherche0,0250,001
Méta-épidémiologie (sens strict)0,0000,000
Méta-épidémiologie (sens large)0,0010,000
Bibliométrie0,0000,001
Études des sciences et des technologies0,0000,000
Communication savante0,0010,001
Science ouverte0,0020,000
Intégrité de la recherche0,0000,000
Charge utile insuffisante (le modèle a refusé de juger)0,0010,000

Scores machine (provisoires)

Les deux têtes enseignantes du modèle étudiant, lues sur ce travail. Un score ordonne la base pour la relecture; il n'affirme jamais une catégorie, et le statut de validation accompagne chaque rangée tel quel.

Scores de référence d'un modèle non mature (critères de maturité non atteints, 7 itérations). Un score ordonne; il n'affirme jamais une catégorie.

Tête enseignante Opus0,294
Tête enseignante GPT0,397
Écart entre enseignants0,103 · la distance entre les deux têtes enseignantes sur ce seul travail
Statut de validationscore_only:v0-immature-baseline · tel quel depuis la passe de notation : score_only signifie que le nombre peut ordonner les travaux, et qu'aucune étiquette de catégorie n'en découle

Classification

machine, non validée

Prédiction automatique; un appel candidat d’une seule tête enseignante, pas un consensus.

Devis d'étudeExpérimental (laboratoire)
Domainenon disponible
GenreEmpirique

Le détail, modèle par modèle et score par score, se trouve en fin de page sous « Comment cette classification a été obtenue ».

En bref

Citations2
Publié2019
Routes d'admission2
Résumé présentoui

Explorer davantage

Même revuePhysiotherapy CanadaMême sujetReliability and Agreement in MeasurementTravaux en français237 207