Practice-Based Research With Speech-Language Pathologists: A Case Study in Evaluating an Evidence-Informed Language and Phonological Awareness Assessment Tool
Notice bibliographique
Résumé
Purpose: Practice-based research (PBR) is one approach to knowledge translation that involves conducting research in a clinical setting. In this project, a clinical–research partnership was established with a school board in Ontario. The research objectives were to examine the utility and validity of a board-designed language tool that assessed phonological awareness and story retell. Method: In Study 1, kindergarten children referred to the speech-language pathologist (SLP) for evaluation ( n = 108) and another not referred group ( n = 121) completed an assessment tool designed by school board SLPs at 2 points in the school year (Fall of 2017 and Spring of 2018). In Study 2, a second group of kindergarten children ( n = 37) completed an updated tool at two time points (Spring of 2019 and Fall of 2019), and at the first time point, they completed a series of standardized assessments of language. Results: Study 1 revealed that the phonological awareness component of the tool captured differences between the different groups and the Fall of 2017 and Spring of 2018 time points, whereas the narrative retell component captured differences in group but not time. Members of the partnership then revised the narrative component of the tool for Study 2, the results of which revealed that both the phonological awareness and narrative language components captured differences between groups and over time. The tool components were also found to correlate with corresponding tests of language ability, providing some evidence for its validity. Conclusions: This PBR project evaluated a bespoke clinical assessment tool and identified a needed revision. Ultimately, scores on both tool components captured expected differences in group and time and expected correlations were found with related measures. The PBR approach enabled practice capture and timely implementation of practice change.
Récupéré en direct depuis OpenAlex et désinversé. Les résumés ne sont pas conservés dans cette base de données : les index inversés représentent 8,6 Go des 9,3 Go de texte de la base, et le serveur dispose de 13 Go libres.
Comment cette classification a été obtenuedéplier
Prédiction machine sur la base complète
Imitation des enseignantsNi prévalence calibrée, ni vérité terrain. Validation humaine à venir. Le volet Gemma est une étiquette directe du modèle pour chaque travail de la base, lue sur la notice réduite au titre. Le volet Codex est un classifieur appris des 10 348 étiquettes directes de Codex et calibré sur les taux pondérés de l'échantillon; les champs sans appui suffisant ne portent aucun appel Codex. Le mode candidate est l'union des deux volets; le consensus est leur intersection. Ces sorties portent le statut machine_predicted_unvalidated et ne sont pas des étiquettes humaines.
Scores du classifieur distillé par catégorie (deux têtes)
| Catégorie | Codex | Gemma |
|---|---|---|
| Métarecherche | 0,133 | 0,211 |
| Méta-épidémiologie (sens strict) | 0,001 | 0,002 |
| Méta-épidémiologie (sens large) | 0,001 | 0,001 |
| Bibliométrie | 0,003 | 0,002 |
| Études des sciences et des technologies | 0,012 | 0,009 |
| Communication savante | 0,007 | 0,007 |
| Science ouverte | 0,005 | 0,011 |
| Intégrité de la recherche | 0,008 | 0,006 |
| Charge utile insuffisante (le modèle a refusé de juger) | 0,001 | 0,000 |
Scores machine (provisoires)
Les deux têtes enseignantes du modèle étudiant, lues sur ce travail. Un score ordonne la base pour la relecture; il n'affirme jamais une catégorie, et le statut de validation accompagne chaque rangée tel quel.
Scores de référence d'un modèle non mature (critères de maturité non atteints, 7 itérations). Un score ordonne; il n'affirme jamais une catégorie.
score_only:v0-immature-baseline · tel quel depuis la passe de notation : score_only signifie que le nombre peut ordonner les travaux, et qu'aucune étiquette de catégorie n'en découleClassification
machine, non validéePrédiction automatique; un appel candidat d’une seule source (Gemma direct ou Codex distillé), pas un consensus.
Le détail, modèle par modèle et score par score, se trouve en fin de page sous « Comment cette classification a été obtenue ».