MétaCan
Menu
Retour à la cohorte
Enregistrement W3192226412 · doi:10.18192/uojm.v11i1.5950

Assessing the quality of research examining change in children’s mental health in the context of COVID-19

2021· article· en· W3192226412 sur OpenAlexaffvenue
Tracy Vaillancourt, Heather Brittain, Amanda Krygsman, Adam C. Davis, Ann H. Farrell, Riley Desmarais, Charlotte Hammill, Sarah Karasz, Rachael Morgan, Annie Ritchie, Carleigh Sanderson

Notice bibliographique

RevueUniversity of Ottawa Journal of Medicine · 2021
Typearticle
Langueen
DomaineDecision Sciences
ThématiqueAcademic Publishing and Open Access
Établissements canadiensUniversity of Ottawa
Organismes subventionnairesnon disponible
Mots-clésMisinformationPublic relationsCredibilityContext (archaeology)Mental healthSocial mediaPolitical sciencePsychologyPandemicAction (physics)Quality (philosophy)Internet privacyMedical educationMedicineCoronavirus disease 2019 (COVID-19)Computer sciencePsychiatry

Résumé

récupéré en direct d'OpenAlex

In their policy brief on the impact of COVID-19 on children and youth, the United Nations identified the need for “a rapid accumulation of data on the scale and nature of impacts among children.”1(p14) Although an important goal, this call to action defies how research typically unfolds. Science is a slow, methodical process that requires careful consideration of prior evidence, ethics, measurement, sampling, analysis, and implications, to name a few. Still, we appreciate the call to shift priorities and allocate resources to conduct research about this global event. The stakes are high and information is needed to guide us on how children and youth are faring during this unprecedented time. One problem is that sub-standard studies, often released as non-peer reviewed preprints, are being promoted on social media and in news outlets, and this attention can influence the public’s perception of risk, the credibility of scientists, and policy makers’ decisions related to funding and programming. Some scholars and medical professionals see preprints as a necessity during the pandemic to circumvent the lengthy review process and to arm professionals with the most up-to-date data.2 Others see this growing trend as facilitating the spread of misinformation because, unlike scientists who approach non-peer reviewed research with caution, popular news outlets and the public may take preprints at face value.3,4 Our goal is thus to remind readers of what constitutes good science in the field of child and youth mental health.

Récupéré en direct depuis OpenAlex et désinversé. Les résumés ne sont pas conservés dans cette base de données : les index inversés représentent 8,6 Go des 9,3 Go de texte de la base, et le serveur dispose de 13 Go libres.

Comment cette classification a été obtenuedéplier

Prédiction machine sur la base complète

Imitation des enseignants

Ni prévalence calibrée, ni vérité terrain. Validation humaine à venir. Le volet Gemma est une étiquette directe du modèle pour chaque travail de la base, lue sur la notice réduite au titre. Le volet Codex est un classifieur appris des 10 348 étiquettes directes de Codex et calibré sur les taux pondérés de l'échantillon; les champs sans appui suffisant ne portent aucun appel Codex. Le mode candidate est l'union des deux volets; le consensus est leur intersection. Ces sorties portent le statut machine_predicted_unvalidated et ne sont pas des étiquettes humaines.

score de la tête « metaresearch » (Codex)0,707
score de la tête « metaresearch » (Gemma)0,885
Version: metacan-v3-hybrid-931329e0061cStatut de validation: machine_predicted_unvalidated
Catégories candidatesMétarecherche
Catégories consensuellesMétarecherche
DomaineSignal candidat: Évaluation · Signal consensuel: aucune
Devis d'étudeSignal candidat: Observationnel · Signal consensuel: Observationnel
GenreSignal candidat: Empirique · Signal consensuel: aucune
Score de désaccord entre enseignants0,293
Score d'incertitude au seuil0,361

Scores du classifieur distillé par catégorie (deux têtes)

CatégorieCodexGemma
Métarecherche0,7070,885
Méta-épidémiologie (sens strict)0,0010,003
Méta-épidémiologie (sens large)0,0040,006
Bibliométrie0,0250,032
Études des sciences et des technologies0,0060,015
Communication savante0,0180,017
Science ouverte0,0060,021
Intégrité de la recherche0,0080,010
Charge utile insuffisante (le modèle a refusé de juger)0,0050,001

Scores machine (provisoires)

Les deux têtes enseignantes du modèle étudiant, lues sur ce travail. Un score ordonne la base pour la relecture; il n'affirme jamais une catégorie, et le statut de validation accompagne chaque rangée tel quel.

Scores de référence d'un modèle non mature (critères de maturité non atteints, 7 itérations). Un score ordonne; il n'affirme jamais une catégorie.

Tête enseignante Opus0,421
Tête enseignante GPT0,545
Écart entre enseignants0,124 · la distance entre les deux têtes enseignantes sur ce seul travail
Statut de validationscore_only:v0-immature-baseline · tel quel depuis la passe de notation : score_only signifie que le nombre peut ordonner les travaux, et qu'aucune étiquette de catégorie n'en découle

Classification

machine, non validée

Prédiction automatique; l’étiquette directe de Gemma et le classifieur distillé Codex s’accordent sur ce qui est montré ici.

Devis d'étudeObservationnel
DomaineÉvaluation
GenreEmpirique

Le détail, modèle par modèle et score par score, se trouve en fin de page sous « Comment cette classification a été obtenue ».

En bref

Citations16
Publié2021
Routes d'admission2
Résumé présentoui

Explorer davantage

Même revueUniversity of Ottawa Journal of MedicineMême sujetAcademic Publishing and Open AccessTravaux en français237 207