MétaCan
Menu
Back to cohort
Record W7161968822 · doi:10.82308/39725

Leveraging expert knowledge and public data to inform health interventions: Novel practical approaches for building causal directed acyclic graphs

2025· dissertation· en· W7161968822 on OpenAlexaboutno aff
Stephanie Long

Bibliographic record

Venuenot available
Typedissertation
Languageen
FieldMathematics
TopicAdvanced Causal Inference Techniques
Canadian institutionsnot available
Fundersnot available
KeywordsContext (archaeology)Information scientistPublic policyKnowledge production

Abstract

fetched live from OpenAlex

CONTEXTE :Les méthodes épidémiologiques et biostatistiques appliquées à la recherche en soins primaires évoluent rapidement en raison de la complexité croissante des données sanitaires et des limites des approches traditionnelles d'inférence associative. La pandémie de COVID-19 a accéléré ce changement, nécessitant une réévaluation critique des méthodologies conventionnelles et modernes. L'intégration d'approches innovantes telles que l'inférence causale, les essais adaptatifs, l'apprentissage automatique et, plus récemment, les grands modèles de langage avec les méthodes traditionnelles d'analyse des données offre de nouvelles possibilités prometteuses pour répondre à des questions de recherche complexes de manière plus efficace et efficiente. Cependant, cette intégration présente des défis pratiques dans la mise en œuvre, car les paradigmes de recherche modernes exploitent de plus en plus les connaissances des experts du domaine, c'est-à-dire des informations externes essentielles pour informer les aspects structurels et opérationnels de la recherche. Dans l'archétype moderne de l'inférence causale, les graphes acycliques dirigés (GAD) jouent un rôle central dans l'encodage des informations externes et sont donc essentiels pour permettre une intégration efficace des connaissances dans la pratique de la recherche sur les soins primaires.Cette recherche doctorale a évalué les lacunes méthodologiques actuelles dans l'intégration des données publiques et des connaissances des experts dans les études de recherche sur les soins primaires à travers une lentille d'inférence causale. À travers une série de développements de cadres centrés sur les GAD, cette dissertation a abordé ces défis, démontrant leur faisabilité et leur applicabilité dans le contexte de la gestion des maladies chroniques et des essais adaptatifs.OBJECTIFS :1.Évaluer les normes de déclaration épidémiologique en utilisant COVID-19 comme étude de cas, en mettant l'accent sur l'évaluation des limites des interprétations causales et exploitables des données communiquées au public.2.Évaluer le potentiel des grands modèles de langage dans la construction de graphes acycliques dirigés (GAD) en tirant parti du vaste corpus de données publiques pour la recherche sur les soins primaires.3.Établir une approche de cartographie causale de la littérature sur le VIH afin d'identifier les résultats fréquemment rapportés par les patients en rapport avec le VIH, dans le but de construire un GAD complet des résultats du VIH rapportés dans la littérature.4.Développer et évaluer la faisabilité d'une nouvelle approche pour le développement de GAD avec des experts du domaine.MÉTHODES :Quatre études ont été réalisées à l'aide d'approches méthodologiques multiples :1.Évaluation critique longitudinale (en temps réel) de l'utilité causale des données canadiennes COVID-19 communiquées par les organismes gouvernementaux et les organes de presse entre avril 2020 et août 2021.2.Une étude empirique de l'utilité du grand modèle linguistique GPT-3, un modèle linguistique antérieur à ChatGPT, pour la construction de GAD dans le cadre de la recherche sur les soins primaires.3.Un examen approfondi pour développer un GAD décrivant les relations avec les résultats individuels liés au VIH utilisés dans les études de recherche menées dans les pays à revenu élevé.4.Une étude de faisabilité pour développer et évaluer une approche alternative au développement de GAD avec des experts du domaine, avec un objectif secondaire de mise à jour du GAD créé dans l'étude 3.RÉSULTATS :Étude 1 : Les données canadiennes relatives à l'étude COVID-19 présentaient des définitions de cas variables, des critères de test hétérogènes et un manque de normalisation appropriée. Ces résultats mettent en évidence les difficultés d'application des principes épidémiologiques établis et leur impact sur la politique de santé publique.Étude 2 : Les performances du GPT-3 étaient prometteuses, avec une précision supérieure à 50 % pour au moins l'un des paramètres testés (par exemple, l'invite, le verbe de liaison, la spécificité du langage). Cela a démontré que la précision du GPT-3 dans la confirmation des arêtes dans les GAD liés à la santé dépend du langage utilisé dans les invites pour décrire les relations entre les variables, par exemple "X est causé par Y" ou "X est associé à Y". Bien que les LLM soient potentiellement utiles pour extraire des informations des données publiques, leur combinaison avec des connaissances d'experts et de la littérature peut constituer un moyen plus efficace de générer des GAD complets.Étude 3 : L'examen exploratoire a révélé que les résultats en matière de santé physique étaient les plus fréquemment rapportés dans les études de recherche sur le VIH, suivis par la santé sociale, avec une attention limitée portée à la santé mentale. Seules 2,2 % des études incluses ont utilisé des résultats de substitution, la numération des cellules CD4+ étant la plus fréquente, en tant qu'indicateur de la fonction immunitaire globale ou de la rétention dans le système de soins. Les résultats ont été utilisés pour créer un GAD illustrant les relations entre les résultats liés au VIH. L'accent prédominant mis par ce premier GAD sur les résultats physiques et cliniques a mis en évidence le manque de résultats psychosociaux et structurels connus, illustrant la nécessité d'une implication supplémentaire des experts lors de la création des GAD.Étude 4 : Sur la base des résultats de l'étude 3, une approche alternative de développement de DAG avec des experts du domaine a été proposée et développée de manière itérative sur la base des commentaires des experts du domaine : (1) identifier les résultats d'intérêt, (2) éliciter les variables, (3) organiser les variables dans le temps, (4) consolider les données des experts du domaine et créer un GAD, et (5) examiner et finaliser le GAD avec les experts du domaine. Sept sessions de développement du GAD ont été menées avec sept experts du domaine pour mettre à jour le GAD de base de l'étude 3, en se concentrant particulièrement sur l'engagement dans les soins et l'adhésion au traitement antirétroviral. Les experts ont trouvé le processus stimulant, essentiel et clair. Ils ont mis à jour le GAD en ajoutant des facteurs sociaux et structurels influençant les résultats d'intérêt, ce qui a permis d'obtenir un GAD plus complet. CONCLUSION :Cette thèse de doctorat met en évidence la nature évolutive des approches de synthèse des connaissances qui visent à informer l'inférence causale moderne pour les interventions de santé. En évaluant de manière critique les pratiques conventionnelles de communication des données, en explorant le potentiel de l'apprentissage automatique dans la modélisation causale, et en développant une nouvelle approche pour incorporer l'expertise du domaine avec les DAG, ce travail fournit une série de développements méthodologiques promouvant l'intégration formelle de la connaissance des experts et des données publiques pour la construction de modèles causaux. Les résultats soulignent l'importance d'équilibrer les avancées technologiques avec l'expertise du domaine, offrant une voie vers une recherche en soins primaires plus robuste et contextuellement pertinente

Fetched live from OpenAlex and de-inverted. Abstracts are not stored in this database: the inverted indexes are 8.6 GB of the frame’s 9.3 GB of text, and the host has 13 GB free.

How this classification was reachedexpand

Full frame machine prediction

Teacher imitation

Not calibrated prevalence, not ground truth. Human validation pending. The Gemma side is a direct model label for every work in the frame, read from the title-only record. The Codex side is a classifier learned from the 10,348 direct Codex labels and calibrated to design-weighted sample rates; fields without enough sample support carry no Codex call. Candidate is the union of the two sides; consensus is their intersection. These outputs are machine_predicted_unvalidated and are not human labels.

metaresearch head score (Codex)0.017
metaresearch head score (Gemma)0.065
Version: metacan-v3-hybrid-931329e0061cValidation status: machine_predicted_unvalidated
Candidate categoriesnone
Consensus categoriesnone
DomainCandidate signal: none · Consensus signal: none
Study designCandidate signal: Theoretical or conceptual · Consensus signal: none
GenreCandidate signal: Methods · Consensus signal: Methods
Teacher disagreement score0.017
Threshold uncertainty score0.090

Distilled classifier scores by category (both heads)

CategoryCodexGemma
Metaresearch0.0170.065
Meta-epidemiology (narrow)0.0020.002
Meta-epidemiology (broad)0.0010.003
Bibliometrics0.0060.005
Science and technology studies0.0010.003
Scholarly communication0.0050.007
Open science0.0030.004
Research integrity0.0020.003
Insufficient payload (model declined to judge)0.0070.001

Machine scores (provisional)

The two teacher heads of the student model, read on this work. A score orders the frame for review; it never asserts a category, and the validation status ships verbatim with every row.

Baseline scores from an immature model (maturity gate not passed, 7 training rounds). Scores rank; they never assert a category.

Opus teacher head0.615
GPT teacher head0.547
Teacher spread0.068 · how far apart the two teachers sit on this one work
Validation statusscore_only:v0-immature-baseline · verbatim from the scoring run: score_only means the number may rank works, and no category label ships from it

Classification

machine, unvalidated

Machine predicted; a candidate call from one source (direct Gemma or distilled Codex), not a consensus.

The models applied no category: nothing in the taxonomy fit this work.
Study designTheoretical or conceptual
Domainnot available
GenreMethods

How this classification was reached, model by model and score by score, is at the end of the page under "How this classification was reached".

Quick stats

Citations0
Published2025
Admission routes1
Has abstractyes

Explore more

Same topicAdvanced Causal Inference TechniquesFrench-language works237,207