1 000 travaux · Opus 4.8 · GPT-5.6 (high) · Grok 4.5 · une seule grille verrouillée
La frontière du domaine n'est pas une ligne. C'est une région.
Trois modèles de pointe ont trié les mêmes 1 000 travaux, tirés de la vraie base avec des probabilités de sélection connues, selon la même grille verrouillée sur sa charge utile complète de huit champs. Parmi les 51 travaux qu'au moins un modèle a qualifiés de métarecherche, seulement 19 (37,3 %) l'ont été par les trois, et 24 (47,1 %) reposent sur l'avis d'un seul modèle.
Deux trieurs peuvent s'accorder sur un taux tout en repérant des travaux presque entièrement différents. À un taux de base d'environ 1 %, les rejets évidents offrent 98 % d'accord gratuitement ; c'est pourquoi une statistique d'accord calculée sur tout l'échantillon ne dit rien de la frontière, et pourquoi le livrable est le tableau ci-dessous, et non un pourcentage.
Les trois modèles ne sont pas interchangeables
Combien des 1 000 travaux chaque modèle a qualifiés de métarecherche (niveau T1 ou T2), sur des données identiques. T3 est adjacent et ne compte pas comme dans le champ ; c'est pourquoi le compte d'un modèle ne peut jamais dépasser les 51 travaux du dossier.
Changez le modèle que vous appelez « le trieur » et la taille du domaine bouge. Cet écart, et non l'intervalle de confiance binomial sur les étiquettes d'un seul modèle, est l'incertitude honnête sur la taille de la métarecherche canadienne.
Le dossier des désaccords
Les trois verdicts, confiances et motifs côte à côte. Ce sont les travaux sur lesquels les critères d'inclusion doivent être rédigés, parce que ce sont ceux sur lesquels des trieurs raisonnables, devant la même grille et les mêmes preuves, divergent.
| Travail | Strate | n_in | Opus 4.8 | GPT-5.6 | Grok 4.5 |
|---|---|---|---|---|---|
| La méthodologie au service de l'avancement des connaissances en matière de jeux de hasard et d'argent 2012 · article · fr · Journal of Gambling Issues | french w=1554 | 2/3 | T1low conceptual Reviews longitudinal, experimental, and genetic study designs and what they enable for advancing gambling knowledge; the object is research methodology and study design, though it is field-oriented. | T1high conceptual This explicitly examines research methodologies used to advance knowledge in gambling studies. | OUTmedium conceptual Reviews longitudinal, experimental, and genetic methods as tools to advance gambling knowledge; domain methods guidance, not study of research itself. |
| Représentations mentales maternelles : concepts et mesures liés à l’attachement 2009 · article · fr · Enfance | french w=1554 | 2/3 | T2low conceptual Critical review of the concepts and measures used in the attachment literature, explicitly flagging insufficiently demonstrated validity and weak empirical rigor; sits on the boundary between domain theory and a critique of measurement practice. | T1medium conceptual The article evaluates concepts and measurement approaches used in attachment research, making research measurement its primary object. | OUTmedium conceptual Domain psychology review of attachment-related constructs and measures; advances developmental theory rather than studying research as practice. |
| Using Logic Models and the Action Model/Change Model Schema in Planning the Learning Community Program: A Comparative Case Study 2018 · article · en · Canadian Journal of Program Evaluation | venue_new w=2684 | 2/3 | T1low empirical Comparative case study assessing the relative strengths of logic models versus the action model/change model schema as planning and evaluation tools; the object is evaluation methodology, which sits on the boundary between applied evaluation practice and research methods. | T1medium empirical This comparative case study evaluates program-evaluation models and their properties as methodological tools. | OUTmedium empirical Compares logic models for planning a learning-community program; program evaluation methods, not evaluation of research. |
| Canadian Supercomputer Threat Assessment and Potential Responses 2019 · article · en · The Journal of Intelligence Conflict and Warfare | venue_new w=2684 | 2/3 | T2low policy Briefing note assessing espionage and security threats to Compute Canada's national supercomputing infrastructure; object is the governance of Canadian research infrastructure, though it sits on the T2/T3 boundary as a policy briefing. | T2high policy The briefing analyzes security risks and responses involving Canadian research supercomputing infrastructure. | T3medium policy Policy briefing on security threats to Canadian research supercomputers, relevant to the research ecosystem but not analytic metaresearch. |
| The emergence of politics as a taught discipline at universities in the United Kingdom 2019 · article · en · The British Journal of Politics and International Relations | fund_new w=1679 | 2/3 | T2medium empirical Archival history of how political science became a taught discipline in UK universities, tracing chairs, subject associations and curricula; the object is an academic discipline's formation. | OUThigh empirical It reconstructs the history of political-science teaching and curricula, not research practice. | T2medium empirical Historical study of politics as a taught university discipline; adjacent history of the academic field. |
| Most Recent Data (2005). Statistics Canada. CANSIM: Science and Technology - Research and Development | Country: Canada | Table: Survey of innovation, logging and manufacturing industries, percentage of plants with expenditures on research and development services by different locations | Variable: From all other countries, Clothing manufacturing and leather and allied product manufacturing, 0% of expenditures, Innovative plants | Units: %, 2005. Data-Planet™ Statistical Ready Reference by Conquest Systems, Inc. Dataset-ID: 075-001-182. 2015 · other · en · Data Planet | about_only w=3321 | 2/3 | T1medium empirical Statistics Canada CANSIM table of research and development expenditure by Canadian innovative plants; the object is R&D activity and its funding in Canada, though the record is a repackaged statistical table rather than a study. | T2high empirical The dataset documents Canadian research and development activity as part of the national research system. | OUThigh other Packaged industrial innovation R&D expenditure statistic for manufacturing plants, not a study of research practice. |
| Structural equation modeling in the plant sciences: An example using yield components in oat 2011 · article · en · BioOne Complete (BioOne) | about_only w=3321 | 2/3 | T1medium conceptual Tutorial introducing plant scientists to structural equation modeling, reviewing its principles and offering guidelines on when it is appropriate; the oat field trial is an illustrative vehicle and the object is statistical practice in a research community. | OUThigh empirical Structural equation modeling is used to analyze oat yield, so the method is not the object of study. | T1medium empirical Primary aim is introducing SEM as statistical practice for plant scientists, with guidelines on when SEM is appropriate. |
| Factores asociados al uso de tácticas políticas en el ascenso laboral: una evaluación desde el contexto de la Universidad de Los Andes, “Núcleo Dr. Pedro Rincón Gutierrez”, Venezuela. 2019 · article · es · DOAJ (DOAJ: Directory of Open Access Journals) | about_only w=3321 | 2/3 | T2low empirical Survey of factors behind the use of political tactics in academic promotion among university professors in Venezuela; grounded work on the academic workforce and careers, but framed as organizational behavior. | T1medium empirical It studies political tactics in university professors' career advancement, making the academic research workforce the object. | OUTmedium empirical Organizational-politics survey of professors’ promotion tactics; object is workplace behaviour, not research practice or the research workforce as such. |
Ce que le tri a réellement trouvé
Trois modèles de pointe (Opus 4.8, GPT-5.6 high, Grok 4.5) ont trié les mêmes 1 000 travaux de la VRAIE base de 4,3 M, sur la charge utile COMPLÈTE de huit champs de la grille, avec des lots randomisés consignés au manifeste et des étiquettes écrites par le dispositif : chaque défaut relevé par D1, D2, D11 et le constat 16, réparé. Les taux de base pondérés par le plan de sondage s'étendent de 1,89 % à 3,54 % (1,9 fois). Mais ce sont les ensembles qui font le constat, comme le constat 16 le prédisait : des 51 travaux qu'AU MOINS UN modèle a qualifiés de métarecherche, seulement 19 (37 %) l'ont été par LES TROIS, et 24 (47 %) reposent sur l'avis d'un seul modèle. LA FRONTIÈRE DU DOMAINE N'EST PAS UNE LIGNE QUE LES MODÈLES PARTAGENT ; C'EST UNE RÉGION QUE CHACUN DÉCOUPE À SA FAÇON. GPT-5.6 a de plus enfreint le schéma de sortie verrouillé sur 18 des 1 000 notices, en écrivant des valeurs de genre dans le champ du niveau, ce que le validateur de manifeste a détecté. Le livrable n'est pas le taux de base : c'est le dossier des désaccords, les 51 travaux qui marquent la frontière empirique du domaine et sur lesquels les critères d'inclusion doivent réellement être rédigés.
Calculé le 2026-07-12T19:52:14Z · les 22 constats · ce dossier en JSON