MétaCan
Menu
Retour à la cohorte
Enregistrement W4241407248 · doi:10.36591/se-d-4402-55

Overlay Journals, Overlay Reviews: Has Their Time Finally Come?

2021· article· en· W4241407248 sur OpenAlexaboutno aff
Tony Alves

Notice bibliographique

RevueScience Editor · 2021
Typearticle
Langueen
DomaineDecision Sciences
ThématiqueAcademic Publishing and Open Access
Établissements canadiensnon disponible
Organismes subventionnairesnon disponible
Mots-clésTransparency (behavior)Library sciencePublishingOverlayLas vegasWorld Wide WebMedia studiesEngineeringComputer sciencePolitical scienceSociologyLaw

Résumé

récupéré en direct d'OpenAlex

MODERATOR: Heather R Staines Independent Consultant Trumbull, Connecticut SPEAKERS: Hannah Drury Product Manager eLife/Sciety Peterborough, United Kingdom Samantha Hindle Content Manager bioRxiv and medRxiv Cofounder PREreview Stefano M Bertozzi Dean Emeritus and Professor of Health Policy and Management UC Berkeley School of Public Health Gunther Eysenbach CEO and Executive Editor JMIR Publications Toronto, Ontario, Canada REPORTER: Tony Alves Hopedale, Massachusetts The session “Overlay Journals, Overlay Reviews: Has Their Time Finally Come?” was held virtually on May 4, 2021. Moderated by Heather Staines, Senior Consultant at Delta Think, the session featured presentations by Stefano M Bertozzi, Dean Emeritus and Professor of Public Health Policy and Management at UC Berkeley; Gunther Eysenbach, CEO and Executive Editor, JMIR Publications; Samantha Hindle, Content Manager of bioRxiv and medRxiv and Co-founder of PREreview; and Hannah Drury, Product Manager of Sciety at eLife. COVID-19 has accelerated the use of preprints, and researchers and media are increasingly turning to preprint servers to get an early glimpse at new studies. Preprint servers have come under increased scrutiny, and many have risen to the challenge by implementing various forms of peer review. Another interesting and related phenomenon is the increase in “overlay journals,” which use “overlay reviews” to help validate the science in preprints, thus increasing trust and transparency in preprints. If you are unfamiliar with the concept of overlay journals, they are a type of online, open access compilation of preprints, public domain publications, and already-published open access articles. Sometimes the compilations are thematic, addressing specific topics, and […]

Récupéré en direct depuis OpenAlex et désinversé. Les résumés ne sont pas conservés dans cette base de données : les index inversés représentent 8,6 Go des 9,3 Go de texte de la base, et le serveur dispose de 13 Go libres.

Comment cette classification a été obtenuedéplier

Prédiction machine sur la base complète

Imitation des enseignants

Ni prévalence calibrée, ni vérité terrain. Validation humaine à venir. Le volet Gemma est une étiquette directe du modèle pour chaque travail de la base, lue sur la notice réduite au titre. Le volet Codex est un classifieur appris des 10 348 étiquettes directes de Codex et calibré sur les taux pondérés de l'échantillon; les champs sans appui suffisant ne portent aucun appel Codex. Le mode candidate est l'union des deux volets; le consensus est leur intersection. Ces sorties portent le statut machine_predicted_unvalidated et ne sont pas des étiquettes humaines.

score de la tête « metaresearch » (Codex)0,072
score de la tête « metaresearch » (Gemma)0,169
Version: metacan-v3-hybrid-931329e0061cStatut de validation: machine_predicted_unvalidated
Catégories candidatesMétarecherche, Communication savante
Catégories consensuellesaucune
DomaineSignal candidat: Évaluation · Signal consensuel: aucune
Devis d'étudeSignal candidat: Théorique ou conceptuel · Signal consensuel: aucune
GenreSignal candidat: Commentaire · Signal consensuel: aucune
Score de désaccord entre enseignants0,974
Score d'incertitude au seuil0,485

Scores du classifieur distillé par catégorie (deux têtes)

CatégorieCodexGemma
Métarecherche0,0720,169
Méta-épidémiologie (sens strict)0,0020,002
Méta-épidémiologie (sens large)0,0020,002
Bibliométrie0,0040,004
Études des sciences et des technologies0,0060,004
Communication savante0,0260,022
Science ouverte0,0040,010
Intégrité de la recherche0,0140,012
Charge utile insuffisante (le modèle a refusé de juger)0,1450,089

Scores machine (provisoires)

Les deux têtes enseignantes du modèle étudiant, lues sur ce travail. Un score ordonne la base pour la relecture; il n'affirme jamais une catégorie, et le statut de validation accompagne chaque rangée tel quel.

Scores de référence d'un modèle non mature (critères de maturité non atteints, 7 itérations). Un score ordonne; il n'affirme jamais une catégorie.

Tête enseignante Opus0,125
Tête enseignante GPT0,413
Écart entre enseignants0,287 · la distance entre les deux têtes enseignantes sur ce seul travail
Statut de validationscore_only:v0-immature-baseline · tel quel depuis la passe de notation : score_only signifie que le nombre peut ordonner les travaux, et qu'aucune étiquette de catégorie n'en découle

Classification

machine, non validée

Prédiction automatique; un appel candidat d’une seule source (Gemma direct ou Codex distillé), pas un consensus.

Devis d'étudeThéorique ou conceptuel
DomaineÉvaluation
GenreCommentaire

Le détail, modèle par modèle et score par score, se trouve en fin de page sous « Comment cette classification a été obtenue ».

En bref

Citations3
Publié2021
Routes d'admission1
Résumé présentoui

Explorer davantage

Même revueScience EditorMême sujetAcademic Publishing and Open AccessTravaux en français237 207