Should We Chang What We Are Doing? The Limits of Screwmeneutics for Digital Philology
Notice bibliographique
Résumé
Résumé La philologie numérique s’est traditionnellement limitée à soutenir les approches textuelles conventionnelles — paléographie et codicologie numériques (voir, par exemple, Ciula 2017 ; Whearty 2023), création d’éditions numériques (voir, par exemple, Pierazzo 2015 ; Apollon, Bélisle et Régnier 2014 ; Turner 2014), collation et facilitation de l’analyse stemmatologique (voir, par exemple, Bordalejo et Vázquez 2021 ; Spencer et Howe 2004 ; Eagleton et Spencer 2006), ainsi que développement d’outils, curation et annotation de données, et constitution de corpus historiques interrogeables (voir, par exemple, Meyer 2012 ; Hilpert et Gries 2009 ; Bamman et Crane 2008). Dans tous ces cas, le numérique demeure un auxiliaire de la philologie — mais dès que la fiabilité technique fait défaut, il compromet les ambitions mêmes de la philologie expérimentale.Cette communication examine les conditions de possibilité d’une philologie numérique véritablement expérimentale, en questionnant les limites disciplinaires et les exigences techniques qu’elle implique. À partir d’une étude de cas portant sur la lemmatisation de l’anglais ancien, elle met en lumière les limites des outils actuels de traitement automatique du langage et des corpus disponibles, qui manquent de la précision et de la profondeur nécessaires à un travail philologique rigoureux. Cette étude critique à la fois le conservatisme méthodologique qui prévaut dans le domaine et l’attitude quasi-HARKing de la « screwmeneutics » ou « hermeneutics of screwing around » (Rockwell et Sinclair 2016 ; Van Zundert 2015 ; Ramsay 2014 ; Rockwell 2003), courant ludique en Humanités numériques souvent présenté comme une alternative libératrice, mais dont les implications épistémiques restent floues. Malgré les promesses des outils computationnels de transformer la pratique philologique, nous soutenons que les cadres actuels du traitement automatique du langage — tels que Stanza (Qi et al. 2020) et CLTK (Johnson et al. 2021) — ne sont pas encore adaptés à un travail sérieux sur des langues historiques de nature fragmentaire. En utilisant trois versions de Beowulf, nous testons la précision et la fiabilité des lemmatiseurs et mettons en évidence des incohérences majeures et des formes inventées, en particulier dans des langues non standardisées et à faibles ressources comme l’anglais ancien. Nos résultats révèlent non seulement des limites techniques, mais aussi des problèmes structurels : modèles non documentés, infrastructures fragmentées, et absence de chaînes de validation scientifique.Nous soutenons que la « screwmeneutique » est une méthode qui ressemble au HARKing : elle procède par exploration, en attribuant rétrospectivement de la signification. Elle n’est pas une approche frivole, mais exige des outils fiables. Sans une fiabilité de base, la philologie expérimentale devient incohérente. En nous appuyant sur le diagnostic de Dombrowski sur les projets numériques (2014), le modèle BLARK de Krauwer (1998) et les « scholarly primitives » d’Unsworth (2000), nous esquissons le besoin de ressources minimales et partageables — une base pour des chaînes d’outils durables en TAL historique. Nous affirmons que la philologie numérique, si elle veut aller au-delà des éditions numérisées et devenir véritablement computationnelle, doit adopter un modèle de développement plus responsable et collaboratif, inspiré des meilleures pratiques de l’open source. En fin de compte, nous soutenons que l’avenir de la philologie numérique dépend moins de nouveaux outils que d’une meilleure infrastructure, d’une transparence accrue, d’une validation rigoureuse, et de workflows minimalistes sur le plan formel mais solides sur le plan fonctionnel. Réferences Apollon, Daniel, Claire Bélisle et Philippe Régnier, dirs. Digital Critical Editions. Urbana, Chicago et Springfield : University of Illinois Press, 2014. Bamman, David, et Gregory Crane. « Building a Dynamic Lexicon from a Digital Library ». Proceedings of the 8th ACM/IEEE-CS Joint Conference on Digital Libraries, 11–20. Pittsburgh, PA : ACM, 2008. https://doi.org/10.1145/1378889.1378892. Bordalejo, Barbara, et Adam Alberto Vázquez. « You’re Collating Just Fine and Other Lies You’ve Been Telling Yourself ». Digital Medievalist 14, no. 2 (2021). https://doi.org/10.16995/dm.8066. Crane, Gregory, David Bamman et Alison Babeu. « ePhilology: When the Books Talk to Their Readers ». Dans A Companion to Digital Literary Studies, dirigé par Ray Siemens et Susan Schreibman, 29–64. New York et Londres : Blackwell Publishing, 2007. Dombrowski, Quinn. « What Ever Happened to Project Bamboo? » Literary and Linguistic Computing 29, no. 3 (2014) : 326–339. https://doi.org/10.1093/llc/fqu026. Eagleton, Catherine, et Matthew Spencer. « Copying and Conflation in Geoffrey Chaucer’s Treatise on the Astrolabe: A Stemmatic Analysis Using Phylogenetic Software ». Studies in History and Philosophy of Science Part A 37, no. 2 (2006) : 237–268. https://doi.org/10.1016/j.shpsa.2005.08.020. Gries, Stefan Th., et Martin Hilpert. « Assessing Frequency Changes in Multistage Diachronic Corpora: Applications for Historical Corpus Linguistics and the Study of Language Acquisition ». Literary and Linguistic Computing 24, no. 4 (2009) : 385–401. https://doi.org/10.1093/llc/fqn012. Krauwer, Steven. « ELSNET and ELRA: Common Past, Common Future ». ELRA Newsletter 3, no. 2 (1998). http://www.elsnet.org/dox/blark.html. Johnson, Kyle P., Patrick J. Burns, John Stewart, Todd Cook, Clément Besnier et William J. B. Mattingly. « The Classical Language Toolkit: An NLP Framework for Pre-Modern Languages ». Proceedings of the 59th Annual Meeting of the Association for Computational Linguistics and the 11th International Joint Conference on Natural Language Processing: System Demonstrations, 20–29. En ligne : Association for Computational Linguistics, 2021. https://doi.org/10.18653/v1/2021.acl-demo.3. Meyer, Charles F. « Textual Analysis: From Philology to Corpus Linguistics ». Dans English Corpus Linguistics: Crossing Paths, par Merja Kytö, 23–42. Amsterdam : Brill, 2012. https://doi.org/10.1163/9789401207935. Pierazzo, Elena. Digital Scholarly Editing. Theories, Models and Methods. Farnham : Ashgate, 2015. Qi, Peng, Yuhao Zhang, Yuhui Zhang, Jason Bolton et Christopher D. Manning. « Stanza: A Python Natural Language Processing Toolkit for Many Human Languages ». Proceedings of the 58th Annual Meeting of the Association for Computational Linguistics: System Demonstrations, 101–108. En ligne : Association for Computational Linguistics, 2020. https://doi.org/10.18653/v1/2020.acl-demos.14. Ramsay, Stephen. « The Hermeneutics of Screwing Around; or What You Do with a Million Books ». Dans Pastplay: Teaching and Learning History with Technology, par Kevin Kee, 111–120. Ann Arbor : University of Michigan Press, 2014. https://doi.org/10.1353/book.29517. Rockwell, Geoffrey. « What Is Text Analysis, Really? » Literary and Linguistic Computing 18, no. 2 (2003) : 209–219. Rockwell, Geoffrey, et Stéfan Sinclair. Hermeneutica: Computer-Assisted Interpretation in the Humanities. Cambridge (Massachusetts) : MIT Press, 2016. Spencer, Matthew, et Christopher Howe. « Collating Texts Using Progressive Multiple Alignment ». Computers and the Humanities 38, no. 3 (2004) : 253–270. https://doi.org/10.1007/s10579-004-8682-1. Turner, James. Philology. The Forgotten Origins of the Modern Humanities. Princeton (NJ) : Princeton University Press, 2014. Van Zundert, Joris J. « Screwmeneutics and Hermenumericals: The Computationality of Hermeneutics ». Dans A New Companion to Digital Humanities, dirigé par Susan Schreibman, Ray Siemens et John Unsworth, 331–347. 1re éd. Wiley, 2015. https://doi.org/10.1002/9781118680605.ch23. Whearty, Bridget. Digital Codicology: Medieval Books and Modern Labor. Stanford (Californie) : Stanford University Press, 2023.
Récupéré en direct depuis OpenAlex et désinversé. Les résumés ne sont pas conservés dans cette base de données : les index inversés représentent 8,6 Go des 9,3 Go de texte de la base, et le serveur dispose de 13 Go libres.
Comment cette classification a été obtenuedéplier
Prédiction machine sur la base complète
Imitation des enseignantsNi prévalence calibrée, ni vérité terrain. Validation humaine à venir. Le volet Gemma est une étiquette directe du modèle pour chaque travail de la base, lue sur la notice réduite au titre. Le volet Codex est un classifieur appris des 10 348 étiquettes directes de Codex et calibré sur les taux pondérés de l'échantillon; les champs sans appui suffisant ne portent aucun appel Codex. Le mode candidate est l'union des deux volets; le consensus est leur intersection. Ces sorties portent le statut machine_predicted_unvalidated et ne sont pas des étiquettes humaines.
Scores du classifieur distillé par catégorie (deux têtes)
| Catégorie | Codex | Gemma |
|---|---|---|
| Métarecherche | 0,010 | 0,031 |
| Méta-épidémiologie (sens strict) | 0,000 | 0,000 |
| Méta-épidémiologie (sens large) | 0,000 | 0,000 |
| Bibliométrie | 0,002 | 0,002 |
| Études des sciences et des technologies | 0,006 | 0,060 |
| Communication savante | 0,016 | 0,022 |
| Science ouverte | 0,001 | 0,008 |
| Intégrité de la recherche | 0,003 | 0,004 |
| Charge utile insuffisante (le modèle a refusé de juger) | 0,024 | 0,003 |
Scores machine (provisoires)
Les deux têtes enseignantes du modèle étudiant, lues sur ce travail. Un score ordonne la base pour la relecture; il n'affirme jamais une catégorie, et le statut de validation accompagne chaque rangée tel quel.
Scores de référence d'un modèle non mature (critères de maturité non atteints, 7 itérations). Un score ordonne; il n'affirme jamais une catégorie.
score_only:v0-immature-baseline · tel quel depuis la passe de notation : score_only signifie que le nombre peut ordonner les travaux, et qu'aucune étiquette de catégorie n'en découleClassification
machine, non validéePrédiction automatique; un appel candidat d’une seule source (Gemma direct ou Codex distillé), pas un consensus.
Le détail, modèle par modèle et score par score, se trouve en fin de page sous « Comment cette classification a été obtenue ».