Implementation of the CEFR in the rubrics of two main English Certificates: Cambridge FCE and Trinity ISE-II.
Notice bibliographique
Résumé
The Common European Framework of Reference (CEFR) was developed by the European Council with the intention of providing a comprehensive basis for the creation language syllabi and curriculum guidelines, together with the design of teaching materials, language certificates and instruments of assessment. The CEFR has been implemented in Spain through different education laws and has prompted the introduction of the communicative approach and the use of new instruments of assessment such as rubrics. Nonetheless, almost twenty years after the CEFR was passed, not many researches have been conducted on how the Framework has been implemented. It is from this line where the current research stems as it intends to check how the CEFR has been adapted in the rubrics used for the assessment of the writing skill in two main English Certificates: the Cambridge Assessment English FCE and the Trinity College ISE-II. El Marco Común Europeo de Referencia (MCER) se desarrolló con el objetivo de promover una base común para la creación de currículos educativos y servir como guía en la elaboración de materiales didácticos, exámenes de certificación e instrumentos de evaluación. El MCER se ha implantado en España a través de diferentes leyes educativas y ha propiciado la introducción del enfoque comunicativo o nuevos instrumentos de evaluación como rúbricas. Sin embargo, casi veinte años después de la aprobación del marco, pocos son los estudios que han revisado de qué manera se ha adaptado el marco. Es aquí donde la presente investigación se sitúa, con el objetivo de comprobar cómo se ha implementado el MCER en las rúbricas para examinar la destreza escrita de dos de los principales certificados de inglés: el Cambridge Assessment English FCE y el Trinity College ISE-II.
Récupéré en direct depuis OpenAlex et désinversé. Les résumés ne sont pas conservés dans cette base de données : les index inversés représentent 8,6 Go des 9,3 Go de texte de la base, et le serveur dispose de 13 Go libres.
Comment cette classification a été obtenuedéplier
Prédiction machine sur la base complète
Imitation des enseignantsNi prévalence calibrée, ni vérité terrain. Validation humaine à venir. Le volet Gemma est une étiquette directe du modèle pour chaque travail de la base, lue sur la notice réduite au titre. Le volet Codex est un classifieur appris des 10 348 étiquettes directes de Codex et calibré sur les taux pondérés de l'échantillon; les champs sans appui suffisant ne portent aucun appel Codex. Le mode candidate est l'union des deux volets; le consensus est leur intersection. Ces sorties portent le statut machine_predicted_unvalidated et ne sont pas des étiquettes humaines.
Scores du classifieur distillé par catégorie (deux têtes)
| Catégorie | Codex | Gemma |
|---|---|---|
| Métarecherche | 0,030 | 0,098 |
| Méta-épidémiologie (sens strict) | 0,001 | 0,000 |
| Méta-épidémiologie (sens large) | 0,001 | 0,001 |
| Bibliométrie | 0,008 | 0,003 |
| Études des sciences et des technologies | 0,002 | 0,002 |
| Communication savante | 0,004 | 0,003 |
| Science ouverte | 0,002 | 0,005 |
| Intégrité de la recherche | 0,001 | 0,003 |
| Charge utile insuffisante (le modèle a refusé de juger) | 0,012 | 0,006 |
Scores machine (provisoires)
Les deux têtes enseignantes du modèle étudiant, lues sur ce travail. Un score ordonne la base pour la relecture; il n'affirme jamais une catégorie, et le statut de validation accompagne chaque rangée tel quel.
Scores de référence d'un modèle non mature (critères de maturité non atteints, 7 itérations). Un score ordonne; il n'affirme jamais une catégorie.
score_only:v0-immature-baseline · tel quel depuis la passe de notation : score_only signifie que le nombre peut ordonner les travaux, et qu'aucune étiquette de catégorie n'en découleClassification
machine, non validéePrédiction automatique; un appel candidat d’une seule source (Gemma direct ou Codex distillé), pas un consensus.
Le détail, modèle par modèle et score par score, se trouve en fin de page sous « Comment cette classification a été obtenue ».