MétaCan
Menu
Retour à la cohorte
Enregistrement W2187962042

The use of indicators in French Universities

2013· preprint· en· W2187962042 sur OpenAlex

Pourquoi ce travail est dans la base

Une base qui oublie comment elle a trouvé un travail ne peut pas être vérifiée. Voici les voies qui ont admis celui-ci.

affAu moins un auteur déclare une institution canadienne dans l'instantané OpenAlex épinglé.

Notice bibliographique

RevueSPIRE (Sciences Po) · 2013
Typepreprint
Langueen
DomaineSocial Sciences
ThématiqueEducation, sociology, and vocational training
Établissements canadiensHEC Montréal
Organismes subventionnairesnon disponible
Mots-clésDisciplineOrder (exchange)Strengths and weaknessesContext (archaeology)Performance indicatorPolitical scienceData scienceSociologyGeographySocial scienceComputer sciencePsychologyBusinessMarketingSocial psychology
DOInon disponible

Résumé

récupéré en direct d'OpenAlex

The use of indicators in the management of French universities is becoming more and more prevalent and advanced, at least as far as HSS (humanities and social sciences) are concerned. In the present chapter, we will provide evidence of the general use of indicators and of differences between disciplinary fields. In order to put these results in context, we will first provide some information on the French system and how the recent reforms favored the development of indicators. We will then describe what we have learnt from the qualitative study on the attitudes of the humanities and the sciences to indicators. We will then present some lessons drawn from a quantitative study in which we were able to compare universities mainly specialized in humanities with universities mainly specialized in the sciences. In doing so, we will start out by looking at the use of indicators. This issue has been largely studied in the management sciences, and different authors have suggested different uses. Simons for instance distinguished between diagnostic use of indicators (indicators are used to produce an evaluation of performance) and interactive use of indicators (indicators are used to reveal strengths and weaknesses and to learn about them). Cavalluzzo and Ittner also distinguish between reporting (i.e. providing information about activities), and steering or making decisions (using indicators in order to introduce change). Drawing on these two typologies, we first look at cases where indicators are used to legitimize what has been done and to account for it. Indicators are produced in order to show that a level of performance is achieved, to provide data required by external actors, describing current achievements. We will also consider cases where data are produced in order to compare units or teams and thus to evaluate their activity. Finally, we look at cases where data and indicators are used in order to make decisions or choices and to take action. The legitimation, evaluation, discussion and decision uses of indicators will be studied for data on teaching, on research and on budgets in order to see whether different issues lead to different uses. A second issue addressed by the present chapter deals with disciplinary differences. In France, there are some 'complete universities' (with or without medicine), but also many universities specialized in law and economic sciences, universities with a strong orientation in the NS (natural sciences), and universities that are specialized in the HSS. This allows us to compare the uses of indicators in the humanities and the science‑dominated institutions (HSS institutions and NS institutions) in the following: the former represent approximately 15% of the French universities and the latter 14%.

Récupéré en direct depuis OpenAlex et désinversé. Les résumés ne sont pas conservés dans cette base de données : les index inversés représentent 8,6 Go des 9,3 Go de texte de la base, et le serveur dispose de 13 Go libres.

Prédiction distillée sur la base complète

Imitation des enseignants

Ni prévalence calibrée, ni vérité terrain. Validation humaine à venir. Apprise à partir de 10 348 étiquettes directes de Codex et de 10 348 étiquettes directes de Gemma. Le mode candidate est l'union des têtes enseignantes seuillées; le consensus est leur intersection. Ces sorties portent le statut machine_predicted_unvalidated et ne sont ni des étiquettes humaines ni des étiquettes directes de modèles de pointe.

score de la tête « metaresearch » (Codex)0,003
score de la tête « metaresearch » (Gemma)0,001
Version: codex-gemma-dda1882f352aStatut de validation: machine_predicted_unvalidated
Catégories candidatesÉtudes des sciences et des technologies
Catégories consensuellesaucune
DomaineSignal candidat: aucune · Signal consensuel: aucune
Devis d'étudeSignal candidat: Qualitatif · Signal consensuel: aucune
GenreSignal candidat: Empirique · Signal consensuel: Empirique
Score de désaccord entre enseignants0,603
Score d'incertitude au seuil0,997

Scores Codex et Gemma par catégorie

CatégorieCodexGemma
Métarecherche0,0030,001
Méta-épidémiologie (sens strict)0,0000,000
Méta-épidémiologie (sens large)0,0000,000
Bibliométrie0,0000,001
Études des sciences et des technologies0,0010,006
Communication savante0,0000,000
Science ouverte0,0010,000
Intégrité de la recherche0,0000,000
Charge utile insuffisante (le modèle a refusé de juger)0,0000,000

Scores machine (provisoires)

Les deux têtes enseignantes du modèle étudiant, lues sur ce travail. Un score ordonne la base pour la relecture; il n'affirme jamais une catégorie, et le statut de validation accompagne chaque rangée tel quel.

Scores de référence d'un modèle non mature (critères de maturité non atteints, 7 itérations). Un score ordonne; il n'affirme jamais une catégorie.

Tête enseignante Opus0,279
Tête enseignante GPT0,442
Écart entre enseignants0,163 · la distance entre les deux têtes enseignantes sur ce seul travail
Statut de validationscore_only:v0-immature-baseline · tel quel depuis la passe de notation : score_only signifie que le nombre peut ordonner les travaux, et qu'aucune étiquette de catégorie n'en découle