MétaCan
Menu
Retour à la cohorte
Enregistrement W1658636278 · doi:10.3138/cjpe.0028.004

Introduction à la professionnalisation de l’évaluation : perspective globale sur les compétences des évaluateurs

2014· article· fr· W1658636278 sur OpenAlexvenueno aff
Jean A. King, Donna Podems

Notice bibliographique

RevueCanadian Journal of Program Evaluation · 2014
Typearticle
Languefr
DomaineDecision Sciences
ThématiqueEvaluation and Performance Assessment
Établissements canadiensnon disponible
Organismes subventionnairesnon disponible
Mots-clésPolitical scienceHumanitiesPhilosophy

Résumé

récupéré en direct d'OpenAlex

Etablir les competences ou non? Voila une question qui semble maintenant se poser pour les evaluateurs de programme et les associations d’evaluation de partout au monde. Apres environ 50 ans, les intervenants d’une variete de domaines se demandent s’il n’est pas temps de formuler un enonce des connaissances, competences, et aptitudes uniques—ou a tout le moins distincts—necessaires pour les praticiens de l’evaluation de programme. Meme si l’evaluation de programme est une pratique grandissante, reconnue comme domaine de travail et d’etudes, l’interpretation des competences necessaires pour guider la pratique de l’evaluation demeure large. De nombreux arguments, autant positifs que negatifs, ont ete formules par les observateurs concernant l’elaboration, la mise en œuvre, et l’utilisation potentielle des competences. Certains soulignent le potentiel positif d’une entente concernant un socle commun de competences au sein du domaine. En revanche, tous ne sont pas enthousiastes quant au potentiel d’un tel enonce de competences comme resume dans le texte suivant du United Kingdom Evaluation Society (UKES): Certains craignent qu’il garde la mainmise sur ce que peuvent accomplir les evaluateurs; qu’il ne pourrait inclure la grande variete de competences necessaire pour divers types d’evaluation; et qu’il pourrait fournir aux utilisateurs et gestionnaires de l’evaluation une liste inflexible de competences qui forcerait de facon inutile les evaluateurs a rendre des comptes (UKES, 2002, s.p.; traduction libre).

Récupéré en direct depuis OpenAlex et désinversé. Les résumés ne sont pas conservés dans cette base de données : les index inversés représentent 8,6 Go des 9,3 Go de texte de la base, et le serveur dispose de 13 Go libres.

Comment cette classification a été obtenuedéplier

Prédiction distillée sur la base complète

Imitation des enseignants

Ni prévalence calibrée, ni vérité terrain. Validation humaine à venir. Apprise à partir de 10 348 étiquettes directes de Codex et de 10 348 étiquettes directes de Gemma. Le mode candidate est l'union des têtes enseignantes seuillées; le consensus est leur intersection. Ces sorties portent le statut machine_predicted_unvalidated et ne sont ni des étiquettes humaines ni des étiquettes directes de modèles de pointe.

score de la tête « metaresearch » (Codex)0,070
score de la tête « metaresearch » (Gemma)0,018
Version: codex-gemma-dda1882f352aStatut de validation: machine_predicted_unvalidated
Catégories candidatesMétarecherche, Méta-épidémiologie (sens strict), Charge utile insuffisante (le modèle a refusé de juger)
Catégories consensuellesMétarecherche
DomaineSignal candidat: aucune · Signal consensuel: aucune
Devis d'étudeSignal candidat: Autre devis · Signal consensuel: aucune
GenreSignal candidat: Empirique · Signal consensuel: Empirique
Score de désaccord entre enseignants0,926
Score d'incertitude au seuil1,000

Scores Codex et Gemma par catégorie

CatégorieCodexGemma
Métarecherche0,0700,018
Méta-épidémiologie (sens strict)0,0000,000
Méta-épidémiologie (sens large)0,0000,000
Bibliométrie0,0010,002
Études des sciences et des technologies0,0010,001
Communication savante0,0010,002
Science ouverte0,0010,000
Intégrité de la recherche0,0000,001
Charge utile insuffisante (le modèle a refusé de juger)0,0050,000

Scores machine (provisoires)

Les deux têtes enseignantes du modèle étudiant, lues sur ce travail. Un score ordonne la base pour la relecture; il n'affirme jamais une catégorie, et le statut de validation accompagne chaque rangée tel quel.

Scores de référence d'un modèle non mature (critères de maturité non atteints, 7 itérations). Un score ordonne; il n'affirme jamais une catégorie.

Tête enseignante Opus0,297
Tête enseignante GPT0,499
Écart entre enseignants0,202 · la distance entre les deux têtes enseignantes sur ce seul travail
Statut de validationscore_only:v0-immature-baseline · tel quel depuis la passe de notation : score_only signifie que le nombre peut ordonner les travaux, et qu'aucune étiquette de catégorie n'en découle

Classification

machine, non validée

Prédiction automatique; les deux têtes enseignantes s’accordent sur ce qui est montré ici.

Devis d'étudeAutre devis
Domainenon disponible
GenreEmpirique

Le détail, modèle par modèle et score par score, se trouve en fin de page sous « Comment cette classification a été obtenue ».

En bref

Citations0
Publié2014
Routes d'admission1
Résumé présentoui

Explorer davantage

Même revueCanadian Journal of Program EvaluationMême sujetEvaluation and Performance AssessmentTravaux en français237 207