Flying blind, or going with the flow?: Using constructivist evaluation to manage the unexpected in the GraniteNet project
Notice bibliographique
Résumé
The GraniteNet Project is a research and development collaboration between the University of Southern Queensland, Australia, and the community of Stanthorpe – a rural community of just over 10,000 people located within the university’s regional catchment area. The vision of this Community Informatics project, which commenced in 2007 and is now in its third phase, is the development of a sustainable community designed, owned and managed web portal that will support Stanthorpe’s development as a ‘learning community’. With funding from the State Government, the GraniteNet Board commissioned an evaluation of the second phase of the project which focussed on the design, development and trial of an incubator community portal environment, a portal governance framework and community engagement strategy. Participatory Action Research (PAR) and constructivist (or “Fourth Generation”) evaluation methodologies were adopted to guide the evaluation with the aims of documenting the project, establishing an evidence base to inform future decision-making, identifying and exploring significant contextual factors impacting on the project, evaluating the effectiveness of the models and processes used to guide the project, and building a culture of evaluation that would help to ensure ongoing review and critical reflection on progress. The evaluation design encompassed formative, summative and research evaluation. This paper reports the evaluation processes and outcomes, with a focus on exploring the ways in which these methodologies can be used to help Community Informatics researchers and practitioners learn from and about the unexpected and unanticipated in a field where learning through experimentation is the name of the game, imagination, creativity and collaborative design the keys to innovation and transformation, and where more traditional evaluation methodologies are becoming increasingly irrelevant.
Récupéré en direct depuis OpenAlex et désinversé. Les résumés ne sont pas conservés dans cette base de données : les index inversés représentent 8,6 Go des 9,3 Go de texte de la base, et le serveur dispose de 13 Go libres.
Comment cette classification a été obtenuedéplier
Prédiction distillée sur la base complète
Imitation des enseignantsNi prévalence calibrée, ni vérité terrain. Validation humaine à venir. Apprise à partir de 10 348 étiquettes directes de Codex et de 10 348 étiquettes directes de Gemma. Le mode candidate est l'union des têtes enseignantes seuillées; le consensus est leur intersection. Ces sorties portent le statut machine_predicted_unvalidated et ne sont ni des étiquettes humaines ni des étiquettes directes de modèles de pointe.
Scores Codex et Gemma par catégorie
| Catégorie | Codex | Gemma |
|---|---|---|
| Métarecherche | 0,016 | 0,000 |
| Méta-épidémiologie (sens strict) | 0,000 | 0,000 |
| Méta-épidémiologie (sens large) | 0,000 | 0,000 |
| Bibliométrie | 0,000 | 0,001 |
| Études des sciences et des technologies | 0,003 | 0,000 |
| Communication savante | 0,000 | 0,000 |
| Science ouverte | 0,001 | 0,000 |
| Intégrité de la recherche | 0,000 | 0,001 |
| Charge utile insuffisante (le modèle a refusé de juger) | 0,000 | 0,000 |
Scores machine (provisoires)
Les deux têtes enseignantes du modèle étudiant, lues sur ce travail. Un score ordonne la base pour la relecture; il n'affirme jamais une catégorie, et le statut de validation accompagne chaque rangée tel quel.
Scores de référence d'un modèle non mature (critères de maturité non atteints, 7 itérations). Un score ordonne; il n'affirme jamais une catégorie.
score_only:v0-immature-baseline · tel quel depuis la passe de notation : score_only signifie que le nombre peut ordonner les travaux, et qu'aucune étiquette de catégorie n'en découleClassification
machine, non validéePrédiction automatique; un appel candidat d’une seule tête enseignante, pas un consensus.
Le détail, modèle par modèle et score par score, se trouve en fin de page sous « Comment cette classification a été obtenue ».