MétaCan
Menu
Retour à la cohorte
Enregistrement W4417340273 · doi:10.18438/eblip30808

LibGuides or Bust? Usability Testing Platforms for Research Guides

2025· article· en· W4417340273 sur OpenAlexvenueno aff
A. Higgins, Piper Cumbo

Notice bibliographique

RevueEvidence Based Library and Information Practice · 2025
Typearticle
Langueen
DomaineSocial Sciences
ThématiqueLibrary Science and Information Literacy
Établissements canadiensnon disponible
Organismes subventionnairesAuburn University
Mots-clésAdobeUsabilityTest (biology)Task (project management)Screen readerAdobe photoshopMirroringWeb usability

Résumé

récupéré en direct d'OpenAlex

Objective – The purpose of this study was to compare student use of two library research guides, one created in Springshare’s LibGuides platform with a multi-page layout and one created using a single-page Adobe Express website. The researchers sought to explore how LibGuides’ library-first design and embedded features would enable successful student navigation versus Adobe Express’ simpler, website-style layout that might be more familiar to users yet lacks the ability to integrate fully with the broader library Web presence. Methods – The study used a qualitative usability test to answer the research questions. Two groups of six users each were assigned to complete tasks using one of the two platforms. Researchers designed test guides for the study mirroring real-world content and layout, following best practices of design and institutional guidelines within each system. During test sessions, users followed a “think-aloud” protocol, allowing researchers to transcribe and code comments to identify patterns in students’ feedback. Pretest and posttest questionnaires were also used to assess participants’ prior experience and subsequent perceptions. Results – Users’ posttest responses indicated they found both guides easy to use. However, there were a few differences between their use of LibGuides and Adobe Express during the sessions. Users of Adobe Express commented favorably on its clean aesthetic, though users appreciated both guides’ collation of resources. Adobe Express users experienced higher rates of task success, fewer instances of confusion, and a clearer differentiation between the guide and broader library resources. Many themes that surfaced in sessions related to user behaviour overlapped between the two platforms, such as a preference for searching over browsing, gravitation toward familiar tools, and not reading all content. Conclusion – Neither guide fully enabled universal task success, and each brought its own set of challenges for users. Moreover, users in both test groups failed to fully engage with all content. Librarians designing research guides should consider the context and purpose of creation, as well as users’ existing information literacy skills and mental models, when selecting platforms, layouts, and designs.

Récupéré en direct depuis OpenAlex et désinversé. Les résumés ne sont pas conservés dans cette base de données : les index inversés représentent 8,6 Go des 9,3 Go de texte de la base, et le serveur dispose de 13 Go libres.

Comment cette classification a été obtenuedéplier

Prédiction machine sur la base complète

Imitation des enseignants

Ni prévalence calibrée, ni vérité terrain. Validation humaine à venir. Le volet Gemma est une étiquette directe du modèle pour chaque travail de la base, lue sur la notice réduite au titre. Le volet Codex est un classifieur appris des 10 348 étiquettes directes de Codex et calibré sur les taux pondérés de l'échantillon; les champs sans appui suffisant ne portent aucun appel Codex. Le mode candidate est l'union des deux volets; le consensus est leur intersection. Ces sorties portent le statut machine_predicted_unvalidated et ne sont pas des étiquettes humaines.

score de la tête « metaresearch » (Codex)0,014
score de la tête « metaresearch » (Gemma)0,043
Version: metacan-v3-hybrid-931329e0061cStatut de validation: machine_predicted_unvalidated
Catégories candidatesaucune
Catégories consensuellesaucune
DomaineSignal candidat: aucune · Signal consensuel: aucune
Devis d'étudeSignal candidat: Observationnel · Signal consensuel: aucune
GenreSignal candidat: Empirique · Signal consensuel: Empirique
Score de désaccord entre enseignants0,014
Score d'incertitude au seuil0,072

Scores du classifieur distillé par catégorie (deux têtes)

CatégorieCodexGemma
Métarecherche0,0140,043
Méta-épidémiologie (sens strict)0,0010,001
Méta-épidémiologie (sens large)0,0000,001
Bibliométrie0,0010,001
Études des sciences et des technologies0,0010,001
Communication savante0,0020,002
Science ouverte0,0010,001
Intégrité de la recherche0,0010,001
Charge utile insuffisante (le modèle a refusé de juger)0,0060,002

Scores machine (provisoires)

Les deux têtes enseignantes du modèle étudiant, lues sur ce travail. Un score ordonne la base pour la relecture; il n'affirme jamais une catégorie, et le statut de validation accompagne chaque rangée tel quel.

Scores de référence d'un modèle non mature (critères de maturité non atteints, 7 itérations). Un score ordonne; il n'affirme jamais une catégorie.

Tête enseignante Opus0,133
Tête enseignante GPT0,426
Écart entre enseignants0,293 · la distance entre les deux têtes enseignantes sur ce seul travail
Statut de validationscore_only:v0-immature-baseline · tel quel depuis la passe de notation : score_only signifie que le nombre peut ordonner les travaux, et qu'aucune étiquette de catégorie n'en découle

Classification

machine, non validée

Prédiction automatique; un appel candidat d’une seule source (Gemma direct ou Codex distillé), pas un consensus.

Les modèles n’ont appliqué aucune catégorie : rien dans la taxonomie ne correspondait à ce travail.
Devis d'étudeObservationnel
Domainenon disponible
GenreEmpirique

Le détail, modèle par modèle et score par score, se trouve en fin de page sous « Comment cette classification a été obtenue ».

En bref

Citations0
Publié2025
Routes d'admission1
Résumé présentoui

Explorer davantage

Même revueEvidence Based Library and Information PracticeMême sujetLibrary Science and Information LiteracyTravaux en français237 207