MétaCan
Menu
Retour à la cohorte
Enregistrement W4386249144 · doi:10.1167/jov.23.9.5494

Making memorability of scenes better or worse by manipulating their contour properties

2023· article· en· W4386249144 sur OpenAlexaff
Seohee Han, Morteza Rezanejad, Dirk B. Walther

Notice bibliographique

RevueJournal of Vision · 2023
Typearticle
Langueen
DomaineComputer Science
ThématiqueVisual Attention and Saliency Detection
Établissements canadiensUniversity of Toronto
Organismes subventionnairesnon disponible
Mots-clésArtificial intelligencePerceptionLine (geometry)CurvatureComputer scienceLine drawingsComputer visionOrientation (vector space)Contour linePattern recognition (psychology)Line segmentPsychologyMathematicsGeometryCartographyGeographyEngineering drawing

Résumé

récupéré en direct d'OpenAlex

Why are some images more likely to be remembered than others? Past research has explored both low-level image properties, such as colour and spatial frequencies, and high-level properties, such as scene semantics. Recent work from our group suggests that memorability for line drawings and photographs of scenes is correlated with specific contour features, such as contour curvature and orientation, as well as mid-level perceptual grouping features, such as contour junctions. Here, we examine whether this relationship is merely correlational, or if manipulating these features causes images to be remembered better or worse. To this end, we manipulated contour properties as well as grouping properties that describe the spatial relationships between contours in the line drawings of real-world scenes and measured the effect of these manipulations on memorability. We trained a Random Forest model to predict scene memorability from contour and perceptual grouping features computed from the line drawings. Then, we used the trained model to predict the contribution of each contour to the memorability of the scene. Next, each line drawing was split into two half-images, one containing the contours with high predicted memorability scores and the other containing the contours with low predicted memorability scores. Since both versions were derived from the same original drawing, image identity was left intact by this manipulation. In a new memorability experiment, we find that the half-images predicted to be more memorable were indeed remembered better than the half-images predicted to be less memorable. Our findings suggest that specific contour and perceptual grouping cues are causally involved in committing real-world images to memory. We demonstrate that by measuring and manipulating these cues, we can isolate the contributions of image features at different visual processing stages to image memorability, thereby bridging the gap between low-level features and scene semantics in our understanding of memorability.

Récupéré en direct depuis OpenAlex et désinversé. Les résumés ne sont pas conservés dans cette base de données : les index inversés représentent 8,6 Go des 9,3 Go de texte de la base, et le serveur dispose de 13 Go libres.

Comment cette classification a été obtenuedéplier

Prédiction distillée sur la base complète

Imitation des enseignants

Ni prévalence calibrée, ni vérité terrain. Validation humaine à venir. Apprise à partir de 10 348 étiquettes directes de Codex et de 10 348 étiquettes directes de Gemma. Le mode candidate est l'union des têtes enseignantes seuillées; le consensus est leur intersection. Ces sorties portent le statut machine_predicted_unvalidated et ne sont ni des étiquettes humaines ni des étiquettes directes de modèles de pointe.

score de la tête « metaresearch » (Codex)0,001
score de la tête « metaresearch » (Gemma)0,000
Version: codex-gemma-dda1882f352aStatut de validation: machine_predicted_unvalidated
Catégories candidatesaucune
Catégories consensuellesaucune
DomaineSignal candidat: aucune · Signal consensuel: aucune
Devis d'étudeSignal candidat: Expérimental (laboratoire) · Signal consensuel: aucune
GenreSignal candidat: Empirique · Signal consensuel: Empirique
Score de désaccord entre enseignants0,421
Score d'incertitude au seuil0,183

Scores Codex et Gemma par catégorie

CatégorieCodexGemma
Métarecherche0,0010,000
Méta-épidémiologie (sens strict)0,0000,000
Méta-épidémiologie (sens large)0,0000,000
Bibliométrie0,0000,000
Études des sciences et des technologies0,0000,000
Communication savante0,0000,001
Science ouverte0,0000,000
Intégrité de la recherche0,0000,000
Charge utile insuffisante (le modèle a refusé de juger)0,0000,000

Scores machine (provisoires)

Les deux têtes enseignantes du modèle étudiant, lues sur ce travail. Un score ordonne la base pour la relecture; il n'affirme jamais une catégorie, et le statut de validation accompagne chaque rangée tel quel.

Scores de référence d'un modèle non mature (critères de maturité non atteints, 7 itérations). Un score ordonne; il n'affirme jamais une catégorie.

Tête enseignante Opus0,107
Tête enseignante GPT0,349
Écart entre enseignants0,243 · la distance entre les deux têtes enseignantes sur ce seul travail
Statut de validationscore_only:v0-immature-baseline · tel quel depuis la passe de notation : score_only signifie que le nombre peut ordonner les travaux, et qu'aucune étiquette de catégorie n'en découle

Classification

machine, non validée

Prédiction automatique; un appel candidat d’une seule tête enseignante, pas un consensus.

Les modèles n’ont appliqué aucune catégorie : rien dans la taxonomie ne correspondait à ce travail.
Devis d'étudeExpérimental (laboratoire)
Domainenon disponible
GenreEmpirique

Le détail, modèle par modèle et score par score, se trouve en fin de page sous « Comment cette classification a été obtenue ».

En bref

Citations1
Publié2023
Routes d'admission1
Résumé présentoui

Explorer davantage

Même revueJournal of VisionMême sujetVisual Attention and Saliency DetectionTravaux en français237 207