Title:
|
More cat than cute?: interpretable prediction of adjective-noun pairs
|
Author:
|
Fernàndez, Dèlia; Woodward, Alejandro; Campos Camunez, Victor; Giró Nieto, Xavier; Jou, Brendan; Chang, Shih-Fu
|
Other authors:
|
Universitat Politècnica de Catalunya. Departament de Teoria del Senyal i Comunicacions; Universitat Politècnica de Catalunya. GPI - Grup de Processament d'Imatge i Vídeo |
Abstract:
|
The increasing availability of affect-rich multimedia resources has
bolstered interest in understanding sentiment and emotions in and
from visual content. Adjective-noun pairs (ANP) are a popular midlevel
semantic construct for capturing affect via visually detectable
concepts such as “cute dog" or “beautiful landscape". Current stateof-
the-art methods approach ANP prediction by considering each
of these compound concepts as individual tokens, ignoring the underlying
relationships in ANPs. This work aims at disentangling
the contributions of the ‘adjectives’ and ‘nouns’ in the visual prediction
of ANPs. Two specialised classifiers, one trained for detecting
adjectives and another for nouns, are fused to predict 553 different
ANPs. The resulting ANP prediction model is more interpretable
as it allows us to study contributions of the adjective and noun
components. |
Subject(s):
|
-Àrees temàtiques de la UPC::So, imatge i multimèdia::Creació multimèdia::Imatge digital -Àrees temàtiques de la UPC::Informàtica::Sistemes d'informació::Emmagatzematge i recuperació de la informació -Information technology -Image processing--Digital techniques -Multimedia systems -Information storage and retrieval systems -Informació -- Sistemes d'emmagatzematge i recuperació -Tecnologia de la informació -Sistemes multimèdia -Imatges -- Processament -- Tècniques digitals |
Rights:
|
|
Document type:
|
Article - Published version Conference Object |
Share:
|
|