Feature discrimination and diversification for image emotion recognition

判别式 人工智能 计算机科学 模式识别(心理学) 卷积神经网络 联营 特征(语言学) 特征提取 上下文图像分类 图像(数学) 语言学 哲学
作者
Xiaohua Wang,Chuqing Liu,Hu Min,Yuan Yao,Fuji Ren
出处
期刊:Journal of Electronic Imaging [SPIE]
卷期号:31 (02) 被引量:3
标识
DOI:10.1117/1.jei.31.2.023002
摘要

Emotion is strongly subjective, and different parts of the image may have a different degree of impact on emotion. The key for solving image emotion recognition is to effectively mine different discriminative local regions. We present a deep architecture to guide the network to extract discriminative and diverse affective semantic information. First, training a full convolutional network with a cross-channel max pooling strategy (CCMP) to extract discriminative feature maps. Second, to ensure that most of the discriminative sentiment regions are located accurately, we add a module consisting of the convolution layer and the CCMP. After obtaining the discriminative regions of the first module, the feature elements corresponding to the discriminant regions are erased, and then the erased features are fed into the second module. Such adversarial erasure operation can force the network to discover different sentiment discriminative regions. Third, an adaptive feature fusion mechanism is proposed to better integrate discriminative and diverse sentiment representations. Sufficient experiments are conducted on the benchmark datasets FI, EmotionROI, Instagram, and Twitter1 to achieve 72.17%, 61.13%, 81.97%, and 85.44% recognition accuracies, respectively. The results of the experiment demonstrate that the proposed network outperforms the state-of-the-art results.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
刚刚
天天向上的应助被王王采纳,获得10
1秒前
stupid完成签到,获得积分10
1秒前
研友_LaOyQZ完成签到,获得积分10
2秒前
Jun举报大肘子的求助涉嫌违规
2秒前
2秒前
小杰发布了新的文献求助10
3秒前
深情安青的应助被愉快幻天采纳,获得30
3秒前
3秒前
Code_king发布了新的文献求助10
4秒前
小二郎的应助被我不吃饭采纳,获得10
4秒前
Code_king发布了新的文献求助10
4秒前
可爱的函函的应助被Yuer采纳,获得10
4秒前
Code_king发布了新的文献求助10
4秒前
Amost完成签到,获得积分10
4秒前
stupid发布了新的文献求助20
5秒前
yccsg完成签到,获得积分10
5秒前
哈哈哈完成签到,获得积分10
5秒前
5秒前
天天向上的应助被wangting采纳,获得10
5秒前
林梓发布了新的文献求助30
5秒前
syvshc的应助被青山不复采纳,获得10
5秒前
迷人乐珍完成签到,获得积分20
6秒前
6秒前
时间完成签到,获得积分10
6秒前
脑洞疼的应助被5322采纳,获得30
6秒前
joshar发布了新的文献求助10
6秒前
活A完成签到,获得积分10
6秒前
7秒前
黑早早发布了新的文献求助10
8秒前
8秒前
栗子完成签到,获得积分10
8秒前
xls完成签到 ,获得积分10
9秒前
9秒前
小二郎的应助被summer采纳,获得10
9秒前
科研通AI6.2的应助被活A采纳,获得10
9秒前
sufu_jony的应助被Code_king采纳,获得10
10秒前
自然的南珍的应助被Code_king采纳,获得10
10秒前
美满懿轩发布了新的文献求助10
10秒前
汉堡包的应助被Code_king采纳,获得10
10秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
John McDowells Bildungstheorie 800
八旗制度の研究 600
plantTFDB 508
高分子基功能界面水蒸发材料与应用研究 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8176174
求助须知:如何正确求助?哪些是违规求助? 9567656
关于积分的说明 21793895
捐赠科研通 7770887
什么是DOI,文献DOI怎么找? 3431991
关于科研通互助平台的介绍 2556313
邀请新用户注册赠送积分活动 2477540