Preprocessing high-definition images: interpretable feature extraction with pre-trained StyleGAN

人工智能 计算机科学 模式识别(心理学) 特征提取 预处理器 鉴别器 分类器(UML) 可解释性 自编码 人工神经网络 计算机视觉 探测器 电信
作者
Ke Zhang,Wenning Hao,Xiaohan Yu,T. Shao,Qiuhui Shen
标识
DOI:10.1117/12.3008039
摘要

The interpretable image classifier VAE-FNN can extract high-level features for classification from complex image information and provide explanations that are consistent with human intuition. However, due to the insufficient reconstruction ability of VAE, there are still challenges in feature extraction and interpretable classification for highdefinition images. An image preprocessing method is proposed in this paper and a model named E2GAN that can extract low-dimensional interpretable features from high-definition images is constructed. The model is based on a pre-trained StyleGAN generator, and two mapping networks are trained, one for extracting the low-dimensional compressed encoding of the input image and the other for restoring it to the matrix representation required by the StyleGAN generator, which effectively improves the quality of feature extraction and image reconstruction. A discriminator is introduced to perform adversarial training with the mapping network, further improving the realism of the reconstructed image. The training algorithm of the E2GAN model is designed, and a decoupling loss for the low-dimensional encoding is added to further improve its semantic interpretability. Experiments on the CelebA-HQ dataset show that the E2GAN model can extract low-dimensional, semantically informative features from high-definition images, which can be used to train high-precision and interpretable fuzzy neural network classifiers.

科研通智能强力驱动
Strongly Powered by AbleSci AI
更新
大幅提高文件上传限制,最高150M (2024-4-1)

科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
5秒前
沉默采波完成签到 ,获得积分10
19秒前
千秋完成签到 ,获得积分10
31秒前
oracl完成签到 ,获得积分10
32秒前
康康XY完成签到 ,获得积分10
33秒前
重重重飞发布了新的文献求助10
33秒前
丫丫完成签到 ,获得积分10
33秒前
奋斗的妙海完成签到 ,获得积分0
40秒前
勤恳的雪卉完成签到,获得积分10
41秒前
美满的皮卡丘完成签到 ,获得积分10
50秒前
最美夕阳红完成签到,获得积分10
57秒前
六等于三二一完成签到 ,获得积分10
58秒前
wujiwuhui完成签到 ,获得积分10
1分钟前
isedu完成签到,获得积分10
1分钟前
叶痕TNT完成签到 ,获得积分10
1分钟前
斜玉完成签到,获得积分10
1分钟前
21GolDiamond完成签到,获得积分10
1分钟前
鞑靼完成签到 ,获得积分10
1分钟前
邵翎365完成签到,获得积分10
1分钟前
zenabia完成签到 ,获得积分10
1分钟前
闪闪的谷梦完成签到 ,获得积分10
1分钟前
21完成签到 ,获得积分10
1分钟前
俊逸吐司完成签到 ,获得积分10
1分钟前
twelveyears完成签到 ,获得积分10
1分钟前
风起枫落完成签到 ,获得积分10
1分钟前
wenhuanwenxian完成签到 ,获得积分10
1分钟前
jiayoujijin完成签到 ,获得积分10
1分钟前
Dingz完成签到,获得积分10
1分钟前
kumo完成签到 ,获得积分10
1分钟前
十七完成签到 ,获得积分10
1分钟前
求知若渴口好干完成签到 ,获得积分10
2分钟前
yinhe完成签到 ,获得积分10
2分钟前
无极2023完成签到 ,获得积分10
2分钟前
huangzsdy完成签到,获得积分10
2分钟前
微卫星不稳定完成签到 ,获得积分0
2分钟前
水星完成签到 ,获得积分10
2分钟前
客官们帮帮忙完成签到 ,获得积分10
2分钟前
loren313完成签到,获得积分0
2分钟前
陈大侠完成签到 ,获得积分10
2分钟前
jue完成签到 ,获得积分10
2分钟前
高分求助中
Sustainability in Tides Chemistry 2000
Microlepidoptera Palaearctica, Volumes 1 and 3 - 13 (12-Volume Set) [German] 1122
Дружба 友好报 (1957-1958) 1000
The Data Economy: Tools and Applications 1000
Mantiden - Faszinierende Lauerjäger – Buch gebraucht kaufen 700
PraxisRatgeber Mantiden., faszinierende Lauerjäger. – Buch gebraucht kaufe 700
A Dissection Guide & Atlas to the Rabbit 600
热门求助领域 (近24小时)
化学 医学 生物 材料科学 工程类 有机化学 生物化学 物理 内科学 纳米技术 计算机科学 化学工程 复合材料 基因 遗传学 催化作用 物理化学 免疫学 量子力学 细胞生物学
热门帖子
关注 科研通微信公众号,转发送积分 3099800
求助须知:如何正确求助?哪些是违规求助? 2751277
关于积分的说明 7612198
捐赠科研通 2403062
什么是DOI,文献DOI怎么找? 1275162
科研通“疑难数据库(出版商)”最低求助积分说明 616276
版权声明 599053