清晨好,您是今天最早来到科研通的研友!由于当前在线用户较少,发布求助请尽量完整地填写文献信息,科研通机器人24小时在线,伴您科研之路漫漫前行!

Convolution Transformer Mixer for Hyperspectral Image Classification

高光谱成像 计算机科学 人工智能 卷积神经网络 模式识别(心理学) 卷积(计算机科学) 上下文图像分类 变压器 特征提取 残余物 块(置换群论) 人工神经网络 图像(数学) 算法 数学 物理 量子力学 电压 几何学
作者
Junjie Zhang,Zhe Meng,Feng Zhao,Hanqiang Liu,Zhenhui Chang
出处
期刊:IEEE Geoscience and Remote Sensing Letters [Institute of Electrical and Electronics Engineers]
卷期号:19: 1-5 被引量:126
标识
DOI:10.1109/lgrs.2022.3208935
摘要

Hyperspectral image (HSI) can provide rich spectral information which can be helpful for accurate classification in many applications. Yet, incorporating spatial information in the classification process can improve the classification accuracy even further. Existing convolutional neural network (CNN) usually only focuses on local features in hyperspectral cubes, whereas the burgeoning vision transformer (ViT) is interested in global features in HSIs. In this letter, we propose a deep aggregated framework for HSI classification called convolution transformer mixer (CTMixer) to combine the advantages of the above two paradigms effectively. A group parallel residual block is firstly applied to capture local spectral-spatial features in the HSI patches. Secondly, a double-branch structure, consisting of the CNN and transformer branches, is developed to capture local-global hyperspectral features. Finally, to achieve an elegant combination of CNN and ViT, a novel local-global multi-head self-attention mechanism is proposed by introducing convolution operations in the multi-head self-attention mechanism to further improve the classification accuracy. Extensive experiments demonstrate that the CTMixer achieves competitive classification results on several common HSI datasets compared with other state-of-the-art networks. The source code for this work will be available at https://github.com/ZJier/CTMixer.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
5秒前
诸葛平卉完成签到 ,获得积分10
5秒前
星辰大海的应助被psm采纳,获得10
9秒前
9秒前
飞天大南瓜完成签到,获得积分10
11秒前
Gilgardea发布了新的文献求助10
14秒前
车车完成签到 ,获得积分10
20秒前
精明开山完成签到,获得积分10
21秒前
25秒前
鲤鱼遥完成签到,获得积分10
26秒前
cat发布了新的文献求助10
32秒前
AG完成签到,获得积分10
32秒前
田田完成签到 ,获得积分10
42秒前
44秒前
等待凡英完成签到,获得积分10
45秒前
陈荆洲完成签到,获得积分10
45秒前
高高的玉兰完成签到,获得积分10
47秒前
49秒前
小二郎的应助被cat采纳,获得10
59秒前
科研通AI6.2的应助被pitinmoon采纳,获得10
1分钟前
漂亮秋荷完成签到,获得积分10
1分钟前
腼腆的雪珊完成签到,获得积分10
1分钟前
淡淡傲柔完成签到,获得积分10
1分钟前
hyk完成签到 ,获得积分10
1分钟前
Orange的应助被Gilgardea采纳,获得10
1分钟前
安详的老五完成签到,获得积分10
2分钟前
欢呼的听枫完成签到,获得积分10
2分钟前
顺利大有完成签到,获得积分10
2分钟前
满意的伊完成签到,获得积分10
2分钟前
年轻的幼菱完成签到,获得积分10
2分钟前
诺一44发布了新的文献求助10
2分钟前
limengyao完成签到,获得积分10
2分钟前
欢呼的访文完成签到,获得积分10
2分钟前
迷茫的一代完成签到,获得积分0
2分钟前
活力的尔蓉完成签到,获得积分10
3分钟前
粗心的涔雨完成签到,获得积分10
3分钟前
从容的嫣娆完成签到,获得积分10
3分钟前
3分钟前
jianjian发布了新的文献求助30
3分钟前
4分钟前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
The World Atlas of Wine 9th edition 1000
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
John McDowells Bildungstheorie 800
八旗制度の研究 600
Hidden Empire of Finance: How Wall Street Profits from Our Cities and Fuels Global Inequality 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8166413
求助须知:如何正确求助?哪些是违规求助? 9559494
关于积分的说明 21750478
捐赠科研通 7757221
什么是DOI,文献DOI怎么找? 3429141
关于科研通互助平台的介绍 2553489
邀请新用户注册赠送积分活动 2473835