Swin-Unet: Unet-like Pure Transformer for Medical Image Segmentation

计算机科学 编码器 卷积神经网络 变压器 人工智能 分割 深度学习 图像分割 模式识别(心理学) 计算机视觉 工程类 电压 操作系统 电气工程
作者
Hu Cao,Yueyue Wang,Joy Chen,Dongsheng Jiang,Xiaopeng Zhang,Qi Tian,Manning Wang
出处
期刊:Cornell University - arXiv [Cornell University]
被引量:914
标识
DOI:10.48550/arxiv.2105.05537
摘要

In the past few years, convolutional neural networks (CNNs) have achieved milestones in medical image analysis. Especially, the deep neural networks based on U-shaped architecture and skip-connections have been widely applied in a variety of medical image tasks. However, although CNN has achieved excellent performance, it cannot learn global and long-range semantic information interaction well due to the locality of the convolution operation. In this paper, we propose Swin-Unet, which is an Unet-like pure Transformer for medical image segmentation. The tokenized image patches are fed into the Transformer-based U-shaped Encoder-Decoder architecture with skip-connections for local-global semantic feature learning. Specifically, we use hierarchical Swin Transformer with shifted windows as the encoder to extract context features. And a symmetric Swin Transformer-based decoder with patch expanding layer is designed to perform the up-sampling operation to restore the spatial resolution of the feature maps. Under the direct down-sampling and up-sampling of the inputs and outputs by 4x, experiments on multi-organ and cardiac segmentation tasks demonstrate that the pure Transformer-based U-shaped Encoder-Decoder network outperforms those methods with full-convolution or the combination of transformer and convolution. The codes and trained models will be publicly available at https://github.com/HuCaoFighting/Swin-Unet.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
传奇3的应助被小宅女采纳,获得10
1秒前
123发布了新的文献求助10
1秒前
1秒前
东十八完成签到,获得积分10
2秒前
2秒前
嘻嘻哈哈的应助被鲤鱼采纳,获得10
2秒前
Ava的应助被sssyz采纳,获得10
3秒前
Idumori发布了新的文献求助10
3秒前
3秒前
4秒前
扶苏完成签到,获得积分10
4秒前
4秒前
完美世界的应助被顾北采纳,获得10
4秒前
PJT-8450完成签到,获得积分10
4秒前
wang完成签到,获得积分10
5秒前
zhang完成签到 ,获得积分10
5秒前
万能图书馆的应助被dakjdia采纳,获得10
5秒前
嘻嘻哈哈的应助被Hoshino采纳,获得10
5秒前
弱智少年QAQ完成签到,获得积分10
5秒前
顾矜的应助被丁驰采纳,获得10
5秒前
独特忆山完成签到,获得积分10
5秒前
5秒前
独特的靖琪完成签到,获得积分20
6秒前
开朗熊猫发布了新的文献求助10
6秒前
6秒前
6秒前
boiqn完成签到,获得积分10
7秒前
7秒前
顺利的程完成签到 ,获得积分10
7秒前
7秒前
郑希泽发布了新的文献求助10
8秒前
selinann完成签到,获得积分10
8秒前
8秒前
9秒前
小鱼干完成签到,获得积分10
9秒前
柠檬酸不酸完成签到,获得积分10
9秒前
vivi发布了新的文献求助10
9秒前
koala发布了新的文献求助10
10秒前
虚心的大门完成签到,获得积分10
10秒前
10秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
The World Atlas of Wine 9th edition 1000
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
John McDowells Bildungstheorie 800
Markov Decision Processes and Reinforcement Learning 700
八旗制度の研究 600
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8170021
求助须知:如何正确求助?哪些是违规求助? 9563040
关于积分的说明 21768210
捐赠科研通 7761506
什么是DOI,文献DOI怎么找? 3430553
关于科研通互助平台的介绍 2554373
邀请新用户注册赠送积分活动 2475269