Disentangle First, Then Distill: A Unified Framework for Missing Modality Imputation and Alzheimer’s Disease Diagnosis

缺少数据 插补(统计学) 模态(人机交互) 计算机科学 人工智能 代表(政治) 机器学习 数据挖掘 自然语言处理 模式识别(心理学) 政治 政治学 法学
作者
Yuanyuan Chen,Yongsheng Pan,Yong Xia,Yixuan Yuan
出处
期刊:IEEE Transactions on Medical Imaging [Institute of Electrical and Electronics Engineers]
卷期号:42 (12): 3566-3578 被引量:9
标识
DOI:10.1109/tmi.2023.3295489
摘要

Multi-modality medical data provide complementary information, and hence have been widely explored for computer-aided AD diagnosis. However, the research is hindered by the unavoidable missing-data problem, i.e., one data modality was not acquired on some subjects due to various reasons. Although the missing data can be imputed using generative models, the imputation process may introduce unrealistic information to the classification process, leading to poor performance. In this paper, we propose the Disentangle First, Then Distill (DFTD) framework for AD diagnosis using incomplete multi-modality medical images. First, we design a region-aware disentanglement module to disentangle each image into inter-modality relevant representation and intra-modality specific representation with emphasis on disease-related regions. To progressively integrate multi-modality knowledge, we then construct an imputation-induced distillation module, in which a lateral inter-modality transition unit is created to impute representation of the missing modality. The proposed DFTD framework has been evaluated against six existing methods on an ADNI dataset with 1248 subjects. The results show that our method has superior performance in both AD-CN classification and MCI-to-AD prediction tasks, substantially over-performing all competing methods.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
丝绒发布了新的文献求助10
刚刚
1秒前
huang发布了新的文献求助50
1秒前
量子星尘发布了新的文献求助10
1秒前
Cloud发布了新的文献求助10
2秒前
2秒前
fan给fan的求助进行了留言
2秒前
人生若只如初见完成签到,获得积分10
2秒前
2秒前
2秒前
3秒前
4秒前
4秒前
4秒前
曼凡完成签到,获得积分10
5秒前
量子星尘发布了新的文献求助10
5秒前
最佳损友完成签到,获得积分0
6秒前
6秒前
hyy发布了新的文献求助10
7秒前
aloe完成签到,获得积分10
7秒前
犹豫新梅发布了新的文献求助30
8秒前
善学以致用应助彩虹小马采纳,获得10
8秒前
rorocris完成签到,获得积分20
8秒前
Nanami24发布了新的文献求助10
8秒前
不安的傲白完成签到,获得积分10
9秒前
weiwei完成签到 ,获得积分10
9秒前
思源应助淡淡的呆呆的采纳,获得10
9秒前
脑洞疼应助Leeee采纳,获得10
9秒前
Jared应助震动的戒指采纳,获得30
9秒前
9秒前
10秒前
一位勤奋好学的h女士完成签到,获得积分10
10秒前
热情的白开水完成签到,获得积分10
11秒前
淡然新竹完成签到,获得积分20
11秒前
12秒前
ddd完成签到,获得积分10
12秒前
领导范儿应助丝绒采纳,获得10
12秒前
慕青应助hyy采纳,获得10
13秒前
Hello应助苹果从菡采纳,获得10
14秒前
爆米花应助llt采纳,获得10
14秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Clinical Microbiology Procedures Handbook, Multi-Volume, 5th Edition 2000
The Cambridge History of China: Volume 4, Sui and T'ang China, 589–906 AD, Part Two 1000
The Composition and Relative Chronology of Dynasties 16 and 17 in Egypt 1000
Russian Foreign Policy: Change and Continuity 800
Real World Research, 5th Edition 800
Qualitative Data Analysis with NVivo By Jenine Beekhuyzen, Pat Bazeley · 2024 800
热门求助领域 (近24小时)
化学 材料科学 生物 医学 工程类 计算机科学 有机化学 物理 生物化学 纳米技术 复合材料 内科学 化学工程 人工智能 催化作用 遗传学 数学 基因 量子力学 物理化学
热门帖子
关注 科研通微信公众号,转发送积分 5718202
求助须知:如何正确求助?哪些是违规求助? 5251289
关于积分的说明 15284999
捐赠科研通 4868486
什么是DOI,文献DOI怎么找? 2614197
邀请新用户注册赠送积分活动 1564030
关于科研通互助平台的介绍 1521515