Disentangle First, Then Distill: A Unified Framework for Missing Modality Imputation and Alzheimer’s Disease Diagnosis

缺少数据 插补(统计学) 模态(人机交互) 计算机科学 人工智能 代表(政治) 机器学习 数据挖掘 自然语言处理 模式识别(心理学) 政治 政治学 法学
作者
Yuanyuan Chen,Yongsheng Pan,Yong Xia,Yixuan Yuan
出处
期刊:IEEE Transactions on Medical Imaging [Institute of Electrical and Electronics Engineers]
卷期号:42 (12): 3566-3578 被引量:9
标识
DOI:10.1109/tmi.2023.3295489
摘要

Multi-modality medical data provide complementary information, and hence have been widely explored for computer-aided AD diagnosis. However, the research is hindered by the unavoidable missing-data problem, i.e., one data modality was not acquired on some subjects due to various reasons. Although the missing data can be imputed using generative models, the imputation process may introduce unrealistic information to the classification process, leading to poor performance. In this paper, we propose the Disentangle First, Then Distill (DFTD) framework for AD diagnosis using incomplete multi-modality medical images. First, we design a region-aware disentanglement module to disentangle each image into inter-modality relevant representation and intra-modality specific representation with emphasis on disease-related regions. To progressively integrate multi-modality knowledge, we then construct an imputation-induced distillation module, in which a lateral inter-modality transition unit is created to impute representation of the missing modality. The proposed DFTD framework has been evaluated against six existing methods on an ADNI dataset with 1248 subjects. The results show that our method has superior performance in both AD-CN classification and MCI-to-AD prediction tasks, substantially over-performing all competing methods.

科研通智能强力驱动
Strongly Powered by AbleSci AI
更新
PDF的下载单位、IP信息已删除 (2025-6-4)

科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
刚刚
无语完成签到,获得积分10
刚刚
周周发布了新的文献求助10
1秒前
1秒前
希望天下0贩的0应助彳亍采纳,获得10
1秒前
林炎发布了新的文献求助10
1秒前
小羽完成签到 ,获得积分10
2秒前
3秒前
追寻紫夏完成签到 ,获得积分10
3秒前
霸气的菠萝完成签到,获得积分10
3秒前
Wen完成签到,获得积分10
3秒前
开放青旋应助苏silence采纳,获得80
3秒前
4秒前
yu完成签到 ,获得积分10
4秒前
Lucifer完成签到,获得积分10
4秒前
4秒前
4秒前
11完成签到,获得积分10
4秒前
scanker1981完成签到,获得积分10
4秒前
深情安青应助zhaopenghui采纳,获得10
5秒前
小星星完成签到 ,获得积分10
5秒前
600完成签到,获得积分10
5秒前
guohh完成签到,获得积分10
5秒前
6秒前
隐形白开水完成签到,获得积分0
6秒前
sakura完成签到,获得积分10
6秒前
gouqi发布了新的文献求助10
6秒前
饱满的曼寒完成签到,获得积分10
6秒前
CipherSage应助小勇仔采纳,获得10
7秒前
无心科研完成签到,获得积分10
7秒前
7秒前
8秒前
清秀迎彤完成签到 ,获得积分10
8秒前
bkagyin应助空空伊采纳,获得30
8秒前
热心雨南完成签到,获得积分10
8秒前
8秒前
wxxz发布了新的文献求助10
9秒前
CVEN完成签到,获得积分10
9秒前
9秒前
颜靖仇发布了新的文献求助10
9秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
List of 1,091 Public Pension Profiles by Region 1621
Les Mantodea de Guyane: Insecta, Polyneoptera [The Mantids of French Guiana] | NHBS Field Guides & Natural History 1500
Lloyd's Register of Shipping's Approach to the Control of Incidents of Brittle Fracture in Ship Structures 1000
Brittle fracture in welded ships 1000
Metagames: Games about Games 700
King Tyrant 680
热门求助领域 (近24小时)
化学 材料科学 生物 医学 工程类 计算机科学 有机化学 物理 生物化学 纳米技术 复合材料 内科学 化学工程 人工智能 催化作用 遗传学 数学 基因 量子力学 物理化学
热门帖子
关注 科研通微信公众号,转发送积分 5574114
求助须知:如何正确求助?哪些是违规求助? 4660331
关于积分的说明 14729315
捐赠科研通 4600225
什么是DOI,文献DOI怎么找? 2524740
邀请新用户注册赠送积分活动 1495018
关于科研通互助平台的介绍 1465034