Disentangle First, Then Distill: A Unified Framework for Missing Modality Imputation and Alzheimer’s Disease Diagnosis

缺少数据 插补(统计学) 模态(人机交互) 计算机科学 人工智能 代表(政治) 机器学习 数据挖掘 自然语言处理 模式识别(心理学) 政治 政治学 法学
作者
Yuanyuan Chen,Yongsheng Pan,Yong Xia,Yixuan Yuan
出处
期刊:IEEE Transactions on Medical Imaging [Institute of Electrical and Electronics Engineers]
卷期号:42 (12): 3566-3578 被引量:9
标识
DOI:10.1109/tmi.2023.3295489
摘要

Multi-modality medical data provide complementary information, and hence have been widely explored for computer-aided AD diagnosis. However, the research is hindered by the unavoidable missing-data problem, i.e., one data modality was not acquired on some subjects due to various reasons. Although the missing data can be imputed using generative models, the imputation process may introduce unrealistic information to the classification process, leading to poor performance. In this paper, we propose the Disentangle First, Then Distill (DFTD) framework for AD diagnosis using incomplete multi-modality medical images. First, we design a region-aware disentanglement module to disentangle each image into inter-modality relevant representation and intra-modality specific representation with emphasis on disease-related regions. To progressively integrate multi-modality knowledge, we then construct an imputation-induced distillation module, in which a lateral inter-modality transition unit is created to impute representation of the missing modality. The proposed DFTD framework has been evaluated against six existing methods on an ADNI dataset with 1248 subjects. The results show that our method has superior performance in both AD-CN classification and MCI-to-AD prediction tasks, substantially over-performing all competing methods.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
承乐应助波风水门pxf采纳,获得10
刚刚
刚刚
何文完成签到,获得积分10
1秒前
1秒前
香蕉觅云应助Jackxu采纳,获得10
1秒前
共享精神应助Jinyang采纳,获得10
1秒前
我嘞个豆完成签到,获得积分10
1秒前
Te发布了新的文献求助10
2秒前
2秒前
酷波er应助Wulei采纳,获得10
2秒前
斯文败类应助msw采纳,获得10
2秒前
光亮又晴发布了新的文献求助10
2秒前
温暖白容完成签到 ,获得积分10
3秒前
edtaa发布了新的文献求助10
3秒前
3秒前
hhh完成签到,获得积分10
3秒前
3秒前
4秒前
4秒前
4秒前
5秒前
5秒前
YaHaa发布了新的文献求助10
5秒前
健忘的自行车完成签到,获得积分20
5秒前
dreamer1989发布了新的文献求助10
6秒前
沉静梦曼完成签到 ,获得积分10
6秒前
安屿完成签到 ,获得积分10
7秒前
归仔完成签到,获得积分10
7秒前
7秒前
Orange应助李丽采纳,获得10
8秒前
认真初之发布了新的文献求助30
8秒前
王大力完成签到,获得积分10
8秒前
传奇3应助务实雪珍采纳,获得10
8秒前
刘丰铭发布了新的文献求助10
9秒前
1234完成签到,获得积分10
9秒前
BowieHuang应助震动的高烽采纳,获得10
9秒前
9秒前
自然黄豆发布了新的文献求助10
9秒前
555完成签到,获得积分20
9秒前
完美世界应助喜悦一德采纳,获得10
9秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Basic And Clinical Science Course 2025-2026 3000
Encyclopedia of Agriculture and Food Systems Third Edition 2000
人脑智能与人工智能 1000
花の香りの秘密―遺伝子情報から機能性まで 800
Principles of Plasma Discharges and Materials Processing, 3rd Edition 400
Pharmacology for Chemists: Drug Discovery in Context 400
热门求助领域 (近24小时)
化学 材料科学 生物 医学 工程类 计算机科学 有机化学 物理 生物化学 纳米技术 复合材料 内科学 化学工程 人工智能 催化作用 遗传学 数学 基因 量子力学 物理化学
热门帖子
关注 科研通微信公众号,转发送积分 5608504
求助须知:如何正确求助?哪些是违规求助? 4693127
关于积分的说明 14876947
捐赠科研通 4717761
什么是DOI,文献DOI怎么找? 2544250
邀请新用户注册赠送积分活动 1509316
关于科研通互助平台的介绍 1472836