Disentangle First, Then Distill: A Unified Framework for Missing Modality Imputation and Alzheimer’s Disease Diagnosis

缺少数据 插补(统计学) 模态(人机交互) 计算机科学 人工智能 代表(政治) 机器学习 数据挖掘 自然语言处理 模式识别(心理学) 政治 政治学 法学
作者
Yuanyuan Chen,Yongsheng Pan,Yong Xia,Yixuan Yuan
出处
期刊:IEEE Transactions on Medical Imaging [Institute of Electrical and Electronics Engineers]
卷期号:42 (12): 3566-3578 被引量:9
标识
DOI:10.1109/tmi.2023.3295489
摘要

Multi-modality medical data provide complementary information, and hence have been widely explored for computer-aided AD diagnosis. However, the research is hindered by the unavoidable missing-data problem, i.e., one data modality was not acquired on some subjects due to various reasons. Although the missing data can be imputed using generative models, the imputation process may introduce unrealistic information to the classification process, leading to poor performance. In this paper, we propose the Disentangle First, Then Distill (DFTD) framework for AD diagnosis using incomplete multi-modality medical images. First, we design a region-aware disentanglement module to disentangle each image into inter-modality relevant representation and intra-modality specific representation with emphasis on disease-related regions. To progressively integrate multi-modality knowledge, we then construct an imputation-induced distillation module, in which a lateral inter-modality transition unit is created to impute representation of the missing modality. The proposed DFTD framework has been evaluated against six existing methods on an ADNI dataset with 1248 subjects. The results show that our method has superior performance in both AD-CN classification and MCI-to-AD prediction tasks, substantially over-performing all competing methods.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
1秒前
大模型应助suyaaaaa采纳,获得10
2秒前
www完成签到,获得积分10
2秒前
JnifferJun完成签到,获得积分10
3秒前
sjc完成签到,获得积分20
5秒前
轩辕白竹完成签到,获得积分10
5秒前
5秒前
5秒前
狂野友梅完成签到,获得积分10
6秒前
领导范儿应助朴实水壶采纳,获得10
8秒前
明理可燕发布了新的文献求助10
9秒前
量子星尘发布了新的文献求助10
10秒前
量子星尘发布了新的文献求助10
10秒前
JnifferJun发布了新的文献求助10
11秒前
阿尔法突袭完成签到,获得积分10
13秒前
13秒前
神勇乐安完成签到,获得积分10
14秒前
Xiaoxiannv完成签到,获得积分10
15秒前
希望天下0贩的0应助znhy采纳,获得10
16秒前
17秒前
笨笨山芙应助super采纳,获得20
18秒前
幽壑之潜蛟应助crack采纳,获得10
18秒前
ZhonghanWen发布了新的文献求助20
18秒前
19秒前
花薇Liv完成签到,获得积分10
20秒前
朴实水壶发布了新的文献求助10
21秒前
swjfly完成签到,获得积分20
22秒前
JamesPei应助左惋庭采纳,获得10
23秒前
24秒前
25秒前
大模型应助Yi采纳,获得10
25秒前
25秒前
toolate完成签到,获得积分10
26秒前
克莱完成签到 ,获得积分10
28秒前
28秒前
彭于晏应助paddi采纳,获得10
29秒前
情怀应助ad采纳,获得10
30秒前
DQY发布了新的文献求助10
30秒前
30秒前
cc完成签到 ,获得积分10
31秒前
高分求助中
2025-2031全球及中国金刚石触媒粉行业研究及十五五规划分析报告 40000
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Introduction to strong mixing conditions volume 1-3 5000
Ägyptische Geschichte der 21.–30. Dynastie 2500
Clinical Microbiology Procedures Handbook, Multi-Volume, 5th Edition 2000
„Semitische Wissenschaften“? 1510
从k到英国情人 1500
热门求助领域 (近24小时)
化学 材料科学 生物 医学 工程类 计算机科学 有机化学 物理 生物化学 纳米技术 复合材料 内科学 化学工程 人工智能 催化作用 遗传学 数学 基因 量子力学 物理化学
热门帖子
关注 科研通微信公众号,转发送积分 5743755
求助须知:如何正确求助?哪些是违规求助? 5415833
关于积分的说明 15348312
捐赠科研通 4884362
什么是DOI,文献DOI怎么找? 2625769
邀请新用户注册赠送积分活动 1574598
关于科研通互助平台的介绍 1531510