本文提出了一种名为CNMTDL的流形拓扑深度学习框架,旨在解决医学图像分析中传统卷积神经网络将图像视为规则欧氏网格、难以保留几何关系与高阶结构信息的问题。该方法将医学图像表示为离散流形,利用Hodge分解将其拆解为三个分量,提取特征后拼接并嵌入组合复形架构,通过基于注意力的模块增强0-胞与2-胞之间的高阶消息传递。研究团队在MedMNIST v2基准的六个二维和三维数据集上进行了评估,验证了该框架在医学图像分析任务中的有效性。该工作将Hodge分解与组合注意力机制相结合,弥补了现有流形拓扑深度学习方法未能充分利用组合复形神经网络中离散流形结构的不足,为融合几何与拓扑表示的图像分析提供了新的思路。
| 流形拓扑深度学习 (MTDL) | 一种将深度学习与几何和拓扑表示相结合的范式,用于处理具有复杂结构的图像数据。 |
| 组合复形神经网络 | 一种基于组合复形结构的神经网络,能够处理高阶关系并支持消息传递。 |
| Hodge分解 | 一种将离散流形上的微分形式分解为三个正交分量的数学方法,用于提取不同拓扑特征。 |
| 组合注意力机制 | 一种在组合复形结构上应用的注意力机制,用于增强特征表示和消息传递。 |
| MedMNIST v2 | 一个医学图像分析基准数据集集合,包含多种二维和三维医学图像数据。 |
📱 每天一份 AI 前沿日报
关注公众号,每天 09:00 推送 · 不错过任何重磅