电气工程与系统科学 > 图像与视频处理
[提交于 2025年4月3日
(v1)
,最后修订 2025年6月3日 (此版本, v2)]
标题: 迈向高效计算的计算病理学
标题: Towards Computation- and Communication-efficient Computational Pathology
摘要: 尽管当前计算病理学模型在广泛的应用场景中表现出色,但由于它们依赖于高放大倍率的全片图像分析,因此在诊断效率方面面临重大挑战。 这一局限性严重限制了它们的临床实用性,尤其是在时间敏感的诊断场景和需要高效数据传输的情况下。 为了解决这些问题,我们提出了一种新颖的计算和通信高效框架,称为放大倍率对齐全局-局部Transformer(MAG-GLTrans)。 我们的方法通过使用低放大倍率输入而不是高放大倍率输入来进行有效的分析,从而显著减少了计算时间、文件传输需求和存储开销。 关键创新在于我们提出的放大倍率对齐(MAG)机制,该机制利用自监督学习通过有效地对齐低和高放大倍率级别的特征表示来弥合信息差距。 通过对各种基本CPath任务的广泛评估,MAG-GLTrans展示了最先进的分类性能,并取得了显著的效率提升:计算时间减少高达10.7倍,文件传输和存储需求减少超过20倍。 此外,我们通过两个重要的扩展展示了我们的MAG框架的多功能性:(1)作为特征提取器以提高任何CPath架构的效率的适用性,以及(2)与现有的基础模型和组织病理学特定编码器的兼容性,使它们能够以最小的信息损失处理低放大倍率输入。 这些进步使MAG-GLTrans成为时间敏感应用的特别有前景的解决方案,特别是在术中冷冻切片诊断的背景下,准确性和效率至关重要。
文献和引用工具
与本文相关的代码,数据和媒体
alphaXiv (什么是 alphaXiv?)
CatalyzeX 代码查找器 (什么是 CatalyzeX?)
DagsHub (什么是 DagsHub?)
Gotit.pub (什么是 GotitPub?)
Hugging Face (什么是 Huggingface?)
带有代码的论文 (什么是带有代码的论文?)
ScienceCast (什么是 ScienceCast?)
演示
推荐器和搜索工具
arXivLabs:与社区合作伙伴的实验项目
arXivLabs 是一个框架,允许合作伙伴直接在我们的网站上开发和分享新的 arXiv 特性。
与 arXivLabs 合作的个人和组织都接受了我们的价值观,即开放、社区、卓越和用户数据隐私。arXiv 承诺这些价值观,并且只与遵守这些价值观的合作伙伴合作。
有一个为 arXiv 社区增加价值的项目想法吗? 了解更多关于 arXivLabs 的信息.