空间转录组学(Spatial Transcriptomics, ST)技术通过保留细胞的空间上下文,为生物学家提供了关于单细胞生物学的丰富洞察。构建用于 ST 的基础模型可以显著提升对庞大且复杂的数据源的分析能力,从而揭示生物组织复杂性的全新视角。然而,ST 数据建模本身具有挑战性,因为它要求从包含大量细胞的组织切片中提取多尺度信息。这一过程需要整合宏观尺度的组织形态结构、微观尺度的细胞微环境以及基因尺度的基因表达谱。

为应对这一挑战,我们提出了 SToFM,一种多尺度空间转录组学基础模型。SToFM 首先对每个 ST 切片进行多尺度信息提取,构建出一组整合了宏观、微观和基因尺度信息的 ST 子切片。随后,我们采用 SE(2) Transformer 从这些子切片中获取高质量的细胞表征。此外,我们还构建了 SToCorpus-88M,这是目前最大的用于预训练的高分辨率空间转录组学语料库。 SToFM 在多种下游任务中表现优异,例如组织区域语义分割和细胞类型注释,展示了其通过捕捉与融合多尺度信息而获得的对 ST 数据的全面理解能力。

成为VIP会员查看完整内容
2

相关内容

【AAAI2025】用于高保真3D重建的多视图条件扩散模型
专知会员服务
19+阅读 · 2024年12月12日
【NeurIPS2024】分子动力学轨迹的生成建模
专知会员服务
12+阅读 · 2024年9月28日
【ICML2024】SAPG:分裂与聚合策略梯度
专知会员服务
19+阅读 · 2024年7月30日
【KDD2024】CAFO:基于特征的时间序列分类解释
专知会员服务
25+阅读 · 2024年6月5日
【ICLR2024】3D-MoLM:增强语言模型对分子3D空间结构的理解
【AAAI2023】用于复杂场景图像合成的特征金字塔扩散模型
专知会员服务
34+阅读 · 2021年8月16日
【AAAI2023】用于图对比学习的谱特征增强
专知
19+阅读 · 2022年12月11日
【ICML2021】因果匹配领域泛化
专知
12+阅读 · 2021年8月12日
【CVPR2021】跨模态检索的概率嵌入
专知
17+阅读 · 2021年3月2日
【KDD2020】动态知识图谱的多事件预测
专知
88+阅读 · 2020年8月31日
【CVPR 2020 Oral】小样本类增量学习
专知
20+阅读 · 2020年6月26日
【NeurIPS2019】图变换网络:Graph Transformer Network
国家自然科学基金
2+阅读 · 2016年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
Arxiv
171+阅读 · 2023年4月20日
A Survey of Large Language Models
Arxiv
473+阅读 · 2023年3月31日
Arxiv
78+阅读 · 2023年3月26日
Arxiv
172+阅读 · 2023年3月24日
Arxiv
24+阅读 · 2023年3月17日
VIP会员
相关VIP内容
【AAAI2025】用于高保真3D重建的多视图条件扩散模型
专知会员服务
19+阅读 · 2024年12月12日
【NeurIPS2024】分子动力学轨迹的生成建模
专知会员服务
12+阅读 · 2024年9月28日
【ICML2024】SAPG:分裂与聚合策略梯度
专知会员服务
19+阅读 · 2024年7月30日
【KDD2024】CAFO:基于特征的时间序列分类解释
专知会员服务
25+阅读 · 2024年6月5日
【ICLR2024】3D-MoLM:增强语言模型对分子3D空间结构的理解
【AAAI2023】用于复杂场景图像合成的特征金字塔扩散模型
专知会员服务
34+阅读 · 2021年8月16日
相关资讯
【AAAI2023】用于图对比学习的谱特征增强
专知
19+阅读 · 2022年12月11日
【ICML2021】因果匹配领域泛化
专知
12+阅读 · 2021年8月12日
【CVPR2021】跨模态检索的概率嵌入
专知
17+阅读 · 2021年3月2日
【KDD2020】动态知识图谱的多事件预测
专知
88+阅读 · 2020年8月31日
【CVPR 2020 Oral】小样本类增量学习
专知
20+阅读 · 2020年6月26日
【NeurIPS2019】图变换网络:Graph Transformer Network
相关基金
国家自然科学基金
2+阅读 · 2016年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
微信扫码咨询专知VIP会员