一种潜在的知识图谱基础模型定义是:一个图神经网络(GNN)模型,经过大规模知识图谱数据集的预训练,这些图谱涵盖了多个领域(例如,体育、艺术),该模型可以在不进行重新训练的情况下,泛化到新任务中,适用于未见过的领域、未知的关系类型和节点特征空间(例如,医疗健康)。在本研究中,我们探讨了基于不变性理论的数学基础,这为这种可适应模型提供了可能。我们的结果突出了不变性理论、图论、统计学与机器学习概念(如元学习)之间的若干有前景的联系,提供了一条通向更加灵活且可泛化的知识库图模型的路径。

2 大规模语言模型(LLMs)

成为VIP会员查看完整内容
5

相关内容

知识图谱(Knowledge Graph),在图书情报界称为知识域可视化或知识领域映射地图,是显示知识发展进程与结构关系的一系列各种不同的图形,用可视化技术描述知识资源及其载体,挖掘、分析、构建、绘制和显示知识及它们之间的相互联系。 知识图谱是通过将应用数学、图形学、信息可视化技术、信息科学等学科的理论与方法与计量学引文分析、共现分析等方法结合,并利用可视化的图谱形象地展示学科的核心结构、发展历史、前沿领域以及整体知识架构达到多学科融合目的的现代理论。它能为学科研究提供切实的、有价值的参考。

知识荟萃

精品入门和进阶教程、论文和代码整理等

更多

查看相关VIP内容、论文、资讯等
对比预训练和多模态生成式人工智能的统计理论
专知会员服务
7+阅读 · 今天3:47
【KDD2024】面向鲁棒推荐的决策边界感知图对比学习
专知会员服务
19+阅读 · 2024年8月8日
大模型时代的自动图表理解综述
专知会员服务
65+阅读 · 2024年3月19日
【NeurIPS2022】通过模型转换的可解释强化学习
专知会员服务
37+阅读 · 2022年10月4日
【WWW2022】再思考图卷积网络的知识图谱补全
专知会员服务
34+阅读 · 2022年2月15日
专知会员服务
19+阅读 · 2021年9月6日
【AAAI2021】知识图谱增强的预训练模型的生成式常识推理
专知会员服务
24+阅读 · 2020年9月15日
【KDD2020】图神经网络生成式预训练
专知
22+阅读 · 2020年7月3日
再谈人脸识别损失函数综述
人工智能前沿讲习班
14+阅读 · 2019年5月7日
直白介绍卷积神经网络(CNN)
算法与数学之美
13+阅读 · 2019年1月23日
卷积神经网络(CNN)学习笔记1:基础入门
黑龙江大学自然语言处理实验室
14+阅读 · 2016年6月16日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
7+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
5+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
3+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Arxiv
160+阅读 · 2023年4月20日
A Survey of Large Language Models
Arxiv
421+阅读 · 2023年3月31日
Arxiv
21+阅读 · 2023年3月17日
Arxiv
18+阅读 · 2021年3月16日
VIP会员
相关VIP内容
对比预训练和多模态生成式人工智能的统计理论
专知会员服务
7+阅读 · 今天3:47
【KDD2024】面向鲁棒推荐的决策边界感知图对比学习
专知会员服务
19+阅读 · 2024年8月8日
大模型时代的自动图表理解综述
专知会员服务
65+阅读 · 2024年3月19日
【NeurIPS2022】通过模型转换的可解释强化学习
专知会员服务
37+阅读 · 2022年10月4日
【WWW2022】再思考图卷积网络的知识图谱补全
专知会员服务
34+阅读 · 2022年2月15日
专知会员服务
19+阅读 · 2021年9月6日
【AAAI2021】知识图谱增强的预训练模型的生成式常识推理
专知会员服务
24+阅读 · 2020年9月15日
相关资讯
【KDD2020】图神经网络生成式预训练
专知
22+阅读 · 2020年7月3日
再谈人脸识别损失函数综述
人工智能前沿讲习班
14+阅读 · 2019年5月7日
直白介绍卷积神经网络(CNN)
算法与数学之美
13+阅读 · 2019年1月23日
卷积神经网络(CNN)学习笔记1:基础入门
黑龙江大学自然语言处理实验室
14+阅读 · 2016年6月16日
相关基金
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
7+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
5+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
3+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
微信扫码咨询专知VIP会员