图是模拟现实世界实体及其相互关系的自然方式,涵盖了从社交网络和生物数据集到云计算基础设施数据血统图等。在这些大型图上进行查询常常涉及到成本高昂的子图遍历和复杂的分析计算。此外,现实世界中的图通常编码了随时间演变的关系,这种关系被模型化为时间图,即边与时间属性(如开始时间和持续时间)相关联的图。这些现实世界的图往往比通用的顶点与边模型更有结构性,但这一洞察大多未被现有的图引擎用于图查询优化探索。此外,大多数时间图处理系统仍然效率不高,因为即使是在普通商用服务器的可用存储内也适合的图,它们也依赖于分布式处理。为此,我们提出了两个专为优化大规模实际图处理而设计的系统。第一个系统Kaskade,通过利用图和查询的结构属性来推断物化图视图,加速查询评估,通过重写查询来解决高效查询评估的挑战,这些查询基于输入图和查询特征被认为是有益的。第二个系统Kairos,引入了选择性索引,一种根据底层时间图和输入查询的特征选择一部分目标顶点进行索引的技术。该系统进一步采用了一种专为内存存储和快速检索时间边而设计的高度专业化的并行数据结构。最终,Kairos建立在共享内存并行图处理的事实标准系统Ligra之上,为应用程序开发者提供了类似的优势和熟悉的API。这两个系统在与其他基准相比时提供了高达50-60倍的加速,并引入了旨在高效实现实际图分析的新颖的查询优化技术类别。

成为VIP会员查看完整内容
24

相关内容

【NUS博士论文】深度表示学习的视频基础模型,236页pdf
专知会员服务
30+阅读 · 2023年12月26日
【博士论文】最优传输图表示学习,204页pdf
专知会员服务
44+阅读 · 2023年10月25日
【MIT博士论文】机器学习中的稀疏性:理论与应用,122页pdf
【CMU博士论文】神经序列建模与应用,102页pdf
专知会员服务
55+阅读 · 2022年8月23日
专知会员服务
49+阅读 · 2021年6月16日
最新《图机器学习》综述论文,19页pdf
专知会员服务
150+阅读 · 2021年5月5日
【MIT博士论文】数据高效强化学习,176页pdf
最新《图嵌入组合优化》综述论文,40页pdf
最新《动态网络嵌入》综述论文,25页pdf
专知
34+阅读 · 2020年6月17日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
A Survey of Large Language Models
Arxiv
398+阅读 · 2023年3月31日
Arxiv
139+阅读 · 2023年3月24日
Arxiv
20+阅读 · 2023年3月17日
VIP会员
相关VIP内容
【NUS博士论文】深度表示学习的视频基础模型,236页pdf
专知会员服务
30+阅读 · 2023年12月26日
【博士论文】最优传输图表示学习,204页pdf
专知会员服务
44+阅读 · 2023年10月25日
【MIT博士论文】机器学习中的稀疏性:理论与应用,122页pdf
【CMU博士论文】神经序列建模与应用,102页pdf
专知会员服务
55+阅读 · 2022年8月23日
专知会员服务
49+阅读 · 2021年6月16日
最新《图机器学习》综述论文,19页pdf
专知会员服务
150+阅读 · 2021年5月5日
相关基金
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
微信扫码咨询专知VIP会员