项目名称: 云计算环境下空间数据访问规律的动态统计方法研究

项目编号: No.41271398

项目类型: 面上项目

立项/批准年度: 2013

项目学科: 天文学、地球科学

项目作者: 潘少明

作者单位: 武汉大学

项目金额: 70万元

中文摘要: 利用空间数据访问分布规律调整存储组织策略和副本分布,能大幅度提高空间数据服务系统性能。云计算环境下,空间数据服务具有节点动态、服务能力异构以及拓扑关系不确定特征,而基于Hotmap和Zipf-like的统计规律都是静态和局部的,一般针对单服务器或集群服务器有效,不能真正实时、动态的反映访问分布规律的全局信息,从而制约了系统服务能力的提高。针对上述问题,课题提出基于云计算的空间数据分布规律动态统计方法,通过空间粒度、时间粒度策略、统计信息表达和分块压缩算法控制统计信息基量,在动态性和实时性上取得平衡;同时,通过虚拟云分组及云链模型、节点优选算法、云协作代理分发以及统计信息全局融合算法,从方法上实现全局统计和控制统计信息总量,在全局性和网络流量上取得平衡。本课题的研究有望解决由于全局动态统计带来的不可承载的网络流量问题,能实时动态跟踪空间数据访问全局分布规律,大大改善空间数据系统公众服务能力。

中文关键词: 空间数据;访问规律;动态统计;数据分布;资源调度

英文摘要: The strategy of storage and organization, copy distribution rule can be adjusted utilizing the access and distribution rule of the spatial data, which will significantly improve system performance of spatial data services. At the environment of cloud computing, the spatial data server have some features are that the peers are dynamic, the service capabilities are isomerism and the topological relations are instable. But the statistical rules based on Hotmap and Zipf-like are static and partially, and are only effective to a single server or cluster servers generally. The server performance are restricted, because the access and distribution rule of the spatial data cannot reflect its global information reallity and dynamic. A dynamic statistics method for the distribution rule of the spatial data based on collaborative cloud is proposed in this paper. Firstly, the method control the amount of basic statistical informations to keep balance of dynamic and real time through the strategy of spatial size, time granularity, information expression and compression algorithm. At the same time, the method control the amount of total statistical informations to keep balance of global and network traffic through cloud grouping and cloud chain model, node selection algorithm, cloud of cooperative agent and global fusion algo

英文关键词: spatial data;access laws;dynamic statistics;data distribution;resource scheduling

成为VIP会员查看完整内容
0

相关内容

空间数据又称几何数据,它用来表示物体的位置、形态、大小分布等各方面的信息,是对现世界中存在的具有定位意义的事物和现象的定量描述。根据在计算机系统中对地图是对现实教想的存储组织、处理方法的不同,以及空间数据本身的几何特征,空间数据又可分为图形数据和图像数据。
鲁棒和隐私保护的协同学习
专知会员服务
35+阅读 · 2021年12月22日
【博士论文】开放环境下的度量学习研究
专知会员服务
46+阅读 · 2021年12月4日
专知会员服务
34+阅读 · 2021年10月17日
专知会员服务
91+阅读 · 2021年7月23日
专知会员服务
79+阅读 · 2021年6月28日
基于机器学习的数据库技术综述
专知会员服务
54+阅读 · 2021年1月2日
专知会员服务
51+阅读 · 2020年12月19日
专知会员服务
39+阅读 · 2020年12月1日
如何降低云计算基础设施的复杂度?
InfoQ
0+阅读 · 2022年1月4日
你有订阅视频平台会员服务吗?
ZEALER订阅号
0+阅读 · 2021年12月18日
【资源推荐】AI可解释性资源汇总
专知
47+阅读 · 2019年4月24日
因果推理学习算法资源大列表
专知
26+阅读 · 2019年3月3日
面向云端融合的分布式计算技术研究进展与趋势
中国计算机学会
19+阅读 · 2018年11月27日
无人机集群对抗研究的关键问题
无人机
56+阅读 · 2018年9月16日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
6+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
3+阅读 · 2011年12月31日
Arxiv
0+阅读 · 2022年4月17日
Arxiv
27+阅读 · 2021年2月17日
Deep Anomaly Detection with Outlier Exposure
Arxiv
17+阅读 · 2018年12月21日
小贴士
相关VIP内容
鲁棒和隐私保护的协同学习
专知会员服务
35+阅读 · 2021年12月22日
【博士论文】开放环境下的度量学习研究
专知会员服务
46+阅读 · 2021年12月4日
专知会员服务
34+阅读 · 2021年10月17日
专知会员服务
91+阅读 · 2021年7月23日
专知会员服务
79+阅读 · 2021年6月28日
基于机器学习的数据库技术综述
专知会员服务
54+阅读 · 2021年1月2日
专知会员服务
51+阅读 · 2020年12月19日
专知会员服务
39+阅读 · 2020年12月1日
相关资讯
如何降低云计算基础设施的复杂度?
InfoQ
0+阅读 · 2022年1月4日
你有订阅视频平台会员服务吗?
ZEALER订阅号
0+阅读 · 2021年12月18日
【资源推荐】AI可解释性资源汇总
专知
47+阅读 · 2019年4月24日
因果推理学习算法资源大列表
专知
26+阅读 · 2019年3月3日
面向云端融合的分布式计算技术研究进展与趋势
中国计算机学会
19+阅读 · 2018年11月27日
无人机集群对抗研究的关键问题
无人机
56+阅读 · 2018年9月16日
相关基金
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
6+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
3+阅读 · 2011年12月31日
微信扫码咨询专知VIP会员