项目名称: 面向云计算系统的协作式数据消冗传输理论及方法研究

项目编号: No.61271275

项目类型: 面上项目

立项/批准年度: 2013

项目学科: 无线电电子学、电信技术

项目作者: 王树鹏

作者单位: 中国科学院信息工程研究所

项目金额: 80万元

中文摘要: 在云计算系统中,如何充分利用网络资源实现高效数据传输是一个重要问题。申请人前期研究中发现目标节点的临近节点上会存在大量与源节点传输数据相同的数据,让这些节点协助源节点向目标结点传输数据,可以缩短传输时间并减少对关键网络资源的占用,避免网络链路热点的出现给整个网络造成较大的冲击。传统基于消冗的数据传输机制仅关注了目标节点上所存在的重复数据,避免源节点传输这部分数据节省网络资源,但是没有考虑上述这种情况。在本项目中,申请人首次针对该问题展开了研究,提出了协作式数据消冗传输模型,给出了节点间重复数据块的高效定位方法、面向网络资源全局最优化使用和传输开销最小化的数据传输代价评价方法以及面向网络资源全局最优化使用和传输开销最小化的协作数据源选择方法,设计了面向云计算系统的协作式数据消冗传输协议,通过存在重复数据的节点协助源节点向目标节点传输数据,实现了网络资源的全局最优化使用和节点间的高效传输.

中文关键词: 云计算;网络传输;消冗;协作;

英文摘要: In the cloud computing system, efficient utilization of network resource and efficient data transmission is an important problem. In previous study, the applicant find that there are massive data, that are the same as the data transferred from the source node, on the nodes nearby the destination node. These nodes can assist the source node to transfer data to the destination node. That can shorten the transmission time, achieve more efficient utilization of key network resources and can avoid the occurrence of hot network links. Traditional data transmission approaches based on data deduplication only focus on the duplicated data on the destination node, and save the network resources by transferring the deduplicated data. In this project, the applicant research on this problem firstly, and propose the data transmission mode based on cooperated data deduplication. Then, the method to locate the duplicate data block among nodes, the method to evaluate the price of network transmission and the method to choose the cooperated source node are researched. Finally, the protocol of network transmission based on data deduplication corporately is designed. The goal of the optimum network resource utilization and minimum transmission cost is reached by the approach of network transmission based on data deduplication corpo

英文关键词: Cloud computing;Network transmission;Deduplication;Cooperation;

成为VIP会员查看完整内容
0

相关内容

云计算(Cloud computing)是一种基于互联网的计算方式,通过这种方式,共享的软硬件资源和信息可以按需提供给计算机和其他设备。整个运行方式很像电网,类似之前的网格计算。
数据中心产业图谱研究报告,41页pdf
专知会员服务
53+阅读 · 2022年1月31日
【博士论文】集群系统中的网络流调度
专知会员服务
37+阅读 · 2021年12月7日
专知会员服务
34+阅读 · 2021年10月19日
专知会员服务
22+阅读 · 2021年6月23日
专知会员服务
54+阅读 · 2021年6月9日
专知会员服务
62+阅读 · 2021年5月3日
最新《计算机体系结构和系统的机器学习》综述论文
专知会员服务
51+阅读 · 2021年2月17日
GCN如何并行化?分布式图卷积神经网路,13页pdf
专知会员服务
33+阅读 · 2020年7月20日
数据中心产业图谱研究报告,41页pdf
专知
2+阅读 · 2022年1月31日
《2021—2022中国大数据产业发展报告》
专知
12+阅读 · 2022年1月23日
【博士论文】分形计算系统
专知
2+阅读 · 2021年12月9日
【博士论文】集群系统中的网络流调度
专知
3+阅读 · 2021年12月7日
面面观之易华录“数据银行”
THU数据派
0+阅读 · 2021年9月10日
面向自动驾驶的边缘计算技术研究综述
专知
4+阅读 · 2021年5月3日
面向云端融合的分布式计算技术研究进展与趋势
中国计算机学会
18+阅读 · 2018年11月27日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
2+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
Arxiv
0+阅读 · 2022年4月17日
Arxiv
31+阅读 · 2021年3月29日
Arxiv
19+阅读 · 2020年12月23日
Arxiv
10+阅读 · 2020年6月12日
Arxiv
29+阅读 · 2020年3月16日
小贴士
相关VIP内容
数据中心产业图谱研究报告,41页pdf
专知会员服务
53+阅读 · 2022年1月31日
【博士论文】集群系统中的网络流调度
专知会员服务
37+阅读 · 2021年12月7日
专知会员服务
34+阅读 · 2021年10月19日
专知会员服务
22+阅读 · 2021年6月23日
专知会员服务
54+阅读 · 2021年6月9日
专知会员服务
62+阅读 · 2021年5月3日
最新《计算机体系结构和系统的机器学习》综述论文
专知会员服务
51+阅读 · 2021年2月17日
GCN如何并行化?分布式图卷积神经网路,13页pdf
专知会员服务
33+阅读 · 2020年7月20日
相关资讯
数据中心产业图谱研究报告,41页pdf
专知
2+阅读 · 2022年1月31日
《2021—2022中国大数据产业发展报告》
专知
12+阅读 · 2022年1月23日
【博士论文】分形计算系统
专知
2+阅读 · 2021年12月9日
【博士论文】集群系统中的网络流调度
专知
3+阅读 · 2021年12月7日
面面观之易华录“数据银行”
THU数据派
0+阅读 · 2021年9月10日
面向自动驾驶的边缘计算技术研究综述
专知
4+阅读 · 2021年5月3日
面向云端融合的分布式计算技术研究进展与趋势
中国计算机学会
18+阅读 · 2018年11月27日
相关基金
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
2+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
相关论文
Arxiv
0+阅读 · 2022年4月17日
Arxiv
31+阅读 · 2021年3月29日
Arxiv
19+阅读 · 2020年12月23日
Arxiv
10+阅读 · 2020年6月12日
Arxiv
29+阅读 · 2020年3月16日
微信扫码咨询专知VIP会员