项目名称: 云计算环境分布式存储一致性维护的关键技术研究

项目编号: No.61472067

项目类型: 面上项目

立项/批准年度: 2015

项目学科: 自动化技术、计算机技术

项目作者: 侯孟书

作者单位: 电子科技大学

项目金额: 85万元

中文摘要: 云计算由于其节点错误常态化、数据异构性、超大规模以及高可扩展性等特性,对传统分布式存储的一致性维护策略提出了新的挑战。本课题针对云计算环境下,分布式存储的一致性维护问题进行分析和研究,主要内容包括:(1)研究副本一致性的维护策略。引入探测针机制减少副本更新的冗余消息,通过挖掘写-写冲突,写-读冲突等更新冲突的内在特性,设计新的更新冲突解决模型;(2)研究事务一致性的维护策略。基于时间窗口的概念提出新的两阶段提交算法,解决交互超时带来的更新丢失问题,针对加锁机制容易导致死锁的问题,提出新的基于时间戳的分布式事务并发控制算法;(3)研究状态一致性的维护策略。基于节点错误常态化的前提,利用概率理论建立新的全局状态获取模型,提高状态获取效率,结合逻辑时钟简单高效和物理时钟精确唯一的优点,提出新的全局状态一致性维护策略。本项目是云计算环境分布式存储领域的研究热点,具有一定的研究意义和实用价值。

中文关键词: 云计算;分布式存储;一致性维护

英文摘要: Due to the new features such as normalization of nodes fault, data heterogeneous, ultra-large scale, as well as high scalability in cloud computing environments, new challenges are needed for the consistency maintaining mechanism of traditional distributed storage technology. In cloud computing environments, we conduct a comprehensive analysis and research work on the consistency maintaining mechanism of distributed storage. The main research works are as follows: (1)The maintaining mechanism of replica consistency. Based on the concept of probe, we will decrease the redundant messages during replica updates, and by digging through the intrinsic properties of write-write, write-read conflicts and so on, we establish a novel model for improving efficiency; (2) The maintaining mechanism of transaction consistency. By using the time-window concept, we propose a novel two-phase commit algorithm in order to solve the problem of updates lost brought by timeout. Towards the deadlock problem, we propose a novel distributed transaction concurrency control algorithm based on timestamp. (3) The maintaining mechanism of state consistency. Based on the premise of normalization in node falut, we build a novel model for obtaining the global states under probability theory for better efficiency. Combined the simpleness and efficiency of logical clocks with the accuracy of physical clocks, we desigh a new mechanism for maintaining the consistency of global states. Our research work is one of the hotspots in distributed storage of cloud computing, with certain research significance and practical value.

英文关键词: Cloud computing;Distributed storage;Consistency maintenance

成为VIP会员查看完整内容
1

相关内容

云计算(Cloud computing)是一种基于互联网的计算方式,通过这种方式,共享的软硬件资源和信息可以按需提供给计算机和其他设备。整个运行方式很像电网,类似之前的网格计算。
军事知识图谱构建技术
专知会员服务
125+阅读 · 2022年4月8日
区块链数据安全服务综述
专知会员服务
54+阅读 · 2021年11月10日
专知会员服务
34+阅读 · 2021年10月17日
专知会员服务
33+阅读 · 2021年7月29日
专知会员服务
18+阅读 · 2021年5月16日
专知会员服务
41+阅读 · 2021年3月28日
大规模时间序列分析框架的研究与实现,计算机学报
专知会员服务
58+阅读 · 2020年7月13日
多智能体深度强化学习的若干关键科学问题
专知会员服务
188+阅读 · 2020年5月24日
并发-分布式锁质量保障总结
阿里技术
0+阅读 · 2022年3月7日
如何降低云计算基础设施的复杂度?
InfoQ
0+阅读 · 2022年1月4日
并发场景下的幂等问题——分布式锁详解
阿里技术
0+阅读 · 2021年11月30日
流计算引擎数据一致性的本质
阿里技术
0+阅读 · 2021年10月13日
分布式一致性算法:解决分布式系统 80%核心问题
夕小瑶的卖萌屋
1+阅读 · 2021年8月31日
【Flink】基于 Flink 的流式数据实时去重
AINLP
14+阅读 · 2020年9月29日
已删除
将门创投
12+阅读 · 2019年7月1日
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
Arxiv
0+阅读 · 2022年4月20日
Arxiv
28+阅读 · 2021年10月1日
小贴士
相关VIP内容
军事知识图谱构建技术
专知会员服务
125+阅读 · 2022年4月8日
区块链数据安全服务综述
专知会员服务
54+阅读 · 2021年11月10日
专知会员服务
34+阅读 · 2021年10月17日
专知会员服务
33+阅读 · 2021年7月29日
专知会员服务
18+阅读 · 2021年5月16日
专知会员服务
41+阅读 · 2021年3月28日
大规模时间序列分析框架的研究与实现,计算机学报
专知会员服务
58+阅读 · 2020年7月13日
多智能体深度强化学习的若干关键科学问题
专知会员服务
188+阅读 · 2020年5月24日
相关资讯
并发-分布式锁质量保障总结
阿里技术
0+阅读 · 2022年3月7日
如何降低云计算基础设施的复杂度?
InfoQ
0+阅读 · 2022年1月4日
并发场景下的幂等问题——分布式锁详解
阿里技术
0+阅读 · 2021年11月30日
流计算引擎数据一致性的本质
阿里技术
0+阅读 · 2021年10月13日
分布式一致性算法:解决分布式系统 80%核心问题
夕小瑶的卖萌屋
1+阅读 · 2021年8月31日
【Flink】基于 Flink 的流式数据实时去重
AINLP
14+阅读 · 2020年9月29日
已删除
将门创投
12+阅读 · 2019年7月1日
相关基金
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
微信扫码咨询专知VIP会员