项目名称: 容错存储系统的扩容问题研究

项目编号: No.61379038

项目类型: 面上项目

立项/批准年度: 2013

项目学科: 自动化技术、计算机技术

项目作者: 许胤龙

作者单位: 中国科学技术大学

项目金额: 79万元

中文摘要: 磁盘故障是大型存储系统中常见现象,容错已成为当前存储系统必备的基本功能。另一方面,数据量的高速增长以及用户对系统性能不断增长的需求导致存储系统需要扩容。本项目拟研究基于不同容错编码的存储系统的有效扩容算法与相应数据迁移算法,优化系统扩容过程中系统负载均衡、迁移数据量、I\O负载、校验块的更新、元数据的管理、数据一致性以及数据存储连续性等多方面的性能,具体的研究内容包括:(1)针对各种RAID编码、纠删码、再生码,设计系统扩容算法;(2)针对以上各种编码,设计增加容错能力的扩容算法;(3)针对不同存储介质的存储系统,如固态硬盘、传统硬盘,建立扩容过程中性能参数模型,设计优化的扩容算法;(4)针对一些不同的系统访问模式,通过其trace数据分析影响扩容算法性能的关键因素,设计优化的在线扩容算法;(5)建立一个实际的异构分布式存储系统,在此系统上实现各种扩容算法,优化扩容算法在实际系统中的部署。

中文关键词: 存储;纠删码;扩容;校验散布;CRS码

英文摘要: Disk failure is a common phenomenon in large storage systems, fault tolerance must be implemented in the current storage systems. On the other hand, the rapid growth of data and the growing demand of users on the system performance lead to necessary scali

英文关键词: storage;erasure code;scaling;parity declustering;CRS code

成为VIP会员查看完整内容
0

相关内容

专知会员服务
34+阅读 · 2021年10月19日
专知会员服务
18+阅读 · 2021年5月16日
基于机器学习的数据库技术综述
专知会员服务
53+阅读 · 2021年1月2日
大规模时间序列分析框架的研究与实现,计算机学报
专知会员服务
58+阅读 · 2020年7月13日
2021年车联网安全研究报告
CCF计算机安全专委会
1+阅读 · 2022年4月7日
如何提升 HBase 大规模集群下的低延时性能
AI前线
0+阅读 · 2022年3月28日
“热搜”中的分布式数据库 | Q推荐
InfoQ
0+阅读 · 2022年2月15日
大数据平台如何进行云原生改造
InfoQ
0+阅读 · 2022年1月26日
工行基于MySQL构建分布式架构的转型之路
炼数成金订阅号
15+阅读 · 2019年5月16日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
Arxiv
0+阅读 · 2022年4月18日
Arxiv
0+阅读 · 2022年4月7日
小贴士
相关资讯
2021年车联网安全研究报告
CCF计算机安全专委会
1+阅读 · 2022年4月7日
如何提升 HBase 大规模集群下的低延时性能
AI前线
0+阅读 · 2022年3月28日
“热搜”中的分布式数据库 | Q推荐
InfoQ
0+阅读 · 2022年2月15日
大数据平台如何进行云原生改造
InfoQ
0+阅读 · 2022年1月26日
工行基于MySQL构建分布式架构的转型之路
炼数成金订阅号
15+阅读 · 2019年5月16日
相关基金
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
微信扫码咨询专知VIP会员