项目名称: 高能物理计算的I/O性能优化
项目编号: No.11205177
项目类型: 青年科学基金项目
立项/批准年度: 2013
项目学科: 数理科学和化学
项目作者: 汪璐
作者单位: 中国科学院高能物理研究所
项目金额: 30万元
中文摘要: I/O性能优化是提高数据密集型计算效率的主要途径。前期研究发现,系统到达一定规模后,增加存储硬件不能使I/O性能获得线性增长。I/O性能优化是一个复杂的,涉及应用、系统软件、硬件三方面因素的科学问题。 本课题将基于Lustre分布式文件系统,对高能所计算集群上的高能物理计算做I/O优化。作业课题的研究内容包括:1)高能物理计算的I/O模式获取和分析2)高能物理计算程序的I/O代码优化3)基于机器学习的Lustre客户端自适应优化方法4)Lustre数据服务器的请求调度算法5)磁盘文件系统的性能优化。 与其它租用计算资源的科学计算不同,国内外的高能物理计算一般都在由商品服务器和局域网络构成的廉价、自建集群中完成。高能所计算中心是其中的典型代表。目前国内外尚没有针对这种计算模式的完整的IO性能优化方案。课题的研究成果不仅能够提升高能所的计算效率,而且在高能物理社区中具有推广价值。
中文关键词: I/O模式;ROOT;Lustre文件系统;云存储;分级存储系统
英文摘要: Optimization of IO performance is a main path to improve the efficiency of data intensive computing. Prior researches show that when the system reaches certain scale, the IO performance can not always improve linearly with addtion of storage hardware.IO o
英文关键词: I/O pattern;ROOT;Lustre file system;Cloud Storage;hierarchical storage system