基于SSD的大规模元数据处理技术研究

项目名称： 基于SSD的大规模元数据处理技术研究

项目编号： No.60970025

项目类型： 面上项目

立项/批准年度： 2010

项目学科： 自动化技术、计算机技术

项目作者： 熊劲

作者单位： 中国科学院计算技术研究所

项目金额： 30万元

中文摘要： 现在和未来越来越多的应用需要高效管理万亿量级文件的元数据，而现有的元数据处理技术在规模和性能方面还不能满足这样的需求。为解决这一问题，本课题研究提高大规模元数据处理性能的方法，主要内容包括：（1）研究能够适应元数据模动态增长的、名字空间自动划分的元数据分布方法，解决元数据处理的可扩展性问题和负载均衡问题；（2）利用SSD作为元数据的永久存储介质，研究根据SSD的I/O特征来组织元数据存储和管理元数据缓存的方法，提高单个元数据服务器的元数据处理的性能价格比；（3）研究大规模元数据的索引方法，提高大规模元数据的名字解析效率；（4）研究文件系统元数据的性能评价方法，分析典型应用的元数据访问模式和特征，开发一个能够模拟多种负载的元数据性能评测工具，为深入研究元数据处理奠定基础。通过本研究，能够为高效地管理万亿量级文件的元数据提供切实可行的解决方案。

中文关键词： 闪存；SSD；分布式文件系统；元数据管理；

英文摘要：

英文关键词： Flash memory；SSD；distributed file system；metadata management；