新型大规模先进计算系统关键技术

新型大规模先进计算系统关键技术研究

众核系统（基础研究）：

众核处理器模拟/仿真（性能分析）

片上/板级智能系统

编译/编程模型、调度管理

并行应用调试与可视化

精简高效虚拟机软件

 

数据存储与管理：

(1) 大规模非结构化数据存储与管理

随着信息技术的迅猛发展，据IDC预测，现在全球数据量每18个月就要翻一番，每年全球产生的数据量已经高达40EB(1EB=1000PB)。而这些疯狂增长的数据主要来自非结构化数据。目前企业80%的数据都是非结构化数据，并且，还在以每年60%的复合增长率在急剧增长。

因此，需要开展面向大规模非结构化数据的存储与管理研究，主要包括：(a)网络存储架构，集成已有的SAN、NAS、集群存储系统形成适用于大规模非结构化数据存储的基础架构；(b)面向对象的存储，通过智能存储(如NASD、LUSTRE)和基于内容存储组织管理大规模非结构化数据；(c) 数据处理，采用数据并行处理技术(如MapReduce)对大规模非结构化数据进行分析、挖掘、检索、集成等；(c) 数据管理，实现对数据备份、归档、分类、生命周期管理等。

(2) 新型集群文件系统

集群文件系统利用多个集群节点的存储设备并行工作，提供全局统一命名空间，获得较高的可扩展性、高性能、高可用性。目前，在高性能计算领域，PVFS和Lustre被广泛使用以支持计算密集型和I/O密集型应用，其特征为支持低延迟、并行I/O、多次读写；而在云计算数据中心，GFS和HDFS被广泛用于支持数据密集型应用，其特征为一次写、多次读(WORM，Write Once Read Many)。

然而，更多的应用可能同时具有计算密集型、I/O密集型、数据密集型特征，因此结合两者的优势，研究支持以上特征的新型集群文件系统势在必行。

(3) 精简、去重

 

大系统高效运行管理技术：

可靠、绿色计算

监控/管理/部署/调度