一、基本信息 |
标题 | LoongStore大规模集群云存储系统 | 单位 | 清华大学 |
电话 | 13671295970 | 行业类别 | 信息技术 |
二、内容信息 | |||
LoongStore大规模集群云存储系统
成果介绍 网络存储技术从诞生到现在,已经经历了近二十年的历程。在这个过程中,无论是计算技术、网络通信技术还是信息储存技术都发生了翻天覆地的变化。计算技术领域,基于开放操 作系统上的集群计算技术已经取代大型机;网络通信领域,开放架构的 TCP/IP通信已经统治了一切;在信息存储技术上,单块磁盘的容量已经从G级别进入T级别。 传统的网络存储设备,无论是FC SAN、NAS还是IP SAN,都是采用以满足单台服务器存储需要为目标的体系设计,在共享能力、性能、可靠性、扩展性以及总体拥有成本上,已经无法满足企业新的应用需求。如果 仅仅通过外围手段来弥补,必将造成存储架构越来越复杂,用户管理难度越来越大,总体拥有成本越来越高。 为了满足IT技术发展的挑战,LoongStore集群存储采用了代表计算技术、网络通信技术以及文件 系统技术发展方向的体系架构,提供给用户跨平台共享、高性能、高可靠、可平滑扩展、使用和维护简单的高端存储系统。系统以开放架构平台智能存储服务器为基 本节点,通过在千兆以太网基础上不受限制地添加节点,构成了业界最高的性能、可靠性以及极低总体拥有成本的存储集群。 LoongStore为一种大规模的文件共享存储系统,它面向海量数据、高并发访问的环境。 LoongStore产品架构支持: Ø 单文件系统100PB Ø 支持2000个以上节点并发 Ø 支持超过500亿文件 产品主要特点 Ø 产品架构上:实现了横向扩展。从原来的单节点增加CPU、内存、存储等等的纵向扩展方案往增加节点数量的横向扩展方案的转变,使得容量扩展更加灵活、同时也实现了更低的起始投入成本。 Ø 产品工作流上:实现了更高效的数据读写方式。通过实现元数据与数据通道分离、将数据条带化存储在不同的存储服务器上,从而高效实现数据的并行读写。 Ø 产品性能上:实现了高聚合带宽。克服了以前文件集中式存储的瓶颈,实现了文件切片分布式存储方案,实现了高聚合带宽。 Ø 产品性能上:实现了性能近线性增长。如:(1)聚合带宽随着存储集群规模扩大而线性增长 ;(2)充分发挥硬件性能,如网卡性能利用率达到了80%;(3)扩展到100GB/s以上的聚合性能 Ø 产品可靠性上:实现了无单点故障。通过(1)为不同目录的数据设置不同的冗余度;(2)自动故障探测与恢复;(3)设备恢复速度是RAID的5倍, 750GB SATA盘恢复时间15分钟;(4)元数据服务器每两台互备等,实现了产品的无单点故障。 Ø 在产品扩展性方面:实现了在线业务扩展容量。支持不停业务在线扩容,并自动迁移均衡数据。从而实现不需要关停业务的方式轻易扩展容量。 Ø 在产品管理方面:实现了单点配置管理。产品通过单点实现了所有的配置管理功能,通过内置各种自动化处理流程,减少人为参与。 Ø 产品兼容性方面:兼容各种X86架构的服务器和IP网络,应用服务器端支持Linux/Windows/Mac等等。 产品主要应用案例简介 LoongStore大规模集群云存储系统能够帮助企业加速信息到价值的转换,目前已经在互联网、广电、能源、电信等数据密集型行业帮助企业实现了突破性的价值。产品主要应用行业与应用案例有:(1)互联网:视频,SNS等,例如中国国家网络电视台(CNTV),人人网,搜狐;(2)能源:大庆油田,中石油勘探开发研究院总院;(3)动漫和广电:中影集团,教育电视台等,《建党伟业》、《建国大业》、《孔子》等大片的后期制作就是采用该存储系统;(4)教育及其(5)军工,航天等等领域。 联系方式 联系人:李超 Email地址:lichao00@tsinghua.org.cn 电话:13671295970 联系人:张桂刚 Email地址:guigang@tsinghua.edu.cn 电话:13671295970 |
|||
三、附件下载 | |||