● 龙存集群存储系统
 
设计背景
性能简介
简易构架

性能简介

1、海量并发
   LoongStore集群存储系统文件系统存储文件的机制是:按照一定的大小将文件切分为多个小的单元,利用一定的机制将这些数据单元平均分布在系统所有的存储服务器上。
    这种创新性的存储方式保证所有的智能存储服务器和磁盘都被平均使用。即使某些目录甚至文件被客户端更加频繁地访问,系统也会保持负载均衡。即使在扩容、缩减容量、增加或减少硬件的情况下,这种伪随机分配机制仍然能够保证系统持续的负载均衡。
 
2、缓存和CPU处理能力  
    与其他任何存储系统不同的是,LoongStore集群存储设计在每一个智能存储服务器模块中都嵌入了IO缓存,这样做的独特优势在于:
  ·分布式缓存
    所有缓存单元可以在为客户端提供I/O缓存的同时执行磁盘I/O缓存,这将确保缓存永远不会成为瓶颈。
  ·磁盘缓存高带宽
    LeoFS文件系统主动预取机制可以将无序读取改变为顺序读取,从而大大缩短磁道寻址的时间,基于PCI-X总线的磁盘缓存可以提供数十GB/s的输出带宽。
  
·强大的缓存管理
    系统独特的设计允许为每块磁盘的数据读取建立一个较大的缓存区,同时设立一个较小的缓存区管理最近访问的数据,这保证了系统的高处理能力和磁盘缓存的高带宽。

3、强大的CPU处理能力  
    每一个数据模块都有自己的处理能力,使得LoongStore集群存储拥有数量众多的CPU处理能力,这些处理能力被用于复杂的伪随机数据分布、缓存算法等。强大的CPU处理能力保证了建立在更高缓存能力基础上的系统高性能。

4、高聚合带宽
    ·存储系统的带外架构让数据通过以太交换网络直接在应用服务器和后端存储服务器之间进行传输;
    ·在同一个系统中多个不同的数据传输流同时进行,大大提高系统的数据吞吐量;
    ·在应用服务器和存储服务器之间构成了一个典型的由文件数据存取而形成的存储矩阵网络 (Storage Matrix );

5、高效检索海量小文件

    分布式的元数据管理,提供高达每秒上百万次的文件操作(operation per second/ops)支持元数据MetaData
    ·描述数据的数据统称为元数据 
    ·文件系统元数据包括:文件系统的目录、文件和目录的名称、文件和目录的属
      性:文件大小、时间、权限、数据的分布…
    ·元数据相关的操作:创建、删除、查询、修改属性等,每次数据读写操作都会
      涉及元数据操作 

6、外带的元数据管理方式
    ·元数据与数据分开独立存储管理
    ·由专门的元数据服务器管理所有的元数据内容
    ·极大减少了使用过程中元数据操作对数据读写操作的干扰,提高系统的整体能力

7、高速文件查询技术
    LoongStore在单个目录下可高效存放几百万甚至上千万个文件或子目录可提供高并发、快速文件查询操作

8、适用于海量文件应用


9、LoongStore的扩展性特点如下:

    ·动态在线增加存储设备 
    ·扩容过程无需中断应用的正常使用 
    ·新增容量即插即用 
    ·为用户规划未来存储空间提供了极大的便利 
    ·节省了用户的一次性投资规模,真正做到按需扩容
    ·扩容成本低

 
  企业文化 | 诚聘英才 | 联系我们 | 技术支持法律声明
版权所有©2009-2010 dehongcheng.All Rights Reserved. 京ICP备10021347号