LoongStore集群存储系统_白皮书_jun09.pdf

LoongStore 集群存储系统 北京龙存科技有限责任公司 BEIJING LOONGSTORE CO., LTD 11 目 录 一、 前言 3 1.1 非结构化数据爆炸性增长 3 1.2 集群化趋势 3 二、 常见存储架构 4 2.1 直接连接存储（DAS ）4 2.2 网络附加存储(NAS)4 2.3 存储区域网（SAN）5 三、 集群存储趋势的发展 6 四、 LOONGSTORE集群存储系统 7 4.1 LOONGSTORE系统架构7 4.2 LOONGSTORE集群存储系统组件介绍 8 4.2.1 LeoFS分布式文件系统8 4.2.2 负载均衡软件9 4.2.3 灵活冗余软件9 4.2.4 故障自动恢复软件9 4.2.5 大目录支持软件9 4.3 LOONGSTORE集群存储系统功能及特点 10 4.3.1 海量数据高效管理10 4.3.2 海量文件高效检索10 4.3.3 数据读写性能10 4.3.4 数据全局共享 11 4.3.5 数据安全性 11 4.3.6 系统可扩展性 11 4.3.7 系统可维护性12 4.3.8 与现有环境无缝兼容12 4.3.9 系统的整体拥有成本12 五、 总结展望 13 2 一、 前言 1.1 非结构化数据爆炸性增长 随着各种业务类型越来越丰富，电子数据正在飞速增长，而其中增长最快的部分就是非 结构化数据。以往传统的数据如数据库、文档、邮件等结构或者半结构化数据典型的一般都 是数 MB 或者GB 级，但是非结构化数据的单个文件大小以及总数据量的增长非常迅速，比如 目前音视频这类常见数据随着音视频清晰度逐步提高，单个视频文件就达数十 GB；而像地 震资料这类科学计算数据单个文件就达上百 GB，这样总体数据量就轻易达到数十 TB甚至数 百 TB。海量的非结构化数据迫切的需要能够简便进行存储和管理，企业需要一个能够容纳 海量数据的存储平台。 1.2 集群化趋势 由于集群架构具备良好的扩展性和性价比优势，目前集群技术已经被广泛的应用到了各 行各业。企业相关业务已经从传统的昂贵而且专用的“大型机”、“小型机”转换到了使用 Linux 和Windows 操作系统的通用集群化架构，极大的提升了整体计算处理能力，并且能够 良好的支撑业务不断发展带来的需求。 集群架构给企业带来灵活的计算处理能力的同时，也给企业提出了新的需求。集群架构 强大的计算处理能力必须围绕着数据运转。当计算集群中业务高并发的对数据进行访问，如 果数据不能够被快速的获取和共享将会严重影响业务运转效率，耗费大量的计算处理资源。 从集群化的趋势中可以看企业也需要一个具备灵活扩展能力和高效数据 IO 能力的大规模存 储平台支持强大的集群计算处理能力。