对象存储产品白皮书-移动云-中国移动.PDF

对象存储产品白皮书 一、 产品简介 对象存储 ：为用户提供存储和管理海量对象的服务。移动云对象存储版本基于业 界主流分布式文件系统ceph,并在此基础上针对生产环境进行了如智能部署、存储 管理功能完善、性能调优等多项扩展，其设计原理符合软件定义存储（SDS），可 以运行在任何符合工业标准的服务器上，能满足成千上万用户 PB 级甚至是 EB 级的数据访问。具有可扩展，高性能，数据高可靠等特点。客户可以灵活按需使 用。 二、产品优势 1、 自动化运维 通过智能部署功能，即使是刚入门的管理员，也可较快熟悉集群的搭建、扩 容、迁移、升级等，缩小时间成本；通过可视化界面管理，管理员可以掌管整个 集群，完成存储池、对象存储等配置管理工作；独特的告警定制功能，根据不同 的应用场景定制不同级别的告警，轻松掌握集群状态；实时监控。 2、精简 CRUSH 配置 通过精简的 CRUSH 配置向导， 轻松划分安全域（将不同的副本分布在不同的数据中心、 机房、供电系统或交换机上），分割异构存储网络（当单一的存储网络内存在多 种性能和规格不同的存储设备时：比如 SATA 盘或SSD ，若某个存储池混用这些性能和规格不同的设备，则会造成明显的性能瓶 颈，不能发挥预期作用。通过 CRUSH 规则进行分隔， 同种类型和规格的设备组织在同一个存储池中，不同类型和规格的设备使用不同 的存储池分隔）；同时在出现故障时，也可缩短数据恢复时间。 3、缩减硬件成本 传统存储系统采用封闭的硬件环境，产品维护及升级常受到厂家及硬件限制 ，且不利于水平扩展。移动对象存储采用普通的X86服务器，采用兼容适配、灵活 独立的服务器配置，有效降低硬件成本。同时还可通过硬件加速卡提高性能。 4、服务质量保证 中国移动对象存储项目成员由资深存储专家和优秀研发人员组成，拥有多年 存储系统研发及运维经验，积极持续参与社区贡献。 三、技术方案 移动对象存储系统的整体架构如下图所示： 基于对象的对象存储系统整体架构图 基于对象的对象存储系统的由智能分布式存储(RADOS)集群、移动对象存储 管理平台和是驻留在应用服务系统中的程序或代码库组成。 其中智能分布式存储集群包含对象存储 OSD 和监控管理 MON 组件： OSD ：OSD 负责处理客户端读写请求。不管是通过哪种方式（对象、文件或者其他通过调用li brados接口的API）访问分布式存储集群，数据最后都转换成对象存储到集群中。 一个OSD对应一个存储磁盘。为了提高性能，每个 OSD 需要一个SSD盘或SSD盘分区作为其日志盘。一个集群可根据容量、性能、故障域 需要，部署多个OSD 节点。 MON ：MON负责处理集群管理元数据表。客户端向OSD发送读写请求之前， 需要从MON中拿到必威体育精装版的集群表，利用CRUSH算法计算出来数据存储位置后，直 接将读写请求发送至对应的OSD。考虑到MON节点的高可用，实际生产环境中一 个存储集群至少部署3个MON节点。 RGW ：对象存储网关，给用户提供REST API ，并且兼容S3和Swift。 四、产品功能清单 产品功能 产品详细功能 用户创建；用户删除 查看用户状态信息 设置和修改配额（用户和桶级别） 用户管理 秘钥AK/SK创建，修改和删除 子用户创建和删除 用户挂起和恢复 用户容量统计 容器创建；容器删除 遍历容器中的对象 容器管理 按指定prefix或marker遍历容器对象 设置容器多版本 设置容器的访问列表 上传对象 分块上传对象 下载对象 对象管理 分块下载对象