存储性能的监控分析及四种优化手段.pdfVIP

随着云计算、大数据以及新兴的区块链等技术体系的迅猛发展，数据中心的扩容建设进

入高峰期，针对金融行业互联网金融、云化、容器化、分布式改造等数字化转型在金融

行业不断发展，金融业务向移动、普惠、敏捷和创新方向发展，存储作为关键基础设施

依然承担着非常关键的作用，越来越多的存储资源逐渐由传统存储转化为云存储。越来

越多应用运行在我们的存储服务器上，存储性能直接影响应用性能，应用需要进行持续

优化，提高业务支撑能力，同时，存储也需要进行持续优化，提高对应用程序性能的支

持能力，这对存储管理人员在运维过程中，利用监控数据进行存储优化的能力提出了更

多要求。

一、存储性能监控和分析

进入云服务时代后，站在存储的角度，集中式存储和分布式存储并存的云存储池

具备了更强的云化和服务化特性，提供云存储的最终存储的形态包括集中式存储

和分布式存储两种。无论是集中式还是分布式存储，存储的监控通常关注存储的

硬件和集群指标监控，硬件监控关注存储设备的物理构件有没有出现故障损坏，

而性能指标监控是存储服务器服务能力的直观体现，用户可以通过性能指标了解

系统的运行状态，数据中心内部的存储使用量和读写速度。我们可以将存储监控

分为存储性能监控、存储系统监控及存储设备监控。

存储性能监控方面，块存储通常监控块的读写速率、IOPS、读写延迟、磁盘使用

量等；文件存储通常监控文件系统inode、读写速度、目录权限等。分布式存储

系列通过开放接口与上层云管平台集成，上层云管平台可以通过相关接口对存储

系统资源（比如存储集群资源、存储池、卷等）进行监控管理。分布式存储系统

监控方面，不同的存储系统有不同的指标，包含集群基本信息监控、性能监控等。

集群基本信息监控主要查看包括集群管理服务、状态、节点信息、节点进程信息

等，集群性能监控主要查看CPU利用率、内存利用率、带宽、IOPS、时延、磁

盘利用率、存储池利用率统计。

存储的硬件监控通常通过存储设备自检能力可以体现，例如机头、磁盘、端口等

属于易损件，我们可以通过存储的自带监控界面以及告警灯发现问题。此外也需

要关注环境和系统关键温度点监控，对环境温度和系统内的关键温度点都进行了

实时监控，会根据各监控点的信息，对风扇进行动态调速，保证系统及各组件工

作在正常的温度范围内。当由于环境温度增高或者器件异常，风扇调速无法保证

系统或者组件工作在正常范围时，存储系统持续高温，容易导致部件损坏。

获取了存储的监控数据后，存储管理员可以周期性的对健康监控数据进行分析，

对于监控数据，我们要形成一定的运行基线，如果存储设备监控数据在基线基础

上持续攀升，或者达到存储能支撑的最大值，则需要引起警惕。例如发现CPU性

能持续升高或者高位运行，则需要考虑存储机头处理能力可能会影响IOPS吞吐

能力面临瓶颈，例如发现缓存命中率低，或者热数据层长时间使用率非常高，则

可能是缓存层的容量不够用，如果端口持续告警，可能是存储的端口带宽不足等，

则通常需要进行相应的机头处理器升级、缓存容量扩容或者端口个数或者端口速

率的升级扩容，以便化解风险。

二、存储性能优化

存储性能优化工作具有一定的策略性，科学的优化策略才能指导制定更加合理的

存储性能优化方案。存储优化可以分为规划、交付、维护几个阶段的优化进行阐

述，每个阶段可以考虑的方案有一定区别。

如果是在规划阶段，需要分析业务系统的需求，根据需求确定交付的方案。需要

提前使用性能规划工具对业务场景做好性能评估工作，并根据评估结果匹配硬件

配置，如当前配置不满足则需要及时调整硬件配置。如业务对性能要求比较高，

那么业务数据应该规划使用SSD盘，对性能要求不高的业务可以规划SAS盘；

对于端口速率规划，根据实际的业务带宽情况评估，选择合适的端口速率。如果

是在交付阶段，可以根据产品的最佳实践完成从主机到存储的标准化配置，比如

系统业务网络和管理网络的隔离，交换网络使用双交换的标准冗余组网，防止单

点故障导致业务中断；如果是在业务上线前，需要完成针对性场景的性能测试和

可靠性测试，确保端到端的业务性能能够满足业务需求，可靠性满足冗余标准，

在各种器件故障或者异常场景能够正常切换业务且不影响上层业务；如果已经进

入维护阶段，需要定期对系统做巡检，及时识别系统风险并及时处理。持续监控

存储性能，并与前期的性能测试报告和业务性能基线进行对比，提前发现性能风

险，提前扩容或优化硬件配