DRBD项目实施之NFS高可用架构DRBD项目实施之NFS高可用架构.docx

DRBD项目实施之NFS高可用架构（NFS+Heartbeat+Drbd）本博文出自51CTO博客huangbo929博主，有任何问题请进入博主页面互动讨论！博文地址：/8355508/1587880由于目前线上的两台NFS服务器，一台为主，一台为备。主到备的数据同步，靠rsync来做。由于数据偏重于图片业务，并且还是千万级的碎图片。在目前的业务框架下，NFS服务是存在单点的，并且数据的同步也不能做完全实时性，从而导致不能确保一致性。因此，出于对业务在线率和数据安全的保障，目前需要一套新的架构来解决 NFS 服务单点和数据实时同步的问题。然后，就没有然后了。下面是一个丑到爆的新方案架构图，已经在公司测试环境的部署，并且进行了不完全充分的测试。架构拓扑：简单描述：两台 NFS 服务器，通过 em1 网卡与内网的其他业务服务器进行通信，em2网卡主要负责两台 NFS 服务器之间心跳通信，em3网卡主要负责drbd数据同步的传输。前面的2台图片服务器通过 NFS 集群提供出来的一个VIP 19 来使用 NFS 集群服务。一、项目基础设施及信息介绍1、设备信息现有的两台?NFS?存储服务器的硬件配置信息：? ????????CPU：??Intel(R)?Xeon(R)?CPU?E5-2609?0?@?2.40GHz? ????????MEM：?16G? ????????Raid：?RAID?1? ????????Disk：?SSD?200G?x?2? ????????网卡：集成的?4?个千兆网卡?Link?is?up?at?1000?Mbps,?full?duplex?? ?前端两台静态图片服务器硬件配置信息：? ????????略?2、网络浮动?VIP?:?19????#?漂浮在M1和M2上，负责对外提供服务? ?现有的两台?NFS?存储服务器的网络配置信息：? ?主机名：M1.redhat.sx? ????????em1：10????内网? ????????em2：10??????心跳线? ????????em3：10?????DRBD千兆数据传输? ?主机名：M2.redhat.sx? ????????em1：11????内网? ????????em2：11??????心跳线? ????????em3：11?????DRBD千兆数据传输??3、系统环境内核版本：2.6.32-504.el6.x86_64? ?系统版本：CentOS?6.5? ?系统位数：x86_64? ?防火墙规则清空? ?selinux关闭?4、软件版本heartbeat-3.0.4-2.el6.x86_64? ?drbd-8.4.3? ?rpcbind-0.2.0-11.el6.x86_64? ?nfs-utils-1.2.3-54.el6.x86_64?二、基础服务配置这里仅以 M1 服务的配置为例，M2 服务器配置与此相同。1、配置时间同步M1端：[root@M1?~]#?ntpdate??? ?12?Nov?14:45:15?ntpdate[27898]:?adjust?time?server?09?offset?0.044720?sec?M2端：[root@M2?~]#?ntpdate??? ?12?Nov?14:45:06?ntpdate[24447]:?adjust?time?server?09?offset?0.063174?sec?2、配置/etc/hosts文件M1端：[root@M1?~]#?cat?/etc/hosts?? ??localhost?localhost.localdomain?localhost4?localhost4.localdomain4?? ?::1?localhost?localhost.localdomain?localhost6?localhost6.localdomain6?? ?10?M1.redhat.sx?? ?11?M2.redhat.sx?M2端：[root@M2?~]#?cat?/etc/hosts?? ??localhost?localhost.localdomain?localhost4?localhost4.localdomain4?? ?::1?localhost?localhost.localdomain?localhost6?localhost6.localdomain6?? ?10?M1.redhat.sx?? ?11?M2.redhat.sx?3、增加主机间路由首先先验证 M1 和 M2 的服务器 IP 是否合乎规划M1端：[root@M1?~]#?ifconfig|egrep?Link?encap|inet?addr????????????????????#??验证现有?IP?