《大数据存储技术与应用》 课件 项目六_任务二 解析GlusterFS存储技术.pptxVIP

《大数据存储技术与应用》

大数据存储技术与应用

项目六解析非结构化数据存储

任务一走进非结构化存储技术

回顾

什么是半结构化数据?

什么是Redis?

什么是ElasticSearch?

ElasticSearch的应用场景?

INFORMATION/COMMUNICATION/TECHNOLOGY

GlusterFileSystem是一款自由软件，

主要由ZRESEARCH公司负责开发，十几名开发者，最近非常活跃。文档也比较齐全，不难上手。

■任务引入-GlusterFileSystem

INFORMATION/COMMUNICATION/TECHNOLOGY

任务描述：

本节将带领同学们一起学习GlusterFS存储技术架构和技术特性。

任务教学目标：

1.了解GlusterFS基本概念。

2.理解GlusterFS系统架构。

3.理解GlusterFS技术特性。

■任务概要

INFORMATION/COMMUNICATION/TECHNOLOGY

INFORMATION/COMMUNICATION/TECHNOLOGY

知识点一

GlusterFS概述

INFORMATION/COMMUNICATION/TECHNOLOGY

GlusterFS是一款免费的开源软件，主要应用

在集群系统中，具有很好的可扩展性。GlusterFS具有良好的系统结构，易于扩展、配置方便，通过各个模块的灵活搭配来得到针对性的解决方案。

GlusterFS具有强大的横向扩展能力，通过扩展能够支持数PB级别的存储容量和处理数干客户端。GlusterFS将来自多个服务器的磁盘存储资源聚合到一个全局名称空间中。

GlústerFS

GlusterFS概述

INFORMATION/COMMUNICATION/TECHNOLOGY

GlusterFS系统架构

知识点二

INFORMATION/COMMUNICATION/TECHNOLOGY

·客户机进程装载卷并将所有块中的存储作为单个统一存

储命名空间公开给访问它的应用程序。

·客户机和brick进程的堆栈中加载了各种转换器。

·来自应用程序的I/O通过这些转换器路由到不同的程序块。

日g日目

GlusterFS管理守护进程(glusterd)

运行，并管理一个块进程(glusterfsd)导出底层磁盘存储(XFS文件系统)。

glusterCLowerSSH

Administrator

}Witual

白aa日}nyie

(一)GlusterFS系统架构

NFS,CFS.

p

GlusterStorageCloud

白aa日

在每台服务器上

,该进程反过来

INFORMATION/COMMUNICATION/TECHNOLOGY

Users

分布存储是Glusterfs默认使用的存储卷类型。

·文件会被分布得存储到逻辑卷中的各个存储块上去。

·以两个存储块的逻辑卷为例，文件file1可

能被存放在brick1或brick2中，但不会在每个块中都存一份。

·分布存储不提供数据冗余保护。

DistributedVolume

MountPointServer¹:/exp1/

Brick

File1

(二)分布存储卷

INFORMATION/COMMUNICATION/TECHNOLOGY

File2File3

Server2:/exp2/

Brick

在镜像存储逻辑卷中，数据至少会在

不同的brick上存储两份，具体采取存储几份的冗余数据则可以在创建镜像存储卷时由客户端进行设定。镜像存储可以有效的防止存储块损坏引发的数据丢失风险。

ReplicatedVolume

Server¹:/exp1/Server2:/exp2/

BrickBrick

File1File2

(三)镜像存储卷

INFORMATION/COMMUNICATION/TECHNOLOGY

MountPoint

(四)分布式复制卷

分布式复制GlusterFS