Glusterfs初体验

环境：

Centos 6.0-x86_64

集群使用三台服务器组成Glusterfs集群，其中两台服务器提供NFS和Rsync服务用于备份

每台服务器2块网卡eth0对应内网、eth1对应外网，

Glusterfs简介：

GlusterFS是Scale-Out存储解决方案Gluster的核心，它是一个开源的分布式文件系统，具有强大的横向扩展能力，通过扩展能够支持数PB存储容量和处理数千客户端。GlusterFS借助TCP/IP或InfiniBand RDMA网络将物理分布的存储资源聚集在一起，使用单一全局命名空间来管理数据。GlusterFS基于可堆叠的用户空间设计，可为各种不同的数据负载提供优异的性能。Glusterfs的主要特征包括：高扩展性和高性能、高可用性、全局统一命名空间、弹性哈希算法、弹性卷管理、基于标准协议，技术实现特点包括：完全软件实现、完整的存储操作系统栈、用户空间实现、模块化堆栈式架构、原始数据格式存储、无元数据服务设计。

Glusterfs常用卷类型如下：

哈希卷：类似于将多个文件系统组成一个卷，存储文件是以轮询方式进行的。

复制卷：为卷中数据自动创建副本。

条带卷：类似于raid0，将数据存储在集群中的多个成员服务器上。

哈希+复制卷：先创建哈希再用哈希卷创建复制卷。

安装方法：

Glusterfs的安装很简单，可以选择编译安装或者rpm包安装，此处为了方便就选择rpm包安装了

  1. 首先安装依赖包（使用163源）：

    yum -y install rpcbind libaio lvm2-devel openssl libibverbs librdmacm

  2. 安装Glusterfs

    glusterfs-3.4.2-1.el6.x86_64.rpm

    glusterfs-cli-3.4.2-1.el6.x86_64.rpm

    glusterfs-fuse-3.4.2-1.el6.x86_64.rpm

    glusterfs-rdma-3.4.2-1.el6.x86_64.rpm
    glusterfs-api-3.4.2-1.el6.x86_64.rpm

    glusterfs-debuginfo-3.4.2-1.el6.x86_64.rpm

    glusterfs-geo-replication-3.4.2-1.el6.x86_64.rpm

    glusterfs-server-3.4.2-1.el6.x86_64.rpm
    glusterfs-api-devel-3.4.2-1.el6.x86_64.rpm

    glusterfs-devel-3.4.2-1.el6.x86_64.rpm

    glusterfs-libs-3.4.2-1.el6.x86_64.rpm

    这些包都是在官网下载的，依赖包安装完以后可以直接使用rpm -ivh * 安装，安装完以后设置服务开机自启动chkconfig glusterd on

  3. 下面来演示创建集群、创建卷、使用系统NFS访问、使用原生NFS访问：

    创建集群：

gluster peer probe 其他服务器地址（自己不需要添加）添加集群成员

[[email protected] 3.4]# gluster peer probe 192.168.1.2
peer probe: success: host 192.168.1.2 port 24007 already in peer list
[[email protected] 3.4]# gluster peer probe 192.168.1.3
peer probe: success: host 192.168.1.3 port 24007 already in peer list

gluster peer status 查看集群状态

[[email protected] 3.4]# gluster peer status
Number of Peers: 2

Hostname: 192.168.1.2
Port: 24007
Uuid: 35eb06f8-24da-43d9-96e5-75c6a203f858
State: Peer in Cluster (Connected)

Hostname: 192.168.1.3
Port: 24007
Uuid: efe5836a-555e-4c24-ba76-4b3602d0f15c
State: Peer in Cluster (Connected)

创建卷：

首先来看看卷管理的常用命令：

创建卷帮助

gluster volume create help

查看卷信息：

gluster volume info

查看卷状态：

gluster volume status

创建卷：

volume create <NEW-VOLNAME> [stripe <COUNT>] [replica <COUNT>] [device vg] [transport <tcp|rdma|tcp,rdma>] <NEW-BRICK> ... [force]

启动卷：

gluster volume start volumename

停止卷：

gluster volume stop volumename

下面举例:

gluster volume create jerryafr replica 2 192.168.1.1:/glust/er/afr 192.168.1.2:/gluster/abr

这条命令的目的是使用1.1上的/gluster/afr和1.2上的/gluster/abr创建一个名为jerryafr的备份卷，需要注意的是如果这两个brick在你的os parttion上那你还要再后面加上 force 否则会报错

启动卷:

gluster volume start jerryafr

启动起来后我们可以mount测试一下：

mount -t glusterfs192.168.1.1:/jerryafr /media

上面这种方法是基于fuse实现的，glusterfs当然不会只能这么玩，还可以支持NFS，NFS又分两种原生NFS和系统NFS。

使用原生NFS挂载：mount -t nfs -o vers=3 192.168.1.1:/jerryafr /media

使用此种方法要确保服务端rpcbind要打开并且要注意系统NFS不能启动

使用系统NFS挂载：

首先把卷使用glusterfs方法挂载到某个目录

mount -t glusterfs 192.168.1.1:/jerryafr /media

然后修改/etc/exports文件

例子：/media   *(rw,fsid=1235)

然后停掉原生NFS：gluster volume set jerryafr nfs.disable on

最后再启动系统NFS服务即可

时间： 2024-08-22 18:06:38

Glusterfs初体验的相关文章

erlang 初体验

最近测试了一下 erlang的坑... 如不出意外.... 大家第一眼看到这语法... 心里第一句一定是"我擦.这TM都是啥!!!!!" 没有变量!!! 没有结构体!!! 没有循环!!! 好吧,至少我是这样想的. 找了半天..连个if也不知道怎么写.. 这记录一些基本常识.. -module(module_name)  %%定义模块 括号内的要和文件名相同. -export([fun1/1 fun2/2]) %%这里是导出2个函数对外使用  函数名/参数名. 一个简单的函数定义如下 f

linux初体验

第一次听到linux这个'词语'是在一次偶然的朋友聊天中朋友提到的,之前压根没听到过'这个东西',所以我可以说是个linux的新新手,菜鸟都不算. 截至到目前,我已经开始linux系统运维学习有差不多10天时间了.在没接触linux之前,我对它的认识仅仅是:它是个计算机系统.决定学习linux系统运维之前,自我以为运维应该是对系统的一些日常维护之类的,不会很难的东西,我更希望运维是个不难的东西,我个人很笨,对难的东西可能接受的很慢,所以我愿意认为运维是很简单的,这样我就可以轻轻松松的掌握运维相关

【Spark深入学习 -15】Spark Streaming前奏-Kafka初体验

----本节内容------- 1.Kafka基础概念 1.1 出世背景 1.2 基本原理 1.2.1.前置知识 1.2.2.架构和原理 1.2.3.基本概念 1.2.4.kafka特点 2.Kafka初体验 2.1 环境准备 2.2 Kafka小试牛刀 2.2.1单个broker初体验 2.2.2 多个broker初体验 2.3 Kafka分布式集群构建 2.3.1 Kafka分布式集群构建 2.3.2 Kafka主题创建 2.3.3 生产者生产数据 2.3.4消费者消费数据 2.3.5消息的

Java8初体验（二）Stream语法详解

原文链接:http://ifeve.com/stream/ 1. Stream初体验 我们先来看看Java里面是怎么定义Stream的: A sequence of elements supporting sequential and parallel aggregate operations. 我们来解读一下上面的那句话: Stream是元素的集合,这点让Stream看起来用些类似Iterator: 可以支持顺序和并行的对原Stream进行汇聚的操作: 大家可以把Stream当成一个高级版本的

hibernate--CRUD初体验

hibernate的crud操作初体验. 看具体实例 package com.fuwh.model; import javax.persistence.Column; import javax.persistence.Entity; import javax.persistence.GeneratedValue; import javax.persistence.Id; import org.hibernate.annotations.GenericGenerator; @Entity publ

Oracle SQL篇（一）null值之初体验

    从我第一次正式的写sql语句到现在,已经超过10年的时间了.我写报表,做统计分析和财务对账,我一点点的接触oracle数据库,并尝试深入了解.这条路,一走就是10年,从充满热情,到开始厌倦,我不知道我还能坚持多久,未来的路,谁知道呢? 也许是该抓紧时间,做一点什么了,我不知道该开始写些什么,我从来没有在网上写东西的习惯.     先从简单的开始吧,那当然就是SQL,这是我SQL系列的第一篇,希望我能够坚持. 在Oracle数据库中,如果一个表中的列没有值的话,我们可以说是空值,比如IT员

AngularJS路由系列(3)-- UI-Router初体验

本系列探寻AngularJS的路由机制,在WebStorm下开发. AngularJS路由系列包括: 1.AngularJS路由系列(1)--基本路由配置2.AngularJS路由系列(2)--刷新.查看路由,路由事件和URL格式,获取路由参数,路由的Resolve3.AngularJS路由系列(3)-- UI-Router初体验4.AngularJS路由系列(4)-- UI-Router的$state服务.路由事件.获取路由参数5.AngularJS路由系列(5)-- UI-Router的路由

Android Studio初体验之启动AVD模拟器异常：cannot set up guest memory &#39;pc.ram&#39;

启动AVD模拟器异常:Cannot set up guest memory 'pc.ram' 错误信息: HAX is working and emulator runs in fast virt mode Cannot set up guest memory 'pc.ram': Invalid argument Error accepting connect 分析 各种查资料,没有发现网上有同样问题的,在一篇相关文章中找到类似的解决方法. 从语意看,应该是hax安装后没有启动.(不懂hax是什

leaflet开源地图库源码阅读笔记（一）——简介&amp;Demo初体验(by vczero)

一.简介 电子地图已经在O2O.生活服务.出行等领域布局,传统的GIS也孕育着互联网基因.传统GIS的图商有ESRI(Arc系列).四维.高德.超图.中地等等.在web互联网领域,百度和高德较为出色.但是开放源代码都远远做的不够,相比而言国外开源较多且丰富,最近认真研读了openlayers2/3和leaflet的源码,收获颇多,不仅加强对浏览器兼容性.HTML5.CSS3等基础,还增强了GIS的基础.本人现在也在一家互联网公司做js api的研发,因此,需要不断地吸取开源代码的营养. leaf