MooseFS安装配置

简介

MooseFS 是一个分布式文件系统,支持以客户端挂载的形式开放给用户使用。

主要角色

  • master 节点:元数据节点,复制调度和管理元数据。
    对应安装包名称:moosefs-master.rpm

  • metalogger 节点:用于备份 master 的元数据和日志。
    对应安装包名称:moosefs-metalogger.rpm

  • chunkserver 节点:数据节点,数据实际存放的节点。
    对应安装包名称:moosefs-chunkserver.rpm

  • client :客户端。通过 FUSE 将 mfs 文件系统挂载到客户端后,客户端可以像使用一个普通的本地路径一样来使用 mfs 。
    对应安装包名称:moosefs-client.rpm

  • cgiserver:存储集群监控工具。
    对应安装包名称:moosefs-cgiserv.rpm

集群规划

mfsmaster mfsmetalogger mfschunkserver mfsclient
192.168.20.96 192.168.20.97 192.168.20.98 192.168.20.99 192.168.20.99

准备工作

安装fuse模块

确保 client 节点上已经安装了 Linux 内核模块 FUSE 。

若未安装,可通过 yum 或者编译安装的方式进行安装。安装命令如下:

yum install fuse
yum install fuse-libs

创建用户和用户组

每个节点都要创建 mfs 用户和用户组(在96-99上分别执行如下命令)。

groupadd  mfs
useradd -g mfs mfs

修改/etc/hosts

在每个节点上为 mfsmaster 所在节点(192.168.20.96)增加一个别名 mfsmaster(在96-99上分别执行如下命令) 。

echo "192.168.20.96 mfsmaster " >> /etc/hosts

解压rpm包

将 mfs.tar.gz 解压到每个节点的 /opt 目录下,解压后会生成 /opt/mfs 目录。

安装配置

  1. 在节点 192.168.20.96 部署 master 和 cgiserver (执行如下命令):
cd /opt/mfs
rpm -ivh moosefs.rpm moosefs-master.rpm moosefs-cgi.rpm moosefs-cgiserv.rpm

配置元数据存储位置:编辑文件 /etc/mfs/mfsmaster.cfg 的 DATA_PATH项,修改为本机合适的位置(并将该路径权限改为 mfs:mfs)并删除注释符号#(配置路径建议如下):

a. 建议使用单独的数据盘或较大的系统分区存放元数据。
b. 本机如挂载了固态硬盘,可修改为固态硬盘的挂载路径,以提高性能。

然后将 /var/lib/mfs/metadata.mfs 拷贝到 DATA_PATH 路径下。

  1. 在节点 192.168.20.97 上部署 metalogger (执行如下命令):
cd /opt/mfs
rpm -ivh moosefs.rpm moosefs-metalogger.rpm

配置备份元数据存储位置:编辑文件 /etc/mfs/mfsmetalogger.cfg 的 DATA_PATH项,修改为本机合适的位置(并将该路径权限改为 mfs:mfs)并删除注释符号#。建议使用单独的数据盘或较大的系统分区存放元数据。

  1. 在所有数据节点(192.168.20.98 、 192.168.20.99)执行如下命令:
cd /opt/mfs
rpm -ivh moosefs.rpm moosefs-chunkserver.rpm

配置数据节点的存储路径(假设将数据存储在 /data/mfs 下):
a. 创建 /data/mfs 目录并修改权限:

mkdir -p /data/mfs
chown -R mfs:mfs /data/mfs

b. 修改 /etc/mfs/mfshdd.cfg ,在末尾位置增加 a 中配置的数据目录(如下):

/data/mfs

c. 如果想配置多个数据存储目录,可重复a、b。

  1. 如果需要读写存储集群中的数据,请先在本机安装客户端程序并将存储集群挂载到本地目录(假设将存储集群挂载到 192.168.20.99 的 /mnt/mfs 目录下,步骤如下):

创建 /mnt/mfs 目录:

mkdir /mnt/mfs
chown -R mfs:mfs /mnt/mfs/

安装客户端程序:

cd /opt/mfs
rpm -ivh moosefs-client.rpm

启动

  • 启动 master(在 192.168.20.96 上执行如下命令)
mfsmaster start
  • 启动集群监控(在 192.168.20.96 上执行如下命令)
 mfscgiserv start

启动 master 和集群监控后,在浏览器中输入 http://192.168.20.96:9425 查看Web 页面如下 :

MooseFS WebUI
  • 启动 metalogger(在 192.168.20.97 上执行如下命令)
 mfsmetalogger start
  • 启动 chunkserver(在所有数据节点上执行如下命令)
mfschunkserver start
  • 挂载客户端(在 192.168.20.99 上执行如下命令)
mfsmount /mnt/mfs/ -H mfsmaster

使用

至此,可在客户端节点(192.168.20.99) 的 /mnt/mfs 目录下执行读写操作。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 158,233评论 4 360
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,013评论 1 291
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 108,030评论 0 241
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 43,827评论 0 204
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,221评论 3 286
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,542评论 1 216
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,814评论 2 312
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,513评论 0 198
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,225评论 1 241
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,497评论 2 244
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 31,998评论 1 258
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,342评论 2 253
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 32,986评论 3 235
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,055评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,812评论 0 194
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,560评论 2 271
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,461评论 2 266

推荐阅读更多精彩内容