Fastdfs分布式文件配置方案

详细配置fastdfds分布式文件服务器的方法:

跟踪服务器：192.168.4.121 (edu-dfs-tracker-01)
存储服务器：192.168.4.125 (edu-dfs-storage-01)
环境：CentOS 6.6用户：root
数据目录：/fastdfs （注：数据目录按你的数据盘挂载路径而定）
安装包：FastDFS v5.05libfastcommon-master.zip（是从FastDFS和FastDHT中提取出来的公共C函数库）fastdfs-nginx-module_v1.16.tar.gz nginx-1.6.2.tar.gz fastdfs_client_java._v1.25.tar.gz 一、所有跟踪服务器和存储服务器均执行如下操作
1、编译和安装所需的依赖包:

yum install make cmake gcc gcc-c++

2、安装libfastcommon:
(1)上传或下载libfastcommon-master.zip到/usr/local/src目录
(2)解压

cd /usr/local/src/

unzip libfastcommon-master.zip

cd libfastcommon-master

(3) 编译、安装

./make.sh

installlibfastcommon默认安装到了/usr/lib64/libfastcommon.so/usr/lib64/libfdfsclient.so
(4)因为FastDFS主程序设置的lib目录是/usr/local/lib，所以需要创建软链接.

ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so

ln -s /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.so

ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so

ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so

3、安装FastDFS(1)上传或下载FastDFS源码包（FastDFS_v5.05.tar.gz）到 /usr/local/src 目录(2)解压

cd /usr/local/src/

tar -zxvf FastDFS_v5.05.tar.gz

cd FastDFS (3)编译、安装（编译前要确保已经成功安装了libfastcommon）

./make.sh

./make.sh install采用默认安装的方式安装,安装后的相应文件与目录：服务脚本在：

/etc/init.d/fdfs_storaged/etc/init.d/fdfs_tracker```配置文件在（样例配置文件）:

/etc/fdfs/client.conf.sample/etc/fdfs/storage.conf.sample/etc/fdfs/tracker.conf.sample

命令工具在/usr/bin/目录下的：
fdfs_appender_test fdfs_appender_test1
fdfs_append_file fdfs_crc32
fdfs_delete_file
fdfs_download_file fdfs_file_info
fdfs_monitor
fdfs_storaged
fdfs_test fdfs_test1
fdfs_trackerd
fdfs_upload_appender
fdfs_upload_file
stop.sh
restart.sh
(4)因为FastDFS服务脚本设置的bin目录是/usr/local/bin，但实际命令安装在/usr/bin，可以进入/user/bin目录使用以下命令查看fdfs的相关命令：

cd /usr/bin/

ls | grep fdfs 因此需要修改FastDFS服务脚本中相应的命令路径，也就是把/etc/init.d/fdfs_storaged 和/etc/init.d/fdfs_tracker两个脚本中的/usr/local/bin修改成/usr/bin：

vi fdfs_trackerd使用查找替换命令进统一修改:%s+/usr/local/bin+/usr/bin

vi fdfs_storaged使用查找替换命令进统一修改:%s+/usr/local/bin+/usr/bin 二、配置FastDFS跟踪器(192.168.4.121)复制FastDFS跟踪器样例配置文件,并重命名:

cd /etc/fdfs/

cp tracker.conf.sample tracker.conf 编辑跟踪器配置文件：

vi /etc/fdfs/tracker.conf修改的内容如下：

disabled=falseport=22122
base_path=/fastdfs/tracker

（其它参数保留默认配置，具体配置解释请参考官方文档说明：http://bbs.chinaunix..net/thread-1941456-1-1.html ）创建基础数据目录（参考基础目录base_path配置）:

mkdir -p /fastdfs/tracker 防火墙中打开跟踪器端口（默认为22122）:

vi /etc/sysconfig/iptables添加如下端口行：-A INPUT -m state --state NEW -m tcp -p tcp --dport 22122 -j ACCEPT重启防火墙：

service iptables restart 启动Tracker：

/etc/init.d/fdfs_trackerd start（初次成功启动，会在/fastdfs/tracker目录下创建data、logs两个目录）查看FastDFS Tracker是否已成功启动：

ps -ef | grep fdfs 关闭Tracker：

/etc/init.d/fdfs_trackerd stop 设置FastDFS跟踪器开机启动：

vi /etc/rc.d/rc.local添加以下内容：

FastDFS Tracker/etc/init.d/fdfs_trackerd start 三、配置FastDFS存储(192.168.4.125)复制FastDFS存储器样例配置文件,并重命名:

cd /etc/fdfs/

cp storage.conf.sample storage.conf 编辑存储器样例配置文件：

vi /etc/fdfs/storage..conf 修改的内容如下:disabled=false port=23000base_path=/fastdfs/storage store_path0=/fastdfs/storage tracker_server=192.168.4.121:22122 http.server_port=8888（其它参数保留默认配置，具体配置解释请参考官方文档说明：http://bbs.chinaunix.net/thread-1941456-1-1.html ）创建基础数据目录（参考基础目录base_path配置）:

mkdir -p /fastdfs/storage 防火墙中打开存储器端口（默认为23000）:##### vi /etc/sysconfig/iptables添加如下端口行：

-A INPUT -m state --state NEW -m tcp -p tcp --dport 23000 -j ACCEPT```重启防火墙：

service iptables restart 启动Storage：

/etc/init.d/fdfs_storaged start（初次成功启动，会在/fastdfs/storage目录下创建data、logs两个目录）查看FastDFS Storage是否已成功启动##### ps -ef | grep fdfs 关闭Storage：

/etc/init.d/fdfs_storaged stop 设置FastDFS存储器开机启动：

vi /etc/rc.d/rc.local添加：## FastDFS Storage`/etc/init.d/fdfs_storaged start`四、文件上传测试(192.168.4..121)修改Tracker服务器中的客户端配置文件：

cp /etc/fdfs/client..conf.sample /etc/fdfs/client.conf

vi /etc/fdfs/client.conf修改 base_path=/fastdfs/tracker tracker_server=192.168.4.121:22122 执行如下文件上传命令：

/usr/bin/fdfs_upload_file /etc/fdfs/client.conf /usr/local/src/FastDFS_v5.05.tar.gz 返回ID号：

group1/M00/00/00/wKgEfVUYNYeAb7XFAAVFOL7FJU4.tar.gz

（能返回以上文件ID，说明文件上传成功）六、在每个存储节点上安装nginxfastdfs-nginx-module作用说明FastDFS 通过Tracker 服务器,将文件放在 Storage 服务器存储，但是同组存储服务器之间需要进入文件复制，有同步延迟的问题。假设Tracker服务器将文件上传到了192.168.4.125，上传成功后文件ID 已经返回给客户端。此时 FastDFS 存储集群机制会将这个文件同步到同组存储 192.168.4.126，在文件还没有复制完成的情况下，客户端如果用这个文件ID在192.168.4.126上取文件,就会出现文件无法访问的错误。而fastdfs-nginx-module可以重定向文件连接到源服务器取文件,避免客户端由于复制延迟导致的文件无法访问错误。（解压后的fastdfs-nginx-module在nginx安装时使用）上传fastdfs-nginx-module_v1.16.tar.gz到/usr/local/src 解压

cd /usr/local/src/##### tar -zxvf fastdfs-nginx-module_v1.16.tar.gz 修改fastdfs-nginx-module的config配置文件

cd fastdfs-nginx-module/src##### vi configCORE_INCS="$CORE_INCS /usr/local/include/fastdfs /usr/local/include/fastcommon/" 修改为：CORE_INCS="$CORE_INCS /usr/include/fastdfs /usr/include/fastcommon/" （注意：这个路径修改是很重要的，不然在nginx编译的时候会报错的）上传当前的稳定版本Nginx(nginx-1.6.2.tar.gz)到/usr/local/src目录安装编译Nginx所需的依赖包

yum install gcc gcc-c++ make automake autoconf libtool pcre* zlib openssl openssl-devel 编译安装Nginx（添加fastdfs-nginx-module模块

cd /usr/local/src/

tar -zxvf nginx-1.6.2.tar.gz

cd nginx-1.6.2

./configure --add-module=/usr/local/src/fastdfs-nginx-module/src

make && make install 复制fastdfs-nginx-module源码中的配置文件到/etc/fdfs目录，并修改

cp /usr/local/src/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs/

vi /etc/fdfs/mod_fastdfs.conf修改以下配置：

connect_timeout=10 
base_path=/tmptracker_server=192.168.4.121:22122
storage_server_port=23000 
group_name=group1
url_have_group_name = true 
store_path0=/fastdfs/storage

复制FastDFS的部分配置文件到/etc/fdfs目录

cd /usr/local/src/FastDFS/conf

cp http.conf mime.types /etc/fdfs/ 在/fastdfs/storage文件存储目录下创建软连接,将其链接到实际存放数据的目录

ln -s /fastdfs/storage/data/ /fastdfs/storage/data/M00 配置Nginx 简洁版nginx配置样例：

user root;worker_processes 1;
events 
{
 worker_connections 1024;}
http {
 include mime.types;  default_type application/octet-stream;  sendfile on;  
keepalive_timeout 65;  server
 { 
 listen 8888;  server_name localhost;  location ~/group([0-9])/M00 { 
 #alias /fastdfs/storage/data; 
 ngx_fastdfs_module; }
 error_page 500 502 503 504 /50x.html; 
 location = /50x.html  
{  root html; 
} 
}
}

注意、说明： A、8888端口值是要与/etc/fdfs/storage.conf中的http.server_port=8888 相对应，因为http.server_port默认为8888,如果想改成80，则要对应修改过来。

Storage对应有多个group的情况下，
访问路径带group名，
如/group1/M00/00/00/xxx，
对应的Nginx配置为：
location ~/group([0-9])/M00 {  ngx_fastdfs_module;}

如查下载时如发现老报404，将nginx.conf第一行user nobody修改为user root后重新启动。防火墙中打开Nginx的8888端口

vi /etc/sysconfig/iptables添加：

-A INPUT -m state --state NEW -m tcp -p tcp --dport 8888 -j ACCEPT

service iptables restart 启动Nginx

/usr/local/nginx/sbin/nginx ngx_http_fastdfs_set pid=xxx（重启Nginx的命令为：/usr/local/nginx/sbin/nginx -s reload）

通过浏览器访问测试时上传的文件http://192.168.4.125:8888/group1/M00/00/00/wKgEfVUYNYeAb7XFAAVFOL7FJU4.tar.gz 七、FastDFS的使用的Demo样例讲解与演示：具体内容请参考样例代码和视频教程注意：千万不要使用kill -9命令强杀FastDFS进程，否则可能会导致binlog数据丢失。

最后编辑于：2017.12.05 05:47:53

人面猴
序言：七十年代末，一起剥皮案震惊了整个滨河市，随后出现的几起案子，更是在滨河造成了极大的恐慌，老刑警刘岩，带你破解...
沈念sama阅读 157,012评论 4赞 359
死咒
序言：滨河连续发生了三起死亡事件，死亡现场离奇诡异，居然都是意外死亡，警方通过查阅死者的电脑和手机，发现死者居然都...
沈念sama阅读 66,589评论 1赞 290
救了他两次的神仙让他今天三更去死
文/潘晓璐我一进店门，熙熙楼的掌柜王于贵愁眉苦脸地迎上来，“玉大人，你说我怎么就摊上这事。” “怎么了？”我有些...
开封第一讲书人阅读 106,819评论 0赞 237
道士缉凶录：失踪的卖姜人
文/不坏的土叔我叫张陵，是天一观的道长。经常有香客问我，道长，这世上最难降的妖魔是什么？我笑而不...
开封第一讲书人阅读 43,652评论 0赞 202
港岛之恋（遗憾婚礼）
正文为了忘掉前任，我火速办了婚礼，结果婚礼上，老公的妹妹穿的比我还像新娘。我一直安慰自己，他们只是感情好，可当我...
茶点故事阅读 51,954评论 3赞 285
恶毒庶女顶嫁案：这布局不是一般人想出来的
文/花漫我一把揭开白布。她就那样静静地躺着，像睡着了一般。火红的嫁衣衬着肌肤如雪。梳的纹丝不乱的头发上，一...
开封第一讲书人阅读 40,381评论 1赞 210
城市分裂传说
那天，我揣着相机与录音，去河边找鬼。笑死，一个胖子当着我的面吹牛，可吹牛的内容都是我干的。我是一名探鬼主播，决...
沈念sama阅读 31,687评论 2赞 310
双鸳鸯连环套：你想象不到人心有多黑
文/苍兰香墨我猛地睁开眼，长吁一口气：“原来是场噩梦啊……” “哼！你这毒妇竟也来了？” 一声冷哼从身侧响起，我...
开封第一讲书人阅读 30,404评论 0赞 194
万荣杀人案实录
序言：老挝万荣一对情侣失踪，失踪者是张志新（化名）和其女友刘颖，没想到半个月后，有当地人在树林里发现了一具尸体，经...
沈念sama阅读 34,082评论 1赞 238
护林员之死
正文独居荒郊野岭守林人离奇死亡，尸身上长有42处带血的脓包…… 初始之章·张勋以下内容为张勋视角年9月15日...
茶点故事阅读 30,355评论 2赞 241
白月光启示录
正文我和宋清朗相恋三年，在试婚纱的时候发现自己被绿了。大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
茶点故事阅读 31,880评论 1赞 255
活死人
序言：一个原本活蹦乱跳的男人离奇死亡，死状恐怖，灵堂内的尸体忽然破棺而出，到底是诈尸还是另有隐情，我是刑警宁泽，带...
沈念sama阅读 28,249评论 2赞 250
日本核电站爆炸内幕
正文年R本政府宣布，位于F岛的核电站，受9级特大地震影响，放射性物质发生泄漏。R本人自食恶果不足惜，却给世界环境...
茶点故事阅读 32,864评论 3赞 232
男人毒药：我在死后第九天来索命
文/蒙蒙一、第九天我趴在偏房一处隐蔽的房顶上张望。院中可真热闹，春花似锦、人声如沸。这庄子的主人今日做“春日...
开封第一讲书人阅读 26,007评论 0赞 8
一桩弑父案，背后竟有这般阴谋
文/苍兰香墨我抬头看了看天上的太阳。三九已至，却和暖如春，着一层夹袄步出监牢的瞬间，已是汗流浃背。一阵脚步声响...
开封第一讲书人阅读 26,760评论 0赞 192
情欲美人皮
我被黑心中介骗来泰国打工，没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留，地道东北人。一个月前我还...
沈念sama阅读 35,394评论 2赞 269
代替公主和亲
正文我出身青楼，却偏偏与公主长得像，于是被迫代替她去往敌国和亲。传闻我的和亲对象是个残疾皇子，可洞房花烛夜当晚...
茶点故事阅读 35,281评论 2赞 259

Fastdfs分布式文件配置方案

详细配置fastdfds分布式文件服务器的方法:

yum install make cmake gcc gcc-c++

cd /usr/local/src/

unzip libfastcommon-master.zip

cd libfastcommon-master

./make.sh

./make.sh

ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so

ln -s /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.so

ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so

ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so

cd /usr/local/src/

tar -zxvf FastDFS_v5.05.tar.gz

cd FastDFS (3)编译、安装（编译前要确保已经成功安装了libfastcommon）

./make.sh

./make.sh install采用默认安装的方式安装,安装后的相应文件与目录：服务脚本在：

cd /usr/bin/

ls | grep fdfs 因此需要修改FastDFS服务脚本中相应的命令路径，也就是把/etc/init.d/fdfs_storaged 和/etc/init.d/fdfs_tracker两个脚本中的/usr/local/bin修改成/usr/bin：

vi fdfs_trackerd使用查找替换命令进统一修改:%s+/usr/local/bin+/usr/bin

vi fdfs_storaged使用查找替换命令进统一修改:%s+/usr/local/bin+/usr/bin 二、配置FastDFS跟踪器(192.168.4.121)复制FastDFS跟踪器样例配置文件,并重命名:

cd /etc/fdfs/

cp tracker.conf.sample tracker.conf 编辑跟踪器配置文件：

vi /etc/fdfs/tracker.conf修改的内容如下：

mkdir -p /fastdfs/tracker 防火墙中打开跟踪器端口（默认为22122）:

vi /etc/sysconfig/iptables添加如下端口行：-A INPUT -m state --state NEW -m tcp -p tcp --dport 22122 -j ACCEPT重启防火墙：

service iptables restart 启动Tracker：

/etc/init.d/fdfs_trackerd start（初次成功启动，会在/fastdfs/tracker目录下创建data、logs两个目录）查看FastDFS Tracker是否已成功启动：

ps -ef | grep fdfs 关闭Tracker：

/etc/init.d/fdfs_trackerd stop 设置FastDFS跟踪器开机启动：

vi /etc/rc.d/rc.local添加以下内容：

FastDFS Tracker/etc/init.d/fdfs_trackerd start 三、配置FastDFS存储(192.168.4.125)复制FastDFS存储器样例配置文件,并重命名:

cd /etc/fdfs/

cp storage.conf.sample storage.conf 编辑存储器样例配置文件：

mkdir -p /fastdfs/storage 防火墙中打开存储器端口（默认为23000）:##### vi /etc/sysconfig/iptables添加如下端口行：

service iptables restart 启动Storage：

/etc/init.d/fdfs_storaged start（初次成功启动，会在/fastdfs/storage目录下创建data、logs两个目录）查看FastDFS Storage是否已成功启动##### ps -ef | grep fdfs 关闭Storage：

/etc/init.d/fdfs_storaged stop 设置FastDFS存储器开机启动：

vi /etc/rc.d/rc.local添加：## FastDFS Storage/etc/init.d/fdfs_storaged start四、文件上传测试(192.168.4..121)修改Tracker服务器中的客户端配置文件：

cp /etc/fdfs/client..conf.sample /etc/fdfs/client.conf

vi /etc/fdfs/client.conf修改 base_path=/fastdfs/tracker tracker_server=192.168.4.121:22122 执行如下文件上传命令：

/usr/bin/fdfs_upload_file /etc/fdfs/client.conf /usr/local/src/FastDFS_v5.05.tar.gz 返回ID号：

cd /usr/local/src/##### tar -zxvf fastdfs-nginx-module_v1.16.tar.gz 修改fastdfs-nginx-module的config配置文件

yum install gcc gcc-c++ make automake autoconf libtool pcre* zlib openssl openssl-devel 编译安装Nginx（添加fastdfs-nginx-module模块

cd /usr/local/src/

tar -zxvf nginx-1.6.2.tar.gz

cd nginx-1.6.2

./configure --add-module=/usr/local/src/fastdfs-nginx-module/src

make && make install 复制fastdfs-nginx-module源码中的配置文件到/etc/fdfs目录，并修改

cp /usr/local/src/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs/

vi /etc/fdfs/mod_fastdfs.conf修改以下配置：

cd /usr/local/src/FastDFS/conf

cp http.conf mime.types /etc/fdfs/ 在/fastdfs/storage文件存储目录下创建软连接,将其链接到实际存放数据的目录

ln -s /fastdfs/storage/data/ /fastdfs/storage/data/M00 配置Nginx 简洁版nginx配置样例：

vi /etc/sysconfig/iptables添加：

service iptables restart 启动Nginx

/usr/local/nginx/sbin/nginx ngx_http_fastdfs_set pid=xxx（重启Nginx的命令为：/usr/local/nginx/sbin/nginx -s reload）

推荐阅读更多精彩内容

vi /etc/rc.d/rc.local添加：## FastDFS Storage`/etc/init.d/fdfs_storaged start`四、文件上传测试(192.168.4..121)修改Tracker服务器中的客户端配置文件：