FastDFS分布式部署


环境准备

使用的系统软件

名称 说明
Redhat 7.x
libfastcommon FastDFS分离出的一些公用函数包
FastDFS FastDFS本体
fastdfs-nginx-module FastDFS和nginx的关联模块
nginx nginx1.18.0

编译环境

yum install git gcc gcc-c++ make automake autoconf libtool pcre pcre-devel zlib zlib-devel openssl-devel wget vim -y

磁盘目录

说明 位置
所有安装包 /home/dfs/soft
数据存储位置 /home/dfs/
mkdir /home/dfs #创建数据存储目录
cd /usr/local/src #切换到安装目录准备下载安装包

安装libfastcommon

wget https://github.com/happyfish100/libfastcommon/archive/V1.0.43.tar.gz -O libfastcommon.tar.gz
tar -xzvf libfastcommon.tar.gz
cd libfastcommon-1.0.43
#编译安装
./make.sh && ./make.sh install 

安装FastDFS

cd ../ #返回上一级目录
wget https://github.com/happyfish100/fastdfs/archive/V6.06.tar.gz -O fastdfs.tar.gz
tar -xzvf fastdfs.tar.gz
cd fastdfs-6.06/
#编译安装
./make.sh && ./make.sh install 

安装完成/etc/fdfs存放配置文件

ls /etc/fdfs
client.conf.sample  storage.conf.sample  storage_ids.conf.sample  tracker.conf.sample
#配置文件准备
cp /etc/fdfs/storage.conf.sample /etc/fdfs/storage.conf
cp /etc/fdfs/client.conf.sample /etc/fdfs/client.conf
cp /etc/fdfs/tracker.conf.sample /etc/fdfs/tracker.conf
 #客户端文件,测试用
#供nginx访问使用
cp conf/http.conf conf/mime.types /etc/fdfs/ 

安装fastdfs-nginx-module

cd ../ #返回上一级目录
wget https://github.com/happyfish100/fastdfs-nginx-module/archive/V1.22.tar.gz -O fastdfs-nginx-module.tar.gz
tar -xzvf fastdfs-nginx-module.tar.gz
cd fastdfs-nginx-module-1.22/
cp src/mod_fastdfs.conf /etc/fdfs/

安装nginx

wget https://nginx.org/download/nginx-1.18.0.tar.gz #下载nginx压缩包
tar -xzvf nginx-1.18.0.tar.gz #解压
cd nginx-1.18.0/
#添加fastdfs-nginx-module模块
./configure --add-module=/home/dfs/soft/fastdfs-nginx-module-1.22/src/ 
make && make install #编译安装

单机部署

tracker配置

#服务器ip为 192.168.81.76
#我建议用ftp下载下来这些文件 本地修改
vim /etc/fdfs/tracker.conf
#需要修改的内容如下
port=22122  # tracker服务器端口(默认22122,一般不修改)
base_path=/home/dfs  # 存储日志和数据的根目录

storage配置

vim /etc/fdfs/storage.conf
#需要修改的内容如下
port=23000  # storage服务端口(默认23000,一般不修改)
base_path=/home/dfs  # 数据和日志文件存储根目录
store_path0=/home/dfs  # 第一个存储目录
tracker_server=192.168.81.76:22122   # tracker服务器IP和端口
http.server_port=8888  # http访问文件的端口(默认8888,看情况修改,和nginx中保持一致)

client测试

vim /etc/fdfs/client.conf
#需要修改的内容如下
base_path=/home/dfs
tracker_server=192.168.81.76:22122 #tracker服务器IP和端口
#保存后测试,返回ID表示成功 如:group1/M00/00/00/wKhRTF-RUImAXsvzAA_cqj_P4TU.tar.gz
fdfs_upload_file /etc/fdfs/client.conf  /home/dfs/soft/nginx-1.18.0.tar.gz

配置nginx访问

vim /etc/fdfs/mod_fastdfs.conf
#需要修改的内容如下
tracker_server=192.168.81.76:22122  #tracker服务器IP和端口
url_have_group_name=true
store_path0=/home/dfs
#配置nginx.config
vim /usr/local/nginx/conf/nginx.conf
#添加如下配置
server {
    listen       8888;    ## 该端口为storage.conf中的http.server_port相同
    server_name  localhost;
    location ~/group[0-9]/ {
        ngx_fastdfs_module;
    }
    error_page   500 502 503 504  /50x.html;
    location = /50x.html {
    root   html;
    }
}
#测试下载,用外部浏览器访问刚才已传过的nginx安装包,引用返回的ID
http://192.168.81.76:8888/group1/M00/00/00/wKhRTF-RUImAXsvzAA_cqj_P4TU.tar.gz
#弹出下载,单机部署全部跑通

分布式部署

tracker配置

#服务器ip为 192.168.81.74,192.168.81.75,192.168.81.76
#我建议用ftp下载下来这些文件 本地修改
vim /etc/fdfs/tracker.conf
#需要修改的内容如下
port=22122  # tracker服务器端口(默认22122,一般不修改)
base_path=/home/dfs  # 存储日志和数据的根目录

storage配置

vim /etc/fdfs/storage.conf
#需要修改的内容如下
port=23000  # storage服务端口(默认23000,一般不修改)
base_path=/home/dfs  # 数据和日志文件存储根目录
store_path0=/home/dfs  # 第一个存储目录
tracker_server=192.168.81.74:22122  # 服务器1
tracker_server=192.168.81.75:22122  # 服务器2
tracker_server=192.168.81.76:22122  # 服务器3
http.server_port=8888  # http访问文件的端口(默认8888,看情况修改,和nginx中保持一致)

client测试

vim /etc/fdfs/client.conf
#需要修改的内容如下
base_path=/home/moe/dfs
tracker_server=192.168.81.74:22122  # 服务器1
tracker_server=192.168.81.75:22122  # 服务器2
tracker_server=192.168.81.76:22122  # 服务器3
#保存后测试,返回ID表示成功 如:group1/M00/00/00/wKhRTF-SSf2AO6VIAAxZcPR00vw.tar.gz
fdfs_upload_file /etc/fdfs/client.conf  /home/dfs/soft/nginx-1.18.0.tar.gz

配置nginx访问

vim /etc/fdfs/mod_fastdfs.conf
#需要修改的内容如下
tracker_server=192.168.81.74:22122  # 服务器1
tracker_server=192.168.81.75:22122  # 服务器2
tracker_server=192.168.81.76:22122  # 服务器3
url_have_group_name=true
store_path0=/home/dfs
#配置nginx.config
vim /usr/local/nginx/conf/nginx.conf
#添加如下配置
server {
    listen       8888;    ## 该端口为storage.conf中的http.server_port相同
    server_name  localhost;
    location ~/group[0-9]/ {
        ngx_fastdfs_module;
    }
    error_page   500 502 503 504  /50x.html;
    location = /50x.html {
    root   html;
    }
}

服务器启动后分别访问192.168.81.74:8888/group1/M00/00/00/wKhRTF-SSf2AO6VIAAxZcPR00vw.tar.gz192.168.81.76:8888/group1/M00/00/00/wKhRTF-SSf2AO6VIAAxZcPR00vw.tar.gz,弹出文件下载,则分布式服务部署成功。

启动

防火墙

#不关闭防火墙的话无法使用
systemctl stop firewalld.service #关闭
systemctl restart firewalld.service #重启

tracker

/etc/init.d/fdfs_trackerd start #启动tracker服务
/etc/init.d/fdfs_trackerd restart #重启动tracker服务
/etc/init.d/fdfs_trackerd stop #停止tracker服务
chkconfig fdfs_trackerd on #自启动tracker服务

storage

/etc/init.d/fdfs_storaged start #启动storage服务
/etc/init.d/fdfs_storaged restart #重动storage服务
/etc/init.d/fdfs_storaged stop #停止动storage服务
chkconfig fdfs_storaged on #自启动storage服务

nginx

/usr/local/nginx/sbin/nginx #启动nginx
/usr/local/nginx/sbin/nginx -s reload #重启nginx
/usr/local/nginx/sbin/nginx -s stop #停止nginx

检测集群

/usr/bin/fdfs_monitor /etc/fdfs/storage.conf
# 会显示会有几台服务器 有3台就会 显示 Storage 1-Storage 3的详细信息

说明

配置文件

tracker_server #有几台服务器写几个
group_name #地址的名称的命名
bind_addr #服务器ip绑定
store_path_count #store_path(数字)有几个写几个
store_path(数字) #设置几个储存地址写几个 从0开始

可能遇到的问题

如果不是root 用户 你必须在除了cd的命令之外 全部加sudo
如果不是root 用户 编译和安装分开进行 先编译再安装
如果上传成功 但是nginx报错404 先检查mod_fastdfs.conf文件中的store_path0是否一致
如果nginx无法访问 先检查防火墙 和 mod_fastdfs.conf文件tracker_server是否一致
如果 unknown directive "ngx_fastdfs_module" in /usr/local/nginx/conf/nginx.conf:151,可能是nginx一直是启动的,必须要重启nginx才可以,`nginx -s reload`无效。

文章作者: 苏叶新城
版权声明: 本博客所有文章除特別声明外,均采用 CC BY 4.0 许可协议。转载请注明来源 苏叶新城 !
  目录