Centos7下搭建FastDFS+Nginx
1. FastDFS介绍
FastDFS是一个开源的分布式文件系统，她对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务，如相册网站、视频网站等等。
FastDFS服务端有两个角色：跟踪器（tracker）和存储节点（storage）。跟踪器主要做调度工作，在访问上起负载均衡的作用。
存储节点存储文件，完成文件管理的所有功能：存储、同步和提供存取接口，FastDFS同时对文件的meta data进行管理。所谓文件的meta data就是文件的相关属性，以键值对（key value pair）方式表示，如：width=1024，其中的key为width，value为1024。文件meta data是文件属性列表，可以包含多个键值对。
FastDFS系统结构如下图所示：
跟踪器和存储节点都可以由一台或多台服务器构成。跟踪器和存储节点中的服务器均可以随时增加或下线而不会影响线上服务。其中跟踪器中的所有服务器都是对等的，可以根据服务器的压力情况随时增加或减少。
为了支持大容量，存储节点（服务器）采用了分卷（或分组）的组织方式。存储系统由一个或多个卷组成，卷与卷之间的文件是相互独立的，所有卷 的文件容量累加就是整个存储系统中的文件容量。一个卷可以由一台或多台存储服务器组成，一个卷下的存储服务器中的文件都是相同的，卷中的多台存储服务器起 到了冗余备份和负载均衡的作用。
在卷中增加服务器时，同步已有的文件由系统自动完成，同步完成后，系统自动将新增服务器切换到线上提供服务。
当存储空间不足或即将耗尽时，可以动态添加卷。只需要增加一台或多台服务器，并将它们配置为一个新的卷，这样就扩大了存储系统的容量。
FastDFS中的文件标识分为两个部分：卷名和文件名，二者缺一不可。
上传文件交互过程：
- client询问tracker上传到的storage，不需要附加参数；
- tracker返回一台可用的storage；
- client直接和storage通讯完成文件上传。
下载文件交互过程：
client询问tracker下载文件的storage，参数为文件标识（卷名和文件名）；
tracker返回一台可用的storage；
client直接和storage通讯完成文件下载。
需要说明的是，client为使用FastDFS服务的调用方，client也应该是一台服务器，它对tracker和storage的调用均为服务器间的调用。
2. FastDFS单机部署
2.1 准备
系统:
CentOS7
安装包:
[root@fastdfs fastdfs5.11]# pwd
/home/fastdfs5.11
[root@fastdfs fastdfs5.11]# ll
total 1996
-rwxr-xr-x. 1 root root 424689 Nov 8 2017 fastdfs-5.11.zip
-rwxr-xr-x. 1 root root 22192 Nov 8 2017 fastdfs-nginx-module-master.zip
-rwxr-xr-x. 1 root root 3027 Jan 21 12:26 fastdfs_install.sh
-rwxr-xr-x. 1 root root 478888 Nov 8 2017 libfastcommon-1.0.36.zip
-rwxr-xr-x. 1 root root 911509 Nov 8 2017 nginx-1.10.3.tar.gz
2.2 安装依赖包
#安装依赖软件
yum install make cmake gcc gcc-c++
2.3 安装libfastcommon
cd /home/fastdfs5.11/
unzip libfastcommon-1.0.36.zip
mkdir -p usr/local/fastdfs
mv libfastcommon-1.0.36 /usr/local/fastdfs/libfastcommon
cd /usr/local/fastdfs/libfastcommon
./make.sh
./make.sh install
2.4 安装fastdfs
cd /home/fastdfs5.11/
unzip fastdfs-5.11.zip
mv fastdfs-5.11 /usr/local/fastdfs/
cd /usr/local/fastdfs/fastdfs-5.11
./make.sh
./make.sh install
安装好之后，在/usr/bin目录下，可以看fdfs开头的命令工具
FastDFS安装完成之后，所有配置文件在/etc/fdfs目录下，
tracker需要tracker.conf配置文件，
storage需要storage.conf配置文件。
2.5 配置tracker
cd /etc/fdfs/
cp tracker.conf.sample tracker.conf
vi tracker.conf
# 设置tracker的数据文件和日志目录（需手动创建）
base_path=/fastdfs/tracker
# 设置http端口号
http.server_port=8888
使用fdfs_trackerd /etc/fdfs/tracker.conf start尝试启动tracker
检查是否启动
[root@fastdfs ~]# ps -ef | grep tracker
[root@fastdfs ~]# ps -ef | grep fdfs
root 24412 1 0 Jan21 ? 00:00:12 /usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf
root 129129 128507 0 16:39 pts/2 00:00:00 grep --color=auto fdfs
2.6 配置storage
cd /etc/fdfs/
cp storage.conf.sample storage.conf
vi storage.conf
# 设置storage的数据和日志文件存储根目录
base_path=/fastdfs/storage
# 第一个存储目录，第二个存储目录起名为：store_path1=xxx，其它存储目录名依次类推...
store_path0=/fastdfs/storage
# 存储路径个数，需要和store_path个数匹配
store_path_count=1
# tracker服务器IP和端口，有多个则添加多行
tracker_server=192.168.51.36:22122
使用fdfs_storaged /etc/fdfs/storage.conf start尝试启动storage
检查是否启动
[root@fastdfs ~]# ps -ef | grep fdfs
root 24412 1 0 Jan21 ? 00:00:12 /usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf
root 26683 1 0 Jan21 ? 00:00:12 /usr/bin/fdfs_storaged /etc/fdfs/storage.conf
root 129129 128507 0 16:39 pts/2 00:00:00 grep --color=auto fdfs
在任一storage节点上使用如下命令查看集群的状态信息：
fdfs_monitor /etc/fdfs/storage.conf
如果出现ip_addr = Active，则表明storage服务器已经登记到tracker服务器，如下：
server_count=1, server_index=0
tracker server is 192.168.51.36:22122
group count: 1
Group 1:
group name = group1
disk total space = 97228 MB
disk free space = 90266 MB
trunk free space = 0 MB
storage server count = 1
active server count = 1
storage server port = 23000
storage HTTP port = 8888
store path count = 1
subdir count per path = 256
current write server index = 0
current trunk file id = 0
Storage 1:
id = 192.168.51.36
ip_addr = 192.168.51.36 (fastdfs) ACTIVE
2.7 在storage上安装nginx
注意：
fastdfs-nginx-module模块只需要安装到storage上。
cd /home/fastdfs5.11/
unzip fastdfs-nginx-module-master.zip
mv fastdfs-nginx-module-master /usr/local/src/
tar -zxvf nginx-1.10.3.tar.gz
cd nginx-1.10.3
./configure --prefix=/usr/local/nginx --add-module=/usr/local/src/fastdfs-nginx-module-master/src/
make && make install
如下结果则表示安装成功
[root@fastdfs fastdfs-nginx-module-master]# /usr/local/nginx/sbin/nginx -V
nginx version: nginx/1.10.3
built by gcc 4.8.5 20150623 (Red Hat 4.8.5-36) (GCC)
configure arguments: --prefix=/usr/local/nginx --add-module=/usr/local/src/fastdfs-nginx-module-master/src
2.8 配置client
cd /etc/fdfs/
cp client.conf.sample client.conf
vi client.conf
#数据和日志文件存储根目录
base_path=/fastdfs/tracker
tracker_server=192.168.51.36:22122
http.tracker_server_port=8888
[root@fastdfs fastdfs5.11]# fdfs_upload_file /etc/fdfs/client.conf /home/fastdfs5.11/saml.png
group1/M00/00/00/wKgzJFxG4LaAH8UHAAL3GebUIgk668.png
2.9 配置fastdfs-nginx-module和nginx
cp /usr/local/src/fastdfs-nginx-module-master/src/mod_fastdfs.conf /etc/fdfs/
cd /etc/fdfs/
vi mod_fastdfs.conf
# 保存日志目录
base_path=/fastdfs
# tracker服务器IP和端口，有多个按行添加
tracker_server=192.168.51.36:22122
# storage服务器的端口号
storage_server_port=23000
# 当前服务器的group名
group_name=group1
# 文件url中是否有group名
url_have_group_name = true
# 存储路径个数，需要和store_path个数匹配
store_path_count=1
# 存储路径
store_path0=/fastdfs/storage
# 设置组的个数，设置为0则为单组
group_count = 1
#在文件末尾加上
[group1]
group_name=group1
storage_server_port=23000
store_path_count=1
store_path0=/fastdfs/storage
nginx.conf配置vhost
cd /home/fastdfs5.11/conf/
cp http.conf mime.types /etc/fdfs/
vi /usr/local/nginx/conf/nginx.conf
#在http里添加
include vhost/*.conf;
配置storage.conf
vi /usr/local/nginx/conf/vhost/storage.conf
# storage.conf
server {
listen 8888 ;
server_name 192.168.51.36 ;
location / {
root html;
index index.html index.htm;
}
location ~/group[0-9]/M00 {
alias /fastdfs/storage/data/;
ngx_fastdfs_module;
}
}
启动nginx:
/usr/local/nginx/sbin/nginx
2.10 关闭selinux、firewalld
vi /etc/selinux/config
SELINUX=disabled
# systemctl stop firewalld.service
# systemctl disable firewalld.service
拼接上面文件中生成的字符串，进行url访问：
http://192.168.51.36:8888/group1/M00/00/00/wKgzJFxG4LaAH8UHAAL3GebUIgk668.png
后续有时间写一个一键安装FastDFS和配置的脚本。
