Linux FastDFS安装

1.0、 fastDFS

fastDFS介绍

FastDFS是用c语言编写的一款开源的分布式文件系统，它是由淘宝资深架构师余庆编写并开源。FastDFS专为互联
网量身定制，充分考虑了冗余备份、负载均衡、线性扩容等机制，并注重高可用、高性能等指标，使用FastDFS很
容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。

fastDFS架构

image-20210415225121704

  • Tracker

    Tracker Server作用是负载均衡和调度，通过Tracker server在文件上传时可以根据一些策略找到Storage server提供文件上传服务。可以将tracker称为追踪服务器或调度服务器。

  • Storage

    Storage Server作用是文件存储，客户端上传的文件最终存储在Storage服务器上，Storage server没有实现自己的文件系统而是使用操作系统的文件系统来管理文件。可以将storage称为存储服务器。

1.1 、上传

将下面的文件上传到linux下的/home/fdfs目录:

image-20210415223825064

1.2 、安装依赖

1.2.1、 安装GCC依赖

GCC用来对C语言代码进行编译运行，使用yum命令安装：

sudo yum -y install gcc

1.2.2 、安装unzip工具

unzip工具可以对压缩包进行解压

sudo yum install -y unzip zip

1.2.3、 安装libevent

sudo yum -y install libevent

1.2.4、 安装Nginx所需依赖

sudo yum -y install pcre pcre-devel zlib zlib-devel openssl openssl-devel

1.2.5、 安装libfastcommon-master

这个没有yum包，只能通过编译安装：

  • 解压上传的libfastcommon-master.zip

    unzip libfastcommon-master.zip

  • 进入解压完成的目录：

    cd libfastcommon-master

  • 编译并且安装：

    sudo ./make.sh 
sudo ./makesh install

1.3、 安装FastDFS

1.3.1、 编译安装

  • 解压

    tar -xvf FastDFS_v5.08.tar.gz

  • 进入解压目录

    cd FastDFS

  • 编译并安装

    sudo ./make.sh
sudo ./make.sh install

  • 校验安装结果

    1. 安装完成，能在/etc/init.d/目录，通过命令ll /etc/init.d/ | grep fdfs看到FastDFS提供的启动脚本：

    image-20210415224947844

    • fdfs_trackerd 是tracker启动脚本
    • fdfs_storaged 是storage启动脚本

​ 2. 可以在 /etc/fdfs目录，通过命令查看到以下配置文件模板：

​ img

    • tarcker.conf.sample 是tracker的配置文件模板
    • storage.conf.sample 是storage的配置文件模板
    • client.conf.sample` 是客户端的配置文件模板

1.3.2、 启动tracker

  • 将/etc/fdfs/下的tracker.conf.sample文件命名为tracker.conf
sudo cp tracker.conf.sample tracker.conf
  • 编辑tracker配置
sudo vim tracker.conf
  • 将里面的base_path改成/fdfs/tracker
base_path=/fdfs/tracker
  • 创建/fdfs/tracker文件夹
sudo mkdir -p /fdfs/tracker
  • 启动tracker
service fdfs_trackerd start #方法1
sh /etc/init.d/fdfs_trackerd #方法2
  • 查看启动状态
ps -ef|grep fdfs

image-20210415230250498

  • 设置开机自启动
sudo chkconfig fdfs_trackerd on

1.3.3、 启动storage

  • 将/etc/fdfs/下的storage.conf.sample文件命名为storage.conf
sudo cp storage.conf.sample storage.conf
  • 编辑storage配置
sudo vim storage.conf
  • 修改内容
base_path=/fdfs/storage # storage的数据和日志存放目录
store_path0=/fdfs/storage # storage的上传文件存放路径
tracker_server=主机自己的ip:22122 # tracker的地址
  • 创建/fdfs/storage文件夹
sudo mkdir -p /leyou/fdfs/storage
  • 启动storage
service fdfs_storaged start #方法1
sh /etc/init.d/fdfs_storaged #方法2
  • 查看启动状态
ps -ef|grep fdfs

image-20210415230250498

  • 设置开机自启动
sudo chkconfig fdfs_storaged on

1.3.4、 测试文件上传

修改client配置文件

将/etc/fdfs/下的client.conf.sample文件命名为client.conf

mv client.conf.sample client.conf

修改client.conf

vim client.conf

修改配置：

tracker_server=主机自己的ip:22122

base_path=/tmp

在/etc/fdfs目录下执行如下命令测试（前提在tmp文件夹下有1.png文件）

/usr/bin/fdfs_upload_file client.conf /tmp/1.png

有输出路径则成功

image-20210415231317793

浏览器访问

主机ip/group1/M00/00/00/rBEADGB4WAeAPrXLAAADs09cdiA248.png

img

1.4、 安装Nginx及FastDFS模块

1.4.1 、FastDFS的Nginx模块

  • 解压
cd /home/fdfs/
tar -xvf fastdfs-nginx-module_v1.16.tar.gz
  • 配置config文件
# 进入配置目录
cd /home/leyou/fdfs/fastdfs-nginx-module/src/
# 修改配置
vim config
# 执行下面命令（将配置中的/usr/local改为/usr）：
:%s+/usr/local/+/usr/+g
  • 复制mod_fastdfs.conf配置文件到/etc/fdfs中
cp mod_fastdfs.conf /etc/fdfs
  • 进入/etc/fdfs
cd /etc/fdfs
  • 修改 /etc/fdfs下的mod_fastdfs.conf
vim mod_fastdfs.conf
  • 修改内容：
tracker_server=你设置的tracker主机ip:22122
url_have_group_name = true
store_path0=/fdfs/storage
  • 复制 FastDFS的部分配置文件到/etc/fdfs目录
cd /home/leyou/fdfs/FastDFS/conf/
cp http.conf mime.types /etc/fdfs/

1.4.2、 安装Nginx

  • 解压
tar -xvf nginx-1.10.0.tar.gz
cd /home/nginx-1.10.0
  • 配置
sudo ./configure --prefix=/opt/nginx --sbin-path=/usr/bin/nginx --add-module=/home/fdfs/fastdfs-nginx-module/src

/opt/nginx：配置文件

image-20210415232652275

/usr/bin/nginx :执行文件

  • 编译安装

注：已经安装nginx不需要安装 编译即可 注意非离线安装安装包的位置可能不一样，上一步配置不一样

sudo make 
sudo make install
  • 备份原来的nginx
mv /usr/bin/nginx /usr/bin/nginx-back
  • 将nginx-1.10.0/objs/里的nginx文件移动到/usr/bin目录下
cp objs/nginx /usr/bin/
  • 配置nginx整合fastdfs-module模块

需要修改nginx配置文件，在/opt/nginx/config/nginx.conf文件中：

sudo vim  /opt/nginx/conf/nginx.conf

找到添加server的合适位置（参考自带的server的位置，类似于html同级标签）添加如下内容

server {
        listen       80;
        server_name  换成自己的主机ip;
        proxy_set_header X-Forwarded-Host $host;
        proxy_set_header X-Forwarded-Server $host;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;

		# 监听域名中带有group的，交给FastDFS模块处理
		location	~/group([0-9])/ {
			ngx_fastdfs_module;
		}	
    
}
  • 启动
nginx # 启动
nginx -s stop # 停止
nginx -s reload # 重新加载配置
  • 设置nginx开机启动

创建一个开机启动的脚本：

vim /etc/init.d/nginx

添加以下内容：

#!/bin/sh
#
# nginx - this script starts and stops the nginx daemon
#
# chkconfig:   - 85 15
# description:  NGINX is an HTTP(S) server, HTTP(S) reverse \
#               proxy and IMAP/POP3 proxy server
# processname: nginx
# config:      /etc/nginx/nginx.conf
# config:      /etc/sysconfig/nginx
# pidfile:     /var/run/nginx.pid

# Source function library.
. /etc/rc.d/init.d/functions

# Source networking configuration.
. /etc/sysconfig/network

# Check that networking is up.
[ "$NETWORKING" = "no" ] && exit 0

nginx="/usr/bin/nginx"
prog=$(basename $nginx)

NGINX_CONF_FILE="/opt/nginx/conf/nginx.conf"

[ -f /etc/sysconfig/nginx ] && . /etc/sysconfig/nginx

lockfile=/var/lock/subsys/nginx

make_dirs() {
   # make required directories
   user=`$nginx -V 2>&1 | grep "configure arguments:.*--user=" | sed 's/[^*]*--user=\([^ ]*\).*/\1/g' -`
   if [ -n "$user" ]; then
      if [ -z "`grep $user /etc/passwd`" ]; then
         useradd -M -s /bin/nologin $user
      fi
      options=`$nginx -V 2>&1 | grep 'configure arguments:'`
      for opt in $options; do
          if [ `echo $opt | grep '.*-temp-path'` ]; then
              value=`echo $opt | cut -d "=" -f 2`
              if [ ! -d "$value" ]; then
                  # echo "creating" $value
                  mkdir -p $value && chown -R $user $value
              fi
          fi
       done
    fi
}

start() {
    [ -x $nginx ] || exit 5
    [ -f $NGINX_CONF_FILE ] || exit 6
    make_dirs
    echo -n $"Starting $prog: "
    daemon $nginx -c $NGINX_CONF_FILE
    retval=$?
    echo
    [ $retval -eq 0 ] && touch $lockfile
    return $retval
}

stop() {
    echo -n $"Stopping $prog: "
    killproc $prog -QUIT
    retval=$?
    echo
    [ $retval -eq 0 ] && rm -f $lockfile
    return $retval
}

restart() {
    configtest || return $?
    stop
    sleep 1
    start
}

reload() {
    configtest || return $?
    echo -n $"Reloading $prog: "
    killproc $nginx -HUP
    RETVAL=$?
    echo
}

force_reload() {
    restart
}

configtest() {
  $nginx -t -c $NGINX_CONF_FILE
}

rh_status() {
    status $prog
}

rh_status_q() {
    rh_status >/dev/null 2>&1
}

case "$1" in
    start)
        rh_status_q && exit 0
        $1
        ;;
    stop)
        rh_status_q || exit 0
        $1
        ;;
    restart|configtest)
        $1
        ;;
    reload)
        rh_status_q || exit 7
        $1
        ;;
    force-reload)
        force_reload
        ;;
    status)
        rh_status
        ;;
    condrestart|try-restart)
        rh_status_q || exit 0
            ;;
    *)
        echo $"Usage: $0 {start|stop|status|restart|condrestart|try-restart|reload|force-reload|configtest}"
        exit 2
esac
  • 修改文件权限，并加入服务列表
# 修改权限
chmod 777 /etc/init.d/nginx 
# 添加到服务列表
chkconfig --add /etc/init.d/nginx
  • 设置开机启动
chkconfig nginx on
posted @ 2022-05-11 11:20  iforeverhz  阅读(214)  评论(1)  编辑  收藏  举报