美文网首页
分布式文件系统FastDFS安装教程1(安装、配置、部署、防盗链

分布式文件系统FastDFS安装教程1(安装、配置、部署、防盗链

作者: Youth丶夏夏 | 来源:发表于2020-12-07 09:36 被阅读0次

    相关链接:SpringBoot项目中Fastdfs配置及使用2

    环境准备

    使用的系统软件

    名称 说明
    centos 7.x
    libfatscommon FastDFS分离出的一些公用函数包
    FastDFS FastDFS本体
    fastdfs-nginx-module FastDFS和nginx的关联模块
    nginx nginx1.15.4

    编译环境

    yum install git gcc gcc-c++ make automake autoconf libtool pcre pcre-devel zlib zlib-devel openssl-devel wget vim -y
    

    磁盘目录

    说明 位置
    所有安装包 /usr/local/src
    数据存储位置 /home/dfs/

    这里我为了方便把日志什么的都放到了dfs

    mkdir /home/dfs #创建数据存储目录
    cd /usr/local/src #切换到安装目录准备下载安装包
    

    安装libfatscommon

    git clone https://github.com/happyfish100/libfastcommon.git --depth 1
    cd libfastcommon/
    ./make.sh && ./make.sh install #编译安装
    

    安装FastDFS

    cd ../ #返回上一级目录
    git clone https://github.com/happyfish100/fastdfs.git --depth 1
    cd fastdfs/
    ./make.sh && ./make.sh install #编译安装
    #配置文件准备
    cp /etc/fdfs/tracker.conf.sample /etc/fdfs/tracker.conf
    cp /etc/fdfs/storage.conf.sample /etc/fdfs/storage.conf
    cp /etc/fdfs/client.conf.sample /etc/fdfs/client.conf #客户端文件,测试用
    cp /usr/local/src/fastdfs/conf/http.conf /etc/fdfs/ #供nginx访问使用
    cp /usr/local/src/fastdfs/conf/mime.types /etc/fdfs/ #供nginx访问使用
    

    安装fastdfs-nginx-module

    cd ../ #返回上一级目录
    git clone https://github.com/happyfish100/fastdfs-nginx-module.git --depth 1
    cp /usr/local/src/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs
    

    安装nginx

    wget http://nginx.org/download/nginx-1.15.4.tar.gz #下载nginx压缩包
    tar -zxvf nginx-1.15.4.tar.gz #解压
    cd nginx-1.15.4/
    #添加fastdfs-nginx-module模块
    ./configure --add-module=/usr/local/src/fastdfs-nginx-module/src/ 
    make && make install #编译安装
    

    单机部署

    /home/jrpt/fast_dfs

    tracker配置

    #服务器ip为 192.168.52.1
    #我建议用ftp下载下来这些文件 本地修改
    vim /etc/fdfs/tracker.conf
    #需要修改的内容如下
    port=22122  # tracker服务器端口(默认22122,一般不修改)
    base_path=/home/dfs  # 存储日志和数据的根目录
    

    storage配置

    vim /etc/fdfs/storage.conf
    #需要修改的内容如下
    port=23000  # storage服务端口(默认23000,一般不修改)
    base_path=/home/dfs  # 数据和日志文件存储根目录
    store_path0=/home/dfs  # 第一个存储目录
    tracker_server=192.168.52.1:22122  # tracker服务器IP和端口
    http.server_port=8888  # http访问文件的端口(默认8888,看情况修改,和nginx中保持一致)
    

    client测试

    vim /etc/fdfs/client.conf
    #需要修改的内容如下
    base_path=/home/dfs
    tracker_server=192.168.52.1:22122    #tracker服务器IP和端口
    #保存后测试,返回ID表示成功 如:group1/M00/00/00/xx.tar.gz
    fdfs_upload_file /etc/fdfs/client.conf /usr/local/src/nginx-1.15.4.tar.gz
    

    配置nginx访问

    vim /etc/fdfs/mod_fastdfs.conf
    #需要修改的内容如下
    tracker_server=192.168.52.1:22122  #tracker服务器IP和端口
    url_have_group_name=true
    store_path0=/home/dfs
    #配置nginx.config
    vim /usr/local/nginx/conf/nginx.conf
    #添加如下配置
    server {
        listen       8888;    ## 该端口为storage.conf中的http.server_port相同
        server_name  localhost;
        location ~/group[0-9]/ {
            ngx_fastdfs_module;
        }
        error_page   500 502 503 504  /50x.html;
        location = /50x.html {
        root   html;
        }
    }
    #测试下载,用外部浏览器访问刚才已传过的nginx安装包,引用返回的ID
    http://192.168.52.1:8888/group1/M00/00/00/wKgAQ1pysxmAaqhAAA76tz-dVgg.tar.gz
    #弹出下载单机部署全部跑通
    

    启动

    防火墙

    #不关闭防火墙的话无法使用
    systemctl stop firewalld.service #关闭
    systemctl restart firewalld.service #重启
    

    tracker

    /etc/init.d/fdfs_trackerd start #启动tracker服务
    /etc/init.d/fdfs_trackerd restart #重启动tracker服务
    /etc/init.d/fdfs_trackerd stop #停止tracker服务
    chkconfig fdfs_trackerd on #自启动tracker服务
    

    storage

    /etc/init.d/fdfs_storaged start #启动storage服务
    /etc/init.d/fdfs_storaged restart #重动storage服务
    /etc/init.d/fdfs_storaged stop #停止动storage服务
    chkconfig fdfs_storaged on #自启动storage服务
    

    nginx

    /usr/local/nginx/sbin/nginx #启动nginx
    /usr/local/nginx/sbin/nginx -s reload #重启nginx
    /usr/local/nginx/sbin/nginx -s stop #停止nginx
    

    检测集群

    /usr/bin/fdfs_monitor /etc/fdfs/storage.conf
    # 会显示会有几台服务器 有3台就会 显示 Storage 1-Storage 3的详细信息
    

    说明

    配置文件

    tracker_server #有几台服务器写几个
    group_name #地址的名称的命名
    bind_addr #服务器ip绑定
    store_path_count #store_path(数字)有几个写几个
    store_path(数字) #设置几个储存地址写几个 从0开始
    

    可能遇到的问题

    如果不是root 用户 你必须在除了cd的命令之外 全部加sudo
    如果不是root 用户 编译和安装分开进行 先编译再安装
    如果上传成功 但是nginx报错404 先检查mod_fastdfs.conf文件中的store_path0是否一致
    如果nginx无法访问 先检查防火墙 和 mod_fastdfs.conf文件tracker_server是否一致
    如果不是在/usr/local/src文件夹下安装 可能会编译出错
    
    nginx问题解决记录:
    文件授权:
    cd /usr/local
    sudo chmod -R 777 nginx
    ,
    nginx.conf 权限不足问题:user root owner;
    访问不通时,重新配置nginx和model,并重新加载配置文件sudo /usr/local/nginx/sbin/nginx -s reload
    
    fastdfs启动:
    本机:sudo /usr/local/bin/restart.sh /usr/local/bin/fdfs_trackerd /etc/fdfs/tracker.conf 
    服务器:
    sudo /usr/bin/restart.sh /usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf 
    本机:sudo /usr/local/bin/restart.sh /usr/local/bin/fdfs_storaged /etc/fdfs/storage.conf
    服务器:
    sudo /usr/bin/restart.sh /usr/bin/fdfs_storaged /etc/fdfs/storage.conf
    nginx服务:
    sudo /usr/local/nginx/sbin/nginx
    sudo /usr/local/nginx/sbin/nginx -s stop
    sudo /usr/local/nginx/sbin/nginx -s reload
    监控:
    /usr/local/bin/fdfs_monitor /etc/fdfs/storage.conf
    服务器:/usr/bin/fdfs_monitor /etc/fdfs/storage.conf
    

    防盗链
    /etc/fdfs/http.conf

    
    # HTTP default content type
    http.default_content_type = application/octet-stream
    
    # MIME types mapping filename
    # MIME types file format: MIME_type  extensions
    # such as:  image/jpeg  jpeg jpg jpe
    # you can use apache's MIME file: mime.types
    http.mime_types_filename = mime.types
    
    # if use token to anti-steal
    # default value is false (0)
    http.anti_steal.check_token = true
    
    # token TTL (time to live), seconds
    # default value is 600
    http.anti_steal.token_ttl = 900
    
    # secret key to generate anti-steal token
    # this parameter must be set when http.anti_steal.check_token set to true
    # the length of the secret key should not exceed 128 bytes
    http.anti_steal.secret_key = 12345678
    
    # return the content of the file when check token fail
    # default value is empty (no file sepecified)
    http.anti_steal.token_check_fail = /Users/yangxia/Documents/a_java_all/dfs/404.jpg
    
    # if support multi regions for HTTP Range
    # default value is true
    http.multi_range.enabed = true
    
    

    nginx配置图片依赖

    yum install -y gd-devel
    ./configure --prefix=/usr/local/nginx --with-http_image_filter_module --add-module=/usr/local/src/fastdfs-nginx-module/src/
    make
    make install
    

    配置nginx访问

    vim /usr/local/nginx/conf/nginx.conf
    
        location ~ group1/(.+)_([0-9]+)x([0-9]+)\.(jpg|gif|png) {           #这段往下为生成缩略图的配置
            ngx_fastdfs_module;
            set $w $2;
            set $h $3;           
    
            if ($w != "0") {
                rewrite group1/(.+)_(\d+)x(\d+)\.(jpg|gif|png|JPG|jpeg)$ group1/$1.$4 break;
            }
    
            if ($h != "0") {
                rewrite group1/(.+)_(\d+)x(\d+)\.(jpg|gif|png|JPG|jpeg)$ group1/$1.$4 break;
            }
    
            image_filter resize $w $h;
              
            image_filter_buffer 2M;
    
            try_files group1/$1.$4 $1.jpg;
        }
    

    相关文章

      网友评论

          本文标题:分布式文件系统FastDFS安装教程1(安装、配置、部署、防盗链

          本文链接:https://www.haomeiwen.com/subject/acdmcktx.html