美文网首页
FastDFS 介绍

FastDFS 介绍

作者: Grits | 来源:发表于2018-03-08 12:05 被阅读0次

FastDFS 介绍

FastDFS是一个开源的分布式文件系统,她对文件进行管理,功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡的问题。

FastDFS 应用场景

适合以文件为载体的在线服务,如相册网站、视频网站等等

FastDFS 角色

跟踪器(tracker)和存储节点(storage)

跟踪器主要做调度工作,在访问上起负载均衡的作用

存储节点存储文件,完成文件管理的所有功能

FastDFS 架构图

跟踪器和存储节点都可以由一台多台服务器构成。跟踪器和存储节点中的服务器均可以随时增加或下线而不会影响线上服务。其中跟踪器中的所有服务器都是对等的,可以根据服务器的压力情况随时增加或减少。

为了支持大容量,存储节点(服务器)采用了分卷(或分组)的组织方式。存储系统由一个或多个卷组成,卷与卷之间的文件是相互独立的,所有卷 的文件容量累加就是整个存储系统中的文件容量。一个卷可以由一台或多台存储服务器组成,一个卷下的存储服务器中的文件都是相同的,卷中的多台存储服务器起 到了冗余备份和负载均衡的作用。

在卷中增加服务器时,同步已有的文件由系统自动完成,同步完成后,系统自动将新增服务器切换到线上提供服务。

当存储空间不足或即将耗尽时,可以动态添加卷。只需要增加一台或多台服务器,并将它们配置为一个新的卷,这样就扩大了存储系统的容量。

FastDFS 文件标识

FastDFS中的文件标识分为两个部分:卷名和文件名

上传与下载

上传

下载

FastDFS 使用要点

FastDFS下载恢复原始文件名

一. 应用系统在上传文件到FastDFS成功时将原始文件名和“文件索引(FID)”保存下来(例如:保存到数据库

二. 用户点击下载的时用Nginx的域名和FID拼出url,然后在url后面增加一个参数,指定原始文件名。例如:http://121.14.161.48:9030/group2/M00/00/89/eQ6h3FKJf_PRl8p4AUz4wO8tqaA688.apk?attname=filename.apk

三. 在Nginx上进行如下配置,这样Nginx就会截获url中的参数attname,在Http响应头里面加上字段 Content-Disposition “attachment;filename=$arg_attname”


location /group2/M00 {

root /data/store/data;

if ($arg_attname ~ "^(.*).apk") {

    add_header Content-Disposition "attachment;filename=$arg_attname";

}

ngx_fastdfs_module;

}

四. 浏览器发现响应头里面有Content-Disposition “attachment;filename=$arg_attname”时,就会把文件名显示成filename指定的名称。

FastDFS 从文件的使用技巧

使用FastDFS存储一个图片的多个分辨率的备份时,希望只记录源图的FID,并能将其它分辨率的图片与源图关联。可以使用从文件方法

主从文件是指文件ID有关联的文件,一个主文件可以对应多个从文件

主文件ID = 主文件名 + 主文件扩展名

从文件ID = 主文件名 + 从文件后缀名 + 从文件扩展名

FastDFS 安装部署

具体的安装部署以及client的使用,请参考如下:

http://192.168.13.53:8999/chenfei/fdfs-client-demo

安装过后的FastDFS的结构

1. Data目录结构

2. Log目录结构

3. Nginx日志结构

FastDFS 监控


fdfs_monitor /etc/fdfs/storage.conf

参考

http://bbs.chinaunix.net/thread-1920470-1-1.html

http://www.ttlsa.com/fastdfs/

http://www.ttlsa.com/fastdfs/fastdfs-experience-sharing/

http://www.ttlsa.com/fastdfs/fastdfs-deploy/

http://www.ttlsa.com/fastdfs/fastdfs-nginx-module-download/

http://www.ttlsa.com/fastdfs/fastdfs-muilt-tracker/

http://www.ttlsa.com/fastdfs/fastdfs-dynamically-adding-test-paper/

相关文章

  • FastDFS

    1.FastDFS介绍 1.1FastDFS构成 FastDFS由存储服务器(Storage Server)、 跟...

  • FastDFS 介绍

    FastDFS 介绍 FastDFS是一个开源的分布式文件系统,她对文件进行管理,功能包括:文件存储、文件同步、文...

  • fastDFS 介绍

    3.2.1什么是FastDFS FastDFS 是用 c 语言编写的一款开源的分布式文件系统。FastDFS 为互...

  • fastDFS介绍

    1 什么是分布式文件系统 1.1 技术应用场景 优酷拥有大量优质的视频教程,并且免费提供给用户去下载,文件太多如何...

  • FastDFS集群部署

    之前介绍过关于FastDFS单机部署,详见博文:FastDFS单节点部署 下面来看下FastDFS集群部署,实现高...

  • 使用fastdfs搭建文件管理系统

    一、FastDFS介绍 FastDFS开源地址:https://github.com/happyfish100 参...

  • fastDFS文件服务器(二):环境搭建篇

    上一篇介绍了fastDFS相关术语和原理,本章将先搭建单机版的fastDFS。环境准备: fastDFS及其ngi...

  • FastDFS分布式文件系统(一)

    FastDFS介绍 1.1什么是FastDFS FastDFS是用c语言编写的一款开源的分布式文件系统。FastD...

  • 分布式文件系统之FastDFS

    1. 什么是FastDFS 1.1. 介绍 FastDFS是用c语言编写的一款开源的分布式文件系统。FastDFS...

  • fastdfs文件系统搭建

    1,FastDFS基本介绍: FastDFS 系统有三个角色,跟踪服务器(Tracker Server)、存储服务...

网友评论

      本文标题:FastDFS 介绍

      本文链接:https://www.haomeiwen.com/subject/xktyfftx.html