如何搭建fastdfs+nginx集群-创新互联
今天就跟大家聊聊有关如何搭建fastdfs+nginx集群,可能很多人都不太了解,为了让大家更加了解,小编给大家总结了以下内容,希望大家根据这篇文章可以有所收获。
天心网站制作公司哪家好,找创新互联!从网页设计、网站建设、微信开发、APP开发、响应式网站设计等网站项目制作,到程序开发,运营维护。创新互联从2013年开始到现在10年的时间,我们拥有了丰富的建站经验和运维经验,来保证我们的工作的顺利进行。专注于网站建设就选创新互联。1.什么是fastdfs
- fastdfs是一个轻量级的开源分布式文件系统;
- fastdfs主要解决了大容量的文件存储和高并发访问的问题,文件存取时实现了负载均衡;
- fastdfs实现了软件方式的RAID,可以使用廉价的IDE硬盘进行存储支持存储服务器在线扩容支持相同内容的文件只保存一份,节约磁盘空间;
- fastdfs只能通过Client API访问,不支持POSIX访问方式;
- fastdfs特别适合大中型网站使用,用来存储资源文件(如:图片、文档、音频、视频等等)。
2.fastdfs框架图
作者(YuQing)给出了框架图如下:
其中:
Tracker Server:跟踪服务器,主要做调度工作,在访问上起负载均衡的作用。记录storage server的状态,是连接Client和Storage server的枢纽。
Storage Server:存储服务器,文件和meta data都保存到存储服务器上
group:组,也可称为卷。同组内服务器上的文件是完全相同的文件标识:包括两部分:组名和文件名(包含路径)
meta data:文件相关属性,键值对(Key Value Pair)方式,如:width=1024,heigth=768
3.上传文件流程
(1)client询问tracker上传到的storage,不需要附加参数;
(2)tracker返回一台可用的storage;
(3)client直接和storage通讯完成文件上传。
4.下载文件流程
(1)client询问tracker下载文件的storage,参数为文件标识(组名和文件名);
(2)tracker返回一台可用的storage;
(3)client直接和storage通讯完成文件下载。
5.同步机制
(1)同一组内的storage server之间是对等的,文件上传、删除等操作可以在任意一台storage server上进行;
(2)文件同步只在同组内的storage server之间进行,采用push方式,即源服务器同步给目标服务器;
(3)源头数据才需要同步,备份数据不需要再次同步,否则就构成环路了;
(4)上述第二条规则有个例外,就是新增加一台storage server时,由已有的一台storage server将已有的所有数据(包括源头数据和备份数据)同步给该新增服务器。
6.tracker server目录结构
(1)data
storage_groups.dat:存储分组信息
storage_servers.dat:存储服务器列表
(2)logs
trackerd.log:tracker server日志文件
7.storage server目录结构
1)data
.data_init_flag:当前storage server初始化信息
storage_stat.dat:当前storage server统计信息
sync:存放数据同步相关文件
binlog.index:当前的binlog文件索引号
binlog.###:存放更新操作记录(日志)
${ip_addr}_${port}.mark:存放同步的完成情况
(2)logs
storaged.log:storage server日志文件
以上理论参考:
ChinaUnix论坛:http://bbs.chinaunix.net/forum-240-1.html
github下载地址:https://github.com/happyfish200
二、fastdfs安装和测试
1.下载
需要下载:libfastcommon fastdfs(2.0之前的版本需要以来libevent)
2.安装
(1)安装libfastcommon
$ tar xzvf libfastcommon-1.0.38.tar.gz $ cd libfastcommon-1.0.38 $ ./make.sh $ sudo ./make.sh install
本文名称:如何搭建fastdfs+nginx集群-创新互联
本文路径:http://cdiso.cn/article/dechih.html