文档章节

FastDFS(ubuntu)下的安装

傻男孩
 傻男孩
发布于 2017/05/23 09:31
字数 1725
阅读 117
收藏 1

准备工作:

    FastDFS_v5.07.tar 
    安装包:libfastcommon-master.zip(是从 FastDFS 和 FastDHT 中提取出来的公共 C 函数库)          

    下载路径:https://github.com/happyfish100/libfastcommon

    安装包:fastdfs-nginx-module_v1.16.tar.gz                                                                              

    下载路径:https://github.com/happyfish100/fastdfs-nginx-module

     nginx-1.9.0.tar.gz
    fastdfs_client_java._v1.25.tar.gz
    源码地址:https://github.com/happyfish100/ 
    下载地址:http://sourceforge.net/projects/fastdfs/files/ 
    官方论坛:http://bbs.chinaunix.net/forum-240-1.html

一、所有跟踪服务器和存储服务器均执行如下操作

    1、编译和安装所需的依赖包:

            # aptget install make cmake gcc gcc-c++ // 一般可以省略

    2. 安装 libfastcommon:

(1)上传或下载 

         libfastcommon-master.zip 到/usr/local/src 目录 

(2)解压 

# cd /usr/local/src/
# unzip libfastcommon-master.zip
# cd libfastcommon-master


(3) 编译、安装 

# ./make.sh
# ./make.sh install 
libfastcommon 默认安装到了 /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.so

 

3、安装 FastDFS
    (1)上传或下载 FastDFS 源码包(FastDFS_v5.07.tar)到 /usr/local/src 目录 


    (2)解压
        

# cd /usr/local/src/
# tar -xvf FastDFS_v5.07.tar
# cd FastDFS

(3)编译、安装(编译前要确保已经成功安装了 libfastcommon)

# ./make.sh
# ./make.sh install


    
采用默认安装的方式安装,安装后的相应文件与目录: 

A、服务脚本在:
    /etc/init.d/fdfs_storaged
    /etc/init.d/fdfs_tracker
B、配置文件在(样例配置文件): 
    /etc/fdfs/client.conf.sample 
    /etc/fdfs/storage.conf.sample 
    /etc/fdfs/tracker.conf.sample
C、命令工具在/usr/bin/目录下的:
    fdfs_appender_test
    fdfs_appender_test1
    fdfs_append_file
    fdfs_crc32
    fdfs_delete_file
    fdfs_download_file
    fdfs_file_info
    fdfs_monitor
    fdfs_storaged
    fdfs_test
    fdfs_test1
    fdfs_trackerd
    fdfs_upload_appender
    fdfs_upload_file
    stop.sh
    restart.sh

二、配置 FastDFS 跟踪器

    1、 复制 FastDFS 跟踪器样例配置文件,并重命名: 

# cd /etc/fdfs/
# cp tracker.conf.sample tracker.conf


    2、 编辑跟踪器配置文件:

# vi /etc/fdfs/tracker.conf 
修改的内容如下: 
disabled=false
port=22122
base_path=/opt/fdfs/tracker

    3、 创建基础数据目录(参考基础目录 base_path 配置): 

# mkdir -p /opt/fdfs/tracker

    4、 防火墙中打开跟踪器端口(默认为 22122):

# vi /etc/sysconfig/iptables
添加如下端口行:
-A INPUT -m state --state NEW -m tcp -p tcp --dport 22122 -j ACCEPT 重启防火墙:
# service iptables restart

    5、 启动 Tracker:

# /etc/init.d/fdfs_trackerd start 
(初次成功启动,会在/fastdfs/tracker 目录下创建 data、logs 两个目录) 
查看 FastDFS Tracker 是否已成功启动:
# ps -ef | grep fdfs

    6、 关闭 Tracker:

# /etc/init.d/fdfs_trackerd stop

    7、 设置 FastDFS 跟踪器开机启动:

# vi /etc/rc.d/rc.local 添加以下内容:
## FastDFS Tracker 
/etc/init.d/fdfs_trackerd start


三、配置 FastDFS 存储(192.168.4.125)

    1、 复制 FastDFS 存储器样例配置文件,并重命名: 

# cd /etc/fdfs/
# cp storage.conf.sample storage.conf

   2、 编辑存储器样例配置文件:

# vi /etc/fdfs/storage.conf
修改的内容如下:
    disabled=false
    port=23000
    base_path=/opt/fdfs/storage
    store_path0=/opt/fdfs/storage
    tracker_server=192.168.4.121:22122
    http.server_port=8888 
(其它参数保留默认配置,具体配置解释请参考官方文档说明: http://bbs.chinaunix.net/thread-1941456-1-1.html )

   3、 创建基础数据目录(参考基础目录 base_path 配置): 

# mkdir -p /fastdfs/storage

   4、 防火墙中打开存储器端口(默认为 23000):

# vi /etc/sysconfig/iptables
添加如下端口行:
   -A INPUT -m state --state NEW -m tcp -p tcp --dport 23000 -j ACCEPT 重启防火墙:
   # service iptables restart

    5、 启动 Storage:

# /etc/init.d/fdfs_storaged start (初次成功启动,会在/fastdfs/storage 目录下创建 data、logs 两个目录) 
查看 FastDFS Storage 是否已成功启动
# ps -ef | grep fdfs

    6、 关闭 Storage:   

# /etc/init.d/fdfs_storaged stop

    7、 设置 FastDFS 存储器开机启动:

# vi /etc/rc.d/rc.local
添加:
    ## FastDFS Storage 
    /etc/init.d/fdfs_storaged start

四、文件上传测试(192.168.4.121)

    1、修改 Tracker 服务器中的客户端配置文件:

# cp /etc/fdfs/client.conf.sample /etc/fdfs/client.conf 
# vi /etc/fdfs/client.conf
base_path=/opt/fdfs/tracker
tracker_server=172.18.20.170:22122

    2、执行如下文件上传命令:

# /usr/bin/fdfs_upload_file /etc/fdfs/client.conf /usr/local/src/FastDFS_v5.05.tar.gz 
返回 ID 号:group1/M00/00/00/wKgEfVUYNYeAb7XFAAVFOL7FJU4.tar.gz
(能返回以上文件 ID,说明文件上传成功)

六、在每个存储节点上安装 nginx

    1、fastdfs-nginx-module 作用说明

    FastDFS 通过 Tracker 服务器,将文件放在 Storage 服务器存储,但是同组存储服务器之间需要进入文件复制,有同步延迟的问题。假设 Tracker 服务器将文件上传到了 192.168.4.125,上传成功后文件ID 已经返回给客户端。此时 FastDFS 存储集群机制会将这个文件同步到同组存储 192.168.4.126,在文件还没有复制完成的情况下,客户端如果用这个文件 ID 在 192.168.4.126 上取文件,就会出现文件无法访问的错误。而 fastdfs-nginx-module 可以重定向文件连接到源服务器取文件,避免客户端由于复制延迟导致的文件无法访问错误。
    (解压后的 fastdfs-nginx-module 在 nginx 安装时使用)

    2、上传 fastdfs-nginx-module_v1.16.tar.gz 到/usr/local/src
    3、解压

# cd /usr/local/src/
# tar -zxvf fastdfs-nginx-module-master.tar.gz

    4、修改 fastdfs-nginx-module 的 config 配置文件

# cd fastdfs-nginx-module/src
# vi config
确保
CORE_INCS="$CORE_INCS /usr/include/fastdfs /usr/include/fastcommon/"

    (注意:这个路径很重要的,不然在 nginx 编译的时候会报错的)

    5、上传当前的稳定版本 Nginx(nginx-1.6.2.tar.gz)到/usr/local/src 目录

    6、安装编译 Nginx 所需的依赖包

# apt-get install openssl libssl-dev libperl-dev

    7、编译安装 Nginx(添加 fastdfs-nginx-module 模块) # cd /usr/local/src/

# tar -zxvf nginx-1.6.2.tar.gz
# cd nginx-1.6.2
# ./configure --prefix=/usr/local/nginx --add-module=/usr/local/src/f/fastdfs-nginx-module/src
apt-get install pcre
#./configure --prefix=/usr/local/nginx --add-module=/usr/local/src/f/fastdfs-nginx-module-master/src --with-pcre=/usr/local/src/f/pcre-8.38

// ./configure --prefix=/usr/local/nginx --add-module=/usr/local/src/f/fastdfs-nginx-module-master/src --with-pcre=/usr/local/src/f/pcre-8.38 --with-http_ssl_module --with-openssl=/usr/local/src/f/openssl-1.1.0-pre1

# make && make install

(另:源码安装pcre

7.1、PCRE库的安装:

    官网:http://www.pcre.org/
    下载页面:ftp://ftp.csx.cam.ac.uk/pub/software/programming/pcre/
    选择最新版本下载:ftp://ftp.csx.cam.ac.uk/pub/software/programming/pcre/pcre-8.10.tar.gz

7.1.1、解压:

tar –zxvf pcre-8.10.tar.gz
解压目录为:pcre-8.10
然后进入到 cd pcre-8.10,进行配置、编译、安装

7.1.2、配置

./configure  --prefix=/usr/local/pcre

7.1.3、编译pcre

make
make pcre时会出错
libtool: compile: unrecognized option `-DHAVE_CONFIG_H'
libtool: compile: Try `libtool --help' for more information.
make[1]: *** [pcrecpp.lo] Error 1
make[1]: Leaving directory `/home/mfcai/pcre-8.10'
make: *** [all] Error 2
安装build-essential
apt-get install build-essential

7.1.4、安装pcre

make install


8、复制 fastdfs-nginx-module 源码中的配置文件到/etc/fdfs 目录,并修改

# cp /usr/local/src/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs/ 
# vi /etc/fdfs/mod_fastdfs.conf
修改以下配置:
connect_timeout=10
base_path=/tmp
tracker_server=192.168.4.121:22122
storage_server_port=23000
group_name=group1
url_have_group_name = true
store_path0=/opt/fdfs/storage


9、复制 FastDFS 的部分配置文件到/etc/fdfs 目录 

# cd /usr/local/src/FastDFS/conf
# cp http.conf mime.types /etc/fdfs/


10、在/fastdfs/storage 文件存储目录下创建软连接,将其链接到实际存放数据的目录 

# ln -s /opt/fdfs/storage/data/ /opt/fdfs/storage/data/M00

 

11、配置 Nginx

简洁版 nginx 配置样例:
user root; 
worker_processes 1; 
events {
    worker_connections 1024;
}
http {
    include mime.types;
    default_type application/octet-stream;
    sendfile on;
    keepalive_timeout 65;
    server {
        listen 8888;
        server_name localhost;
        location ~/group([0-9])/M00 {
            #alias /opt/fdfs/storage/data;
            ngx_fastdfs_module;
        }
        error_page 500 502 503 504 /50x.html;
        location = /50x.html {
            root html; 
        }
    } 
}

说明:
A、8888 端口值是要与/etc/fdfs/storage.conf 中的 http.server_port=8888 相对应,
    因为 http.server_port 默认为 8888,如果想改成 80,则要对应修改过来。
B、Storage 对应有多个 group 的情况下,访问路径带 group 名,如/group1/M00/00/00/xxx, 
对应的 Nginx 配置为:
location ~/group([0-9])/M00 {
    ngx_fastdfs_module;
}
C、如查下载时如发现老报 404,将 nginx.conf 
    第一行 user nobody 修改为 
    user root 后重新启动
D、由于Fdfs安装时,libfdfsclient.so 位于/usr/lib64目录下,需做软连接处理。
    #ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so

© 著作权归作者所有

傻男孩
粉丝 2
博文 47
码字总数 52350
作品 0
深圳
高级程序员
私信 提问
FastDFS安装使用实战一(安装篇)

最近在研究负载均衡和集群,其中涉及到一个主要问题是,如何让集群中的real server共享一套文件系统。在网上查到FastDFS,国人(happy fish,感谢他的开源精神)开发的一套轻量级分布式文件系...

凯文加内特
2015/03/30
599
0
Ubuntu 14.04下部署FastDFS 5.08+Nginx 1.13.0

环境 Ubuntu 14.04 用户 admin 数据目录: /fastdfs 安装包:FastDFS v5.05 一、下载安装libfastcommon 1.1、上传或下载 libfastcommon-master.zip 到/usr/local/src 目录 1.2、解压 1.3、编...

paascloud
2017/05/29
0
0
FastDFS安装使用实战二(配置篇)

一、FastDFS简介 FastDFS是一个个人开发的、轻量级的、开源的分布式文件系统,纯C语言编写,其功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡...

凯文加内特
2015/03/30
1K
0
Centos7单台服务器搭建FastDFS+Nginx

Fastdfs+Nginx配置操作 单台配置 安装包下载: wget https://github.com/happyfish100/libfastcommon/archive/V1.0.7.tar.gz wget http://jaist.dl.sourceforge.net/project/fastdfs/FastDF......

独狼的小窝
2018/06/26
0
0
centos7安装FastDFS和nginx

1.所需的安装包: 链接:https://pan.baidu.com/s/1Hm48o3aBYn0C7PyWzBGUqw 密码:kio7 2安装centos7 输入yum -y install libevent 安装FastDFS依赖libevent库...

暴走萨摩耶
2018/05/26
0
0

没有更多内容

加载失败,请刷新页面

加载更多

OSChina 周三乱弹 —— 调查人员问狗 那你在做什么啊?

Osc乱弹歌单(2019)请戳(这里) 【今日歌曲】 小小编辑推荐:《Let It Be》- John Denver 《Let It Be》- John Denver 手机党少年们想听歌,请使劲儿戳(这里) @FalconChen :每天看一遍,...

小小编辑
今天
6
0
高效程序员的45个习惯总结版-文末脑图

1 做事 一个重大的错误应该被当做一次学习而不是指责他人的机会,团队成员一起工作,应该互相帮助,而不是互相指责 2 欲速则不达 不要为了修复问题而去修复,要投入时间和精力保持代码整洁 ...

阿提说说
今天
18
0
带南海九段线分位数地图可视化(R语言版)

今天带来一篇承诺虾神的可视化博客。内容是使用R语言进行带南海九段线分位数地图可视化。虾神的原博文地址如下(Python版)。 Python实现带南海九段线分位数地图完整可视化版本(附代码及数据...

胖胖雕
今天
12
0
Nginx 的进程结构,你明白吗?

Nginx 进程结构 这篇文章我们来看下 Nginx 的进程结构,Nginx 其实有两种进程结构: 单进程结构 多进程结构 单进程结构实际上不适用于生产环境,只适合我们做开发调试使用。因为在生产环境中...

武培轩
今天
20
0
蓝鲸平台部署

环境 系统:Centos7 依赖包:java8 主机: 10.0.1.150 域名:paas.ops.net;cmdb.ops.net;job.ops.net 生成SSH key ssh-keygen -t rsa -P '' 生成证书 https://bk.tencent.com/download_ssl/......

以谁为师
今天
7
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部