如何在centos7中安裝配置FasterDFS

簡介

FastDFS是一款類Google FS的開源分布式文件系統，它用純C語言實現，支持Linux、FreeBSD、AIX等UNIX系統。它只能通過專有API對文件進行存取訪問，不支持POSIX接口方式，不能mount使用。準確地講，Google FS以及FastDFS、mogileFS、HDFS、TFS等類Google FS都不是系統級的分布式文件系統，而是應用級的分布式文件存儲服務。

FastDFS集群中的Tracker server也可以有多臺，Tracker server和Storage server均不存在單點問題。Tracker server之間是對等關系，組內的Storage server之間也是對等關系。傳統的Master-Slave結構中的Master是單點，寫操作僅針對Master。如果Master失效，需要將Slave提升為Master，實現邏輯會比較復雜。和Master-Slave結構相比，對等結構中所有結點的地位是相同的，每個結點都是Master，不存在單點問題。

一、環境準備

centos7-1 ： tracker 192.168.142.66
centos7-2 ： storage+nginx 192.168.142.77

二、開始安裝

（1）安裝libfastcommon服務（所有節點均進行安裝）

安裝基礎環境包
yum -y install libevent  libevent-devel perl  make gcc zlib  zlib-devel pcre pcre-devel  gcc-c++  openssl-devel
安裝libfastcommon

[root@storage ~]# wget https://github.com/happyfish200/libfastcommon/archive/V1.0.38.tar.gz
[root@storage ~]# tar zxf V1.0.38.tar.gz -C /opt/
[root@storage ~]# cd /opt/libfastcommon-1.0.38/
編譯并建立軟鏈接以方便系統識別

[root@storage libfastcommon-1.0.38]# ./make.sh && ./make.sh install
[root@storage libfastcommon-1.0.38]# ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so
[root@storage libfastcommon-1.0.38]# ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so
[root@storage libfastcommon-1.0.38]# ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so~~

（2）安裝FastDFS服務（所有節點均進行安裝）

下載安裝
[root@storage ~]# wget https://github.com/happyfish200/fastdfs/archive/V5.11.tar.gz
[root@storage ~]# tar zxf V5.11.tar.gz -C /opt/
[root@storage ~]# cd /opt/fastdfs-5.11/
編譯

[root@storage fastdfs-5.11]# ./make.sh && ./make.sh install
將模板文件進行更改

[root@storage fastdfs-5.11]# cd /etc/fdfs/              //配置文件模板路徑
[root@storage fdfs]# cp tracker.conf.sample tracker.conf
[root@storage fdfs]# cp storage.conf.sample storage.conf
[root@storage fdfs]# cp client.conf.sample client.conf

3）tracker監控端配置

建立數據文件、日志文件存放目錄
mkdir -m 755 -p /opt/fastdfs
修改tracker配置文件

[root@tracker ~]# vim /etc/fdfs/tracker.conf
#修改以下配置
port=22122         //tracker服務默認端口22122即可
base_path=/opt/fastdfs      //tracker存儲data和log的跟路徑，必須提前創建好
http.server_port=8080 //tracker服務器上啟動http服務進程，沒裝忽略
開啟服務

[root@tracker ~]# fdfs_trackerd /etc/fdfs/tracker.conf start
[root@tracker ~]# netstat -atnp | grep 22122
tcp        0      0 0.0.0.0:22122           0.0.0.0:*               LISTEN      43776/fdfs_trackerd

[root@tracker ~]# systemctl stop firewalld
[root@tracker ~]# setenforce 0

（4）storage服務端修改

建立數據文件、日志文件存放目錄

mkdir -m 755 -p /opt/fastdfs
修改storage配置文件

[root@storage ~]# vim /etc/fdfs/storage.conf
#修改以下配置
group_name=group1        //默認組名，根據實際情況修改
port=23000       //storge默認23000，同一個組的storage端口號必須一致
base_path=/opt/fastdfs          //storage日志文件的根路徑
store_path_count=1              //與下徑個數相同，默認為1
store_path0=/opt/fastdfs       //提供的存儲路徑（默認與日志文件存放在一起）
tracker_server=192.168.142.66:22122      //自己的tracker服務器IP（重點！！！）
http.server_port=80            //http訪問文件的端口默認為8888，nginx中配置的監聽端口保持一致
開啟服務

#開啟服務（命令支持start|stop|restart）
[root@storage ~]# fdfs_storaged  /etc/fdfs/storage.conf start
[root@storage ~]# netstat -atnp | grep 23000
tcp        0      0 0.0.0.0:23000           0.0.0.0:*               LISTEN      40430/fdfs_storaged

[root@storage ~]# systemctl stop firewalld
[root@storage ~]# setenforce 0
檢查是否與tracker監控端關聯成功

[root@storage ~]# fdfs_monitor /etc/fdfs/storage.conf
Storage 1:
id = 192.168.142.77
ip_addr = 192.168.142.77 (storage)  ACTIVE
http domain =
......省略

（5）安裝nginx服務（storage：192.168.142.77）

這里為了減少虛擬機開啟的數量，就在storage端進行nginx的安裝

安裝nginx及其組件

[root@storage ~]# tar zxf nginx-1.12.0.tar.gz -C /opt/

#下載fastdfs-nginx-module安裝包
[root@storage ~]# wget https://github.com/happyfish200/fastdfs-nginx-module/archive/V1.20.tar.gz
[root@storage ~]# tar zxf V1.20.tar.gz -C /opt/
編譯&安裝

[root@storage ~]# cd /opt/nginx-1.12.0
[root@storage nginx-1.12.0]# ./configure \
--prefix=/usr/local/nginx \
--add-module=/opt/fastdfs-nginx-module-1.20/src/             //fastdfs-nginx-module模塊
[root@storage nginx-1.12.0]# make && make install
注意

可能的報錯：
/usr/include/fastdfs/fdfs_define.h:15:27: fatal error: common_define.h: No such file or directory

解決方案：
修改fastdfs-nginx-module-1.20/src/config文件，然后重新配置、編譯及安裝
ngx_module_incs="/usr/include/fastdfs /usr/include/fastcommon/"
CORE_INCS="$CORE_INCS /usr/include/fastdfs /usr/include/fastcommon/"
配置fastdfs-nginx-module模塊

[root@storage nginx-1.12.0]# cd fastdfs-nginx-module-1.20/src
[root@storage nginx-1.12.0]# cp mod_fastdfs.conf /etc/fdfs/           //移動其配置文件至fdfs目錄下

#修改fastdfs-nginx-module模塊配置文件mod-fasts.conf
[root@storage nginx-1.12.0]# cd /etc/fdfs
[root@storage fdfs]# vim mod_fastdfs.conf
#檢查一下配置
base_path=/opt/fastdfs         //存放數據文件、日志的路徑
tracker_server=192.168.142.66:22122    //tracker端的地址（重點！！！）
url_have_group_name = true  //url是否包含group名稱
storage_server_port=23000           //需要和storage配置的相同
store_path_count=1              //存儲路徑個數，需要和store_path個數匹配
store_path0=/opt/fastdfs               //文件存儲的位置
修改nginx配置文件

[root@storage fdfs]# vim /usr/local/nginx/conf/nginx.conf
#空行處添加
location ~/M00 {
root /opt/fastdfs/data;
ngx_fastdfs_module;
}
拷貝fastdfs解壓目錄中的http.conf和mime.types

#不做這步可能會導致報錯
[root@storage fdfs]# cd /opt/fastdfs-5.11/conf/
[root@storage conf]# cp mime.types http.conf /etc/fdfs/

（6）修改client端（本次實驗即為storage端）

修改配置文件

[root@storage ~]# vim /etc/fdfs/client.conf
#檢查以下配置
base_path=/opt/fastdfs     //tracker服務器文件路徑
tracker_server=192.168.142.66:22122            //tracker服務器IP地址和端口號
http.tracker_server_port=8080                  // tracker服務器的http端口號，必須和tracker的設置

三、測驗

上傳測試文件abc.txt

/usr/bin/fdfs_upload_file /etc/fdfs/client.conf   abc.txt

下載文件abc.txt

/usr/bin/fdfs_download_file /etc/fdfs/client.conf group1/M00/00/00/wKiOTV354W2AIf7GAAAAEh4TEws726.txt abc.txt

刪除文件abc.txt

fdfs_delete_file /etc/fdfs/client.conf group1/M00/00/00/wKiOTV354W2AIf7GAAAAEh4TEws726.txt