FastDfs搭建以及Java使用

当前主流情况下都是走云存储的，但有些项目非常注重保密性，在这种情况下只能存到私有的服务器上。那么一个文件存储系统就至关重要了。本篇博客讲的是FastDfs的安装与使用，那么话不多说，开始吧：

一.  首先修改host，因为后续会有很多修改ip的地方，用更改host的方式会方便很多

192.168.1.177 file.xxx.com

如果不修改, 用内网ip即可

 

二. 下载安装 libfastcommon

1. 下载libfastcommon
wget https://github.com/happyfish100/libfastcommon/archive/V1.0.7.tar.gz

2. 解压、编译、安装
tar -zxvf V1.0.7.tar.gz
cd libfastcommon-1.0.7
./make.sh
./make.sh install

3. libfastcommon.so 安装到了/usr/lib64/libfastcommon.so，但是FastDFS主程序设置的lib目录是/usr/local/lib，所以需要创建软链接
ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so
ln -s /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.so
ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so
ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so 

三. 下载安装FastDFS

1. 下载
wget https://github.com/happyfish100/fastdfs/archive/V5.05.tar.gz

2. 解压、编译、安装
tar -zxvf V5.05.tar.gz
cd fastdfs-5.05
./make.sh
./make.sh install

3. 默认安装方式安装后的相应文件与目录
A、服务脚本：

/etc/init.d/fdfs_storaged
/etc/init.d/fdfs_tracker
B、配置文件（这三个是作者给的样例配置文件） :

/etc/fdfs/client.conf.sample
/etc/fdfs/storage.conf.sample
/etc/fdfs/tracker.conf.sample

C、命令工具在 /usr/bin/ 目录下：


（4）FastDFS 服务脚本设置的 bin 目录是 /usr/local/bin， 但实际命令安装在 /usr/bin/ 下，所以需要创建软链接

ln -s /usr/bin/fdfs_trackerd   /usr/local/bin
ln -s /usr/bin/fdfs_storaged   /usr/local/bin
ln -s /usr/bin/stop.sh         /usr/local/bin
ln -s /usr/bin/restart.sh      /usr/local/bin

四.  配置FastDFS跟踪器(Tracker)

1. 进入 /etc/fdfs，复制 FastDFS 跟踪器样例配置文件 tracker.conf.sample，并重命名为 tracker.conf
cd /etc/fdfs
cp tracker.conf.sample tracker.conf
vim tracker.conf
	
2. 编辑tracker.conf ，其它的默认即可	
# Tracker 数据和日志目录地址(根目录必须存在,子目录会自动创建)
base_path=/data/fastdfs/tracker

# HTTP 服务端口
http.server_port=80


3. 创建tracker基础数据目录，即base_path对应的目录

# mkdir -p /data/fastdfs/tracker	

4. 防火墙中打开跟踪端口（默认的22122），没有防火墙就无需操作。

5. 启动Tracker

初次成功启动，会在 /data/fdfsdfs/tracker/ (配置的base_path)下创建 data、logs 两个目录。

可以用这种方式启动
# /etc/init.d/fdfs_trackerd start

也可以用这种方式启动，前提是上面创建了软链接，后面都用这种方式
# service fdfs_trackerd start
查看 FastDFS Tracker 是否已成功启动 ，22122端口正在被监听，则算是Tracker服务安装成功。

# netstat -unltp|grep fdfs

关闭Tracker命令：

# service fdfs_trackerd stop

6. 设置Tracker开机启动

# chkconfig fdfs_trackerd on

或者：
# vim /etc/rc.d/rc.local

加入配置：
/etc/init.d/fdfs_trackerd start 


7. tracker server 目录及文件结构

Tracker服务启动成功后，会在base_path下创建data、logs两个目录。目录结构如下：

${base_path}
  |__data
  |   |__storage_groups.dat：存储分组信息
  |   |__storage_servers.dat：存储服务器列表
  |__logs
  |   |__trackerd.log： tracker server 日志文件 

五.  配置 FastDFS 存储 (Storage)　　

1. 进入 /etc/fdfs 目录，复制 FastDFS 存储器样例配置文件 storage.conf.sample，并重命名为 storage.conf

cd /etc/fdfs
cp storage.conf.sample storage.conf
vim storage.conf

2. 编辑storage.conf

# Storage 数据和日志目录地址(根目录必须存在，子目录会自动生成)
base_path=/data/fastdfs/storage

# 逐一配置 store_path_count 个路径，索引号基于 0。
# 如果不配置 store_path0，那它就和 base_path 对应的路径一样。
store_path0=/data/fastdfs/file

# tracker_server 的列表 ，会主动连接 tracker_server
# 有多个 tracker server 时，每个 tracker server 写一行
tracker_server=file.agatha.com:22122

# 访问端口
http.server_port=80

3. 创建Storage基础数据目录，对应base_path目录

# mkdir -p /data/fastdfs/storage

# 这是配置的store_path0路径
# mkdir -p /data/fastdfs/file


4. 防火墙中打开存储器端口（默认的 23000）

5. 启动 Storage

启动Storage前确保Tracker是启动的。初次启动成功，会在 /data/fastdfs/storage 目录下创建 data、 logs 两个目录。

可以用这种方式启动
# /etc/init.d/fdfs_storaged start

也可以用这种方式，后面都用这种
# service fdfs_storaged start
查看 Storage 是否成功启动，23000 端口正在被监听，就算 Storage 启动成功。

# netstat -unltp|grep fdfs

关闭Storage命令：

# service fdfs_storaged stop


6. 设置 Storage 开机启动

# chkconfig fdfs_storaged on

或者：
# vim /etc/rc.d/rc.local
加入配置：
/etc/init.d/fdfs_storaged start


7. Storage 目录

同 Tracker，Storage 启动成功后，在base_path 下创建了data、logs目录，记录着 Storage Server 的信息。

在 store_path0 目录下，创建了N*N个子目录：　　

 

六. 查看通信状态

查看Storage和Tracker是否在通信：

/usr/bin/fdfs_monitor /etc/fdfs/storage.conf

如果有：ACTIVE，表示成功

　　

七. 文件上传测试

1. 修改 Tracker 服务器中的客户端配置文件 

cd /etc/fdfs
cp client.conf.sample client.conf
vim client.conf

修改如下配置即可，其它默认。

# Client 的数据和日志目录
base_path=/data/fastdfs/client

# Tracker端口
tracker_server=file.agatha.com:22122

2. 上传测试
mkdir -p /data/fastdfs/client

在linux内部执行如下命令上传 99.jpeg

# /usr/bin/fdfs_upload_file /etc/fdfs/client.conf 99.jpeg
上传成功后返回文件ID号：http://file.agatha.com/group1/M00/00/00/wKgBhV8VTlaAGIzvAAdK_-sG-CI65.jpeg

八. nginx ，nginx的安装就不展开说了，直接说配置吧

1. 修改nginx.conf，访问文件

在主配置文件下的http{}  server{}中加入:

location /group1/M00 {
    alias /data/fastdfs/file/data;
}

记得 nginx的权限，调整为root

2. FastDFS 配置 Nginx 模块

这里我暂时没有配置, 因为我认为不配置也是可以的.

九. Java客户端使用

1. 加入依赖

<dependency>
<groupId>net.oschina.zcx7878</groupId>
<artifactId>fastdfs-client-java</artifactId>
<version>1.27.0.0</version>
</dependency>

2. 引入配置文件，java服务连接 fastdfs

# 文件服务器地址
file_server_addr=file.onepass.com:80
# 最大连接数 并发量较大的话可加大该连接数
max_storage_connection=8

## fastdfs为前缀的是FastDFS的配置
fastdfs.connect_timeout_in_seconds=10
fastdfs.network_timeout_in_seconds=30

fastdfs.charset=UTF-8

# token 防盗链功能
fastdfs.http_anti_steal_token=true

# 密钥
fastdfs.http_secret_key=superOak

# TrackerServer port
fastdfs.http_tracker_http_port=80

## Tracker Server, if more than one, separate with ","
fastdfs.tracker_servers=file.onepass.com:22122

3. 客户端API 使用

前辈封装的FastDFS Java API
https://github.com/bojiangzhou/lyyzoo-fastdfs-java.git