FDFS

前面了解了 fastdfs 的原理，接下来就熟悉一下安装过程，准备了三台机器，一台模拟 client，一台模拟 storage，一台模拟 tracker。

三台机器均为 debian6，系统为最小化安装，先安装基本编译环境：

apt-get install build-essential php5-dev libevent-dev

下载 fastdfs 源码包：

wget http://fastdfs.googlecode.com/files/FastDFS_v3.05.tar.gz

开始安装：

tar zxvf FastDFS_v3.05.tar.gz
cd FastDFS/
./make.sh
./make.sh install

安装完成后，fastdfs 默认的配置文件被放置在/etc/fdfs 目录下面，包含了 client.conf http.conf mime.types storage.conf tracker.conf 五个文件，fastdfs 进程的启动是以加载的配置文件区分的。源码包中都包含了这三个配置文件。

tracker.conf 配置文件分析：

#配置 tracker.conf 这个配置文件是否生效，因为在启动 fastdfs 服务端进程时需要指定配置文件，所以需要使次配置文件生效。false 是生效，true 是屏蔽。
disabled=false
#程序的监听地址，如果不设定则监听所有地址
bind_addr=
#tracker 监听的端口
port=22122
#链接超时设定
connect_timeout=30
#tracker 在通过网络发送接收数据的超时时间
network_timeout=60
#数据和日志的存放地点
base_path=/opt/fdfs
#服务所支持的最大链接数
max_connections=256
#工作线程数一般为 cpu 个数
work_threads=4
#在存储文件时选择 group 的策略，0:轮训策略 1:指定某一个组 2:负载均衡，选择空闲空间最大的
groupstore_lookup=2
#如果上面的 store_lookup 选择了 1，则这里需要指定一个 group
#store_group=group2
#在 group 中的哪台 storage 做主 storage，当一个文件上传到主 storage 后，就由这台机器同步文件到 group 内的其他 storage 上，0：轮训策略 1：根据 ip 地址排序，第一个 2:根据优先级排序，第一个 store_server=0#选择那个 storage 作为主下载服务器，0:轮训策略 1:主上传 storage 作为主下载服务器 download_server=0#选择文件上传到 storage 中的哪个(目录/挂载点),storage 可以有多个存放文件的 base path 0:轮训策略 2:负载均衡，选择空闲空间最大的 store_path=0#系统预留空间，当一个 group 中的任何 storage 的剩余空间小于定义的值，整个 group 就不能上传文件了
reserved_storage_space = 4GB
#日志信息级别
log_level=info
#进程以那个用户/用户组运行，不指定默认是当前用户
run_by_group=
run_by_user=
#允许那些机器连接 tracker 默认是所有机器
allow_hosts=*
#设置日志信息刷新到 disk 的频率，默认 10
ssync_log_buff_interval = 10
#检测 storage 服务器的间隔时间，storage 定期主动向 tracker 发送心跳，如果在指定的时间没收到信号，tracker 人为 storage 故障，默认 120
scheck_active_interval = 120
#线程栈的大小，最小 64K
thread_stack_size = 64KB
#storage 的 ip 改变后服务端是否自动调整，storage 进程重启时才自动调整
storage_ip_changed_auto_adjust = true
#storage 之间同步文件的最大延迟，默认 1 天
storage_sync_file_max_delay = 86400
#同步一个文件所花费的最大时间
storage_sync_file_max_time = 300
#是否用一个 trunk 文件存储多个小文件
use_trunk_file = false
#最小的 solt 大小，应该小于 4KB，默认 256bytes
slot_min_size = 256
#最大的 solt 大小，如果上传的文件小于默认值，则上传文件被放入 trunk 文件中
slot_max_size = 16MB
#trunk 文件的默认大小，应该大于 4M
trunk_file_size = 64MB
#http 服务是否生效，默认不生效
http.disabled=false
#http 服务端口
http.server_port=8080
#检测 storage 上 http 服务的时间间隔，<=0 表示不检测
http.check_alive_interval=30
#检测 storage 上 http 服务时所用请求的类型，tcp 只检测是否可以连接，http 必须返回 200
http.check_alive_type=tcp
#通过 url 检测 storage http 服务状态
http.check_alive_uri=/status.html
#if need find content type from file extension namehttp.need_find_content_type=true#用 include 包含进 http 的其他设置
##include http.conf

启动 tracker 进程

fdfs_trackerd /etc/fdfs/tracker.conf

检测状态

netstat -tupln|grep tracker#可以看到如下：tcp 0 0 0.0.0.0:22122 0.0.0.0:* LISTEN 18559/fdfs_trackerd

storage.conf 配置文件分析：

#同 tracker.confdisabled=false#这个 storage 服务器属于那个 groupgroup_name=group1#同 tracker.confbind_addr=#连接其他服务器时是否绑定地址，bind_addr 配置时本参数才有效 client_bind=true#同 tracker.confport=23000
connect_timeout=30
network_timeout=60
#主动向 tracker 发送心跳检测的时间间隔
heart_beat_interval=30
#主动向 tracker 发送磁盘使用率的时间间隔
stat_report_interval=60
#同 tracker.confbase_path=/opt/fdfs
max_connections=256
#接收/发送数据的 buff 大小，必须大于 8KB
buff_size = 256KB
#同 tracker.conf
work_threads=4
#磁盘 IO 是否读写分离
disk_rw_separated = true
#是否直接读写文件，默认关闭
disk_rw_direct = false
#混合读写时的读写线程数
disk_reader_threads = 1
disk_writer_threads = 1
#同步文件时如果 binlog 没有要同步的文件，则延迟多少毫秒后重新读取，0 表示不延迟
sync_wait_msec=50
#同步完一个文件后间隔多少毫秒同步下一个文件，0 表示不休息直接同步
sync_interval=0
#表示这段时间内同步文件
sync_start_time=00:00
sync_end_time=23:59
#同步完多少文件后写 mark 标记
write_mark_file_freq=500
#storage 在存储文件时支持多路径，默认只设置一个
store_path_count=1
#配置多个 store_path 路径，从 0 开始，如果 store_path0 不存在，则 base_path 必须存在
store_path0=/opt/fdfs
#store_path1=/opt/fastdfs2
#subdir_count * subdir_count 个目录会在 store_path 下创建，采用两级存储
subdir_count_per_path=256
#设置 tracker_server
tracker_server=x.x.x.x:22122
#同 tracker.conf
log_level=info
run_by_group=
run_by_user=
allow_hosts=*
#文件在数据目录下的存放策略，0:轮训 1:随机
file_distribute_path_mode=0
#当问及是轮训存放时，一个目录下可存放的文件数目
file_distribute_rotate_count=100
#写入多少字节后就开始同步，0 表示不同步
fsync_after_written_bytes=0
#刷新日志信息到 disk 的间隔
sync_log_buff_interval=10
#同步 storage 的状态信息到 disk 的间隔
sync_stat_file_interval=300
#线程栈大小
thread_stack_size=512KB
#设置文件上传服务器的优先级，值越小越高
upload_priority=10
#是否检测文件重复存在，1:检测 0:不检测
check_file_duplicate=0
#当 check_file_duplicate 设置为 1 时，次值必须设置
key_namespace=FastDFS
#与 FastDHT 建立连接的方式 0:短连接 1:长连接
keep_alive=0
#同 tracker.conf
http.disabled=false
http.domain_name=
http.server_port=8888
http.trunk_size=256KB
http.need_find_content_type=true
##include http.conf

启动 storage 进程

fdfs_storaged /etc/fdfs/storage.conf

检测状态

netstat -tupln | grep storage#结果如下：tcp 0 0 0.0.0.0:23000 0.0.0.0:* LISTEN 17138/fdfs_storaged

client.conf 配置文件分析：

#同 tracker.confconnect_timeout=30
network_timeout=60
base_path=/opt/fdfs
tracker_server=x.x.x.x:22122
log_level=info
http.tracker_server_port=8080

测试上传文件：

fdfs_upload_file /etc/fdfs/client.conf client.conf#返回如下字符串 group1/M00/00/00/CgEGflAqaFW4hENaAAACo8wrbSE16.conf

在 storage 的数据目录下的 00/00 目录下即可看到该文件，文件名称是 CgEGflAqaFW4hENaAAACo8wrbSE16.conf