fast dsf 单机部署

本贴最后更新于 2586 天前,其中的信息可能已经时移世易

一、安装 fastdfs

下载 libfastcommon 包

https://github.com/happyfish100/libfastcommon/releases

下载 fastdfs 源码包

https://github.com/happyfish100/fastdfs/releases

安装 libfastcommon

> tar xf libfastcommon-1.0.7.tar.gz

> cd libfastcommon-1.0.7

> ./make.sh

> ./make.sh install

|

安装 fastdfs

> tar xf fastdfs-5.09.tar.gz

> cd fastdfs-5.09

> ./make.sh

> ./make.sh install

如果出现 ioevent.h:82:2: #error port me 这样的错误,请下载最新版的 libfastcommon 并安装。

二、环境说明

创建两台虚拟主机,IP 分别为 192.168.1.222 和 192.168.1.233,分别安装 fastdfs。

三、fastdfs 的配置文件

配置文件默认在/etc/fdfs 下
默认脚本在/etc/init.d 下

创建两个目录,用来存放数据

> mkdir -p /data/fdfs_tracker

> mkdir -p /data/fdfs_storage

复制配置文件

> cd /etc/fdfs

> cp storage.conf.sample storage.conf

> cp tracker.conf.sample tracker.conf

跟踪器的配置文件 tracker.conf

#绑定IP

bind_addr=

#端口

port=22122

#连接超时时间

connect_timeout=30

#日志数据路径

base_path=/data/fdfs_tracker

#上传文件时选择group的方法

#0:轮询,1:指定组,2:选择剩余空间最大

store_lookup=2

#如果上面的配置是1,那么这里必须指定组名

store_group=group2

#上传文件时选择server的方法

#0:轮询,1:按IP地址排序,2:通过权重排序

store_server=0

#storage上预留空间

reserved_storage_space = 10%

存储节点的配置文件 storage.conf

#storage server所属组名

group_name=group1

#绑定IP

bind_addr=

#storage server的端口

port=23000

#连接超时时间

connect_timeout=30

#日志数据路径

base_path=/data/fdfs_storage/base

#storage path的个数

store_path_count=2

#根据store_path_count的值,就要有storage0到storage(N-1)个

store_path0=/data/fdfs_storage/storage0

store_path1=/data/fdfs_storage/storage1

#跟踪服务器

tracker_server=192.168.1.222:22122

tracker_server=192.168.1.233:22122

创建目录,不然会出错

> mkdir -p /data/fdfs_storage/base

> mkdir -p /data/fdfs_storage/storage0

> mkdir -p /data/fdfs_storage/storage1

启动服务

> /etc/init.d/fdfs_trackerd start

> /etc/init.d/fdfs_storaged start

查看服务是否启动

> ps -ef|grep fdfs

> netstat -nltp

四、测试 fastdfs

配置 client 文件

> cd /etc/fdfs

> cp client.conf.sample client.conf

> vi client.conf

#存放日志目录

base_path=/data/client

#跟踪服务器

tracker_server=192.168.1.222:22122

tracker_server=192.168.1.233:22122

创建 client 目录

> mkdir -p /data/client

通过 fdfs_upload_file 来测试(如果发生错误,请查看防火墙)

> echo "12345678" >> /data/1.txt

> fdfs_upload_file /etc/fdfs/client.conf /data/1.txt

通过 fdfs_download_file 下载我们刚上传的文件

> fdfs_download_file /etc/fdfs/client.conf group1/M00/00/00/wKgB3li3a2mAejYPAAAADok0NhY177.txt

查看文件信息

> fdfs_file_info /etc/fdfs/client.conf group1/M00/00/00/wKgB3li3a2mAejYPAAAADok0NhY177.txt

追加文件

> echo "hello" >> /data/2.txt

> fdfs_upload_appender /etc/fdfs/client.conf /data/1.txt

> fdfs_append_file /etc/fdfs/client.conf group1/M00/00/00/wKgB3li3bxCEAcqhAAAAAIk0NhY869.txt /data/2.txt

删除文件

> fdfs_delete_file /etc/fdfs/client.conf group1/M00/00/00/wKgB3li3a2mAejYPAAAADok0NhY177.txt

查看集群

> fdfs_monitor /etc/fdfs/client.conf
|

五、fastdfs 的 nginx 模块

下载 pcre 和 nginx 源码包

https://ftp.pcre.org/pub/pcre/

如:pcre-8.40.tar.gz

http://nginx.org/en/download.html

如:nginx-1.10.3.tar.gz

https:``//github.com/happyfish100/fastdfs-nginx-module

如:fastdfs-nginx-module-master.zip

创建用户

> useradd -s /sbin/nologin -M nginx

安装 pcre

> tar xf pcre-8.40.tar.gz

> cd pcre-8.40

> ./configure --prefix=/data/pcre

> make && make install

安装 nginx

> yum install zlib-devel openssl-devel

> unzip fastdfs-nginx-module-master.zip

> tar xf nginx-1.10.3.tar.gz

> cd nginx-1.10.3

> ./configure --prefix=/data/nginx \

> --with-pcre=/data/pcre-8.40 \

> --user=nginx \

> --group=nginx \

> --with-http_ssl_module \

> --with-http_realip_module \

> --with-http_stub_status_module \

> --add-module=/data/fastdfs-nginx-module-master/src

> make && make install

拷贝配置文件

> cd /data/fastdfs-nginx-module-master/src

> cp mod_fastdfs.conf /etc/fdfs/

> cd /data/fastdfs-5.09/conf

> cp anti-steal.jpg http.conf mime.types /etc/fdfs/

修改 nginx.conf

> vi /data/nginx/conf/nginx.conf

server {

listen 80;

server_name localhost;

location ~ /group[0-9]/M00 {

ngx_fastdfs_module;

}

}

修改 mod_fastdfs.conf

> vi /etc/fdfs/mod_fastdfs.conf

#日志目录

base_path=/tmp

#跟踪服务器

tracker_server=192.168.1.222:22122

tracker_server=192.168.1.233:22122

#url中是否有group名称

url_have_group_name = true

#storage path的个数

store_path_count=2

#根据store_path_count的值,就要有storage0到storage(N-1)个

store_path0=/data/fdfs_storage/storage0

store_path1=/data/fdfs_storage/storage1

启动 nginx

> /data/nginx/sbin/nginx

上传一个文件

> echo "12345678" >> /data/1.txt

> fdfs_upload_file /etc/fdfs/client.conf /data/1.txt

然后通过 nginx 访问该文件

http://192.168.1.222/group1/M00/00/00/wKgB6Vi3fGiAMsO2AAAAB2BGSN8003.txt

  • 工具

    子曰:“工欲善其事,必先利其器。”

    286 引用 • 729 回帖
  • GitHub

    GitHub 于 2008 年上线,目前,除了 Git 代码仓库托管及基本的 Web 管理界面以外,还提供了订阅、讨论组、文本渲染、在线文件编辑器、协作图谱(报表)、代码片段分享(Gist)等功能。正因为这些功能所提供的便利,又经过长期的积累,GitHub 的用户活跃度很高,在开源世界里享有深远的声望,并形成了社交化编程文化(Social Coding)。

    209 引用 • 2031 回帖
  • FastDFS

    FastDFS 是用 C 语言编写的一款开源分布式文件系统。FastDFS 为互联网量身定制,充分考虑了冗余备份、负载均衡、线性扩容等机制,并注重高可用、高性能等指标,使用 FastDFS 很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。

    17 引用 • 10 回帖 • 1 关注

相关帖子

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...

推荐标签 标签

  • jsDelivr

    jsDelivr 是一个开源的 CDN 服务,可为 npm 包、GitHub 仓库提供免费、快速并且可靠的全球 CDN 加速服务。

    5 引用 • 31 回帖 • 58 关注
  • QQ

    1999 年 2 月腾讯正式推出“腾讯 QQ”,在线用户由 1999 年的 2 人(马化腾和张志东)到现在已经发展到上亿用户了,在线人数超过一亿,是目前使用最广泛的聊天软件之一。

    45 引用 • 557 回帖 • 67 关注
  • Gzip

    gzip (GNU zip)是 GNU 自由软件的文件压缩程序。我们在 Linux 中经常会用到后缀为 .gz 的文件,它们就是 Gzip 格式的。现今已经成为互联网上使用非常普遍的一种数据压缩格式,或者说一种文件格式。

    9 引用 • 12 回帖 • 134 关注
  • 星云链

    星云链是一个开源公链,业内简单的将其称为区块链上的谷歌。其实它不仅仅是区块链搜索引擎,一个公链的所有功能,它基本都有,比如你可以用它来开发部署你的去中心化的 APP,你可以在上面编写智能合约,发送交易等等。3 分钟快速接入星云链 (NAS) 测试网

    3 引用 • 16 回帖
  • Jenkins

    Jenkins 是一套开源的持续集成工具。它提供了非常丰富的插件,让构建、部署、自动化集成项目变得简单易用。

    53 引用 • 37 回帖
  • 单点登录

    单点登录(Single Sign On)是目前比较流行的企业业务整合的解决方案之一。SSO 的定义是在多个应用系统中,用户只需要登录一次就可以访问所有相互信任的应用系统。

    9 引用 • 25 回帖
  • Firefox

    Mozilla Firefox 中文俗称“火狐”(正式缩写为 Fx 或 fx,非正式缩写为 FF),是一个开源的网页浏览器,使用 Gecko 排版引擎,支持多种操作系统,如 Windows、OSX 及 Linux 等。

    8 引用 • 30 回帖 • 407 关注
  • wolai

    我来 wolai:不仅仅是未来的云端笔记!

    2 引用 • 14 回帖
  • Openfire

    Openfire 是开源的、基于可拓展通讯和表示协议 (XMPP)、采用 Java 编程语言开发的实时协作服务器。Openfire 的效率很高,单台服务器可支持上万并发用户。

    6 引用 • 7 回帖 • 94 关注
  • RYMCU

    RYMCU 致力于打造一个即严谨又活泼、专业又不失有趣,为数百万人服务的开源嵌入式知识学习交流平台。

    4 引用 • 6 回帖 • 51 关注
  • C++

    C++ 是在 C 语言的基础上开发的一种通用编程语言,应用广泛。C++ 支持多种编程范式,面向对象编程、泛型编程和过程化编程。

    107 引用 • 153 回帖
  • 创造

    你创造的作品可能会帮助到很多人,如果是开源项目的话就更赞了!

    179 引用 • 995 回帖
  • OkHttp

    OkHttp 是一款 HTTP & HTTP/2 客户端库,专为 Android 和 Java 应用打造。

    16 引用 • 6 回帖 • 62 关注
  • OnlyOffice
    4 引用 • 3 关注
  • 设计模式

    设计模式(Design pattern)代表了最佳的实践,通常被有经验的面向对象的软件开发人员所采用。设计模式是软件开发人员在软件开发过程中面临的一般问题的解决方案。这些解决方案是众多软件开发人员经过相当长的一段时间的试验和错误总结出来的。

    200 引用 • 120 回帖
  • Lute

    Lute 是一款结构化的 Markdown 引擎,支持 Go 和 JavaScript。

    25 引用 • 191 回帖 • 16 关注
  • Ubuntu

    Ubuntu(友帮拓、优般图、乌班图)是一个以桌面应用为主的 Linux 操作系统,其名称来自非洲南部祖鲁语或豪萨语的“ubuntu”一词,意思是“人性”、“我的存在是因为大家的存在”,是非洲传统的一种价值观,类似华人社会的“仁爱”思想。Ubuntu 的目标在于为一般用户提供一个最新的、同时又相当稳定的主要由自由软件构建而成的操作系统。

    125 引用 • 169 回帖 • 1 关注
  • Log4j

    Log4j 是 Apache 开源的一款使用广泛的 Java 日志组件。

    20 引用 • 18 回帖 • 31 关注
  • 安全

    安全永远都不是一个小问题。

    199 引用 • 816 回帖 • 1 关注
  • MongoDB

    MongoDB(来自于英文单词“Humongous”,中文含义为“庞大”)是一个基于分布式文件存储的数据库,由 C++ 语言编写。旨在为应用提供可扩展的高性能数据存储解决方案。MongoDB 是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功能最丰富,最像关系数据库的。它支持的数据结构非常松散,是类似 JSON 的 BSON 格式,因此可以存储比较复杂的数据类型。

    90 引用 • 59 回帖 • 1 关注
  • Solo

    Solo 是一款小而美的开源博客系统,专为程序员设计。Solo 有着非常活跃的社区,可将文章作为帖子推送到社区,来自社区的回帖将作为博客评论进行联动(具体细节请浏览 B3log 构思 - 分布式社区网络)。

    这是一种全新的网络社区体验,让热爱记录和分享的你不再感到孤单!

    1434 引用 • 10054 回帖 • 490 关注
  • golang

    Go 语言是 Google 推出的一种全新的编程语言,可以在不损失应用程序性能的情况下降低代码的复杂性。谷歌首席软件工程师罗布派克(Rob Pike)说:我们之所以开发 Go,是因为过去 10 多年间软件开发的难度令人沮丧。Go 是谷歌 2009 发布的第二款编程语言。

    497 引用 • 1387 回帖 • 283 关注
  • GitLab

    GitLab 是利用 Ruby 一个开源的版本管理系统,实现一个自托管的 Git 项目仓库,可通过 Web 界面操作公开或私有项目。

    46 引用 • 72 回帖
  • JRebel

    JRebel 是一款 Java 虚拟机插件,它使得 Java 程序员能在不进行重部署的情况下,即时看到代码的改变对一个应用程序带来的影响。

    26 引用 • 78 回帖 • 664 关注
  • RabbitMQ

    RabbitMQ 是一个开源的 AMQP 实现,服务器端用 Erlang 语言编写,支持多种语言客户端,如:Python、Ruby、.NET、Java、C、PHP、ActionScript 等。用于在分布式系统中存储转发消息,在易用性、扩展性、高可用性等方面表现不俗。

    49 引用 • 60 回帖 • 362 关注
  • Postman

    Postman 是一款简单好用的 HTTP API 调试工具。

    4 引用 • 3 回帖 • 3 关注
  • FreeMarker

    FreeMarker 是一款好用且功能强大的 Java 模版引擎。

    23 引用 • 20 回帖 • 463 关注