fastdfs下载 (fastdfs部署)

在当今互联网时代，随着数据量的不断增长和对数据存储、传输效率的要求日益提高，文件存储系统成为各类应用程序中不可或缺的一部分。FastDFS作为一个开源的分布式文件系统，以其高性能、高可靠性和横向扩展性受到了广泛关注和应用。本文将重点围绕FastDFS的下载和部署进行详细分析，希望能为读者提供深入了解及指导。

我们来谈谈FastDFS的下载过程。在下载FastDFS之前，首先要确保我们了解该软件的基本信息。FastDFS是一个轻量级高性能分布式文件系统，设计用于互联网文件服务器集群。它由跟踪服务器（tracker server）和存储服务器（storage server）组成，通过Tracker服务器来管理存储服务器。通过官方网站或GitHub等渠道，我们可以找到FastDFS的最新版本，并选择适合自己系统的下载方式，一般来说有源码包和二进制包两种选择。

我们需要了解如何进行FastDFS的部署。一般来说，FastDFS的部署包括Tracker服务器和Storage服务器两部分。在部署Tracker服务器时，我们需要先配置Tracker服务器的IP、端口等相关信息，并启动Tracker服务。随后，配置Storage服务器的相关信息，如Storage服务器的存储路径、Tracker服务器的IP等，并启动Storage服务。在部署过程中，需要注意Tracker服务器和Storage服务器之间的通信方式和机制，确保它们之间的正常协作。

在实际部署中，还需要考虑到一些额外的因素，例如网络环境的稳定性、服务器硬件配置的选择等。由于FastDFS是一个高性能的分布式文件系统，因此在部署时需要确保服务器的硬件配置足够强大，包括CPU、内存、磁盘等，以保证系统的运行稳定性和性能。

除了硬件配置外，还需要注意网络环境的影响。由于FastDFS是一个分布式系统，Tracker服务器和Storage服务器之间需要频繁的通信和数据交换，因此需要保证网络环境的稳定性和带宽的充足性，以避免网络延迟和通信失败等问题。

在部署过程中还需要考虑到数据的备份和安全性等问题。FastDFS的高可靠性主要是通过数据的冗余备份来实现的，因此在部署时需要考虑到数据的备份策略以及数据的恢复机制。同时，还需要保证系统的安全性，防止数据泄露或者数据被篡改等安全问题。

FastDFS作为一个高性能、高可靠性的分布式文件系统，在下载和部署过程中需要考虑到诸多因素，包括软件的基本信息、服务器的硬件配置、网络环境的影响、数据的备份和安全性等方面。通过认真的分析和规划，我们可以更好地利用FastDFS提供的优势，构建一个高性能、高可靠性的文件存储系统，满足不同应用场景的需求。

centos 系统下安装配置FastDFS步骤分享

centos 系统下安装配置FastDFS步骤:

1:安装libevent(libevent-2.0.16-stable)

##卸载系统自带libevent

rpm -qa|grep libevent rpm -e libevent*

##为Trackerd和Storaged节点节点安装libevent

cd /home/ylh

cd libevent-2.0.16-stable

./configure

makemake install

##为libevent创建软链接到/lib库下，64位系统对应/lib64

ln -s /usr/local/lib/libevent* /lib/

ln -s /usr/local/lib/libevent* /lib64/

2:为Trackerd节点安装FastDFS,并修改配置文件/etc/fdfs/( 如果Trackerd需要使用内置的web server,需要修改make文件，启用WITH_HTTPD=1再编译)

cd /home/ylh

wget-zxvf FastDFS_

cd FastDFS_v3.06

##创建存储目录

mkdir /home/ylh/fastdfs

##修改配置文件. vim /etc/fdfs/ 修改后保存退出

##启动Trackerd

/usr/local/bin/fdfs_trackerd /etc/fdfs/

3:为Storaged节点安装FastDFS， Storaged节点也需要libevent，安装步骤参见第一步

cd /home/ylh

wget-zxvf FastDFS_

cd FastDFS_v3.06

4:为Storaged节点安装web服务器，Storaged节点可以使用nginx或者apache提供http下载服务。这里我们选用nginx。

cd /home/ylh

cd nginx-0.8.55

./configure –prefix=/opt/nginx –with-http_stub_status_module

makemake install

5:为Storaged节点安装fastdfs-nginx-module

cd /home/ylh

wgetxzf fastdfs_nginx_module_

cd /home/ylh/nginx-0.8.55 ./configure –add-module=/home/ylh/fastdfs-nginx-module/src

make; make install

6:修改nginx配置文件并保存退出 (vim /usr/local/nginx/conf/)

location /M00 {

root /home/ylh/fastdfs/data;

ngx_fastdfs_module;

7:拷贝并修改nginx模块配置文件

cp /home/ylh/fastdfs-nginx-module/src/mod_ /etc/fdfs

vim 修改/etc/fdfs/mod_ 保存退出

##启动nginx

/usr/local/nginx/sbin/nginx

8:修改Storaged节点的配置文件/etc/fdfs/，启动Storaged

##创建存储目录 mkdir /home/ylh/fastdfs

##修改配置 vim /etc/fdfs/ 修改后保存退出

##启动 Storaged

/usr/local/bin/fdfs_storaged /etc/fdfs/

9:测试

## 修改客户端配置文件/etc/conf/文件并保存退出

##测试上传

/usr/local/bin/ fs_test /etc/conf/ upload /home/

如果上传成功回显信息中有文件的url,在浏览器中，输入url地址， tracker server会自动重定向到存储文件的storage server，文件下载成功。

至此，已经成功搭建了FastDFS

如何安装FastDFS

目前FastDFS支持类Unix系统 ，在Linux和FreeBSD下测试过，本文使用的是Ubuntu10.4，建议安装之前先简单了解一下FastDFS的原理 ，这对后继的配置部分会有很好的理解。

一、准备工作-安装libeventFastDFS 内部绑定了 libevent 作为 http 服务器 ，在V2.X版本必须安装 libevent ，本文安装的是V2.2版本，因此必须安装libevent。

（官方也推荐使用 http 方式下载 文件 ）如果已经安装了 libevent，请确认安装路径是 /usr ， 因为 FastDFS 在编译源程序时，需要到此目录下查找一些依赖文件，否则编译 FastDFS 会出错 。

如果不是，建议首先卸载 libevent ，然后安装到 /usr 下。

Ubuntu10.4默认是安装了libevent，可以到软件中心卸载掉然后按照下面介绍的方式安装。

安装步骤：解压 libevent ，然后进入解压后的目录分别执行：Shell代码./configure –prefix=/usrmake clean;makemake install安装libevent完成。

二、安装 FastDFS1、下载 FastDFS 源程序2、在 FastDFS_ 所在文件夹下执行：Shell代码sudo tar vxzf FastDFS_ /home/soar/FastDFS注： /home/soar/FastDFS 也可以是其他目录，记住这是解压目录，以后用 %FastDFS% 表示）3、由于要使用内置的 http 服务，因此编辑 %FastDFS%/ 文件，找到#WITH_HTTPD=1修改成WITH_HTTPD=1以支持 http4、进入 %FastDFS% 目录，执行：Shell代码sudo ./5、在 %FastDFS% 目录下，执行：Shell代码sudo ./ install如果运行如上命令后，在命令行信息最后看到类似Shell代码#ln -fs /usr/local/lib/.1 /usr/local/lib/#ln -fs /usr/local/lib/.1 /usr/local/lib/ ./fdfs_link_恭喜你，已经安装成功了！FastDFS的配置文件在%FastDFS%/conf目录下，其中包括 客户端上传配置文件 文件存储服务器配置文件 负责均衡调度服务器配置文件 http服务器配置文件配置文件需要根据服务器环境的不同，进行不同的配置，具体可以参考FastDFS官方的安装配置文档，以及FastDFS原理介绍文档在本例中，Tracker Server，Storage Server都安装在一台服务器上，IP:10.0.2.151、配置及启动Tracker ServerA、修改%FastDFS%/conf/文件，修改如下#可以自己指定目录位置，但目录必须存在，用于存储日志及storage server等信息，否则tracker server无法启动Txt代码base_path=/home/yuqing/fastdfs -> base_path=/home/soar/fastdfs_tracker#改成你想要的http端口，将来http下载文件的端口就是他了Txt代码_port=8080 -> _port=8090#http支持Txt代码##include -> #include #默认4GB，如果空间不足，建议调小，否则会报no free space的异常，无法正常启动Txt代码reserved_storage_space = 4GB -> reserved_storage_space = 1GB#tracker server对storage server供服务的端口，使用默认的即可，也可以自定义Txt代码port=B、将文件拷贝到/etc/fdfs目录下，执行Shell代码sudo cp %FastDFS%/conf/ /etc/fdfs/注：为了支持http，必须将这个文件拷贝到此目录，否则无法启动，报param not exist or is empty类似的错误C、进入/usr/local/bin/目录，启动tracker服务器，执行Shell代码sudo fdfs_trackerd %FastDFS%/conf/、进入/home/soar/fastdfs_tracker/logs/查看tracker的启动日志，如果看到类似Shell代码[2010-11-04 16:21:25] INFO – FastDFS v2.02, base_path=/home/soar/fastdfs_tracker, connect_timeout=30s, network_timeout=60s, port=, bind_addr=, max_connections=256, work_threads=4, store_lookup=2, store_group=, store_server=0, store_path=0, reserved_storage_space=4MB, download_server=0, allow_ip_count=-1, sync_log_buff_interval=10s, check_active_interval=120s, thread_stack_size=64 KB, storage_ip_changed_auto_adjust=1, storage_sync_file_max_delay=s, storage_sync_file_max_time=300s[2010-11-04 16:21:25] INFO – HTTP supported: server_port=8090, default_content_type=application/octet-stream, anti_steal_token=0, token_ttl=0s, anti_steal_secret_key length=0, token_check_fail content_type=, token_check_fail buff length=0, check_active_interval=30, check_active_type=tcp, check_active_uri=/恭喜你，tracker server已经启动成功！2、配置及启动Storage ServerA、修改%FastDFS%/conf/文件，修改如下：#可以自定义，但必须存在此目录，用于存储storage相关的log、group内的相关信息Txt代码base_path=/home/yuqing/fastdfs -> /home/soar/fastdfs_storge#文件的存储位置，在一台storage server上可以指定多个存储位置Txt代码store_path0=/home/yuqing/fastdfs -> store_path0=/home/soar/fastdfs_storge#必须指定Txt代码group_name=group1#修改成tracker server的IP和端口信息Txt代码tracker_server=192.168.209.121 -> tracker_server=10.0.2.15#http支持Txt代码##include ->#include 、进入/usr/local/bin/目录，启动storage服务器，执行Shell代码sudo fdfs_storaged %FastDFS%/conf/、进入/home/soar/fastdfs_tracker/logs/查看storage服务器启动日志，如果看到类似Shell代码[2010-11-04 16:37:16] INFO – FastDFS v2.02, base_path=/home/soar/fastdfs_storge, store_path_count=1, subdir_count_per_path=256, group_name=group1, connect_timeout=30s, network_timeout=60s, port=, bind_addr=, client_bind=1, max_connections=256, work_threads=4, disk_rw_separated=1, disk_reader_threads=1, disk_writer_threads=1, buff_size=256KB, heart_beat_interval=30s, stat_report_interval=60s, tracker_server_count=1, sync_wait_msec=200ms, sync_interval=0ms, sync_start_time=00:00, sync_end_time=23:59, write_mark_file_freq=500, allow_ip_count=-1, file_distribute_path_mode=0, file_distribute_rotate_count=100, fsync_after_written_bytes=0, sync_log_buff_interval=10s, sync_binlog_buff_interval=60s, sync_stat_file_interval=300s, thread_stack_size=512 KB, upload_priority=10, if_alias_prefix=, check_file_duplicate=0, FDHT group count=0, FDHT server count=0, FDHT key_namespace=, FDHT keep_alive=0, HTTP server port=8888, domain name=[2010-11-04 16:37:16] INFO – HTTP supported: server_port=8888, http_trunk_size=, default_content_type=application/octet-stream, anti_steal_token=0, token_ttl=0s, anti_steal_secret_key length=0, token_check_fail content_type=, token_check_fail buff length=0[2010-11-04 16:37:16] INFO – file: storage_param_getter.c, line: 48, storage_ip_changed_auto_adjust=1[2010-11-04 16:37:19] INFO – file: tracker_client_thread.c, line: 274, successfully connect to tracker server 10.0.2.15, as a tracker client, my ip is 10.0.2.15恭喜你，storage server已经启动成功！经过前面的安装、配置、启动，马上就可以看到FastDFS的效果了，我们先上传一个文件，然后再通过http下载。

一、上传文件FastDFS安装包中，自带了客户端程序，通过程序可以进行文件上传。

在使用这个客户端程序之前，首先需要配置，然后再进行文件上传及下载。

1、修改%FastDFS%/conf/文件，修改如下：#可自定义，但此目录必须存在，用于存放文件上传logTxt代码base_path=/home/yuqing/fastdfs-> base_path=/home/soar/fastdfs_trackerTxt代码tracker_server=192.168.209.121 -> tracker_server=10.0.2.15Txt代码_server_port=8080 ->_server_port=8090#支持httpTxt代码##include ->#include 2、进入/usr/local/bin/目录，上传文件，执行Txt代码sudo fdfs_test %FastDFS%/conf/ upload 注可以在/usr/local/bin/目录下自己创建一个如果命令行反馈类似如下：则说明上传文件成功。

关于fastdfs集群和备份配置1、修改文件中store_lookup=2 平衡负载2、修改文件中store_server=0 采用轮询方式。

如果希望只使用一台文件存储服务器，其他二台做备份，则修改文件tracker_server为某台主机的IP，只启动文件存储服务器的tracker，其他二台备份服务器不需要启动tracker。

如果希望三台服务器集群使用，互相备份，比如：使用A机器存储文件，这时候A机器会将文件同步到B机器和C机器，同理使用B机器存储文件，则会同时将文件同步到A机器和C机器。

这时候需要将所有的机器IP和端口号都配置在中，如下所示：tracker_server=10.207.16.127tracker_server=10.207.16.129

如何在Linux系统中安装配置FastDFS软件

在Linux系统中进行FastDFS软件的安装配置，方法的过程中是很复杂的，所以如果不是专业的电脑高手可能是没有办法整理出来，所以为了方便网友们更好的了解这个软件的安装，一下就是详细的过程，大家一起来看看吧！第一步：安装FastDFS 1.解压 FastDFS_ ==>FastDFS 2. cd FastDFS ==>vim 修改以下内容 TARGET_PREFIX=/usr/local/fdfs TARGET_CONF_PATH=/usr/local/fdfs/conf mkdir -p /usr/local/fdfs mkdir -p /usr/local/fdfs/conf 修改 if [ $uname = Linux ]; then if [ $WITH_LINUX_SERVICE = 1 ]; then if [ ! -d $TARGET_CONF_PATH ]; then mkdir -p $TARGET_CONF_PATH cp -f conf/ $TARGET_CONF_PATH cp -f conf/ $TARGET_CONF_PATH cp -f conf/ $TARGET_CONF_PATH cp -f conf/ $TARGET_CONF_PATH cp -f conf/ $TARGET_CONF_PATH fi cp -f init.d/fdfs_trackerd /etc/rc.d/init.d/ cp -f init.d/fdfs_storaged /etc/rc.d/init.d/ /sbin/chkconfig –add fdfs_trackerd /sbin/chkconfig –add fdfs_storaged fi fi 第二步：安装 1.解压 ==>libevent-2.0.19-stable 2.进入libevent-2.0.19-stable 安装 ./configure –prefix=/usr/local/libevent make make install 3. 添加软连接 ln -s /usr/local/libevent/lib/.5 /usr/lib/.5 ln -s /usr/local/libevent/lib/.5 /usr/lib64/.5 ln -s /usr/local/libevent/lib/.5 /lib64/.5 ln -s /usr/local/libevent/lib/.5 /lib/.5 ln -s /usr/local/libevent/lib/.5 /usr/local/lib64/.5 ln -s /usr/local/libevent/lib/.5 /usr/local/lib/.5 第三步：安装FastDFS ./ C_INCLUDE_PATH=/usr/local/libevent/include LIBRARY_PATH=/usr/local/libevent/lib ./ install 第四步:如果/usr/local/fastdfs/conf没有fdfs_trackerd和fdfs_storaged这两个文件，就从 /FastDFS/tracker 和FastDFS/storage/目录下复制过去 第五步:修改配置 mkdir -p /home/softinstall/data/tracker 1. 修改 base_path=/home/softinstall/data/tracker bind_addr=192.168.9.169 1.1 修改storage_ group1 192.168.9.169 2. 启动tracker ./fdfs_trackerd ../conf/ 查看端口是否启动起来 第六步：配置storage mkdir -p /home/softinstall/data/store mkdir -p /home/softinstall/data/store/store0 mkdir -p /home/softinstall/data/store/store1 mkdir -p /home/softinstall/data/store/store2 1.修改 base_path=/home/softinstall/data/store store_path_count=3 store_path0=/home/softinstall/data/store/store0 store_path1=/home/softinstall/data/store/store1 store_path2=/home/softinstall/data/store/store2 tracker_server=192.168.9.169 #限6*6=36个目录 默认256*256 subdir_count_per_path=6 2. 启动storage ./fdfs_storaged ../conf/ 查看端口是否启动 第七步：安装nginx+fastdfs模块 1. 安装pcre-8.32 进入pcre-8.32 ./configure make make install 安装如果有问题缺省某些包，可以执行: yum groupinstall Development Tools 第八步：解压fastdfs-nginx-module_和 1.进入 fastdfs-nginx-module_v1.15/src vim fastdfs-nginx-module_v1.15/src/config 修改成以下内容 ngx_addon_name=ngx_http_fastdfs_module HTTP_MODULES=$HTTP_MODULES ngx_http_fastdfs_module NGX_ADDON_SRCS=$NGX_ADDON_SRCS $ngx_addon_dir/ngx_http_fastdfs_module.c CORE_INCS=$CORE_INCS /usr/local/fdfs/include/fastdfs /usr/local/fdfs/include/fastcommon/ CORE_LIBS=$CORE_LIBS -L/usr/local/fdfs/lib -lfastcommon -lfdfsclient CFLAGS=$CFLAGS -D_FILE_OFFSET_BITS=64 -DFDFS_OUTPUT_CHUNK_SIZE=256*1024 -DFDFS_MOD_CONF_FILENAME=\/usr/local/fdfs/conf/mod_\ 2. 安装 进入nginx-1.4.2目录 ./configure –prefix=/home/softinstall/nginx/nginx-fastdfs-install –with-pcre=/home/softinstall/nginx/pcre-8.32 –add-module=/home/softinstall/nginx/fastdfs-nginx-module/src 安装中如果有问题 可以执行安装以下包:yum -y install gcc gcc-c++ zlib-devel openssl-devel 3.配置 进入nginx-fastdfs-install/conf vim 配置以下内容 location /M00 { root /home/softinstall/data/store/store0/data; ngx_fastdfs_module; } location /M01 { root /home/softinstall/data/store/store1/data; ngx_fastdfs_module; } location /M02 { root /home/softinstall/data/store/store2/data; ngx_fastdfs_module; } 4.配置mod_ mkdir -p /home/softinstall/data/nginx_mod 进入 /usr/local/fdfs/conf目录 vim mod_ base_path=/home/softinstall/data/nginx_mod tracker_server=192.168.9.169 store_path_count=3 store_path0=/home/softinstall/data/store/store0 store_path1=/home/softinstall/data/store/store1 store_path2=/home/softinstall/data/store/store2 5. 启动nginx 进入 /home/softinstall/nginx/nginx-fastdfs-install/sbin ./nginx 如果启动找不到 error while loading shared libraries: : cannot open shared object file: No such file or directory error while loading shared libraries: : cannot open shared object file: No such file or directory 请使用以下软连接 ln -s /usr/local/fdfs/lib/ /usr/lib/ ln -s /usr/local/fdfs/lib/ /usr/lib64/ ln -s /usr/local/fdfs/lib/ /usr/lib64/ ln -s /usr/local/fdfs/lib/ /usr/lib/ ==========================fastDHT================================ 【第一步:】安装 Berkley DB 【1.】 tar -zxvf 进入 db-4.7.25/build_unix ../dist/configure –prefix=/usr 【第二步:】安装FastDHT mkdir -p /usr/local/fdht mkdir -p /usr/local/fdht/conf 1. tar -zxvf FastDHT_ 进入 FastDHT_v1.23 vim 修改 TARGET_PREFIX=/usr/local/fdht TARGET_CONF_PATH=/usr/local/fdht/conf if [ $1 = install ]; then cd .. cp -f $TARGET_PREFIX/bin cp -f $TARGET_PREFIX/bin if [ $uname = Linux ]; then if [ $WITH_LINUX_SERVICE = 1 ]; then if [ ! -d $TARGET_CONF_PATH ]; then mkdir -p $TARGET_CONF_PATH cp -f conf/ $TARGET_CONF_PATH cp -f conf/fdht_ $TARGET_CONF_PATH cp -f conf/fdht_ $TARGET_CONF_PATH fi cp -f init.d/fdhtd /etc/rc.d/init.d/ /sbin/chkconfig –add fdhtd fi fi fi 【2.】 安装 ./ —————————————————————————— 如果出现 global.h:18:19: error: event.h: No such file or directory 进入/home/softinstall/fastdfs/libevent-2.0.19-stable然后执行 ./configure –prefix=/usr make make install ——————————————————————————— ./ install 【3.】 配置fdht 【3.1】 vim /usr/local/fdht/conf/ port= bash_path=/home/softinstall/data/fastdht cache_size = 32MB store_sub_keys=true use_storage_id=true #include /usr/local/fdht/conf/fdht_ (本行前有#表示打开，如果想关闭此选项，则应该为##开头) 【3.2】 vim /usr/local/fdht/conf/fdht_ group_count = 1 group0 = 192.168.9.165 【3.3】 vim /usr/local/fdht/conf/fdht_ keep_alive=1 (本选项关联 文件) base_path=/home/softinstall/data/fastdht #include /usr/local/fdht/conf/fdht_ 【3.4】 配置FastDFS 的 文件 vi （默认位置： /usr/local/fdfs/conf/） check_file_duplicate=1 本配置项解释： 是否检测上传文件已经存在。

如果已经存在，则不存在文件内容，建立一个索引链接以节省磁盘空间 key_namespace=FastDFS 本配置项解释： 当上个参数设定为1时 ， 在FastDHT中的命名空间 keep_alive=1 本配置项解释： 长连接配置选项，如果为0则为短连接 1为长连接 #include /usr/local/fdht/conf/fdht_ 本配置项解释： 可以通过 #include filename 方式来加载 FastDHT servers 的配置 【3.5】 ===========================总体启动流程====================================== 启动tracker /usr/local/fdfs/bin/fdfs_trackerd /usr/local/fdfs/conf/ 停止tracker /usr/local/fdfs/bin/ /usr/local/fdfs/conf/ 启动storage /usr/local/fdfs/bin/fdfs_storaged /usr/local/fdfs/conf/ 停止storage /usr/local/fdfs/bin/ /usr/local/fdfs/conf/ 启动nginx /home/softinstall/nginx/nginx-fastdfs-install/sbin/nginx 启动 /usr/local/fdht/bin/fdhtd /usr/local/fdht/conf/ 停止 /usr/local/fdht/bin/ /usr/local/fdht/conf/ 测试 是否有错误: /usr/local/fdht/bin/fdht_test /usr/local/fdht/conf/fdht_您希望答能帮助您rpm -ivh面加需要装软件啦您疑问继续追问