您当前的位置：首页 > 学海无涯 > 应用搭建网站首页应用搭建

GoFastDFS分布式存储使用指南

发布时间：2021-01-13作者：♂逸風★淩軒

一、项目Git地址 ：

https://github.com/sjqzhang/go-fastdfs
官方文档地址：https://sjqzhang.github.io/go-fastdfs/usage.html#description
go-fastdfs简介


    go-fastdfs是一个基于http协议的分布式文件系统，它基于大道至简的设计理念，一切从简设计，使得它的运维及扩展变得更加简单，它具有高性能、高可靠、无中心、免维护等优点。
    此文件系统搭建十分简单，并且性能极佳，相对于fastdfs，go-fastdfs部署运维十分简单，中小型公司使用完全足够。且项目本身自带性能测试与压测脚本，测试也十分简单。
    特性
    支持curl命令上传
    支持浏览器上传
    支持HTTP下载
    支持多机自动同步
    支持断点下载
    支持配置自动生成
    支持小文件自动合并(减少inode占用)
    支持秒传
    支持跨域访问
    支持一键迁移
    支持并行体验
    支持断点续传(tus)
    支持docker部署
    支持自监控告警
    支持图片缩放
    支持google认证码
    支持自定义认证
    支持集群文件信息查看
    使用通用HTTP协议
    无需专用客户端（支持wget,curl等工具）
    类fastdfs
    高性能 （使用leveldb作为kv库）
    高可靠（设计极其简单，使用成熟组件）
    无中心设计(所有节点都可以同时读写)
    优点
    无依赖(单一文件）
    自动同步
    失败自动修复
    按天分目录方便维护
    支持不同的场景
    文件自动去重
    支持目录自定义
    支持保留原文件名
    支持自动生成唯一文件名
    支持浏览器上传
    支持查看集群文件信息
    支持集群监控邮件告警
    支持小文件自动合并(减少inode占用)
    支持秒传
    支持图片缩放
    支持google认证码
    支持自定义认证
    支持跨域访问
    极低资源开销
    支持断点续传(tus)
    支持docker部署
    支持一键迁移（从其他系统文件系统迁移过来）
    支持并行体验（与现有的文件系统并行体验，确认OK再一键迁移）
    支持token下载　token=md5(file_md5+timestamp)
    运维简单，只有一个角色（不像fastdfs有三个角色Tracker Server,Storage Server,Client），配置自动生成
    每个节点对等（简化运维）
    所有节点都可以同时读写



二、项目基本参数：

1、自测、开发、测试环境：

项目存储：公共存储和私密存储两部分

公共存储：定义g为公共头，group开始于g1、g2.....g(N),默认不进行下载校验


"host": "http://192.168.199.241:8080",
"组号": "用于区别不同的集群(上传或下载)与support_group_manage配合使用,带在下载路径中",
"group": "g1",
"download_domain": "file.52aiops.cn",
"file_sum_arithmetic": "md5",
"enable_cross_origin": true,
 "下载是否需带token": "真假",
"download_use_token": false,
"下载token过期时间": "单位秒",
"download_token_expire": 600,
 "是否开启Google认证，实现安全的上传、下载": "默认不开启",
"enable_google_auth": false,
 "场景列表": "当设定后，用户指的场景必项在列表中，默认不做限制(注意：如果想开启场景认功能，格式如下：'场景名:googleauth_secret' 如 default:N7IET373HB2C5M6D ",
"scenes": [],
"默认场景": "默认default",
"default_scene": "default",
 "认证url": "当url不为空时生效,注意:普通上传中使用http参数 auth_token 作为认证参数, 在断点续传中通过HTTP头Upload-Metadata中的auth_token作为认证参数,认证流程参考认证架构图",
"auth_url": "",
 "下载是否认证": "默认不认证(注意此选项是在auth_url不为空的情况下生效)",
"enable_download_auth": false,
"默认是否下载": "默认下载",
"default_download": true,
"是否开启断点续传": "默认开启",
"enable_tus": true,
"同步单一文件超时时间（单位秒）": "默认为0,程序自动计算，在特殊情况下，自已设定",
"sync_timeout": 0

 1/3    1 2 3 下一页 尾页