golang分布式文件服务器,分享一个用go实现的分布式文件系统：godfs

最新推荐文章于 2024-08-26 08:42:10 发布
最新推荐文章于 2024-08-26 08:42:10 发布
阅读量1.5k 收藏 1
点赞数
文章标签： golang分布式文件服务器
godfs是一个用Go编写的轻量、快速、易用的分布式文件存储服务器，支持Docker并拥有清晰的日志。它提供原生客户端、HTTP API，支持文件分片保存、自动同步及只读节点。通过简单的命令行工具即可上传和下载文件，同时也提供了Docker部署方式。
摘要由CSDN通过智能技术生成

godfs

godfs.svg?branch=master

godfs 是一个用go实现的轻量，快速，简单易用的分布式文件存储服务器。

godfs 开箱即用，并对docker支持友好。

835630cf605270e8bb8cfa9dfc6064e9.png

特性快速, 轻量, 开箱即用, 友好的API

易于扩展，运行稳定

非常低的资源开销

提供原生的客户端和Java客户端(还未开始)

提供HTTP方式的下载和上传API

清晰的日志帮助排查运行异常

支持不同平台下的编译运行: Linux, Windows, Mac

更好地支持docker容器

文件分片保存

完美的文件迁移解决方案

支持读写和只读文件节点

文件组内自动同步

安装请先安装golang1.9+

以CentOS7为例.

从最新的源码构建：yum install golang -y

git clone https://github.com/hetianyi/godfs.git

cd godfs

./make.sh

构建成功后, 三个文件会生成在./bin 目录下，分别是:

./bin/client

最低0.47元/天 解锁文章
廷思
关注
Golang 的分布式系统：架构与实践
AI天才研究院
12-31 1194
1.背景介绍 分布式系统是现代计算机科学的一个重要领域，它涉及到多个计算机节点之间的协同工作，以实现共同完成某个任务或提供某种服务。随着互联网的普及和大数据时代的到来，分布式系统的应用范围和规模不断扩大，成为了企业和组织中不可或缺的基础设施。 Golang，又称 Go，是 Google 发起的一种新型的编程语言。它具有简洁的语法、高性能的编译器和运行时支持，以及强大的并发处理能力。这使得 Go...
Go-godfs是一个用go实现的轻量快速简单易用的分布式文件存储服务器
08-13
godfs 是一个用go实现的轻量，快速，简单易用的分布式文件存储服务器
Go HTTP 文件服务器教程
最新发布
gitblog_00672的博客
08-26 292
Go HTTP 文件服务器教程 项目地址:https://gitcode.com/gh_mirrors/go/go-http-file-server 项目介绍 Go HTTP 文件服务器是一个用 Go 语言编写的轻量级静态文件服务器。它支持文件上传、下载、目录浏览等功能，非常适合用于快速搭建文件共享服务。该项目托管在 GitHub 上，地址为：https://github.com/mjpclab/...
golang开源分布式文件系统weed-fs
08-20 518
weedfs，http://code.google.com/p/ weed-fs / go语言，代码很少，3个可执行文件，很强悍 [root@ghost-rider weedfs]# ls weedclient weedmaster weedvolume 部署测试， 服务器，192.168.2.100 1.启动master服务： [root@ghost-rid...
godfs:用go编写的简单快速，易于使用的分布式文件系统
03-11
Godfs ____ ____ ____ _________ / ___\/ __ \/ __ \/ ___/ __/ GoDFS::v2.0.0-dev / /_/\ /_/ / /_/ / /__/\ \ A distribute filesystem. \____/\____/____./_/______/ github.com/hetianyi/godfs | godfs是一个用go实现的轻量，快速，简单易用的分布式文件存储服务器。 godfs开箱即用，承认码头工人支持友好。 你可以在docker hub上下载最新版本： ://hub.docker.com/r/hehety/godfs/ 版本兼容表 特性 快速，轻量，开箱即用，友好的 易于扩展，运行稳定 低开支 提供HTTP方式的下载和上传API 支持文件断点下载 跨站点资源保护 支持不同平台下的
SisNoise:SisNoise 是一个基于 Golang 的分布式文件系统
07-02
SisNoise，一个采用Golang语言构建的分布式文件系统，其设计目标是提供高效、稳定且可扩展的存储解决方案。在深入探讨SisNoise之前，我们需要先理解分布式文件系统的基本概念。分布式文件系统是一种将数据分散存储在...
GO语言开发分布式文件系统源码.zip
05-23
GO语言分布式文件系统源码，提供最简单、可靠、高效的分布式文件系统。一个基于http协议的分布式文件系统，它基于大道至简的设计理念，一切从简设计，使得它的运维及扩展变得更加简单，它具有高性能、高可靠、无中心...
npartword:golang分布式中文分词系统
03-11
npw：npartword，golang实现中文分词系统，主体分词逻辑有两个部分。 1.初步树查找字典，通过disctance或mmseg算法过滤分词 2.维特比算法解隐马尔可夫模型，对词进行隐状态标注分词 3.加入情感词典，文本情感分类...
Go的文件系统抽象层，支持S3和本地文件系统-Golang开发
05-26
用于Golang的Gost文件系统抽象层，可与本地文件系统和具有统一API的Amazon S3一起使用。 您甚至可以从不同来源复制粘贴文件。 FTP，Dropbox等将很快推出。 适用于Golang的Quick Examp Gost文件系统抽象层，可与本地文件系统和具有统一API的Amazon S3一起使用。 您甚至可以从不同来源复制粘贴文件。 FTP，Dropbox等将很快推出。 快速示例import“ github.com/usmanhalalit/gost/s3” //初始化文件系统fs，err：= s3.New（s3.Config {your-aws-credentials}）//阅读注释，err：= fs.File （“ my-note.txt”）。ReadString（）//写入错误：= fs.File（“ another-note.txt”）。WriteString（“ another note”）//可以自然遍历
goGFS:Golang中Google文件系统的简单实现
03-11
goGFS goGFS是golang中Google文件系统（GFS）的简单实现。 它通过一小组廉价的廉价机器（1个主服务器，12个chunkserver和12个客户端）进行了测试。 提供容错功能。 特征 体系结构和一致性模型与纸张相同 系统交互原子记录追加（至少追加一次） 掌握 持久元数据 再复制 垃圾收集 陈旧检测 块服务器持久元数据 客户熟悉的文件系统界面 容错能力 去做 流水线数据流 快照 参考
go-dfs:一款易用的分布式文件系统，免费，开源
03-11
go-dfs 简单的分布式文件系统，该项目使用纯go语言编写，并完全开源，部署简单方便。 客户端 ---> tracker------>storage1 \------>storage2 项目说明 本项目参考fastdfs逻辑进行简单实现，主要功能包括： 文件上传 临时文件上传 文件删除 文件下载 文件多副本同步保存和删除 跟踪器自动容量均衡到不同的存储组 临时文件上传功能，需要二次确认，否则会被系统自动删除，该功能需要使能配置： 使用说明 特别说明，无论是tracker还是storage，使用的都是同一个编译输出文件，只是配置不同而已 一，原始码安装 1.clone源代码，编译出二进制文件 cd cmd go build main.go -o dfs ./dfs 2.配置文件将configs / dsf.yml放到dfs重新放置文件目录 #服务类型tra
【golang分布式文件系统】go-fastdfs分布式文件系统搭建
Leroy的博客
06-02 5928
###一、FastDFS简介 go-fastdfs是一个基于http协议的开源的分布式文件系统，它基于大道至简的设计理念，一切从简设计，使得它的运维及扩展变得更加简单，它具有高性能、高可靠、无中心、免维护等优点。 它的主要功能包括：文件存储，文件同步和文件访问，以及高容量和负载平衡。 项目地址：https://github.com/happyfish100/fastdfs ###二、go-fastdfs (go语言版本的FastDFS) 项目地址：https://github.com/sjqzhang...
组件分享之后端组件——基于Golang实现的全局的、版本化的、点对点的文件系统go-ipfs...
CN華少的博客
06-28 2712
组件分享之后端组件——基于Golang实现的全局的、版本化的、点对点的文件系统go-ipfs 背景 近期正在探索前端、后端、系统端各类常用组件与工具，对其一些常见的组件进行再次整理一下，形成标准化组件专题，后续该专题将包含各类语言中的一些常用组件。欢迎大家进行持续关注。 组件基本信息 组件：go-ipfs 开源协议：The go-ipfs project is dual-licensed un...
Go语言的分布式文件系统与实例分析
AI天才研究院
01-28 521
1.背景介绍 1. 背景介绍 分布式文件系统(Distributed File System, DFS)是一种在多个计算机节点上存储和管理文件的系统，它允许多个节点之间共享文件和数据。这种系统通常用于大型网络环境，如互联网、企业内部网络等。Go语言是一种现代编程语言，具有高性能、易用性和跨平台性等优点。本文将从Go语言的角度分析分布式文件系统的核心概念、算法原理、最佳实践等内容。 2. 核心...
golang开源分布式文件系统weed-fs的安装与运用
※钟灵毓秀※
06-02 6082
1.  简介 Go是Google开发的一种编译型，可平行化，并具有垃圾回收功能的编程语言。 罗伯特·格瑞史莫（Robert Griesemer），罗勃·派克（Rob Pike）及肯·汤普逊于2007年9月开始设计Go语言，[2]，稍后Ian Lance Taylor, Russ Cox加入项目中。Go语言是基于Inferno操作系统所开发的。[4]Go语言于2009年11月正式宣布推出
Go语言深度优先搜索（DFS）
weixin_54703767的博客
12-09 275
Go 语言代码段实现了深度优先搜索（DFS）算法，该算法用于遍历图数据结构。以下是代码的主要要点和执行流程的总结： 深度优先搜索函数 (dfs): 接收图的邻接表 (map[int][]int)、访问记录 (map[int]bool) 和当前节点作为参 在这个例子中，我们通过邻接表表示了一个有向图，并从节点0开始进行深度优先搜索。你可以根据实际需求修改图的表示方式和起始节点。运行该程序，你将看到深度优先搜索的结果，即访问的节点顺序。这个示例是有向图的深度优先搜索，你可以根据需要调整为无向图的情况。
基于Golong的分布式存储开发
tgw_lby的博客
01-09 4481
一、分布式存储的主要组成部分 1>KSERVER: 与应用服务器就近部署，用于文件调度、后台同步、定时服务等。 2>KNODE: 文件的上传下载、存储集群的代理。 3>kserver定时向所有knode发送心跳请求，knode在响应时将自身的状态上报给kserver。如果请求时被拒绝或超时没有收到响应，kserver认为knode处于异常状态，将该knode状态改为不可用，不提供文件上传下载
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值