网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。
一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!
FastDFS分布式的文件系统从小白入门到企业实践打怪之路系列笔记 【运维实践】0.前言
Q: 传统的文件系统面临的问题与挑战?
描述: 在传统WEB应用中,前端、后端、以及其它API服务部署在同一台服务器,所有文件都作为静态资源访问,随着业务量的不断增长,久而久之,图片和文件等资源占用的空间变得越来越大。
随之带来了各种性能、管理与安全风险等问题,如下所示:
若文件直接置于应用服务器中,难以管理;
昂贵的磁盘空间、高性能服务器大大增加了运维成本;
易发生单点故障;
传统FTP上传文件,存在诸多安全隐患(用户名和口令的明文传输等);
无法保证文件的机密性,某些敏感文件如身份证照片等以明文存储,文件的授权访问不易控制;
安全没有保障,文件上传、下载、删除、查看依赖于各个业务系统的实现,一个上传功能可能出现“修不完的漏洞”;
Q: 什么是分布式文件系统?
描述: 分布式文件系统(Distributed File System, DFS)是一种允许文件通过网络在多台主机上分享的文件系统,可让多机器上的多用户分享文件和存储空间。客户端并非直接访问底层的数据存储区块,而是通过网络以特定的通信协议与服务器通信,借通信协议来限制客户端对于文件系统的访问。分布式文件存储利用多台存储服务器分担存储压力,利用跟踪服务器定位存储信息,不但提高了系统可靠性、可用性以及读写效率,而且方便水平扩展。分布式文件存储可采用多副本备份机制,分布式存储对数据进行了分片,分片后的数据按照一定规则保存在集群节点上。即使单个集群节点机器发生故障也能保证数据不会丢失,最小化对业务的影响。
Tips: 既然传统的文件存储方式存在这么多弊端,那么新的分布式文件系统需要满足哪些需求呢? 作者:
我在B站学习运维之FastDFS分布式的文件存储系统快速入门介绍(1):
https://www.bilibili.com/read/cv13945905
0x00 基础介绍
0.前言
1.简介
2.特性
3.架构
Tracker Server
Storage Server
Client
4.存储策略
5.过程剖析
文件上传 - Upload
文件下载 - Download
文件访问 - HTTP
文件同步 - Sync
6.功能比对
7.参考来源
我在B站学习运维之FastDFS分布式的文件存储系统快速单机部署与主从部署(2):
https://www.bilibili.com/read/cv13946146
本章目录:
0x01 FastDFS 安装使用
1.Linux 安装
1.1) CentOS 单机部署 FastDFS
1.2) Ubuntu 主从部署 FastDFS
2.Docker 安装
官方仓库fastDFS相关镜像
自定义FastDFS基础镜像
我在B站学习运维之FastDFS分布式的文件存储系统进阶使用配置(3):
https://www.bilibili.com/read/cv13946270
本章目录:
0x00 进阶使用
1.FastDFS 重复文件处理
2.FastDFS 原始文件名恢复
3.FastDFS 资源防盗链功能
4.FastDFS 从文件的使用技巧
![img](https://img-blog.csdnimg.cn/img_convert/60fa9c91ac1972fb18ad720f76a07961.png)
![img](https://img-blog.csdnimg.cn/img_convert/b1cf514d52151f329529f6ef7c2bdc2d.png)
![img](https://img-blog.csdnimg.cn/img_convert/57d7f01650278582f289e8fecddd0df5.png)
**既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上Go语言开发知识点,真正体系化!**
**由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新**
**[如果你需要这些资料,可以戳这里获取](https://bbs.csdn.net/topics/618658159)**
系化!**
**由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新**
**[如果你需要这些资料,可以戳这里获取](https://bbs.csdn.net/topics/618658159)**