原理
文章平均质量分 82
天地不仁以万物为刍狗
天之道,损有余而补不足
人之道,损不足以奉有馀
展开
-
【每日一题-20181120-summary】The Log --- 所有系统的 Log 应用总结(问:kafka 为什么使用 log应用?)
http://www.cnblogs.com/foreach-break/p/notes_about_distributed_system_and_The_log.html前言这是一篇学习笔记。学习的材料来自Jay Kreps的一篇讲Log的博文。原文很长,但是我坚持看完了,收获颇多,也深深为Jay哥的技术能力、架构能力和对于分布式系统的理解之深刻所折服。同时也因为某些理解和Jay...转载 2018-11-23 17:22:27 · 201 阅读 · 0 评论 -
学习笔记 - swift 对象存储 和 Hadoop文件系统 区别
对象存储和文件系统存储区别:所谓文件系统的本质是POSIX接口,“对象”这个名词是做对象存储的人为了把自己做的东西和文件系统区分开而用的术语,把存在对象存储里的文件叫做“对象”,所以选择文件系统还是对象存储,跟你把这堆数据称作对象还是文件并没有直接关系,而是要看你是需要POSIX还是RESTful HTTP接口,是需要目录结构还是适用扁平数据管理结构。 对象存储概念:RE...原创 2018-12-12 16:14:39 · 1347 阅读 · 0 评论 -
学习总结 - 纠删码Erasure Coding (分布式存储系统)
纠删码Erasure coding纠删码技术简称EC,是一种数据保护技术。最早用于通信行业中数据传输中的数据恢复,是一种编码容错技术。他通过在原始数据中加入新的校验数据,使得各个部分的数据产生关联性。在一定范围的数据出错情况下,通过纠删码技术都可以进行恢复。副本策略和纠删码是存储领域常见的两种数据冗余技术。相比于副本策略,纠删码具有更高的磁盘利用率多副本策略即将数据存储多个副本(一...原创 2018-12-25 19:16:00 · 3767 阅读 · 0 评论 -
Mark : Kerberos 认证
转 :https://www.cnblogs.com/wukenaihe/p/3732141.htmlhadoop集群的kerberos认证https://blog.csdn.net/weixin_40861707/article/details/819794741. Kerberos简介Kerberos是一种计算机网络授权协议,用来在非安全网络中,对个人通信以安全的手段进...转载 2019-04-13 21:40:54 · 256 阅读 · 0 评论