云计算
文章平均质量分 93
阿帆ferrir
暂无
展开
-
云计算学习关键字(待补充...)
Spark Hadoop YARN:(Yet Another Resource Negotiator)最初是为Hadoop生态设计的资源管理器,能在上面运行Hadoop、Hive、Pig(Pig是一种基于Hadoop平台的高级过程语言)、Spark等应用框架。在Spark使用方面,YARN与Mesos很大的不同是Mesos是AMPlab开发的资源管理器,对Spark支持力度很大,但国内主流使用仍转载 2017-09-18 21:32:19 · 384 阅读 · 0 评论 -
Log:what every software enginner should know about real-time data's unifying abstraction
上一次这样高强度的读一篇英文文献还是写小论文的时候,英文版断断续续读了近两个礼拜,收获良多。恰好最近复习找工作云笔记记了一堆也从不看,还是自己动手写写博客记忆更深点吧。 ps.感觉Jay Kreps老大也太能(hua)侃(lao)了吧 附英文版链接:The Log: What every software engineer should know about real-time data’s u原创 2017-09-18 22:04:02 · 642 阅读 · 0 评论 -
Kafka是什么?
Kafka是一种高吞吐量的分布式发布/订阅消息系统,它可以处理网站中的所有数据流(网页浏览、搜索等),通过Hadoop的并行加载机制来统一线上和离线的消息处理,通过集群来提供实时的消费。有如下特性:通过O(1)的硬盘数据结构转载 2017-09-22 15:52:49 · 1332 阅读 · 0 评论