分布式
爱美事爱生活
小小程序员
展开
-
初探淘宝技术构架
一 应用无状态(淘宝session框架) 俗话说,一个系 统的伸缩性的好坏取决于应用的状态如何管理。为什么这么说呢?咱们试想一下,假如我们在session中保存了大量与客户端的状态信 息的话,那么当保存状态信息的server宕机的时候,我们怎么办?通常来说,我们都是通过集群来解决这个问题,而通常 所说的集群,不仅有负载均衡,更重要的是要有失效恢复failover,比如tomcat采 用的集群节点转载 2015-03-14 17:44:23 · 547 阅读 · 0 评论 -
学习kafka:log4j写入kafka
最近花了一天时间把kafka官方文档看了一遍,自己测试了一下,特记录与此,原理概念看完文档就能理解,主要是问题。 1 版本POM配置 ,注意jar包可能会冲突: <dependency> <groupId>org.apache.kafka</groupId> <artifactId>kafka_2.10</artifactId>原创 2017-05-21 10:46:18 · 6267 阅读 · 1 评论 -
hadoop on yarn 入门系列1-伪分布式环境搭建并运行wordcount
作为学习使用,直接使用伪分布式 搭建学习环境,下载hadoop2.6.0以及源码 1 配置文件: 1.1 hdfs-site.xml<configuration> <property> <name>dfs.replication</name> <value>1</value> <!--只有一台机器,所以备份也是1--> </property>原创 2016-11-24 22:49:35 · 1175 阅读 · 0 评论