- 博客(3)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 Storm+Redis性能优化问题
结合自己的开发及调试经历，总结一下经验教训。提升 Storm Topology的性能，不能只关注提高进程（worker）及线程(executor: spout/bolt)并发度, 也要注意是否有外部瓶颈； 我的问题就在于Topology最后一级Bolt是要把分析结果写入Redis, 由于tuple吞吐量为每分钟数百万级，给Redis服务器带来很大压力。 我的优化思路如下：
2015-08-30 18:58:33
3632
原创 Zookeeper日志配置问题
前端时间配置zookeeper日志时出现问题，尽管修改了conf目录下的log4j.properties, 重启zookeeper后仍不起作用。查了下资料，才知道要修改bin目录下的zkEnv.sh。注：我用的zookeper版本是3.4.5。总结步骤如下：1> 修改conf/log4j.properties： # Define some default values that
2015-08-18 07:54:44
4826
原创 Hadoop 2.6.0(HA)部署启动
如果是一个新的HDFS集群，还要首先执行格式化命令“hdfs namenode -format”，紧接着启动本NameNode进程。如果存在一个已经格式化过的NameNode，并且已经启动了。那么应该把该NameNode的数据同步到另一个没有格式化的NameNode。在未格式化过的NameNode上执行命令“hdfs namenode -bootstrapStandby”。如果是把一个非H
2015-08-16 10:16:05
907
Hadoop快速入门七步走
2018-04-28
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人