- 博客(8)
- 收藏
- 关注
RSS订阅原创 java.nio.channels.UnresolvedAddressException: null [运行storm-0.9.4集群时]
【问题描述】 在运行storm集群时，发现kafkaspout不能消费kafka的数据，查看stormUI，没有发现有什么异常，但是手动消费kafka的数据又是正确的，通过一步一步问题排查，最好定位到是storm出现的问题，查看worker日志，发现里面出现java.nio.channels.UnresolvedAddressException: null这样的错误。【产生原因】
2015-07-30 11:43:16
13330
转载 Storm Trident 资料聚合
以下资料是本人在查阅相关内容时，发现的感觉还不错的内容，特地在此处给大家分享，当然，在这里首先要对分享内容的原作者表示感谢！ 【什么是Trident？？】 Trident是对Storm的更高一层的抽象,除了提供一套简单易用的流数据处理API之外，它以batch(一组tuples)为单位进行处理，这样一来，可以使得一些处理更简单和高效。1. storm trident教程
2015-06-16 15:47:17
529
转载 Kafka学习资料汇总
1. Kafka 之 入门 比较适合初次接触Kafka的同学阅读。2. Kafka深度解析 深入的对Kafka的架构、Topic、Partition、Replication & Leader election Consumer group、Consumer Rebalance进行详解。3. 基于flume和kafka的实时日志收集系统
2015-06-02 17:44:13
1135
原创 【python实现】ip转换为Long类型
import socketdef valid_ip(str): try: socket.inet_aton(str) return True except: return Falsedef ip2long(str): if str == 0: return 0 check = valid_ip(str
2015-05-25 09:55:15
1088
原创 登入Tomcat Manager时出现401错误——解决方法
要进入Tomcat Manager得先进行配置，进入tomcat解压目录->conf，对tomcat-users.xml进行修改。在这个文件中添加manager角色，并为管理员添加上这种角色即可<?xml version='1.0' encoding='utf-8'?><tomcat-users> <role rolename="tomcat"/> <role rolename="role1
2015-05-22 17:39:38
4621
1
原创 Thrift + centos 安装
安装前注意事项： 在进行安装thrift之前，首先应该保证安装环境支持c++的编译，因为thrift的编译器是用c++编写的，先安装相关的依赖包 sudo yum install automake libtool flex bison pkgconfig gcc-c++ boost-devel libevent-devel zlib-devel python-devel ruby-devel op
2015-05-22 17:37:18
587
原创 浅析MapReduce单元测试框架—MRUnit
什么是MRUnitMRUnit 是对MapReduce进行单元测试的一个框架，它可以很方便的测试mapper和reducer程序，MRUnit自己实现了一套Mock对象来控制OutputCollector的操作，其可以拦截map以及reduce上下文的输出，和我们的预期结果进行比较。为什么使用MRunit我们在进行MapReduce开发时，对于结果的验证比较繁琐，需要编译、打包然后将其提交到集群上
2015-05-22 17:30:38
614
原创 利用javaApI【eclipse】操作HBase时，出现异常的解决方案
【前提】你已经安装好了hbase，即hbase通过使用hbase shell已经可以正常操作的前提下进行的。【hbase所在的环境】 Linux（centos）【JavaAPI】在win7下的eclipse下进行【实例】
2015-05-22 14:36:27
1435
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人