- 博客(3)
- 收藏
- 关注
RSS订阅转载 mapreduce学习总结（一）
1. mapper任务一般执行 输入格式解析、投影（选择相关的字段）、过滤（过滤掉无关记录）。 reducer任务一般 2. 对于map任务和ruduce任务，tasktracker有固定数量的任务槽。 3. 分片（split）的大小一般就是文件块大小。map任务的数量取决于文件大小和块大小，不用刻意去设置。 4. 每个分区（partitioner）对应一个reduce任务，所以...
2014-07-16 17:48:00
156
转载 多线程中的生产者消费者Java源代码（带注释）
同步解决了线程中数据存取不一致的问题，而Object类中的等待与唤醒方法解决了重复存取的问题 以下的生产者消费者Java源代码例子，很好的说明了这一点。 其中包括Info类、Producter类、Consumer类、Test类。 <1> Info类如下： 1 package per.producterconsumer; 2 3 public...
2014-07-02 15:20:00
95
转载 storm简单应用实例之总结
刚开始接触storm，在安装配置好本地模式的storm-0.8.1后，想在其上运行一个topology应用实例。 于是，计划在eclipse上尝试简单例子，然后打成jar包。但是，在网上找了好多例子，导入eclipse之后，尝试了两天，都有错误。（包括storm-starter-master、wordcount、实时随机输出一字符串） 我想应...
2013-08-22 09:13:00
125
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人