hadoop
小灰灰1234
挣扎于现实的理想主义者
展开
-
校验和概念
检验和(checksum),在数据处理和数据通信领域中,用于校验目的地一组数据项的和。它通常是以十六进制为数制表示的形式。如果校验和的数值超过十六进制的FF,也就是255. 就要求其补码作为校验和。通常用来在通信中,尤其是远距离通信中保证数据的完整性和准确性。转载 2015-04-20 10:33:04 · 1188 阅读 · 0 评论 -
Hadoop环境搭建
1:软件环境准备 1.1Hadoop: 我们使用hadoop Release 1.2.1(stable)版本,下载链接: http://mirrors.ustc.edu.cn/apache/hadoop/common/hadoop-1.2.1/ 我们选择hadoop-1.2.1-bin.tar.gz文件下载。 1.2Java: Java在这里使用的是jd转载 2015-04-21 15:39:03 · 468 阅读 · 0 评论 -
kafka的安装和调试
1. 简介 kafka (官网地址:http://kafka.apache.org)是一款分布式消息发布和订阅的系统,具有高性能和高吞吐率。 i. 消息的发布(publish)称作producer,消息的订阅(subscribe)称作consumer,中间的存储阵列称作broker。 ii. 多个broker协同合作,producer、consumer和broker三者之转载 2015-03-13 16:34:30 · 2864 阅读 · 0 评论