u011773633的博客

转载记不清原著是哪里了Hadoop简介Hadoop就是一个实现了Google云计算系统的开源系统，包括并行计算模型Map/Reduce，分布式文件系统HDFS，以及分布式数据库Hbase，同时Hadoop的相关项目也很丰富，包括ZooKeeper，Pig，Chukwa，Hive，Hbase，Mahout，flume等.这里详细分解这里面的概念让大家通过这篇文章了解到底是什么ha

Zookeeper不用端口号 hdfs配置为namenode

上一篇在win7虚拟机下搭建了hadoop2.6.0伪分布式环境。为了开发调试方便，本文介绍在eclipse下搭建开发环境，连接和提交任务到hadoop集群。1. 环境Eclipse版本Luna 4.4.1安装插件hadoop-eclipse-plugin-2.6.0.jar，下载后放到

Mapreudce开发：（对路由数据进行过滤，只保留想要的几项。只有map没有reduce）import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.conf.Configured;import org.apache.hadoop.fs.Path

上传文件到HDFS：（对HDFS的操作，注意config的配置）import java.net.URI;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FileSystem;import org.apache.hadoop.fs.Path;public class trytry {

本文为笔者安装配置过程中详细记录的笔记1． 下载hadoop hadoop-2.7.1.tar.gzhadoop-2.7.1-src.tar.gz  64位linux需要重新编译本地库2． 准备环境 Centos6.4 64位，3台hadoop0  192.168.1.151               namenodehadoop1  192.168.1.152   

http://d3.decembercafe.org/pages/movie/index.html  十二月咖啡馆http://blog.csdn.net/zhang__tianxu/article/category/1623437  司机大傻的博客http://www.cnblogs.com/winleisure/tag/D3.js/ /  楚狂人的博客https://github.

spark输出太多warning messagesWARN Executor: 2 block locks were not released by TID =Lock release errors occur frequently in executor logs原因：If there are any releasedLocks (after calling BlockManager