chenli0252-CSDN博客

hive与hbase的区别与联系共同点：1.hbase与hive都是架构在hadoop之上的。都是用hadoop作为底层存储区别：2.Hive是建立在Hadoop之上为了减少MapReduce jobs编写工作的批处理系统，HBase是为了支持弥补Hadoop对实时操作的缺陷的项目。3....

2014-10-13 15:22:00 308

云计算，网格计算，分布式计算，集群计算的区别其实如果从应用的有状态和无状态两个分类去看，这些分布式技术都是分别提升有态应用和无态应用的性能和可扩展性Scalable。在应用架构设计的三个类型中，我也谈到了：并发是解决有态应用；并行是解决无态应用。而集群和网格计算属于一种并发计算，主...

2014-10-13 15:14:00 290

Hadoop初学者必读一、什么是Hadoop分布式系统？从命名名称上看，首先可以认为他是一个工具，可能有人认为是废话，但是这个理念对我来说很重要，因为他是我认真学习下去的一个重要的理由，既然是工具我相信就能把他掌握。他是一个分布式基础架构，由Apache基金会开发，他的产生由Go...

2014-10-13 15:13:00 108

1. 网络带宽 Hadoop集群的服务器在规划时就在统一的交换机下，这是在官方文档中建议的部署方式。但是我们的这台交换机和其他交换机的互联带宽有限，所以在客户端遇到了HDFS访问速度慢的问题。把操作集群的客户端也联入DataNode的交换机内部，解决了这个问题。 2. 系统参数对...

2014-10-13 15:11:00 139

Hadoop版本说明最近想研究一下hadoop，增加自己的知识点，但是从官网准备下载时却发现，版本太多了，而且从版本号上面完全看不出因果关联。由于Hadoop版本混乱多变，因此，Hadoop的版本选择问题一直令很多初级用户苦恼。本文总结了Apache Hadoop和Cloudera Had...

2014-10-13 15:00:00 128

大数据处理的最好工具大数据是一个含义广泛的术语，是指数据集，如此庞大而复杂的，他们需要专门设计的硬件和软件工具进行处理。该数据集通常是万亿或EB的大小。这些数据集收集自各种各样的来源：传感器、气候信息、公开的信息、如杂志、报纸、文章。大数据产生的其他例子包括购买交易记录、网络日...

2014-09-23 11:22:00 85

如何成为Hadoop人才过去几年以来，市场对大数据相关技能的需求可谓迅猛增长，位于旧金山湾区的Riviera Partners公司技术招聘负责人Matt Andrieux指出。“我们的客户名单中大多数是初创公司，他们正在积极寻找各类有能力帮助他们以多种方式发挥数据价值、提升业务基准水平的工...

2014-09-23 11:20:00 60

大数据时代的魅力与博弈如果说大数据这一概念在以前还是主宰数字世界的帝王，那么在2014年巴西世界杯上，它的光亮现身，已经被切实地打造成了一个超级现实主义的名词：德国人就率先将大数据运用到足球训练和比赛当中，通过设备传感对球员跑动、传球等数据的捕捉和分析，并以“数字和事实”来优化备战方案，提...

2014-09-23 11:18:00 213

有关Hadoop的六大误解迄今为止，Hadoop和大数据实际上是同义词。然而随着大数据的炒作不断升温，出现了很多对Hadoop如何应用于大数据的误解。　　Hadoop是一种用于存储和分析大型数据集开源软件框架，可处理分布在多个现有服务器中的数据。Hadoop适合处理来自手机、电子邮件、社交...

2014-09-23 11:13:00 54

chenli0252的博客