big data综合知识
wangmm0218
暂无
展开
-
hive与hbase的联系与区别
共同点: 1.hbase与hive都是架构在hadoop之上的。都是用hadoop作为底层存储 区别: 2.Hive是建立在Hadoop之上为了减少MapReduce jobs编写工作的批处理系统,HBase是为了支持弥补Hadoop对实时操作的缺陷的项目 。 3.想象你在操作RMDB数据库,如果是全表扫描,就用Hive+Hadoop,如果是索引访问,就用HBase+Hadoop原创 2014-04-17 19:37:04 · 19579 阅读 · 3 评论 -
大数据架构:flume-ng+Kafka+Storm+HDFS 实时系统组合
个人观点:大数据我们都知道hadoop,但并不都是hadoop.我们该如何构建大数据库项目。对于离线处理,hadoop还是比较适合的,但是对于实时性比较强的,数据量比较大的,我们可以采用Storm,那么Storm和什么技术搭配,才能够做一个适合自己的项目。下面给大家可以参考。 可以带着下面问题来阅读本文章: 1.一个好的项目架构应该具备什么特点? 2.本项目架构是如何保证数据准确性的? 3转载 2014-05-09 20:56:30 · 9336 阅读 · 2 评论 -
Flume日志收集
转:http://blog.csdn.net/zhouleilei/article/details/8568147转载 2014-05-13 02:00:29 · 846 阅读 · 1 评论 -
大数据高薪职位必备:Hadoop求职者的6大攻略
导语:大数据行业发展得越来越好,企业不惜重金聘请数据分析师,“学习Hadoop,找好工作不是梦想”的口号激励着无数同学投身大数据事业,然而就业却并不那么简单,“工作经验”无疑给寻求高薪工作的同学破了盆冷水,怎样解决经验问题?怎样让自己显得更加专业?怎样让自己有更深入的行业洞察力?技术招聘人员为具备Hadoop技能的求职者提出了一些见解和建议。InformationWeek作家Kevin Cas转载 2014-09-19 19:33:56 · 1358 阅读 · 0 评论