Hadoop
关注
分享
扫一扫
文章平均质量分 66
A小菠菜罐头
这个作者很懒，什么都没留下…
展开
-
【Hadoop】hadoop2.x入门与基本环境配置
Hadoop版本：2.5.0-cdh5.3.6JDK版本：7u80-linux-i586 可以从下面获取JDK和Hadoop压缩包链接：https://pan.baidu.com/s/1KQwF3aZL9ZletysyZHLMzA 密码：okmj理论知识介绍大数据的4v特征Volume 数据体量巨大 Varity 数据类型多样 Veracityv 密度低价值高 V...原创 2018-07-24 23:52:05 · 423 阅读 · 0 评论 -
【Hadoop】伪分布式配置
基本配置参考这一篇本文中所用到的 主机名：daisuke 用户名：hadoophadoop-env.shjava环境export JAVA_HOME=/opt/modules/jdk1.7.0_79core-site.xml <!--HDFS集群访问入口地址--> <property> <name...原创 2018-08-04 17:23:50 · 505 阅读 · 0 评论 -
【Hive】用Sqoop实现数据HDFS到mysql到Hive
大数据协作框架“大数据协作框架”其实是一个统称，主要是以下四个框架数据转换工具 Sqoop 文件收集库框架 Flume 任务调度框架 Oozie 大数据WEB工具Hue Sqoop作用将关系数据库中的某张表数据抽取到Hadoop的HDFS文件系统中，底层运行的还是MapReduce。利用MapReduce加快数据传输速度。批处理方式进行数据传输。...原创 2018-08-14 00:42:33 · 444 阅读 · 0 评论 -
【HBase】基础入门
HBase修改配置hbase-env.shexport JAVA_HOME=/opt/modules/jdk1.7.0_79export HBASE_MANAGES_ZK=false这里我关闭HBase自带的zk，使用自己配置好的zookeeperhbase-site.xml <property> <name>hbase.rootdir<...原创 2018-08-27 19:56:20 · 285 阅读 · 0 评论