hadoop
hemeinvyiqiluoben
这个作者很懒,什么都没留下…
展开
-
win10安装spark on hadoop流程
转自:https://blog.csdn.net/NJYR21/article/details/80291630 说明 安装步骤分为java,scala,spark和hadoop四步,以下是对我整个安装过程的记录。 一、安装JDK 官网下载了8u172版本。点击打开链接 安装完毕以后,添加环境变量JAVA_HOME、增加环境变量path路径。 打开cmd键入java -version...转载 2018-11-21 14:15:58 · 307 阅读 · 0 评论 -
Hadoop核心架构HDFS+MapReduce+Hbase+Hive内部机理详解
转自:https://www.cnblogs.com/cxzdy/p/4919219.html 纯干货:Hadoop核心架构HDFS+MapReduce+Hbase+Hive内部机理详解。 通过这一阶段的调研总结,从内部机理的角度详细分析,HDFS、MapReduce、Hbase、Hive是如何运行,以及基于Hadoop数据仓库的构建和分布式数据库内部具体实现。如有不足,后续...转载 2018-11-22 13:27:06 · 200 阅读 · 0 评论 -
hdfs集群的搭建
转自: https://blog.csdn.net/wanbf123/article/details/81948026 版权声明:everything https://blog.csdn.net/wanbf123/article/details/81948026 wget http://www-eu.apache.org/dist/hadoop/common/hadoop-2.7.7...转载 2018-12-04 19:36:50 · 487 阅读 · 0 评论 -
Hadoop 统计文件中某个单词出现的次数
转自:https://www.xuebuyuan.com/1270346.html 2013年10月24日 ⁄ 综合 ⁄ 共 2628字 ⁄ 字号 小 中 大 ⁄ 评论关闭 如文件word.txt内容如下: what is you name? my name is zhang san。 要求统计word.txt中出现“is”的次数? 代码如下: PerWordMap...转载 2018-12-04 22:14:10 · 2887 阅读 · 0 评论 -
Mapreduce与Hive比较(有Hive之后,为何还要学mapreduce或spark rdd编程)
转自: https://blog.csdn.net/xiaoshunzi111/article/details/49621857 https://blog.csdn.net/zhanaolu4821/article/details/81871154 文章一、 hive本身只是在hadoop map reduce 或者spark 计算引擎上的封装,应用场景自然更局限,不可能满足所有需求...转载 2018-12-03 15:19:25 · 3012 阅读 · 1 评论