Hadoop
小夙o
这个作者很懒,什么都没留下…
展开
-
安装HDFS集群,HDFS主集群启动了,但是其他的集群启动失败
我安装的Hadoo2.6安装配置好以后,在第一台机器上面启动发现,报错,根据日志信息找到了报错的配置文件是mapred-site.xml,然后去查看发现文件大小只有1kb,vi 打开一看上面都没有,于是我就删除了,再次启动hdfs集群,第一台主机器,以启动了,jps 验证有namenode、datanode、secondarynamenode,说明启动成功,jps 验证另外2台机器发现datano...原创 2018-07-13 10:18:35 · 546 阅读 · 1 评论 -
Hadoop集群安装教程
0.选择网络类型 host-only (可以再没有网络的情况,你的window主机和你的Linux机可以经行通信)0.1:在window下,点击左下角"开始"->"所有程序"->VMare(就是安装的目录文件夹)-> Virtual Network Editor -->打开"虚拟网络编辑器" 开始设置如下: 点击选中VMnet1-->在窗口最...原创 2018-07-20 16:40:36 · 200 阅读 · 0 评论 -
Spark的Wordcount程序图文详解!
先附上scala实现的代码!package cn.spark.study.coreimport org.apache.spark.SparkConfimport org.apache.spark.SparkContext/** * @author Administrator */object WordCount { def main(args: Array[Strin...原创 2018-07-22 22:30:50 · 805 阅读 · 0 评论