![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
nszkadrgg
这个作者很懒,什么都没留下…
展开
-
Linux 安装mysql
1.Download and Check MD5[root@sht-sgmhadoopnn-01 ~]# cd /usr/local[root@sht-sgmhadoopnn-01 local]# wget http://mirror.lug.udel.edu/pub/mysql/MySQL-5.6/mysql-5.6.22-linux-glibc2.5-x86_64.tar.gz[root@sh...转载 2017-11-29 16:14:59 · 456 阅读 · 0 评论 -
大数据常用组件总结
Hadoop生态圈各常用组件介绍 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。具有可靠、高效、可伸缩的特点。 Hadoop的核心是YARN,HDFS和MapReduce。Hdfs是分布式文件存储系统,用于存储海量数据;MapReduce是并行处理框架,实现任务分解和调度。Hado转载 2017-12-05 19:57:09 · 1670 阅读 · 0 评论 -
hadoop 单机安装 slaves.sh: line 60: ssh: command not found
最近在安装hadoop 单机版,一直报了一个错误,找不到原因,错误信息。[root@hadoop sbin]# ./start-dfs.sh18/04/04 05:05:55 DEBUG util.Shell: setsid exited with exit code 018/04/04 05:05:56 DEBUG lib.MutableMetricsFactory: field org.apa...原创 2018-04-03 21:39:15 · 2135 阅读 · 1 评论 -
修复HDFS JournalNode 的硬盘损坏
如果部署了Cloudera 的HDFS HA,那么在更换了新硬盘后,重启JournalNode 会出现"JournalNotFormattedException: Journal Storage Directory /data/2/dfs/jn/nameservice1 not formatted" 这样的错误。原因是在新的硬盘上的jn 目录下没有VERSION文件用来恢复。解决方法是重新创建对应...转载 2018-04-11 17:39:50 · 1680 阅读 · 0 评论