![](https://img-blog.csdnimg.cn/20201014180756918.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop实战
文章平均质量分 74
我家大米超好吃
我还年轻,我没有时间!!正在不断弥补中!
展开
-
hadoop-2.7.3的安装和配置
最近的项目需要一个云计算平台来支持,需要用到hadoop来处理获取的数据,所以就用虚拟机先尝试了下hadoop的安装。以下的linux命令行皆用代码行格式,为了区分也用双引号引起来了,请注意去除。安装环境: 硬件: vmware workstation 12 操作系统:ubuntu-10.04-desktop-amd64 JDK版本:jdk-8u翻译 2017-03-26 19:07:09 · 990 阅读 · 0 评论 -
配置和测试hadoop环境时遇到的问题
一、在安装ssh时,下载失效、更新失效以及出现 Package ‘openssh-server’ has no installation candidate的情况原因:Ubuntu 已经停止支持,但可以使用old-releases源了 解决:先备份源列表文件: sudo cp /etc/apt/sources.list /etc/apt/sources.list.backup sudo gedi原创 2017-03-26 20:04:38 · 533 阅读 · 1 评论 -
测试hadoop
配置完hadoop后,就要开始测试hadoop,用hadoop来计算PI值和计算单词数(圆周率的值和wordcount)一、“hadoop version”用本命令可以来看hadoop是否已经完全配置好,并且查看自己的版本号 二、成功启动后,可以访问 Web 界面“http://localhost:50070”查看 NameNode 和 Datanode 信息,还可以在线查看 HDFS 中的文件原创 2017-03-26 21:23:18 · 299 阅读 · 0 评论