Hadoop
.REVOLUTION.
这个作者很懒,什么都没留下…
展开
-
Ubuntu16.04 + hadoop + 虚伪分户式安装
hadoop 集群框架一般包括单机模式和分布式框架,而分布式又分为伪分布式和分布式集群,为了方便本地开发编程测试可采用伪分布式集群。一、凡事JDK现行,确保你的电脑上装有jdk环境可使用:java version 测试是否安装,以下是我的电脑上对应版本。如果没有安装:可前往官方网站下载...原创 2018-05-03 10:10:26 · 122 阅读 · 0 评论 -
Windows 远程调用hadoop 集群
在本地Java开发时如需访问Hadoop集群时常会遇到无法连接集群的错误。解决方法主要有以下几个:一、通过修改Hadoop集群配置文件来关闭远程访问控制(该方法最简单,但是存在不安全性)通过修改Hadoop集群下/conf/hdfs-site.xml文件,声明dfs.permissions属性值为false来实现在集群关闭访问控制。vim hdfs-site.xml (可能需要root权限 sud...原创 2018-04-25 14:54:31 · 724 阅读 · 0 评论 -
Maven + Hadoop + Ecilips环境配置(Win7)
1.MAVEN 环境配置1.1Maven简介1.2Maven下载 1、由于Maven为开源软件,可在Maven官网自行下载:点击打开链接 2、由于采用Win环境需要下载xxxxbin.zip文件(Linux可下载.tar.gz) 下载完成后可进行解压(建议解压在中文目录下),解压后可见如下目录结构: 解压结束后进...原创 2018-04-25 17:20:54 · 535 阅读 · 0 评论 -
Maven + Hadoop + Ecilips (Linux)
比起在Windows下Maven搭建个人觉得Linux操作更为简单。 Maven使用千篇一律,所有程序安装前提,找到下载源下载安装包(再此假设你的电脑上已经安装JDK)1、jdk 检查: 打开Terminal 输入 java -version查看具体java版本信息。以下为本人java 版本信息,如尚未提示可自行安装。2、关于Maven作...原创 2018-04-27 11:40:14 · 496 阅读 · 0 评论