hadoop
@进行中
qq 1171901273
展开
-
CentOS安装Hadoop单机版
1、首先安装jdk下载jdk-7u45-linux-x64.tar.gz 地址https://pan.baidu.com/s/1HlkngnG5H8JAdm0zYezEyg 提取码3z6s放到/usr/local目录下解压jdk,tar -zxvfjdk-7u45-linux-x64.tar.gz配置环境变量 vim /etc/profile 在文件...原创 2019-01-17 11:17:45 · 23420 阅读 · 16 评论 -
hadoop执行wordcount程序、本地编写、放到hadoop集群上运行
在执行hadoop jar命令之前,必须先启动hadoop集群1、首页简历maven工程,导入hadoop依赖<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://mave...原创 2019-03-10 16:41:50 · 792 阅读 · 0 评论 -
hadoop常用操作指令
查看 / 根目录下的文件目录[root@hadoop1 ~]# hadoop fs -ls /19/03/11 01:50:13 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicableFo...原创 2019-03-10 18:03:57 · 489 阅读 · 0 评论 -
hadoop在windows下安装
下载hadoop地址https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/ 这是一个镜像地址,可以找到很多hadoop的版本我下载的是2.6.5的版本 如果镜像找不到可以换地址找http://hadoop.apache.org(官网)将下载的hadoop2.6.5解压放在你喜欢的文件夹下由于在linux和wi...原创 2019-03-11 13:38:53 · 7555 阅读 · 0 评论 -
windows中eclipse集成hadoop
首先下载hadoop的eclipse插件地址,有链接:https://pan.baidu.com/s/1KzRDB1vp2izXAsljfPoZ7g提取码:rvw9将下载的jar包放到eclipse的plugins文件夹下重新启动eclipse,就能看到hadoop的插件,配置好 hadoop目录打开hadoop视图新建hadoop连接连接配置...原创 2019-03-11 15:45:53 · 905 阅读 · 0 评论 -
windows中使用eclipse搭建hadoop项目
当eclipse集成了hadoop插件之后,搭建hadoop项目就简单多了eclipse集成hadoop参考地址https://blog.csdn.net/lu1171901273/article/details/88395028打开eclipse新建项目,选择Map/Reduce Project输入名称 点击finish它就会自动的把hadoop依赖的jar文件加到项目中...原创 2019-03-11 15:52:22 · 1205 阅读 · 0 评论 -
在windows中使用debug执行hadoop程序
首先,你得先搭建hadoop项目,推荐地址https://blog.csdn.net/lu1171901273/article/details/88395474编写hadoop程序package cn.lx.bigdata.mr.wcdemo;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop...原创 2019-03-11 16:13:23 · 271 阅读 · 0 评论 -
Hadoop之—— WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform.
解决方案链接地址https://blog.csdn.net/l1028386804/article/details/51538611原创 2019-05-07 16:41:11 · 201 阅读 · 0 评论