大数据处理技术
Mr.Ma-master
已工作,暂时不考虑更新了。。
展开
-
大数据处理技术-Hadoop和eclipse实现数据去重问题的程序设计
1、 设计源代码:package com.hadoop.sample; import java.io.IOException; import java.util.StringTokenizer; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.Path; import o...原创 2019-11-20 22:24:59 · 986 阅读 · 0 评论 -
大数据处理技术之wordcount问题的程序设计
1、 设计源代码:package org.apache.hadoop.examples;import java.io.IOException;import java.util.StringTokenizer;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org.ap...原创 2019-11-20 22:21:07 · 344 阅读 · 0 评论 -
Hadoop结合eclipse的安装配置
安装步骤如下:原创 2019-11-20 22:16:26 · 130 阅读 · 0 评论 -
HDFS的常用操作命令
练习:HDFS的常用操作命令操作题:HDFS的常用操作命令练习:根据以下题目要求,写出相应的HDFS命令:(1)列示出HDFS的文件系统目录,以及子目录的所有内容$ ./hadoop fs -lsr(2)在HDFS的根目下创建文件夹d1$ ./hadoop fs -mkdir /d1$ ./hadoop fs -ls /d1(3)上传本地/root/install.log文...原创 2019-11-20 22:13:54 · 655 阅读 · 0 评论 -
最详细介绍之Hadoop安装方法及配置教程
文章目录一、JDK二、Cygwin的安装(在线安装)三、安装Hadoop参照Hadoop的伪分布式安装步骤的说明文档,在自己电脑上进行伪分布式安装。安装步骤如下:一、JDK1.安装JDK:将jdk1.8.0_121文件安装到目录C:/Java。安装完成后进行环境变量的配置。2.环境变量的配置:%JAVA_HOME%\bin;%JAVA_HOME%\jre\bin3.测试环境变量配...原创 2019-11-20 22:07:41 · 900 阅读 · 0 评论