wordcount
文章平均质量分 95
Wxp_csdn
团长出手,bug没有!
展开
-
Hadoop伪分布式模式配置并运行wordcount
Hadoop伪分布式模式配置并运行wordcount 只有一台虚拟机bigdata128,既是namenode又是datanode。 一、基础安装配置 首先要完成jdk+hadoop的安装配置; 点击以下链接完成配置。 https://blog.csdn.net/Wxp_csdn/article/details/90439386 二、修改以下5个配置文件 在与之间添加如下property: ①co...原创 2019-05-22 11:04:01 · 912 阅读 · 0 评论 -
Hadoop完全分布式模式配置并运行wordcount
Hadoop完全分布式模式配置并运行wordcount 一、新建另外两台Linux虚拟机 完全分布式模式共三台虚拟机,前述伪分布式的虚拟机(bigdata128)作为master主节点,克隆另外两个虚拟机(bigdata129、bigdata131)作为slaves子节点,克隆机自带安装JDK、Hadoop及配置文件。 注:此配置是为学习所用,且电脑资源有限,因此照搬伪分布式配置,将NameNod...原创 2019-05-22 11:29:34 · 900 阅读 · 0 评论 -
MapReduce运行wordcount程序
MapReduce运行wordcount程序 1、Eclipase里面在Maven项目下编写两个java程序代码: ①主程序代码: public class WordCount { public static void main(String[] args) throws IOException, ClassNotFoundException, InterruptedException { ...原创 2019-05-22 15:50:29 · 247 阅读 · 0 评论 -
Hive的安装配置以及运行wordcount
Hive的安装配置以及运行wordcount一、MySQL安装卸载MySQL二、Hive安装与配置三、MySQL Connector/J安装四、启动hive五、Hive应用实例:wordcount学习资料 一、MySQL安装 ①官网下载mysql-server(yum安装) wget http://dev.mysql.com/get/mysql-community-release-el7-5.no...原创 2019-05-23 09:49:42 · 246 阅读 · 0 评论 -
Spark与Scala的安装配置(环境变量)以及运行wordcount
Spark与Scala的安装配置(环境变量)以及运行wordcount一、Spark与Scala版本兼容问题:二、scala的安装配置三、spark的安装配置四、Spark-shell 一、Spark与Scala版本兼容问题: Spark运行在Java 8 +,Python 2.7 + / 3.4 +和R 3.1+上。对于Scala API,Spark 2.4.2使用Scala 2.12。您需要使...原创 2019-05-23 22:26:04 · 1668 阅读 · 0 评论