- 博客(3)
- 收藏
- 关注
RSS订阅原创 基于centos7的scala与spark的安装
Spark下载 安装scala 下载scala安装包，https://www.scala-lang.org/download/选择符合要求的版本进行下载，使用客户端工具上传到服务器上。解压： # tar -zxvf scala-2.13.0-RC2.tgz -C /usr/local/ 再次修改/etc/ bashrc件，添加如下内容： export SCALA_HOME=/usr/local...
2019-05-23 18:56:26
324
原创 基于centos7安装hive，hadoop版本2.7，hive-2.3.4
安装mysql 1、yum仓库下载MySQL：sudo yum localinstall https://repo.mysql.com//mysql80-community-release-el7-1.noarch.rpm 2、yum安装MySQL：sudo yum install mysql-community-server 3、启动MySQL服务：sudo service mysqld sta...
2019-05-23 18:45:47
1966
原创 hadoop基于MapReduce的wordcount系统案例实现
hadoop wordcount实现详解！ 设备： 操作系统：Ubuntu 14.04.5 32位版本 软件：VMware 12 一、MapReduce理论简介 1.1 MapReduce编程模型 MapReduce采用"分而治之"的思想，把对大规模数据集的操作，分发给一个主节点管理下的各个分节点共同完成，然后通过整合各个节点的中间结果，得到最终结果。简单地说，MapReduce就是"任务的...
2019-04-01 20:52:29
1143
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人