- 博客(6)
- 收藏
- 关注
原创 使用Spark Shell编写wordcount程序
使用Spark Shell编写wordcount程序 一、官网下载安装Scala:scala-2.12.8.tgzhttps://www.scala-lang.org/download/ tar-zxvfscala-2.12.8.tgz-C/opt/module mvscala-2.12.8scala 测试:scala-version 启动:scala 二、官网下载安装Spa...
2019-05-26 23:01:02 782
原创 非关系型数据库NoSQL
非关系型数据库NoSQL 一、下载、解压 MongoDB提供了linux平台上32位和64位的安装包官网下载安装包下载地址:http://www.mongodb.org/downloads 二、建数据库目录 MongoDB的数据存储在data目录的db目录下,这个目录在安装过程不会自动创建,手动创建data目录,并在data目录中创建db目录。 将data目录创建于根目录下(/)mkdir...
2019-05-26 22:59:04 128
原创 MapReduce分布式编程
MapReduce分布式编程 实验目的及要求 本次上机实验所涉及并要求掌握的知识点 实验环境 Eclipse、Hadoop 实验步骤 MapReduce编程入门实例之WordCount:分别在Eclipse和Hadoop集群上运行 首先看一下我的项目结构和WordCount程序: 其中word.txt将作为我们测试的输入文件,内容如下: hellohadoop hello...
2019-05-26 22:53:02 142
原创 Hive基于Hadoop的数据仓库
Hive基于Hadoop的数据仓库 一、MySQL安装与卸载 1、MySQL安装 ①官网下载mysql-server(yum安装) wgethttp://dev.mysql.com/get/mysql-community-release-el7-5.noarch.rpm 下载安装wget:yum-yinstallwget ②解压rpm-ivhmysql-community-re...
2019-05-26 22:47:08 178
原创 HDFS命令和Java API
HDFS命令和Java API 实验目的及要求 本次上机实验所涉及并要求掌握的知识点 实验环境 JDK、Eclipse、Maven 实验步骤 安装配置JDK+Eclipse+Maven 步骤:1.安装JDK→2.安装Eclipse→3.安装Maven→4.Eclipse里配置Maven (下载Windows版本,在Windows里安装使用。) 1.安装配置JDK ①官网下载Ja...
2019-05-26 22:41:18 147
原创 Hadoop的安装与配置
Hadoop的安装与配置 实验目的及要求 完成Hadoop的安装与配置 实验环境 VMWare、CentOS7、SecureCRT、JDK、Hadoop 实验步骤 VMWare 12安装并激活 CentOS7安装 SecureCRT安装 SecureCRT新建Session修改外观 Hadoop三种模式安装配置 JDK+Hadoop安装配置、单机模式配置 以下操作在Secur...
2019-05-26 22:29:43 166
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人