- 博客(8)
- 收藏
- 关注
RSS订阅原创 Spark配置实验报告
一、Spark与Scala版本兼容问题：Spark运行在Java 8 +，Python 2.7 + / 3.4 +和R 3.1+上。对于Scala API，Spark 2.4.2使用Scala 2.12。您需要使用兼容的Scala版本（2.12.x）。请注意，自Spark 2.2.0起，对2.6.5之前的Java 7，Python 2.6和旧Hadoop版本的支持已被删除。自2.3.0起，对S...
2019-05-26 13:35:21
1186
转载 NoSQL实验报告
ISBN: 9780992461225,title: “JavaScript: Novice to Ninja”,author: “Darren Jones”,format: “ebook”,price: 29.00,publisher: {name: “SitePoint”,country: “Australia”,email: "feedback@sitepoint.com"...
2019-05-26 13:28:20
1902
原创 Hive的配置实验报告
MySQL安装①官网下载mysql-server（yum安装）wget http://dev.mysql.com/get/mysql-community-release-el7-5.noarch.rpm若wget不可用，下载安装wget：yum -y install wget②解压rpm -ivh mysql-community-release-el7-5.noarch.rpm③安装yu...
2019-05-26 13:17:46
1030
原创 HBase安装配置实验报告
HBase安装配置①下载压缩包（选择与自己安装的Hadoop版本的兼容版本，见后面附录）官网下载地址：https://mirrors.tuna.tsinghua.edu.cn/apache/hbase/stable/选择稳定版hbase-1.4.9-bin.tar.gz，在Windows里面下载。②将压缩包从Windows传输到Linux当前目录下SecureCRT 【File】→【Co...
2019-05-26 13:05:34
2703
原创 MapReduce 分布式计算
Combiner函数本地化的reducerPartitioner函数决定着Map节点的输出将被分区到哪个Reduce节点什么是shuffle怎样把map task的输出结果有效地传送到reduce端？map输出之前，在内存里经过sort和combiner，再将所有的输出集合到partitioner进行划分到不同的reducer，在每个分区（partition）中，再进行内存中排序，再运...
2019-05-26 13:03:18
268
原创 运行Hbase的配置与调试实验报告
一、实验目的安装Hbase并完成配置二、实验原理在Eclipse新建完成对Hbase的执行三 、实验步骤HBase安装配置解压及安装将压缩包从Windows传输到Linux当前目录下:解压安装到指定目录下/opt/module配置环境变量在/etc/profile文件里添加HBase及zookeeper安装路径的配置信息测试HBase安装成功，命令hbase version，...
2019-05-21 16:27:23
552
原创 HDFS配置实验报告
一、实验目的安装配置JDK+Eclipse+Maven，执行HDFS二、实验原理在Eclipse新建Maven Project完成对HDFS的执行三 、实验步骤1.安装配置JDK+Eclipse+MavenEclipse配置Maven①修改settings.xml在安装所在文件夹\apache-maven-3.6.0下面，新建\repository文件夹，作为Maven本地仓库。在...
2019-05-21 13:54:10
808
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人