- 博客(8)
- 收藏
- 关注
RSS订阅原创 Spark课后实验报告
一、Spark与Scala版本兼容问题：Spark运行在Java 8 +，Python 2.7 + / 3.4 +和R 3.1+上。对于Scala API，Spark 2.4.2使用Scala 2.12。您需要使用兼容的Scala版本（2.12.x）。请注意，自Spark 2.2.0起，对2.6.5之前的Java 7，Python 2.6和旧Hadoop版本的支持已被删除。自2.3.0起，对S...
2019-05-27 13:43:33
1156
转载 hive实验的学习实验报告
实验题目探索Hive-熟悉Hive-加载数据到Hive。实验要求编写HQL查询语句导入给定文本sample1.txt中的数据到HDFS的一个CSV表stock_data中然后复制到序列表stock_data2中。操作步骤1.创建数据库首先通过show databases命令查看已存在的数据库然后使用create命令创建一个新的数据库，在本实验中命名为demo。2.在Hive中使用...
2019-05-27 13:41:00
3291
原创 NoSql学习总结
一、MySQL：1.MySQL时代早年，一般网站访问量都不会太大，基本上单个简单的数据库就能解决一般的数据反问问题。那时基本更多的网站都是以静态网页的样子存在，数据动态交互的网站不是太多。以下为这种方式的通用架构（图片来源为尚硅谷Redis教程，下同）：在上图结构下，在数据存储上会出现那些瓶颈呢？1.一台机器无法满足网站数据的总大小。2.一台机器无定法存下数据的索引（B+ Tree）时...
2019-05-27 13:39:22
945
原创 HBase实验报告
1，实验目的：正确解压及安装HBase2，实验原理：无3，实验设备：笔记本电脑4，实验步骤：一：解压及安装将压缩包从Windows传输到Linux当前目录下，解压安装到指定目录下/opt/module。配置环境变量在/etc/profile文件里添加HBase及zookeeper安装路径的配置信息测试HBase安装成功，命令hbase version，或hbase修改配置信息修...
2019-05-27 13:36:22
2378
原创 MapReduce分布式编程实验报告
MapReduce分布式计算系统1、HDFS 分布式存储系统2、MapReduce 分布式计算系统3、YARN hadoop 的资源调度系统Common 以上三大组件的底层支撑组件，提供基础工具包和 RPC 框架等Map处理public class WordCountMapper extends Mapper<LongWritable, Text, Text, IntWritab...
2019-05-27 13:33:43
779
原创 HDFS实验报告
第二次实验报告HDFS实验内容:使用HDFS命令上传下载文件编写JAVA程序读写、删除文件实验步骤（一）安装配置JDK+Eclipse+Maven1.安装JDK→2.安装Eclipse→3.安装Maven→4. Eclipse里配置Maven （下载Windows版本，在Windows里安装使用。）1.安装配置JDK①官网下载Java开发工具安装包jdk-8u201-windows...
2019-05-27 13:30:28
2144
原创 Jdk+Hadoop三种安装模式实验报告
标题实验一：以下操作在SecureCRT里面完成1.关闭防火墙firewall-cmd --state 显示防火墙状态running/not runningsystemctl stop firewalld 临时关闭防火墙，每次开机重新开启防火墙systemctl disable firewalld 禁止防火墙服务。2.传输JDK和HADOOP压缩包SecureCRT 【File】→【C...
2019-05-27 13:23:19
174
转载 网页自适应pc端和移动端
手机的屏幕比较小，宽度通常在600像素以下；PC的屏幕宽度，一般都在1000像素以上（目前主流宽度是1366×768），有的还达到了2000像素。同样的内容，要在大小迥异的屏幕上，都呈现出满意的效果，并不是一件容易的事。于是，网页设计师不得不面对一个难题：如何才能在不同大小的设备上呈现同样的网页？ 下面让木易设计来告诉大家。很多网站的解决方法，是为不同的设备提供不同的网页，比如专门提供一个mo...
2019-03-05 08:06:47
887
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人