大数据linux_hadoop
LW彬彬彬彬彬彬。
这个作者很懒,什么都没留下…
展开
-
MapReduce初级编程实践
1. 实验目的和要求1.1 实验目的通过实验掌握基本的MapReduce编程方法;掌握用MapReduce解决一些常见的数据处理问题,包括数据去重、数据排序和数据挖掘等。1.2 实验软硬件环境操作系统:Linux(建议Ubuntu16.04)Hadoop版本:2.7.11.3 实验要求(一)编程实现文件合并和去重操作对于两个输入文件,即文件A和文件B,请编写MapRedu...原创 2020-02-26 20:51:13 · 3437 阅读 · 1 评论 -
NoSQL和关系数据库的操作比较
1. 实验目的和要求 1.1 实验目的理解四种数据库(MySQL、HBase、Redis和MongoDB)的概念以及不同点;熟练使用四种数据库操作常用的Shell命令;熟悉四种数据库操作常用的Java API。1.2 实验软硬件环境操作系统:Linux;Hadoop版本:3.2.0;MySQL版本:5.6;HBase版本:2.2.1;Redis版本:3.0.5;...原创 2020-02-26 20:49:28 · 5267 阅读 · 2 评论 -
熟悉常用的HBase操作
1. 实验目的和要求1.1 实验目的理解HBase在Hadoop体系结构中的角色;熟练使用HBase操作常用的Shell命令;熟悉HBase操作常用的Java API。1.2 实验软硬件环境操作系统:Linux(建议Ubuntu18.04);Hadoop版本:3.2.1;HBase版本:2.1.1;JDK版本:1.11;Java IDE:Eclipse 4.3。...原创 2020-02-26 20:40:46 · 2497 阅读 · 0 评论 -
熟悉常用的HDFS操作
1. 实验目的和要求1.1 实验目的理解HDFS在Hadoop体系结构中的角色,熟练使用HDFS操作常用的Shell命令,熟悉HDFS操作常用的Java API。1.2 实验软硬件环境① 操作系统:Linux Ubuntu 16.04② Java:open-jdk-1.8③ Apache Hadoop:3.2.01.3 实验要求(一)编程实现以下功能,并利用Hadoop提供...原创 2020-02-26 20:33:11 · 1878 阅读 · 1 评论 -
熟悉常用的Linux操作和Hadoop操作
1. 实验目的和要求1.1 实验目的Hadoop运行在Linux系统上,因此,需要学习实践一些常用的Linux命令。本实验旨在熟悉常用的Linux操作和Hadoop操作,为顺利开展后续其他实验奠定基础。1.2 实验软硬件环境① 操作系统:Linux Ubuntu 16.04② Java:open-jdk-1.8③ Apache Hadoop:3.2.01.3 实验要求① 在Linu...原创 2020-02-26 20:26:58 · 3274 阅读 · 0 评论