![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
文章平均质量分 85
司空良
(接毕业设计,期末大作业,课设,工作三年)本科专业数据科学与大数据技术
展开
-
Hive的安装、配置与Shell入门操作
Hive的安装、配置与Shell入门操作一、实验目的与要求目的:理解Hive在Hadoop体系结构中的角色,掌握 Hive 的安装部署及Mysql的安装与配置,掌握Hive Shell的常用命令与非交互式命令。要求:1.在已安装Hadoop的基础上安装配置好Hive并运行 2.在Hive Shell下,根据题目要求创建一个表3.完成实验报告。二、实验内容1. Hive的基本安装2. Mysql的安装与设置3. Hive的设置4. Hive Shell常用命令5.Hive Shell 非交互式运行三原创 2022-06-18 07:35:57 · 1566 阅读 · 0 评论 -
hadoop经典案例,倒排索引,数据去重,Topn
一、实验目的与要求MapReduce是Hadoop系统核心组件之一,它是一种可用于大数据并行处理的计算模型、框架和平台,主要解决海量数据的计算。通过对MapReduce编程模型及实际案例进行深入实践。理解MapReduce的核心思想,掌握MapReduce的编程模型,掌握MapReduce的工作原理,掌握MapReduce常见编程组件的使用。要求:1、认真理解MapReduce的编程模型以及工作原理,通过实践完成MapReduce相关编程操作。2、结合实践内容和教材的相关章节完成实验报告。二、实验内容案例一原创 2022-06-17 16:56:57 · 1800 阅读 · 0 评论 -
搭建hadoop集群,从安装虚拟机开始直到hadoop成功搭建
搭建Hadoop集群一、实验目的与要求学习和掌握Hadoop的相关应用,首先必须得学会搭建Hadoop集群。本次实验将针对Hadoop集群的搭建内容进行演练。学会虚拟机的安装和克隆,Linux系统的网络配置和SSH配置,Hadoop集群的搭建和配置,Hadoop集群测试,熟悉Hadoop集群基本的操作。要求:1、认真理解集群搭建过程,通过实践成功搭建Hadoop集群。2、结合实践内容和教材的相关章节完成实验报告。二、实验内容1、虚拟机安装2、虚拟机克隆3、Linux系统网络配置4、SSH服务配置5、JDK安原创 2022-06-16 18:49:19 · 3266 阅读 · 6 评论 -
基于hadoop下的使用map reduce分布式系统的高考高频词汇统计(内有源码下载)
hadoop课程设计报告一、设计目的与要求1、设计目的通过hadoop课程设计可以加深、巩固对本门专业课程理论知识的掌握。通过eclipse和hadoop来编写课设报告等方面的实践训练,筑牢编程基础,培养良好的逻辑思维能力,提高综合运用能力。同时也锻炼学生自我管理和自我发展的能力,合理安排时间完成自己的任务,促进个人和集体良好的合作交往。基于hadoop下的mapreduce分布式系统具体要求:二、设计内容1、设计题目和环境题目:基于hadoop下的高考英语高频词汇分析语言:Java+Linux环境:ecl原创 2022-06-16 13:14:44 · 5339 阅读 · 17 评论