- 博客(8)
- 资源 (3)
- 收藏
- 关注
RSS订阅
原创 Ubuntu系统安装Hadoop3.1.3并进行单机/伪分布式配置
Ubuntu系统安装Hadoop3.1.3并进行单机/伪分布式配置文章目录Ubuntu系统安装Hadoop3.1.3并进行单机/伪分布式配置前言详细流程创建Hadoop用户安装Java配置SSH免密登陆安装Hadoop3.1.3Hadoop单机配置Hadoop单机运行实例Hadoop伪分布式配置Hadoop伪分布式运行实例Web访问Hadoop信息参考文章前言Hadoop官方真正支持的作业平...
2020-03-06 13:02:59
3723
1
原创 第四章-分布式数据库HBase
第四章-分布式数据库HBase文章目录第四章-分布式数据库HBaseHBase简介HBase数据模型数据模型概念概念视图物理视图面向列的存储HBase实现原理HBase功能组件表和RegionRegion的定位HBase运行机制HBase系统架构Region工作原理HBase简介BigTable是一个分布式存储系统，利用 MapReduce分布式并行计算模型来处理海量数据，使用谷歌分布式文件...
2020-03-29 13:36:45
1460
原创 第三章-分布式文件系统HDFS
第三章-分布式文件系统HDFS文章目录第三章-分布式文件系统HDFSHDFS简介HDFS相关概念HDFS块与组件名称节点第二名称节点数据节点HDFS体系结构HDFS存储原理冗余数据保存数据存取策略数据错误与恢复HDFS数据读写过程读过程写过程HDFS简介分布式文件系统把文件分布存储到多个计算机节点上，成千上万的计算机节点构成计算机集群。分布式文件系统在物理结构上是由计算机集群中的多个节点构...
2020-03-26 13:08:08
1915
原创 第二章-大数据处理框Hadoop
第二章-大数据处理框Hadoop文章目录第二章-大数据处理框HadoopHadoop简介Hadoop概念Hadoop版本Hadoop优化与发展Hadoop生态系统HivePigHadoop重要组件Hadoop集群部署Hadoop简介Hadoop概念Hadoop是Apache软件基金会旗下的一个开源分布式计算平台，为用户提供了系统底层细节透明的分布式基础架构。Hadoop被公认为行业大数据标...
2020-03-23 18:38:38
547
原创 简单的MapReduce实践
简单的MapReduce实践文章目录简单的MapReduce实践操作环境实现文件合并和去重操作新建项目新建Java程序打包程序运行程序参考文章操作环境操作系统：Ubuntu 16.04JDK 版本：1.8Hadoop 版本：Hadoop 3.1.3Java IDE：Eclipse我的 Hadoop安装目录是“/usr/local/hadoop”，环境变量 HDAOOP_HOME也...
2020-03-21 15:51:45
2185
原创 第一章-大数据概述
第一章-大数据概述文章目录第一章-大数据概述大数据时代大数据概念、影响、应用大数据关键技术大数据计算模式大数据与云计算、物联网的关系本系列博客的材料均来自厦门大学林子雨老师的教材和MOOC资料。大数据时代根据IBM前首席执行官 Louis Gerstner 的观点， IT领域每隔十五年就会迎来一次重大变革。信息化浪潮发生时间标志解决问题代表企业第一次浪潮198...
2020-03-17 21:38:34
1893
原创 简单的HDFS操作
简单的HDFS操作文章目录简单的HDFS操作HDFS常用Shell命令使用HDFS的Shell命令输出HDFS某一个目录下所有文件详细信息向HDFS中上传任意文本文件将HDFS中指定文件的内容输出到终端从HDFS中下载指定文件删除HDFS中指定的文件HDFS常用JavaAPI使用HDFS的JavaAPI创建工程并导入JAR包向HDFS上传任意文本文件从HDFS下载指定文件参考文章HDFS常用S...
2020-03-10 12:09:25
3176
原创 Ubuntu16.04系统安装Eclipse
Ubuntu16.04系统安装Eclipse文章目录Ubuntu16.04系统安装Eclipse前言详细过程安装JDK下载Eclipse安装Eclipse设置桌面图标参考文章前言安装 Ubuntu系统之后，我们就可以根据自己的需求来操作和编写程序了。虽然 Ubuntu系统中内置了 vim编辑器，但是我们基本不会去使用它来编写程序。我们肯定要用 IDE啊，集成开发环境它不香吗？因为我们主要是编...
2020-03-02 12:02:10
3194
3
jdk-8u241-linux-x64.zip
2005-09-15
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人