大数据
达龙猫
不要只做代码搬运工,思想+行动+坚持=成功
展开
-
CentOS7安装hadoop2.7.3-单机版
文章目录安装版本OpenJDK安装环境准备hadoop安装安装版本操作系统:CentOS7 64位IP地址:192.168.43.61Hadoop版本:2.7.3JDK版本:OpenJDK 1.8 64位OpenJDK安装使用yum安装OpenJDK1.8,参看博客:Linux下OpenJDK安装安装完毕后要配置好环境变量,这里设置全局的环境变量,即修改 /etc/profile ...原创 2019-04-11 14:33:11 · 659 阅读 · 0 评论 -
深入理解HDFS原理
文章目录HDFS初识HDFS优缺点认识架构关于block数据存储策略数据读写写操作读操作HDFS初识Hadoop生态系统架构图1.0版本:2.0版本:HDFS是Hadoop Distribute File System的简称,位于生态系统图最底层的,是Hadoop的一个分布式文件系统。HDFS优缺点优点:高容错性,数据自动保存多个副本,副本丢失后自动恢复存储超大文件,...原创 2019-04-15 13:09:41 · 279 阅读 · 0 评论 -
Intellij IDEA连接Hadoop HDFS实现本地调试
首先下载HadoopIntellijPlugin插件,该插件在CSDN上可以下载到现成的(不过需要积分)。其实该插件真正的出处地址是:https://github.com/fangyuzhong2016/HadoopIntellijPlugin大家可以按照github的介绍生成属于自己版本的插件(亲测可行)若是hadoop 2.7.3版本,可以直接下载我生成好的插件,请戳这里:网盘下载,...原创 2019-04-19 16:20:06 · 6670 阅读 · 3 评论