![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 90
zzjmay
一个游走在大厂的搬砖工
展开
-
Mac hadoop 安装及配置(伪分布模式)
环境条件 JDK1.8 Hadoop 2.7.5 mac os Hadoop部署步骤第一步 安装JDK 因为Hadoop是java写的开源框架,所以必须建立在Java的运行环境上。本篇采用的是JDK1.8 ,其实只要1.7以上的版本就可以了 需要配置好JDK的环境变量,这里就不详细说了第二步 安装Hadoop a) 下载Hado...原创 2018-04-08 20:14:17 · 787 阅读 · 1 评论 -
Hadoop 之 HDFS操作
HDFS的设计 HDFS 以流式数据访问模式来存储超大文件,运行于商用硬件集群上。HDFS是分布式文件系统HDFS的数据块 HDFS的数据块一般的大小是128MB PS: 寻址速度10ms 硬盘读取速度100MB/s 一般寻址速度是数据IO的百分之一 我们以拷贝一个大于128M的文件为例子 步骤一: 首先找到大于128MB的文件,将文件拷贝到hdfs下...原创 2018-04-08 20:16:21 · 282 阅读 · 0 评论 -
Flink入门---下载和安装
Flink的下载与安装环境阿里云 Centos7Java 1.8.xFlink1.5.6第一步 下载安装包方法1:https://flink.apache.org/downloads.html方法2:https://github.com/apache/flink 源码需要打包编译wget http://mirror.bit.edu.cn/apache/flink/fli...原创 2019-01-29 23:26:03 · 4106 阅读 · 0 评论