![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据之Hadoop生态圈
文章平均质量分 92
Thomas_an
这个作者很懒,什么都没留下…
展开
-
大数据入门博客
GitChat 作者:Fickr孫啟誠 原文: 三个月大数据研发学习计划实战解析 申明:本文旨在为普通程序员(Java程序员最佳)提供一个入门级别的大数据技术学习路径,不适用于大数据工程师的进阶学习,也不适用于零编程基础的同学。前言:一、背景介绍 二、大数据介绍正文:一、大数据相关的工作介绍二、大数据工程师的技能要求三、大数据学习规划四、持续学习资源推荐(...转载 2018-09-25 23:22:36 · 880 阅读 · 0 评论 -
Hive内部表,外部表,分区表的创建
--------创建内部表------------默认存储在/user/hive/warehouse下 也可以通过location指定删除表时,会删除表数据及元数据create table if not exists db_study.student(id String ,name String)ROW FORMAT DELIMITED FIELDS TERMINATED BY ...原创 2018-09-26 09:54:21 · 346 阅读 · 0 评论 -
hadoop之hdfs文件系统
(一)传统的网络文件系统NFS传统的网络文件系统(NFS)虽然也称为分布式文件系统,但是其存在一些限制。由于NFS中,文件是存储在单机上,因此无法提供可靠性保证,当很多客户端同时访问NFSServer时,很容易造成服务器压力,造成性能瓶颈。另外如果要对NFS中的文件进行操作,需要首先同步到本地,这些修改在同步到服务端之前,其他客户端是不可见的。某种程度上,NFS不是一种典型的分布式系统,虽然...原创 2018-09-21 08:46:03 · 348 阅读 · 0 评论 -
HDFS java api文件基本操作 CDH-5-11-2
HDFS java api 文件基本操作package hdfs;import java.io.BufferedReader;import java.io.ByteArrayInputStream;import java.io.File;import java.io.IOException;import java.io.InputStreamReader;import java.n...原创 2018-09-21 08:54:46 · 527 阅读 · 2 评论 -
Hadoop MapReduce 之wordcount
Hadoop MapReduce 之wordcountpackage wordcount;import java.io.IOException;import java.util.StringTokenizer;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org...原创 2018-09-21 08:58:12 · 140 阅读 · 0 评论