- 博客(6)
- 收藏
- 关注
RSS订阅转载 ubuntu18.04安装spark（伪分布式）
网上这方面安装教程挺多的但是我觉得这篇博客挺不错的ubuntu18.04安装spark还有就是安装好之后,运行其快速入门中的例子可能会遇到如下问题：解决的办法有两个：第一：在hdfs中创建该文件第二：填写该文件的本地完全路径，记得开头加上“file:///”。...
2019-03-28 15:04:36
264
原创 Hadoop之航班延误比例(GroupBy)
一、前言离上一次写博客还是2年前了，这次借着上大数据的课有回到写博客的日常了，一是可以让自己在写博客的时候更深层次的理解所要写的东西，二来也可以帮助一些有需要的人，同时我们可以共同探讨这些知识。二、描述在生活中，飞机这个交通工具我们一定不陌生，它不仅给我们带来了极大地方便，而且也给我们很多启示。那这次我们说说航班吧，有这样一道题：根据航班信息，利用MapReduce处理大量航班信息来获得每月...
2019-03-24 17:46:52
950
1
原创 缓冲流和包装流
细说缓冲流和包装流一、缓冲流1.缓冲流概念 1）访问硬盘时间资源开销大 2）缓冲流自带缓冲区域 3）缓冲区域减少硬盘访问次数，提高读取文件效率2.缓冲流的分类 字节缓冲流和字符缓冲流。a）字节缓冲流 i)字节缓冲输入/输出流：BufferedInputStream/BufferedOutputStream ii)继承于Fi
2017-07-16 21:31:59
453
原创 Java之三大集合框架
Java之三大集合框架今天来说说JAVA的集合框架那那些事儿~首先要知道集合框架是支持泛型技术的一、List集合a) A)List的超级父类：Collectionb) ArrayList（重点）i. 存储数据的方式：底层还是通过数组方式来存储ii. List集合中，如果定义集合对象的时候，不确定类型，则什么类型对象都可以直接存储进去，取出来统一都是Object，后续需要
2017-07-11 21:18:00
912
原创 异常和文件
*****异常和文件*****对于Java编程语言，异常处理对程序运行和异常都是很重要的手段。 一、异常的概念、原理机制 1.什么是异常？ 通俗理解：异于平常，本来一件事情正常执行，可能中途会有特殊情况，导致当前事情无法正常执行而影响执行结果，这个中途特殊情况即异常。 例如：a/b这个操作，正常情况是没有任何问题，但是隐藏了一个问题，如果b为0，则这个除法操作将无法执行，则b为0的情况属于
2017-07-11 20:32:34
236
原创 JAVA关键字的理解和整理
JAVA关键字的理解和整理对于每一种编程语言都有其自己的一些关键字，所谓关键字：即该种编程语言固定和规定的单词，无法用于定义变量名、方法名、类名等。而对于java来说也有不少的关键字： 那接下来我就大概的说说一些常用的关键字的用法，至于一些不怎么用到的一些关键字，有兴趣的话可以自己去了解了解，那就进入正题吧。一、对常用关键字的分类1.具有访问权限：public、protecte
2017-07-09 19:22:20
466
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人