浅谈Java多线程

Java多线程的概念及创建方法一、首先我们需要明白几个概念:程序、进程和线程程序:指令集,是一个静态概念,比如说桌面上的一个应用就是一个程序。不管它运不运行都是一个程序进程:操作系统调度程序,是一个动态概念。还是拿上面那个例子,当我们点击运行的时候,操作系统开始调度,这就启动了一个进程。线程:线程...

2018-05-29 11:15:52

阅读数 148

评论数 0

招银电话面试

  java方面: 1、说下jdk、jre、jvm、jrt(没答好) 2、方法重载、重写 3、final、finally、finalize(finalize没答好) 4、说一下垃圾回收 5、java中的异常 6、servlet 数据库: 1、数据库的事务 2、索引的原理 4、...

2018-09-13 11:14:03

阅读数 250

评论数 0

招银网络科技电话面试前整理(2019校招)

由于本人马上要电面招银网络,所以从牛客、CSDN各个网站总结的招银面经问题(java开发/测试): 牛客最新面经: 2018年9月 第一个 1、机试做错的题可能会问 2、final的用法:可以用于三个地方,修饰类、类属性和类方法。被final修饰的类不能被继承,被final关键字修饰的类...

2018-09-12 16:22:50

阅读数 1992

评论数 0

Spark工作机制

内部运行机制 任务分配、IO模块、通信控制模块、容错模块、Shuffle模块。采用的算法:FIFO、FIAR算法,通信采用AKKA框架 1、spark执行机制: spark应用提交后经历了一系列转换最后成为Task在每个节点上执行。 大体的执行流程:RDD的Actions操作除非Job的提...

2018-09-03 11:11:37

阅读数 244

评论数 0

Spark RDD

At a high level, every Spark application consists of a driver program that runs the user’s main function and executes various parallel operations on ...

2018-09-03 11:07:31

阅读数 36

评论数 0

spark原理:概念与架构、工作机制

一、Hadoop、Spark、Storm三大框架比较 Hadoop:离线海量数据批处理,基于磁盘的 Spark:基于内存。 Spark特点:运行速度快,使用DAG执行引擎以支持循环数据流与内存计算, 2、容易使用:多种语言编程,通过spark shell进行交互式编程 3、通用性:提供了...

2018-09-03 11:05:37

阅读数 1353

评论数 0

Hive从概念到原理

Hive是一个数据仓库基础工具,它是建立在Hadoop之上的数据仓库,在某种程度上可以把它看做用户编程接口(API),本身也并不存储和处理数据,依赖于HDFS存储数据,依赖MR处理数据。它提供了一系列对数据进行提取、转换、加载的工具。依赖于HDFS存储数据,依赖MR处理数据。在Hadoop中用来处...

2018-09-03 10:51:27

阅读数 503

评论数 0

Hadoop之MapReduce

一、概述 对比传统的并行编程框架 四个方面:集群的架构和容错性(一个节点故障前者会导致整个集群不工作后者不会)、硬件价格及扩展性(后者仅需要廉价的PC机即可)、编程和学习难度(前者难后者易)、适用场景 大数据分布式并行处理技术MapReduce,批处理模式的典型代表。 批处理:MapRed...

2018-09-03 10:41:18

阅读数 21

评论数 0

Hadoop原理之HDFS

一、重要概念:分区存储,分布式 解决的问题:两大核心分布式存储、分布式处理 实现的目标:兼容廉价的硬件设备、实现流数据读写、支持大数据集、支持简单的文件模型、跨平台的平台兼容性 自身局限性:1、不适合低延迟数据访问,高吞吐量,无法高效存储大量小文件                      ...

2018-09-03 10:34:08

阅读数 17

评论数 0

Hadoop原理之Yarn资源管理

Yarn设计思路、体系结构、工作流程 对比分析MapReduce1.0 MapReduce1.0的缺陷 1、单点故障:只有一个JobTracker负责整个作业的管理调度 2、JobTracter包揽一切,很容易导致出现故障,对MapReduce1.0做集群时只能有4000个节点。 3...

2018-09-03 10:19:27

阅读数 29

评论数 0

Hadoop系列之原理与架构

一、Hadoop项目架构 Hadoop框架是用来解决数据离线批处理问题的框架,其中最核心的是HDFS和MapReduce,HDFS是架构在Hadoop之上的分布式文件系统,MapReduce是架构在Hadoop之上用来做计算的框架。 hadoop两个核心:HDFS和MapReduce 用途:...

2018-09-03 10:12:33

阅读数 621

评论数 0

Hive本地模式安装和配置(官网简单翻译)

安装步骤据官网简单翻译:(我部署的本地模式,按照官网的部署成功了,参照网上的步骤都没成功。在命令行运行hive时候一直报错) 1、Requirements Java 1.7Note:  Hive versions 1.2 onward require Java 1.7 or newer. Hi...

2018-08-27 15:08:26

阅读数 248

评论数 0

windows下用eclipse连接hadoop集群

最近因实习需要开始摆弄起了hadoop和spark相关的,记录一下我踩过的坑。由于linux下不好调试程序,因此记录一下用windows下的eclipse调试MapReduce程序。 环境:虚拟机VMware搭建的Ubuntu16.0.4集群,一个master,两个slaves windows...

2018-07-29 15:38:43

阅读数 144

评论数 0

Flink 本地模式安装配置 (包含java环境配置)

一、JDK安装 配置:      1.先从Oracle官网下载JDK。根据自己的系统下载相应版本。我下载的是***.tar.gz  具体忘了    2.创建一个目录/usr/lib/jvm以便于把下载解压后的包放到这个目录下     命令:sudo mkdir /usr/lib/jvm ...

2018-07-23 09:02:07

阅读数 1754

评论数 0

Java中的static关键字解析

转自https://www.cnblogs.com/starhu/p/5150241.html static关键字是很多朋友在编写代码和阅读代码时碰到的比较难以理解的一个关键字,也是各大公司的面试官喜欢在面试时问到的知识点之一。下面就先讲述一下static关键字的用法和平常容易误解的地方,最后列举...

2018-06-24 11:59:03

阅读数 159

评论数 0

海信网络科技软件研发实习面试

海信简历投的是软件开发、测试实习生,没有笔试,直接一面,面试过程大概是十几二十分钟的样子。面完直接凉了一截。。。说一下面试流程,我接到的通知是在我们学校的软件大楼面试,中午11.30。进去之后是三个面试官,我估摸着一个是技术面试官,一个是HR,还有一个应该是做记录的(猜的)。首先HR让我做自我介绍...

2018-06-21 21:50:49

阅读数 1226

评论数 8

Java网络编程

基本概念:一、网络:将不同区域的计算机连接到一起就组成了一个网络,根据区域大小可以将其分为局域网、广域网、城域网等。二、地址:IP地址,确定网络上的一个绝对位置  ,相当于房子的地址三、端口号:区分计算机软件的 ,每一个应用都需要绑定一个端口,在这个端口下运行。相当于房子的房门,包含两个字节  0...

2018-06-19 11:29:30

阅读数 76

评论数 0

浅谈Java文件、IO流(三)

最后稍微说一下文件的分割与合并,重在思路!!!重在思路!!!重在思路!!!文件分割与合并:RandomAccessFile   关注seek方法。思路:第一步:初始操作0)确定文件的块数1)确定每块大小   注意处理边界,最后一块2)每块的名称    第二步:1)分割   a)每一块的起始点、第几...

2018-06-10 11:39:37

阅读数 64

评论数 0

浅谈Java文件、IO流(二)

    在上一篇里我们简单的讲了一下文件和常用的IO流操作,主要要熟悉字节流和字符流操作。在刚开始不熟悉的时候其实我总是会把这几个东西给混起来,比如会把字节流的InputStream和字符流Reader给混起来。其实在这里我们只要记住一点就好了,凡是带有Reader的类都是处理字符流的。除了上篇博...

2018-06-10 11:38:58

阅读数 60

评论数 0

浅谈Java文件、IO流(一)

文件这一块其实在我看来是一个稍微还比较简单的东西,不管是学C语言也好,学其他的语言也罢,操作文件这部分的内容都是必不可少的。操作文件涉及到一个很重要的知识点也就是IO流。那么学习IO流的用处到底在哪里呢?首先以一个很简单的例子说一下我个人对文件的理解,数据在计算机里面都是以二进制的形式进行存储的。...

2018-06-09 18:35:08

阅读数 45

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭