dima3529-CSDN博客

转载分布式系列 (一) 分布式架构概念

目录集中式系统架构与分布式系统架构分布式系统架构中的挑战事务分布式事务和数据一致性集中式系统架构与分布式系统架构集中式系统：由卓越性能的大型主机单机组成的计算机系统，称为集中式系统。特点。单机运算能力强劲，部署结构简单。但是，...

2019-09-19 09:42:00 330

转载 Hadoop系列（五）Hadoop三大核心之HDFS 读写流程

目录 HDFS写数据流程 HDFS读流程首先，再回顾一下HDFS的架构图HDFS写数据流程客户端发送请求，调用DistributedFileSystem API的create方法去请求namenode，并告诉namenode上传文件的文件名、文件大小、文件拥有者。nameno...

2019-09-08 16:12:00 150

转载 Java序列化和反序列化

目录 java基础一、序列化和反序列化的定义和场景二、序列化和反序列化的java实现 Serializable接口总计 java基础一、序列化和反序列化的定义和场景序列化：将对象写入到IO流中反...

2019-09-07 15:12:00 131

转载进程，线程与多核，多cpu之间的关系

目录 cpu架构和工作原理多核cpu和多cpu 架构 cpu的缓存进程和线程进程和线程在多核cpu，多cpu中的运行关系总结 cpu架构和工作原理计算机有5大基本组成部分，运算器，控...

2019-09-05 20:32:00 1188

转载 Hadoop系列（四）Hadoop三大核心之HDFS Java API

目录概念具体操作 HDFS 设计的主要目的是对海量数据进行存储，也就是说在其上能够存储很大量的文件。HDFS 将这些文件分割之后，存储在不同的 DataNode 上，HDFS 提供了通过Java API 对 HDFS 里面的文件进行操作的功能，数据块在 DataNode 上的存放位置...

2019-09-01 18:39:00 109

转载 Hadoop系列（三）Hadoop三大核心之HDFS shell常用命令

目录 HDFS常用命令 help 查看所有命令查看路径文件创建文件夹创建多级文件夹查看指定目录下和子目录下所有文件上传文件下载文件合并下载复制移动 ...

2019-08-30 01:12:00 196

转载 Hadoop系列(一)开篇简介

目录 Hadoop是什么 Hadoop的起源 Hadoop版本与架构核心 Hadoop理念 PS 谁说大象不会跳舞Hadoop是什么Hadoop的官网：http://hadoop.apache.org/官网定义：The Apache H...

2019-08-24 01:50:00 126

转载 Hadoop系列(番外) hadoop3.1.2的完全分布式部署

目录大纲〇、Hadoop下载地址一、分配机器环境二、SSH配置三、分布式配置部署启动大纲机器环境及SSH预处理hadoop安装部署〇、Hadoop下载地址采用apache官网下载地址...

2019-08-22 22:35:00 168

转载 synchronized关键字

并发定义synchronized方法是java中常用的关键字，属于JVM层面，java的内置锁,Java中的每一个对象都可以作为锁，当对象被synchronized锁住之后，此对象当前是被该锁和该线程独占。应用分为修饰方法和修饰代码块两大类：具体如下4种用法：修饰实例方法修饰静态方法同步实例方法中的代码块同步静态方法中的代码块修饰实例方法public s...

2019-08-22 14:04:00 67

dima3529的博客