- 博客(4)
- 收藏
- 关注
RSS订阅原创 Yarn运行原理了解
YARN运行原理 yarn的前世今生 首先在hadoop1.0版本中，存在的最大问题就是资源管理的问题！ 随着技术的发展，人们已经不在满足hadoop集群中只使用mapreduce一个计算框架，人们更希望有一套合理的管理机制来控制整个集群的资源。 在hadoop中启动yarn的命令： ./start-yarn.sh RescoueceManager 是全局资源管理器 NodeManager 是节点资源任务管理器 我们可以理解成RM和NM就是Yarn Yarn的基本架构 Yarn在总体设计思想
2020-06-04 15:15:38
615
原创 Spring Boot笔记 -- 日志
一、日志 1. 日志框架 市面上的日志框架： JUL, JCL, log4j, log4j2, slf4j… 日志门面： JCL， SLF4j, joss-logging 日志实现：Log4j , Log4j2 , JUL , Logback SpringBoot: 底层是Spring框架， Spring框架默认是用JCL SpringBoot选用SLF4j和Logback 2. SLF4j使用 1. 如何在系统中使用SLF4j 以后开发的时候，日志记录方法的调用，不应该来直接调用日志的实现类，而
2020-06-01 18:49:52
180
原创 Spring Boot笔记 -- 配置
打包运行 使用插件：spring-boot-maven-plugin打成jar包，直接执行jar就可以运行 POM文件 父项目依赖：spring-boot-starter-parent -> spring-boot-dependencies spring boot的版本仲裁：以后我们导入依赖默认是不需要写版本的；没有在dependencies里面管理的依赖自然需要声明版本号 spring-boot-starter-web: sping boot st..
2020-06-01 18:48:24
149
原创 MaxWell 概述
MaxWell概述 将mysql的binlog以json的形式输出到kafka，它的常见用例包括ETL，缓存建立/过期，指标收集，搜索索引和服务间通信 json示例： mysql> update test.maxwell set daemon = 'firebus! firebus!' where id = 1; maxwell: { "database": "test", "table": "maxwell", "type": "update", .
2020-06-01 10:54:10
1015
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人