盘点2018.6~2018.8触碰过的技术

之所以这篇题目叫“触碰”过的技术,而不是研究,是因为确实有些技术点不是研究,只是应急,问题解决后也没有再去深入系统的去学习。

Java

Java8

阅读了《Java8实战》的前6章和第10章,对Java8的知识体系基本上了解了。在开发中会思考能否用的上Java8的特性,如果能再到书中去查找。读书期间按着书中的例子动手实践了一下,代码地址https://github.com/duzhuo/lambdasinaction。中间有几章没有看,主要原因是发现工作中有很多其他技术点急需补充,而Java8的知识点又不是特别紧急的,所以就暂时往后排了。

  • 为什么要关心Java8
  • 通过行为参数化传递代码
  • Lambda表达式
  • 引入流
  • 使用流
  • 用流收集数据
  • 用Option取代null

Java虚拟机

在极客时间购买了《深入拆解Java虚拟机》的课程,看了前五节课,课程标题如下

  • Java代码是怎么运行的
  • Java的基本类型
  • Java的虚拟机是如何加载Java类的
  • JVM是如何执行方法调用的(上)(下)

这部分知识也算是填补空白吧,虽然看完以后大半记不住,但这类知识看过就比没看过强,而且看一遍肯定记不太清,每看一遍都会有不同的理解和收获。

MySQL

 

线程监控

以前会习惯性认为数据库监控的事应该由DBA做,事实上之前的几份工作也大多是这样。公司用oracle的时候DBA做监控给抓慢SQL,后来用了阿里云也有相关的性能分析报表和分析工具,现在项目中数据库基本要自己运维了。摆在面前的第一个问题就是数据库CPU使用率持续稳定在90%以上,要死的节奏,需要搞清楚数据正在运行哪些SQL。

贴两个有用的SQL,都是查当前会话列表的,第二个是查运行中的

  • show full processlist
  • SELECT * FROM information_schema.processlist a WHERE a.COMMAND != 'Sleep'

了解了数据库的运行状况,才能着手进行优化。

 

Binlog

某日测试库突然连不上了,DBA反馈说磁盘空间满了,binlog突然大幅增长,没等自动清就把库给撑爆了。既然这样就把binlog导出来看看到底是哪些SQL干的好事吧。

  • 本地安装mysql服务端,
  • 使用mysql_server_home/bin/mysqlbinlog
  • mysqlbinlog --base64-output=DECODE-ROWS -v C:\mysql-bin | more

参数--base64-output=DECODE-ROWS主要是解决SQL语句乱码的问题

通过解析出来后的SQL了解到最近一哥们在用任务跑批,库里3000W+数据删了插、删了插,结果就悲剧了。

 

微服务

这部分的知识依然获取自极客时间《微服务架构实战160讲》。利用晚上及周末的时间看完了已经发布的80节课程,仅仅是看完了而已。课程前四部分目录如下

  • 微服务安全架构与实践
  • 微服务配置中心Apollo架构和实践
  • 微服务网关Zuul架构和实践
  • 微服务调用链监控CAT架构和实践

其实用微服务也好几年的时间了,但当系统性的学习这门课程时,发现之前的理解和认知还是很片面的,所以至少已经在用的知识确实是应该系统的学习一番。

学习后需要结合工作情况予以生产实践,遇生产问题解决之,产生正向循环。

附一张微服务架构总体技术体系图,路还长,需要继续加油!

 

任务调度框架

背景是项目中有挺多的后台任务,大部分用了quartz,少部分用的Linux的conrtab+shell,运维和监控都挺让人头疼。尤其是监控,实际上根本就没有监控,谁也不知道任务是成功执行了还是失败了。故打算引入一个使用简单轻量、易于管理的调度框架。于是调研了Elastic-job-lite和xxl-job。

Elastic-job-lite和TBSchedule有些类似,都是非中心调度框架,依赖于zookeeper集群,支持DataFlow任务(fetch->process)模式。个人还是很喜欢DataFlow这种任务模式的。

xxl-job仅依赖MySQL,默认不支持DataFlow,中心调度框架。

调研点如下

  • 本地环境搭建
  • 官方文档阅读
  • demo运行
  • 与现有项目集成
  • 博客论坛评价
  • 关键性源码阅读(自己查找 + 芋道源码)

附一张xxl-job的架构图

 

Elasticsearch

公司内部电商项目引擎使用的是Elasticsearch,时长会遇到无法正确搜索出结果的问题。

以问题驱动学习有时也是个不从的注意,于是快速学习了基本命令,基本查询语句,浏览了官方文档

搭建了Kibana+sense,可以在浏览器直接写语句查询ES了

Kibana还分别搭了3.3.0和4.4.0两个版本。

 

Elasticsearch-jdbc

一个开源的将数据库表同步到ES的工具,2016年后不再更新,最高支持到ES2.3.4版本,建议新项目还是别用了,省得被坑。

用这个的过程中出现了Crontab运行Shell脚本某系命令不生效的问题,最终发现原来是环境变量的问题。也算是一个不大不小的坑吧。

 

Kibana

3.3.0、4.4.0的安装

Sense的安装

 

其他

 

Docker

参与的另一个项目在用,倒逼着要必须要学明白啦

 

kubernates

感觉要是不懂都不太好意思和别人沟通了,遂买了本书,翻了目录和前两章。这货越来越主流了,是开发必备技能了

 

nginx

利用白天时间百度了基本原理,本地弄了个环境简单跑起来了一个web工程

搭了一个http的本地文件下载服务

 

总结

原计划是专注把Java8看完,然后去看MySQL。但实际工作中需要解决的问题和需要用的技术知识使自己调整了原有计划,于是就有了上面这些零零总总的技术点。其实也挺好,学以致用,得到了正向的反馈。如果只是抱着一个工作中用不到或用的少的技术研究,就无法体会使用的快乐,久而久之学的也没有什么意思了。

两个多月的时间触碰了很多技术点,解决了不少项目中的问题。技术一步一步学,问题一个一个解决。工作少了虚伪,多了纯粹。


如果这篇文章对你有帮助,欢迎点赞,也欢迎关注我的微信公众号,你的关注是我进步的动力

 

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值