大数据
IT茶馆技术斋
这个作者很懒,什么都没留下…
展开
-
双料架构师必备,Nginx+微服务+Redis+Mysql+HD+Saprk+Flink+k8s
IT圈子是一个需要不断学习不断进取的圈子,不学习不进步肯定是要被淘汰的,而且现在的IT圈子更加趋向于“多面手”全栈架构师这么一个大形势,小编这里为大家整理了架构+大数据双料架构师的进阶必备的PDF,希望你可以一直学习,一直进步!(java岗位)实战NginX,取代Apache的高性 能Web服务器第1章Nginx简介第2章Nginx服务器的安装与配置第3章Nginx的基本配置与优化第4章Nginx与PHP(FastCGI)的安装、配置与优化第5章Nginx与JSP. ASP....原创 2020-06-16 14:02:51 · 574 阅读 · 0 评论 -
同事埋了个坑:Insert into select语句把生产服务器炸了
前言Insert into select请慎用。这天xxx接到一个需求,需要将表A的数据迁移到表B中去做一个备份。本想通过程序先查询查出来然后批量插入。但xxx觉得这样有点慢,需要耗费大量的网络I/O,决定采取别的方法进行实现。通过在Baidu的海洋里遨游,他发现了可以使用insert into select实现,这样就可以避免使用网络I/O,直接使用SQL依靠数据库I/O完成,这样简直不要太棒了。然后他就被开除了。事故发生的经过由于数据数据库中order_today数据量过大,当时好像有700原创 2020-06-14 19:55:37 · 958 阅读 · 0 评论 -
将系统稳定性提升一千倍,大牛用2.78G视频就讲明白了zookeeper
前言ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。ZooKeeper的目标就是封装好复杂易出错的关键服务,将简单易用的接口和性能高效、功能稳定的系统提供给用户。ZooKeeper包含一个简单的原语集,提供Java和C的接口。ZooKeeper代码版本中,提供了分布式独享锁、选举、队列...原创 2020-06-10 14:33:47 · 124 阅读 · 0 评论 -
阿里面试官总结的Dubbo+Zookeeper集群案例(建议收藏)
一.开源分布式服务框架1.Dubbo是阿里巴巴公司开源的一个高性能优秀的服务框架,使得应用可通过高性能的 RPC 实现服务的输出和输入功能,可以Spring框架无缝集成。Dubbo是一款高性能、轻量级的开源Java RPC框架,它提供了三大核心能力:①面向接口的远程方法调用;②智能容错和负载均衡;③服务自动注册和发现。2.结构图节点角色说明:Provider: 暴露服务的服务提供方。Consumer: 调用远程服务的服务消费方。Registry: 服务注册与...原创 2020-06-09 14:29:39 · 424 阅读 · 0 评论 -
阿里面试官分享的Zookeeper实现服务注册/发现(建议收藏)
what that?Zookeeper在分布式开发中使用频繁,但许多框架都对其进行了封装,初学者可能无法较好的理解其工作原理,该文章演示了使用Zookeeper实现服务注册,服务发现的简单demo,希望能达到抛砖引玉的效果;why need RegisterCenter?之所以需要访问注册和服务发现是因为分布式系统中,服务之间需要相互调用,但若每个服务自己维护一份依赖的服务信息的话,就显得很麻烦,且自身维护的数据无法保证其实时性,当依赖的服务信息发生变更时,无法及时获取更新,解决方案就是引...原创 2020-06-09 14:00:31 · 531 阅读 · 0 评论 -
腾讯T4大牛给你们整理了不一样的Flink 基础入门
前言Spark Streaming 准确来说算是一个微批处理伪实时的做法,可是 Flink 是真的来一条就会处理一条,而且在 Spark Streaming 和 Kafka 进行整合时我们需要手动去管理偏移量的问题,而在 Flink 当中,它就会自动地去帮助我们去管理。而且 Flink 的算子比 Spark Streaming 的丰富多了,Flink是未来的趋势,起码我是这么认为的一、Flink基础Flink起源于一个名为Stratosphere的研究项目,目的是构建下一代的大数据分析...原创 2020-05-29 16:57:50 · 344 阅读 · 0 评论