guolong1983811的专栏

转载 近千节点的Redis Cluster高可用集群案例:优酷蓝鲸优化实战

转载 tomcat服务器优化

http://www.cnblogs.com/ityouknow/p/5378874.html1、JDK内存优化   根据服务器物理内容情况配置相关参数优化tomcat性能。当应用程序需要的内存超出堆的最大值时虚拟机就会提示内存溢出，并且导致应用服务崩溃。因此一般建议堆的最大值设置为可用内存的最大值的80%。 Tomcat默认可以使用的内存为128MB，在较大型的应用项目中，这点内存是

转载 mysql之分布式事务

http://blog.csdn.net/hzrandd/article/details/50688437分布式事务通常采用2PC协议，全称Two Phase Commitment Protocol。该协议主要为了解决在分布式数据库场景下，所有节点间数据一致性的问题。在分布式事务环境下，事务的提交会变得相对比较复杂，因为多个节点的存在，可能存在部分节点提交失败的情况，即事务的ACID特

转载 Maven实战（六）--- dependencies与dependencyManagement的区别

http://blog.csdn.net/liutengteng130/article/details/46991829在上一个项目中遇到一些jar包冲突的问题，之后还有很多人分不清楚dependencies与dependencyManagement的区别，本篇文章将这些区别总结下来。 1、DepencyManagement应用场景         当我们的项目

转载 淘宝TDDL——Matrix层的分库分表配置与实现

http://gao-xianglong.iteye.com/blog/2019729/前言在开始讲解淘宝的TDDL(Taobao Distribute Data Layer)技术之前，请允许笔者先吐槽一番。首先要开喷的是淘宝的社区支持做的无比的烂，TaoCode开源社区上面，几乎从来都是有人提问，无人响应。再者版本迭代速度也同样差强人意，就目前而言TDDL5.0的版本已经全线开源（G

原创 Spring定时任务

定时任务的几种实现方式1.Java自带的java.util.Timer类，这个类允许你调度一个java.util.TimerTask任务。使用这种方式可以让你的程序按照某一个频度执行，但不能在指定时间运行。这种方式，现在一般都不采用。2.使用Quartz，这是一个功能比较强大的的调度器，可以让你的程序在指定时间执行，也可以按照某一个频度执行，配置起来稍显复杂。3.Spring3

转载 Spring多数据源分布式事务管理/springmvc+spring+atomikos[jta]+druid+mybatis

http://blog.csdn.net/typa01_kk/article/details/51190147项目进行读写分离及分库分表，在一个业务中，在一个事务中处理时候将切换多个数据源，需要保证同一事务多个数据源数据的一致性。此处使用atomikos来实现：最后附源码：1：spring3.0之后不再支持jtom[jta]了，第三方开源软件atomikos(http://ww

转载 corbaloc:iiop:localhost:2809使用的由来

http://www.verydemo.com/demo_c441_i54940.html在项目中看到了配置文件中的url写法是corbaloc:iiop:localhost:2809，对前边的corbaloc:iiop没见过，查阅了下文档转载自：http://www.360doc.com/content/07/0719/20/25392_620758.shtml 

转载 Kafka 分布式消息队列的特点及应用场景

Kafka的特点1) 速度快、高吞吐量、分布式、多分区。2) 无需停机即可扩展机器。3) 通过将数据持久化到硬盘以及replication防止数据丢失。4) 支持多消费者（重要特点）。5)支持online（实时消费）和offline（离线消费，比如按天消费）的场景。6)依赖Zookeeer集群，状态信息都写在Zookeeer集群里7) Kaf

转载 Storm流计算的Component组件

Storm架构中各角色之间的关系Component组件绿色是最常用的，红色是与事务相关的SpoutSpout的最顶层抽象是ISpout接口Open()是初始化方法nextTuple()循环发射数据ack() 成功处理tuple回调方法Fail()处理失败tuple回调方法activate和deact

转载 蓝绿部署、A/B测试以及灰度发布

过去的10年里，很多大公司都在使用蓝绿部署，安全、可靠是这种部署方式的特点。蓝绿部署虽然算不上”Sliver Bullet“，但确实很实用。在有关于“微服务”、“DevOps”、“Cloud-native”的讨论中，蓝绿部署、A/B测试、灰度发布，这三种部署方式往往同时出镜。那么问题来了，蓝绿部署、A/B测试、灰度发布，这三者之间究竟有何不同？蓝绿部署Martin Flower

转载 MySQL主从复制与主主复制

http://www.cnblogs.com/phpstudy2015-6/p/6485819.html阅读目录1、简介2、环境说明3、主从复制     3.1、MySQL     3.2、配置文件    3.3、开始构建主从复制      3.4、测试主从复制4、MySql主主复制     4.1、实现原理     4.2、配置文件    4.3、开始构建主主复制   

转载 性能调优攻略｜系统调优

1/ I/O 模型我们都知道，Unix/Linux 下把所有的设备都当成文件来进行 I/O，所以大部分操作都是 I/O 相关的系统调用。主要的 I/O 方式如下：同步阻塞式 I/O;同步无阻塞式；I/O 异步；AIO 方式。这种 I/O 模型是一种处理与I/O 并行的模型。I/O 请求会立即返回，说明请求已经成功发起。AIO

转载 Nginx的负载均衡 - 一致性哈希 (Consistent Hash)

http://blog.csdn.net/zhangskd/article/details/50256111Nginx版本：1.9.1我的博客：http://blog.csdn.net/zhangskd 算法介绍 当后端是缓存服务器时，经常使用一致性哈希算法来进行负载均衡。使用一致性哈希的好处在于，增减集群的缓存服务器时，只有少量的缓存会

转载 Nginx的负载均衡 - 一致性哈希 (Consistent Hash)

http://blog.csdn.net/zhangskd/article/details/50256111Nginx版本：1.9.1我的博客：http://blog.csdn.net/zhangskd 算法介绍 当后端是缓存服务器时，经常使用一致性哈希算法来进行负载均衡。使用一致性哈希的好处在于，增减集群的缓存服务器时，只有少量的缓存会

转载 每天进步一点点——五分钟理解一致性哈希算法(consistent hashing)

http://blog.csdn.net/cywosp/article/details/23397179/转载请说明出处：http://blog.csdn.net/cywosp/article/details/23397179    一致性哈希算法在1997年由麻省理工学院提出的一种分布式哈希（DHT）实现算法，设计目标是为了解决因特网中的热点(Hot spot)问题，初衷和CARP十

转载 一个脚本引发的血案

http://blog.csdn.net/ityouknow/article/details/59478852我们本身是一家互联网金融公司，公司的主流业务就是p2p，因为各种原因吧，15年底启动建设众筹平台。考虑到前期开发过程中的一些弊端和架构经验，本次架构引用了dubbo做soa服务的治理，web容器nginx+tomcat，后端语言采用Java,框架选择spring+mybaits

转载 使用Jenkins持续集成maven项目

使用Jenkins持续集成maven项目码农女仆 2016-12-22 05:49首先下载最新的Jenkins的war包，放在tomcat的webapps的目录下，然后运行,例如：http://121.42.62.45:8080/jenkins/然后按照一步步的提示，下载相关的插件，最后进入主界面：下面是Jenkins的一些配置：点击

转载 Kafka 消息监控 - Kafka Eagle

http://www.cnblogs.com/smartloli/p/5829395.html1.概述　　在开发工作当中，消费 Kafka 集群中的消息时，数据的变动是我们所关心的，当业务并不复杂的前提下，我们可以使用 Kafka 提供的命令工具，配合 Zookeeper 客户端工具，可以很方便的完成我们的工作。随着业务的复杂化，Group 和 Topic 的增加，此时我们使用 K

转载 配置高可用的Hadoop平台

http://www.cnblogs.com/smartloli/p/4298430.html1.概述　　在Hadoop2.x之后的版本，提出了解决单点问题的方案－－HA（High Available 高可用）。这篇博客阐述如何搭建高可用的HDFS和YARN，执行步骤如下：创建hadoop用户安装JDK配置hosts安装SSH关闭防火墙修改时区ZK（安装，启动，验证）HDF

转载 高可用Hadoop平台－Flume NG实战图解篇

http://www.cnblogs.com/smartloli/p/4468708.html1.概述　　今天补充一篇关于Flume的博客，前面在讲解高可用的Hadoop平台的时候遗漏了这篇，本篇博客为大家讲述以下内容：Flume NG简述   （[fluːm]  n. 水道；笕槽；引水槽）单点Flume NG搭建、运行高可用Flume NG搭建Failover测试截图

转载 高可用Hadoop平台－Flume NG实战图解篇

http://www.cnblogs.com/smartloli/p/4468708.html1.概述　　今天补充一篇关于Flume的博客，前面在讲解高可用的Hadoop平台的时候遗漏了这篇，本篇博客为大家讲述以下内容：Flume NG简述   （[fluːm]  n. 水道；笕槽；引水槽）单点Flume NG搭建、运行高可用Flume NG搭建Failover测试截图

转载 高可用Hadoop平台－Flume NG实战图解篇

http://www.cnblogs.com/smartloli/p/4468708.html1.概述　　今天补充一篇关于Flume的博客，前面在讲解高可用的Hadoop平台的时候遗漏了这篇，本篇博客为大家讲述以下内容：Flume NG简述单点Flume NG搭建、运行高可用Flume NG搭建Failover测试截图预览　　下面开始今天的博客介绍。2.Flume

转载 Kafka实战－实时日志统计流程

http://www.cnblogs.com/smartloli/p/4581501.html1.概述　　在《Kafka实战－简单示例》一文中给大家介绍来Kafka的简单示例，演示了如何编写Kafka的代码去生产数据和消费数据，今天给大家介绍如何去整合一个完整的项目，本篇博客我打算为大家介绍Flume＋Kafka＋Storm的实时日志统计，由于涉及的内容较多，这里先给大家梳

转载 CTO、技术总监、首席架构师的区别

经常有创业公司老板来拜访我，常常会拜托给我一句话：帮我找一个CTO。我解释的多了，所以想把这个写下来，看看你到底需要的应该是啥。一、高级程序员如果你是一个刚刚创业的公司，公司没有专职产品经理和项目经理，你就是公司的产品经理，你如果对你现在的开发员能力不满，那么你只需要的是一个高级程序员。你定义功能、你做计划推进和管理，