2017年07月_liushengenai

原创 httpclient妙用一 httpclient作为客户端调用webservice

1.个人观点 webservice框架有很多，比如axis、axis2、cxf、xFire等等，做服务端和做客户端都可行，个人感觉使用这些框架的好处是减少了对于接口信息的解析，最主要的是减少了对于传递于网络中XML的解析，代价是你不得不在你的框架中添加对于这些框架的依赖。个人观点是：服务端使用这些框架还行，如果做客户端，没必要使用这些框架，只需使用httpclient即可。 ...

2017-07-17 19:56:24 304

原创基于Spring提供支持不同设备的页面

基于spring来检测访问Web页面的设备是很简单的，在这个经验中我们讲到过。通常不同的设备访问我们是通过响应式设计来统一处理各种设备的尺寸的。但是如果希望针对不同的设备，显示不同的内容呢？ Spring对于这一点同样提供了很好的支持，来看看如何实现。准备工作我们通过一个简单的例子来演示，基于Spring MVC来实现一个简单的HTTP GET请求，访问的地址是： http://l...

2017-07-17 19:55:59 127

原创 http webservice socket的区别

1 数据传输方式1.1 socket传输的定义和其特点所谓socket通常也称作"套接字",实现服务器和客户端之间的物理连接，并进行数据传输，主要有udp和tcp两个协议。socket处于网络协议的传输层。 udp协议：广播式数据传输，不进行数据验证 tcp协议：传输控制协议，一种面向连接的协议，给用户进程提供可靠的全双工的字节流。 socket传输的特点：优...

2017-07-17 19:51:19 120

原创 MySQL数据的主从复制、半同步复制和主主复制详解

一、MySQL复制概述 ⑴、mysql数据的复制的基本介绍目前MySQL数据库已经占去数据库市场上很大的份额，其一是由于MySQL数据的开源性和高性能，当然还有重要的一条就是免费~不过不知道还能免费多久，不容乐观的未来，但是我们还是要能熟练掌握MySQL数据的架构和安全备份等功能，毕竟现在它还算是开源界的老大吧！ MySQL数据库支持同步复制、单向、异步复制，在复制的...

2017-07-17 19:50:20 119

原创 httpclient保持会话登录

1.连接池原理(待续) 2.httpclient连接池如何保证连接交回至连接池管理器 2.1 方式一 Java代码 HttpResponse response = (httpMethod); HttpEntity entity = response.getEntity(); //这两段代码返回的entity是HttpEntity的实现类Basic...

2017-07-17 19:49:59 277

原创理解TCP/IP,SOCKET,HTTP,FTP,RMI,RPC,webservice等的含义和关系

TCP/IP：网络宽带，传输数据的基础协议，所有得数据要在网络上传输都是基于TCP/IP协议（或UDP），才能送达到指定的目的地（IP，服务器硬件地址）。 SOCKET：SOCKET只是面对编程人员的一个基于TCP/IP协议的编程接口，通过SOCKET，编程人员可以控制如何让数据在客户端和服务端进行业务逻辑交互。 HTTP: HTTP是应用层的协议，和TCP/IP协议没有可比性...

2017-07-14 08:29:15 167

原创 ActiveMQ几种模式总结

原文地址：http://blog.csdn.net/czp11210/article/details/8822070 Queue(点到点)模式在点对点的传输方式中，消息数据被持久化，每条消息都能被消费，没有监听QUEUE地址也能被消费，数据不会丢失，一对一的发布接受策略，保证数据完整。创建MAVEN项目点击下一步，填写grupId为me.czp,artifactId为exam...

2017-07-14 08:28:39 310

原创 ActiveMQ实现负载均衡+高可用部署方案

原文地址：http://www.open-open.com/lib/view/open1400126457817.html 一、架构和技术介绍 1、简介 ActiveMQ 是Apache出品，最流行的，能力强劲的开源消息总线。完全支持JMS1.1和J2EE 1.4规范的 JMS Provider实现 2、activemq的特性 1. 多种语言和协议编写客户端。语言: Ja...

2017-07-14 08:28:09 137

原创 MQ、JMS以及ActiveMQ 关系的理解

MQ、JMS以及ActiveMQ ms 的一个标准或者说是一个协议. 通常用于企业级应用的消息传递. 主要有topic 消息(1 对多), queue 消息(1对1). activemq 是一个jms 的实现, apache 出的. 另外还其它的实现 jboss 啦啥的... MQ简介： MQ全称为Message Queue,...

2017-07-14 08:27:40 124

文章地址：http://blog.csdn.net/mindfloating/article/details/51020767 作为后端应用的开发者，我们经常开发、调试、测试完我们的应用并发布到生产环境，用户就可以直接访问到我们的应用了。但对于互联网应用，在你的应用和用户之间还隔着一层低调的或厚或薄的负载均衡层软件，它们不显山不露水默默的发挥着重要的作用，以至于我们经常忽略了它们的存在。因为...

2017-07-14 08:23:33 334 1

原创 Mybatis分库分表扩展插件

对于一个刚上线的互联网项目来说，由于前期活跃用户数量并不多，并发量也相对较小，所以此时企业一般都会选择将所有数据存放在一个数据库中进行访问操作。但随着后续的市场推广力度不断加强，用户数量和并发量不断上升，这时如果仅靠一个数据库来支撑所有访问压力，几乎是在自寻死路。所以一旦到了这个阶段，大部分Mysql DBA就会将数据库设置成读写分离状态，也就是一个Master节点对应多个Salve节点。经过...

2017-07-12 20:36:01 331

原创数据库分库分表(sharding)系列(五) 一种支持自由规划无须数据迁移和修改路由代码的Sharding扩容方案...

作为一种数据存储层面上的水平伸缩解决方案，数据库Sharding技术由来已久，很多海量数据系统在其发展演进的历程中都曾经历过分库分表的Sharding改造阶段。简单地说，Sharding就是将原来单一数据库按照一定的规则进行切分，把数据分散到多台物理机（我们称之为Shard)上存储，从而突破单机限制，使系统能以Scale-Out的方式应对不断上涨的海量数据，但是这种切分对上层应用来说是透明的，...

2017-07-12 20:35:49 203

原创数据库分库分表(sharding)系列(四) 多数据源的事务处理

系统经sharding改造之后，原来单一的数据库会演变成多个数据库，如何确保多数据源同时操作的原子性和一致性是不得不考虑的一个问题。总体上看，目前对于一个分布式系统的事务处理有三种方式：分布式事务、基于Best Efforts 1PC模式的事务以及事务补偿机制。我们下面对这三种处理方式一一进行分析。本文原文链接：http://blog.csdn.net/bluishglc/article/de...

2017-07-12 20:35:38 123

原创数据库分库分表(sharding)系列(三) 关于使用框架还是自主开发以及sharding实现层面的考量...

当团队对系统业务和数据库进行了细致的梳理，确定了切分方案后，接下来的问题就是如何去实现切分方案了，目前在sharding方面有不少的开源框架和产品可供参考，同时很多团队也会选择自主开发实现，而不管是选择框架还是自主开发，都会面临一个在哪一层上实现sharding逻辑的问题，本文会对这一系列的问题逐一进行分析和考量。本文原文连接: http://blog.csdn.net/bluishglc/a...

2017-07-12 20:35:27 117

原创【复杂SQL案例--行列转换】

MYSQL案例来源，感谢网友提供的案例，在其基础上面进行了，简化，尽管不满足数据库范式，但是足以说明问题原始要求如下：已知源表数据如下： PID Num Loc 苹果 11 北京仓香蕉 22 上海仓大鸭梨 44 广州仓苹果 66 深圳仓 ...

2017-07-12 20:30:49 170

原创数据库分库分表(sharding)系列(二) 全局主键生成策略

本文将主要介绍一些常见的全局主键生成策略，然后重点介绍flickr使用的一种非常优秀的全局主键生成方案。关于分库分表(sharding)的拆分策略和实施细则，请参考该系列的前一篇文章：数据库分库分表(sharding)系列(一) 拆分实施策略和示例演示本文原文连接: http://blog.csdn.net/bluishglc/article/details/7710738 ,转载请注明出处！...

2017-07-11 10:02:11 101

原创关于垂直切分Vertical Sharding的粒度

垂直切分的粒度指的是在做垂直切分时允许几级的关联表放在一个shard里．这个问题对应用程序和sharding实现有着很大的影响．关联打断地越多，则受影响的join操作越多，应用程序为此做出的妥协就越大，但单表的路由会越简单，与业务的关联性会越小，就越容易使用统一机制处理．在此方向上的极端方案是：打断所有连接，每张表都配有路由规则，可以使用统一机制或框架自动处理．比如amoeba这样的框...

2017-07-11 09:59:41 83

原创数据库Sharding的基本思想和切分策略

本文着重介绍sharding的基本思想和理论上的切分策略，关于更加细致的实施策略和参考事例请参考我的另一篇博文：数据库分库分表(sharding)系列(一) 拆分实施策略和示例演示一、基本思想 Sharding的基本思想就要把一个数据库切分成多个部分放到不同的数据库(server)上，从而缓解单一数据库的性能问题。不太严格的讲，对于海量数据的数据库，如果是因为表多而数据...

2017-07-11 09:58:45 97

原创数据库架构的演变

最近看了很多公司架构的演变的文章，发现其中的基本思路和架构演变都很类似，这里也总结一下数据库架构的演变以及演变背后的思路。单主机最开始网站一般都是由典型的LAMP架构演变而来的，一般都是一台linux主机，一台apache服务器，php执行环境以及mysql服务器，一般情况下，这些都在一台虚拟主机上，简称单主机模式。单主机模式缺点： 1 web服务器和mysql服务器公用一...

2017-07-11 09:45:55 69

原创 jdk1.5-1.9新特性

1.51.自动装箱与拆箱：2.枚举(常用来设计单例模式)3.静态导入4.可变参数5.内省1.61.Web服务元数据2.脚本语言支持3.JTable的排序和过滤4.更简单,更强大的JAX-WS5.轻量级Http Server6.嵌入式数据库 Derby1.71，switch中可以使用字串了2.运用List<String> tempList = new ArrayList<>...

2017-07-11 08:50:56 132

原创面向对象设计七大原则

1. 单一职责原则（Single Responsibility Principle）每一个类应该专注于做一件事情。 2. 里氏替换原则（Liskov Substitution Principle）超类存在的地方，子类是可以替换的。 3. 依赖倒置原则（Dependence Inversion Principle）实现尽量依赖抽象，不依赖具体实现。 ...

2017-07-03 10:51:37 70

原创数据库设计---第一范式，第二范式，第三范式

范式：英文名称是 Normal Form，它是英国人 E.F.Codd（关系数据库的老祖宗）在上个世纪70年代提出关系数据库模型后总结出来的，范式是关系数据库理论的基础，也是我们在设计数据库结构过程中所要遵循的规则和指导方法。目前有迹可寻的共有8种范式，依次是：1NF，2NF，3NF，BCNF，4NF，5NF，DKNF，6NF。通常所用到的只是前三个范式，即：第一范式（1NF），第二范式（2N...

2017-07-03 10:38:19 105

liushengbaba的专栏