- 博客(142)
- 资源 (2)
- 收藏
- 关注
RSS订阅转载 HttpClient-v4.5官方文档翻译
HttpClient 4.5.2前言超文本传输协议（HTTP）可能是当今互联网上使用的最重要的协议。 网络服务，支持网络的设备以及网络计算的发展继续扩大了HTTP协议在用户驱动的Web浏览器之外的作用，同时增加了需要HTTP支持的应用程序的数量。尽管java.net包提供了通过HTTP访问资源的基本功能，但它并不能提供许多应用程序所需的全部灵活性或功能。 HttpClient试图通...
2018-11-14 17:34:33
6782
2
转载 spring 事务管理
spring事务管理(详解和实例)写这篇博客之前我首先读了《Spring in action》，之后在网上看了一些关于Spring事务管理的文章，感觉都没有讲全，这里就将书上的和网上关于事务的知识总结一下，参考的文章如下：Spring事务机制详解 Spring事务配置的五种方式 Spring中的事务管理实例详解1 初步理解理解事务之前，先讲一个你日常生活中最常干的事：取钱。...
2018-10-11 11:40:05
281
转载 Rownum原理
Rownum原理：1 Oracle executes your query.执行查询操作2 Oracle fetches the first row and calls it row number 1.将第一行的row num置为13 Have we gotten past row number meets the criteria? If no, then Oracle di...
2018-10-09 00:38:23
933
转载 ROWNUM伪列和ROWID伪列的用法与区别
做过Oracle分页的人都知道由于Oracle中没有像MySql中limit函数以及SQLServer中的top关键字等，所以只能通过伪列的方式去满足分页功能，在此，不谈分页方法，只从根本上去介绍这两个伪列的用法与原理，同样还是以scott用户的emp表为例；一、ROWNUM伪列ROWNUM伪列是Oracle首先进行查询获取到结果集之后在加上去的一个伪列，这个伪列对符合条件的结果添加一个从...
2018-10-09 00:34:55
1521
转载 Oracle 分页
在Oracle中实现分页的方法大致分为两种，用ROWNUM关键字和用ROWID关键字，下面来详细介绍一下：1、ROWNUM其代码为：SELECT * FROM (SELECT ROW_.*, ROWNUM ROWNUM_ FROM (SELECT * FROM TABLE1 WHERE TA...
2018-10-08 23:18:26
6859
转载 分布式事务理解2
浅谈分布式事务 现今互联网界，分布式系统和微服务架构盛行。一个简单操作，在服务端非常可能是由多个服务和数据库实例协同完成的。在一致性要求较高的场景下，多个独立操作之间的一致性问题显得格外棘手。基于水平扩容能力和成本考虑，传统的强一致的解决方案（e.g.单机事务）纷纷被抛弃。其理论依据就是响当当的CAP原理。往往为了可用性和分区容错性，忍痛放弃强一致支持，转而追求最终一致性。分布式系统的特性...
2018-09-03 22:46:13
163
转载 分布式事务理解1
1、什么是分布式事务分布式事务就是指事务的参与者、支持事务的服务器、资源服务器以及事务管理器分别位于不同的分布式系统的不同节点之上。以上是百度百科的解释，简单的说，就是一次大的操作由不同的小操作组成，这些小的操作分布在不同的服务器上，且属于不同的应用，分布式事务需要保证这些小操作要么全部成功，要么全部失败。本质上来说，分布式事务就是为了保证不同数据库的数据一致性。2、分布式事务的产生的原因...
2018-09-03 22:45:16
145
转载 数据库事务隔离级别
本篇讲诉数据库中事务的四大特性（ACID），并且将会详细地说明事务的隔离级别。 如果一个数据库声称支持事务的操作，那么该数据库必须要具备以下四个特性：⑴ 原子性（Atomicity） 原子性是指事务包含的所有操作要么全部成功，要么全部失败回滚，这和前面两篇博客介绍事务的功能是一样的概念，因此事务的操作如果成功就必须要完全应用到数据库，如果操作失败则不能对数据库有任何影响。⑵ 一...
2018-09-03 22:13:14
165
转载 使用消息队列实现分布式事务-公认较为理想的分布式事务解决方案
前阵子从支付宝转账1万块钱到余额宝，这是日常生活的一件普通小事，但作为互联网研发人员的职业病，我就思考支付宝扣除1万之后，如果系统挂掉怎么办，这时余额宝账户并没有增加1万，数据就会出现不一致状况了。上述场景在各个类型的系统中都能找到相似影子，比如在电商系统中，当有用户下单后，除了在订单表插入一条记录外，对应商品表的这个商品数量必须减1吧，怎么保证？！在搜索广告系统中，当用户点击某广告后，除了在...
2018-09-03 22:12:15
184
原创 mongodb副本集搭建
同一台设备上模拟副本集搭建：三个mongodb实例，端口分别是28017（primary），28018（hidden）， 28019（delayed）步骤： 1。安装mongodb 2。新建目录 /opt/mongodb/28017, 并创建三个子目录：conf， data, log 3。在conf目录下新建 配置文件mongod.conf。 内容如下...
2018-08-23 17:51:30
499
转载 redis 集群规范
Redis 集群规范Redis 集群的目标Redis 集群是 Redis 的一个分布式实现，主要是为了实现以下这些目标（按在设计中的重要性排序）：在1000个节点的时候仍能表现得很好并且可扩展性（scalability）是线性的。 没有合并操作，这样在 Redis 的数据模型中最典型的大数据值中也能有很好的表现。 写入安全（Write safety）：那些与大多数节点相连的客...
2018-08-12 17:04:33
203
转载 redis 集群简介
Redis 集群教程本文档是Redis集群的一般介绍，没有涉及复杂难懂的分布式概念的赘述，只是提供了从用户角度来如何搭建测试以及使用的方法，如果你打算使用并深入了解Redis集群，推荐阅读完本章节后,仔细阅读 Redis 集群规范 一章。本教程试图提供最终用户一个简单的关于集群和一致性特征的描述请注意，本教程使用于Redis3.0（包括3.0）以上版本如果你计划部署集群，那么我们建...
2018-08-12 17:03:36
287
转载 VRRP协议详解
1 概述1.1 产生背景随着Internet的发展，人们对网络可靠性的要求越来越高。特别是对于终端用户来说，能够实时与网络其他部分保持联系是非常重要的。一般来说，主机通过设置默认网关来与外部网络联系，如图1所示： 图1 常用局域网组网方案主机将发送给外部网络的报文发送给网关，由网关传递给外部网络，从而实现主机与外部网络的通信。正常的情况下，主机可以完全信赖网关的工作，但...
2018-08-09 15:30:51
100386
7
转载 keepalived实现nginx的高可用 + nginx负载均衡
前言 使用集群是网站解决高并发、海量数据问题的常用手段。当一台服务器的处理能力、存储空间不足时，不要企图去换更强大的服务器，对大型网站而言，不管多么强大的服务器，都满足不了网站持续增长的业务需求。这种情况下，更恰当的做法是增加一台服务器分担原有服务器的访问及存储压力。通过负载均衡调度服务器，将来自浏览器的访问请求分发到应用服务器集群中的任何一台服务器上，如果有更多的用户，就在集群中加入更多的...
2018-08-09 13:16:36
432
1
转载 nginx+keepalived搭建高可用负载均衡(双主模式)
前言上一篇博客已经实现了nginx+keepalived主从配置，这篇博客来实现双主配置，如果Nginx只有单台的话就会出现单点问题，那么整个网站就会挂掉，所以要实现Nginx的高可用，一台挂掉还会有另一台顶上去，从而保证网站可以持续的提供服务。 高可用分为以下两种方式：1、Nginx+keepalived 主从配置这种方案，使用一个vip地址，前端使用2台机器，一台做主，一台做备...
2018-08-08 22:40:52
712
转载 nginx+keepalived搭建高可用负载均衡(主备模式)
原文地址，转载请注明出处：http://blog.csdn.net/qq_34021712/article/details/73438100 ©王赛超前言为什么要实现高可用呢？以前在搭建的时候只用了一台Nginx服务器，这样的话如果Nginx服务器宕机了，那么整个网站就会挂掉，所以要实现Nginx的高可用，一台挂掉还会有另一台顶上去，从而保证网站可以持续的提供服务。 高可用分为...
2018-08-08 22:40:08
334
转载 Keepalived之——Keepalived + Nginx 实现高可用 Web 负载均衡
一、Keepalived 简要介绍Keepalived 是一种高性能的服务器高可用或热备解决方案， Keepalived 可以用来防止服务器单点故障的发生，通过配合 Nginx 可以实现 web 前端服务的高可用。Keepalived 以 VRRP 协议为实现基础，用 VRRP 协议来实现高可用性(HA)。 VRRP(Virtual RouterRedundancy Protocol)协议是...
2018-08-08 21:59:30
520
转载 Golang之并发
go语言之并发简介 多核处理器越来越普及，那有没有一种简单的办法，能够让我们写的软件释放多核的威力？答案是：Yes。随着Golang, Erlang, Scale等为并发设计的程序语言的兴起，新的并发模式逐渐清晰。正如过程式编程和面向对象一样，一个好的编程模式需要有一个极其简洁的内核，还有在此之上丰富的外延，可以解决现实世界中各种各样的问题。本文以GO语言为例，解释其中...
2018-08-08 11:13:17
788
转载 Golang 之协程
GoLang之协程 目前，WebServer几种主流的并发模型：多线程，每个线程一次处理一个请求，在当前请求处理完成之前不会接收其它请求；但在高并发环境下，多线程的开销比较大； 基于回调的异步IO，如Nginx服务器使用的epoll模型，这种模式通过事件驱动的方式使用异步IO，使服务器持续运转，但人的思维模式是串行的，大量回调函数会把流程分割，对于问题本身的反应不够自然； 协程，不...
2018-08-08 10:42:55
382
转载 Mongodb备份与恢复
MongoDB的备份与恢复分类: NoSQL,故障解决,其他1.1 MongoDB的常用命令mongoexport / mongoimportmongodump / mongorestore 有以上两组命令在备份与恢复中进行使用。1.1.1 导出工具mongoexportMongodb中的mongoexport工具可以把一个collection导出成JSON格式或CSV格式的文件。可以通...
2018-07-13 15:27:38
2922
转载 Mongodb分片集群技术
在了解分片集群之前，务必要先了解复制集技术！ 1.1 MongoDB复制集简介 一组Mongodb复制集，就是一组mongod进程，这些进程维护同一个数据集合。复制集提供了数据冗余和高等级的可靠性，这是生产部署的基础。1.1.1 复制集的目的 保证数据在生产部署时的冗余和可靠性，通过在不同的机器上保存副本来保证数据的不会因为单点损坏而丢失。能够随时应对数据丢失、机器损坏带来的风险。 换一句...
2018-07-13 15:23:55
363
转载 搭建高可用mongodb集群—— 副本集
在上一篇文章《搭建高可用MongoDB集群（一）——配置MongoDB》 提到了几个问题还没有解决。主节点挂了能否自动切换连接？目前需要手工切换。主节点的读写压力过大如何解决？从节点每个上面的数据都是对数据库全量拷贝，从节点压力会不会过大？数据压力大到机器支撑不了的时候能否做到自动扩展？这篇文章看完这些问题就可以搞定了。NoSQL的产生就是为了解决大数据量、高扩展性、高性能、灵活数据模型、高可用性...
2018-07-13 12:22:27
309
转载 搭建高可用mongodb集群（一）——mongodb配置主从模式
转载自：LANCEYAN.COM 在大数据的时代，传统的关系型数据库要能更高的服务必须要解决高并发读写、海量数据高效存储、高可扩展性和高可用性这些难题。不过就是因为这些问题Nosql诞生了。NOSQL有这些优势：大数据量，可以通过廉价服务器存储大量的数据，轻松摆脱传统mysql单表存储量级限制。高扩展性，Nosql去掉了关系数据库的关系型特性，很容易横向扩展，摆脱了以往老是纵向扩展的诟病。高性能...
2018-07-13 12:13:12
494
转载 同步、异步、阻塞、非阻塞
近来遇到了一些常见的概念，尤其是网络编程方面的概念，如：阻塞、非阻塞、异步I/O等等，对于这些概念自己也没有太清晰的认识，只是很模糊的概念，说了解吧也了解，但是要让自己准确的描述概念方面的具体细节，却说的不那么准确，这也是自己在这几个方面也没有细细考究过的原因吧。经过看了些这几个概念的资料，发现同步、异步、阻塞、非阻塞的概念其实也并不难以理解，在此写下此文，欢迎拍砖，希望多多交流。1 同步与异步#...
2018-05-12 11:21:40
212
转载 TCP的三次握手四次撒手详解
TCP(Transmission Control Protocol) 传输控制协议三次握手TCP是主机对主机层的传输控制协议，提供可靠的连接服务，采用三次握手确认建立一个连接:位码即tcp标志位,有6种标示:SYN(synchronous建立联机) ACK(acknowledgement 确认) PSH(push传送) FIN(finish结束) RST(reset重置)
2017-12-27 12:21:06
343
转载 TCP/IP、Http的区别
TCP/IP、Http的区别 TPC/IP协议是传输层协议，主要解决数据如何在网络中传输，而HTTP是应用层协议，主要解决如何包装数据。关于TCP/IP和HTTP协议的关系，网络有一段比较容易理解的介绍：“我们在传输数据时，可以只使用（传输层）TCP/IP协议，但是那样的话，如果没有应用层，便无法识别数据内容，如果想要使传输的数据有意义，则必须使用到应用层协议，应用层协议
2017-12-27 11:56:52
232
转载 Kafka设计解析（七）- 流式计算的新贵 Kafka Stream
Kafka Stream背景Kafka Stream是什么Kafka Stream是Apache Kafka从0.10版本引入的一个新Feature。它是提供了对存储于Kafka内的数据进行流式处理和分析的功能。Kafka Stream的特点如下：Kafka Stream提供了一个非常简单而轻量的Library，它可以非常方便地嵌入任意Java应用中，也可以任意
2017-12-14 09:50:51
4344
转载 Kafka设计解析（六）- Kafka高性能关键技术解析
宏观架构层面利用Partition实现并行处理Partition提供并行处理的能力Kafka是一个Pub-Sub的消息系统，无论是发布还是订阅，都须指定Topic。如《Kafka设计解析（一）- Kafka背景及架构介绍》一文所述，Topic只是一个逻辑的概念。每个Topic都包含一个或多个Partition，不同Partition可位于不同节点。同时Partition在物
2017-12-14 09:50:21
480
转载 Kafka设计解析（五）- Kafka性能测试方法及Benchmark报告
Kafka设计解析（五）- Kafka性能测试方法及Benchmark报告摘要 本文主要介绍了如何利用Kafka自带的性能测试脚本及Kafka Manager测试Kafka的性能，以及如何使用Kafka Manager监控Kafka的工作状态，最后给出了Kafka的性能测试报告。性能测试及集群监控工具 Kafka提供了非常多有用的工具，如Kafka设计解析（三）-
2017-12-14 09:47:50
784
转载 Kafka设计解析（四）- Kafka Consumer设计解析
Kafka设计解析（四）- Kafka Consumer设计解析摘要 本文主要介绍了Kafka High Level Consumer，Consumer Group，Consumer Rebalance，Low Level Consumer实现的语义，以及适用场景。以及未来版本中对High Level Consumer的重新设计–使用Consumer Coordinator解决S
2017-12-14 09:46:38
343
转载 Kafka设计解析（三）- Kafka High Availability （下）
Kafka设计解析（三）- Kafka High Availability （下）摘要 本文在上篇文章基础上，更加深入讲解了Kafka的HA机制，主要阐述了HA相关各种场景，如Broker failover，Controller failover，Topic创建/删除，Broker启动，Follower从Leader fetch数据等详细处理过程。同时介绍了Kafka提供的与Re
2017-12-14 09:45:43
166
转载 Kafka设计解析（二）- Kafka High Availability （上）
Kafka设计解析（二）- Kafka High Availability （上）摘要 Kafka在0.8以前的版本中，并不提供High Availablity机制，一旦一个或多个Broker宕机，则宕机期间其上所有Partition都无法继续提供服务。若该Broker永远不能再恢复，亦或磁盘故障，则其上数据将丢失。而Kafka的设计目标之一即是提供数据持久化，同时对
2017-12-14 09:44:42
186
转载 Kafka设计解析（一）- Kafka背景及架构介绍
Kafka设计解析（一）- Kafka背景及架构介绍摘要 Kafka是由LinkedIn开发并开源的分布式消息系统，因其分布式及高吞吐率而被广泛使用，现已与Cloudera Hadoop，Apache Storm，Apache Spark集成。本文介绍了Kafka的创建背景，设计目标，使用消息系统的优势以及目前流行的消息系统对比。并介绍了Kafka的架构，Producer消息
2017-12-14 09:42:54
321
转载 Kafka的Log存储解析
Kafka的Log存储解析标签（空格分隔）： kafka引言Kafka中的Message是以topic为基本单位组织的，不同的topic之间是相互独立的。每个topic又可以分成几个不同的partition(每个topic有几个partition是在创建topic时指定的)，每个partition存储一部分Message。借用官方的一张图，可以直观地看到topic和pa
2017-12-12 18:07:34
264
原创 Spring-boot 集成 kakfa 源码分析
SpringBoot 版本：2.0.0.BUILD-SNAPSHOT类 KafkaAutoConfiguration主要功能：自动创建各种bean: KafkaTemplate, messageConverter,producerFactory,consumerFactory等。@Configuration@ConditionalOn
2017-12-12 16:20:02
1366
原创 gradle 离线模式offline 用法
1。 离线模式 offline所谓离线模式offline，就是gradle在解析依赖的时候采用本地的依赖库（如 GRADLE_USER_HOME指定的路径），而不是依据项目build.gradle文件中设置的仓库地址进行解析。这样就可以很快速的完成解析工作，而不至于花大量时间连接依赖仓库。但是采用这种模式有一个前提：项目所有的依赖都已经存在本地依赖库中。所以，若是项目中有新增或者修改依赖，则不
2017-11-29 17:22:07
43212
1
转载 gradle wrapper使用
当我们平时使用gradle来构建项目的时候，可以现在电脑上安装gradle，在配置环境变量之后就能正常使用了不过当我们把项目分享给一个电脑上没安装gradle的人时，整体的项目构建还需要配置，显得麻烦。由此就有了今天的主角：gradle wrapper 一个gradle的封装体，即使电脑上没有安装gradle也能构建。想使用gradle wrapper，
2017-11-28 17:27:55
497
原创 kafka windows安装及测试
一。安装zookeeper 伪集群此处不采用kafka安装包自带的zookeeper，而是自己独立安装zookeeper。zookeeper 版本：zookeeper-3.4.11.tar.gz。1.将zookeeper-3.4.11.tar.gz解压缩到目录 D:\Program Files\zookeeper-3.4.11\zookeeper-12.进入
2017-11-28 12:12:57
653
转载 zookeeper 原理及使用
ZooKeeper是Hadoop Ecosystem中非常重要的组件，它的主要功能是为分布式系统提供一致性协调(Coordination)服务，与之对应的Google的类似服务叫Chubby。今天这篇文章分为三个部分来介绍ZooKeeper，第一部分介绍ZooKeeper的基本原理，第二部分介绍ZooKeeper提供的Client API的使用，第三部分介绍一些ZooKeeper典型的应用场景。
2017-11-27 15:13:43
279
转载 ZooKeeper 基础知识、部署
ZooKeeper 基础知识、部署简介让我们首先讨论一下为什么想使用 ZooKeeper。ZooKeeper 是一个面向分布式系统的构建块。当设计一个分布式系统时，一般需要设计和开发一些协调服务：名称服务— 名称服务是将一个名称映射到与该名称有关联的一些信息的服务。电话目录是将人的名字映射到其电话号码的一个名称服务。同样，DNS 服务也是一个名称服务，它将一
2017-11-27 12:06:02
204
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人