自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(36)
  • 资源 (1)
  • 收藏
  • 关注

转载 【转】Python mysql 参数替换的坑

文章转自 https://blog.xupeng.me/2013/09/25/mysqldb-args-processing/ 感谢原作者分享 前几天又有同事掉进了给 SQL 的 IN 条件传参的坑,就像 SELECT col1, col2 FROM table1 WHERE id IN (1, 2, 3) 这类 SQL,如果是一个可变的列表作为 IN 的参数,那这个参数应该怎么传呢?...

2018-12-18 11:30:07 1289

转载 Flume优化【转】

 本文转自 http://caodaoxi.iteye.com/blog/1962786 感谢原作者创作分享ETL(Extraction, Transformation, and Load)是基于日志数据挖掘中的重要环节。现在Hadoop用于日志ETL的工具主要有Facebook的Scribe,Apache的Chukwa和Cloudera的Flume等等。从容错性、负载均衡和可扩展性上考...

2018-10-13 16:50:41 287

原创 Morphline学习笔记一:搭建demo构成

一、根据官方文档,在pom.xml文件中直接添加所有特性的依赖<dependency> <groupId>org.kitesdk</groupId> <artifactId>kite-morphlines-all</artifactId> <version>1.1.0</version> &amp

2018-09-14 02:38:31 1083

转载 彻底找到 Tomcat 启动速度慢的元凶[转载]

文章转自http://blog.sina.com.cn/s/blog_6e2d53050102x11x.html,感谢原作者的研究分享精神。问题现象 美女同事找我解决一个问题,说Tomcat启动很慢。开始我以为是程序写的问题,所以把webapps下所有程序都删除掉。(只保留Tomcat自带)灵异的事情发生了,Tomcat停止在——我查看了一下进程,Tomcat所在的JVM进程已经被启动...

2018-09-11 11:48:36 2228

转载 Flume监控【转】

转自https://kiswo.com/article/1023,感谢原作者异常排查当 QPS 压到3w时,Flume出现一下错误信息。09 Jun 2017 12:06:30,703 ERROR [pool-3-thread-1] (org.apache.flume.source.ExecSource$ExecRunnable.run:352) - Failed while ru...

2018-09-05 17:36:11 5581

转载 MySQL自增列问题[转]

转自 http://www.ywnds.com/?p=13981,感谢原作者分享MySQL 8.0修复了一个MySQL十年之久的自增列Bug,在2003年由Percona的CEO(当时应该还没Percona吧)提出的bug#199。先重现一下这个BUG。  1 2 3 4 5 6 7 8 9 10 1...

2018-09-03 10:36:00 1138

转载 MongoDB 三大利器 TTL, Gridfs, MapReduce [转]

文章转自 https://www.jianshu.com/p/b0e51059e773, 感谢作者分享一、 Time To Live(TTL) 集合MongoDB 2.2 引入一个新特性--TTL 集合,TTL集合支持失效时间设置,当超过指定时间后,集合自动清除超时文档,者用来保存一个诸如session会话信息的时候非常有用。如果想使用TTL集合,用用到 expireAfterSec...

2018-08-28 22:55:21 370

转载 MySQL 5.7默认ONLY_FULL_GROUP_BY语义介绍[转]

转自 http://www.ywnds.com/?p=8184ONLY_FULL_GROUP_BY是MySQL提供的一个sql_mode,通过这个sql_mode来提供SQL语句“分组求最值”合法性的检查,在MySQL的sql_mode为非ONLY_FULL_GROUP_BY语义时。一条select语句,MySQL允许target list中输出的表达式是除聚集函数或group by colu...

2018-08-28 22:54:08 1935 1

转载 mysql 存储过程详解[转]

MySQL存储过程 14.1.1 创建存储过程MySQL中,创建存储过程的基本形式如下:CREATE PROCEDURE sp_name ([proc_parameter[,...]])          [characteristic ...] routine_body 其中,sp_name参数是存储过程的名称;proc_parameter表示存储过程的参数列表; charac...

2018-08-14 22:27:35 288

转载 开源的服务发现

译者信息服务发现是大部分分布式系统和面向服务架构的核心组件。最初问题看起来很简单:客户如何决定服务的IP地址和端口,这些服务已存在于多个服务器上的。通常,你开始一些静态的配置,这些配置离你需要做的还挺远的。当你开始布署越来越多的服务时,事情会越来越复杂。在一个上线的系统中,由于自动的或人为的规模变化,服务的位置会经常的变化,例如布署新的服务,服务器宕机或者被替换。在这些应用场景中为了避免服务冲突,...

2018-03-18 23:03:11 237

转载 Zookeeper-Watcher机制与异步调用原理

Watcher机制:目的是为ZK客户端操作提供一种类似于异步获得数据的操作.声明:本文转载自http://shift-alt-ctrl.iteye.com/blog/1847320,转载请务必声明。 1)在创建Zookeeper实例时,允许接收一个watcher参数,此参数将会赋值给watchMnanger.defaultWatcher,成为当前客户端的默认Watcher.需要注意此watcher...

2018-03-04 05:23:33 234

转载 J2EE集群原理

转自【http://topmanopensource.iteye.com/blog/1912015】J2EE集群原理什么是集群呢?总的来说,集群包括两个概念:“负载均衡”(load balancing)和“失效备援”(failover)图一:负载均衡多个客户端同时发出请求,位于前端的负载均衡器根据特定算法,将请求分担给比较空闲的机器,从而实现较高性能和较好的扩展性 图二:失效备援当客户端连续向某个...

2018-03-01 15:09:53 179

转载 SOA面向服务架构

SOA面向服务架构  首先Martin Fowler提出SOA歧义Service Oriented Ambiguity,认为"什么是SOA"是不可能回答,因为不同的人意味着不同的事情,SOA意味服务接口,意味流程整合,意味资源再利用,意味着管制,在下面SOA组件图中,服务和服务消费者(客户端)之间存在多个约束,当一个服务显式暴露后,客户端能够通过绑定定位到该服务,相当于两者签订了合同,规定了合同内...

2018-02-27 18:25:06 192

转载 Otto.de:我为什么选择分布式垂直架构

otto.de是德国的一家网上购物网站,本篇前半部分主要介绍了几个系统架构以及它们的优缺点,后半部分主要讲解otto.de的微服务架构。  在我们开始开发otto.de网上商店时,我们选择了分布式垂直架构。之前的工作经验告诉我们,一体化架构(monolithic architecture)不能够满足不断增长的需求。爆发式增长的数据,持续提高的负载和对系统的扩展,所有的这些强迫我们去重新思考网站的架...

2018-02-27 13:57:42 535

转载 大型网站架构演化历程

文章转自【http://blog.jobbole.com/96035/】大型网站的挑战主要来自庞大的用户,高并发的访问和海量数据,任何简单的业务一旦需要处理数以P计的数据和面对数以亿计的用户,问题就会变得棘手。大型网站架构主要就是解决这类问题。本文内容大部分来自《大型网站技术架构》,这本书很值得一看,强烈推荐。大型网站系统的特点高并发,大流量需要面对高并发用户,大流量访问。Google 日均 PV...

2018-02-24 13:49:36 132

转载 Dubbo源代码实现二:服务调用的动态代理和负载均衡

【转载】http://manzhizhen.iteye.com/blog/2314514疑惑一:为什么在Spring中我们能像注入普通本地服务JavaBean一样注入远程的Dubbo服务Bean?我们知道,Dubbo将服务调用封装成普通的Spring的Bean,于是我们可以像使用本地的Spring Bean一样,来调用远端的Dubbo服务,并有LoadBalance和Failover的功能。现在,...

2018-02-21 15:02:26 254

转载 J2EE集群原理

【文章转自】http://blog.csdn.net/txplp/article/details/7716995http://topmanopensource.iteye.com/blog/1912015J2EE集群原理什么是集群呢?总的来说,集群包括两个概念:“负载均衡”(load balancing)和“失效备援”(failover)图一:负载均衡多个客户端同时发出请求,位于前端的负载均衡器根...

2018-02-21 14:14:52 150

转载 Nginx负载均衡与高可用的实现

当生产环境里有很大的流量产生时,通常需要用负载均衡技术来做优化,并确保容错配置。Nginx不光可以实现Web Server,还可以作为HTTP负载均衡来分发流量给后端的应用程序服务器,以此来提高性能。Nginx的负载均衡功能依赖于ngx_http_upstream_module模块,所支持的代理方式有proxy_pass,fastcgi_pass,memcached_pass。Nginx常用负载均...

2018-02-14 18:58:36 1293

转载 [LinuxIPC] 管道的_PC_PIPE_BUFF语义和O_NONBLOCK语义的理解

Write requests to a pipe or FIFO shall be handled in the same way as a regular file  with  the  following  excep-       tions:        * There  is no file offset associated with a pipe, hence each writ...

2018-02-08 23:46:48 497

转载 德哥的PostgreSQL私房菜 - 史上最屌PG资料合集

摘要: 看完并理解这些文章,相信你会和我一样爱上PostgreSQL,并成为PostgreSQL的布道者。 沉稳的外表无法掩饰PG炙热的内心 。 扩展阅读,用心感受PostgreSQL 内核扩展 《找对业务G点, 体验酸爽 - PostgreSQL内核扩展指南》https://yq.看完并理解这些文章,相信你会和我一样爱上PostgreSQL,并成为一名PostgreSQL的布道者。资

2018-01-31 10:44:30 5548

转载 Linux信号处理内核情景描述(转)

本文简单介绍下Linux信号处理机制,为介绍二进制翻译下信号处理机制做一个铺垫。本文主要参考书目《Linux内核源代码情景分析》《独辟蹊径品内核:Linux内核源代码导读》首先,先说一下什么是信号。信号本质上是在软件层次上对中断机制的一种模拟,其主要有以下几种来源:程序错误:除零,非法内存访问…外部信号:终端Ctrl-C产生SGINT信号,定时器到期产生SIGALRM…

2017-12-30 10:36:52 170

转载 深入理解 Java 垃圾回收机制

一、垃圾回收机制的意义Java语言中一个显著的特点就是引入了垃圾回收机制,使c++程序员最头疼的内存管理的问题迎刃而解,它使得Java程序员在编写程序的时候不再需要考虑内存管理。由于有个垃圾回收机制,Java中的对象不再有“作用域”的概念,只有对象的引用才有“作用域”。垃圾回收可以有效的防止内存泄露,有效的使用空闲的内存。ps:内存泄露是指该内存空间使用完毕之后未回收,在不涉及复杂

2017-12-09 13:54:52 118

转载 Java 多线程核心技术梳理(附源码)

转自:https://segmentfault.com/a/1190000004962367Java 多线程核心技术梳理(附源码)多线程 java brianway 2016年04月18日发布赞  |   6收藏  |  532.6k 次浏览本文对多线程基础知识进行梳理,主要包括多线

2017-11-12 15:25:14 213

原创 由Mybatis发现的一个坑

源码很重要Thanks for the report, Osvaldas. This has indeed been an issue known about, at least internally, for some time.There is a fundamental lifecycle conflict in handling BeanFactoryPostProce

2017-10-26 01:37:27 497

原创 SpringBoot学习笔记(五):SpringBoot与SpringMvc

一、自动配置机制WebMvcAutoConfiguration通过分析@EnableAutoConfiguration注解知道,Spring会用SpringFatoriesLoader载入一些配置,WebMvcAutoConfiguration是Boot-AutoConfigure自动载入的其中一个用于处理Web1、 EnableAutoConfigurationAuto-configur

2017-10-25 11:45:57 1483

原创 SpringBoot学习笔记(四):SpringApplication的旅途

mark...待续

2017-10-21 22:40:30 197

原创 SpringBoot学习笔记(三):EnableAutoConfiguration作用和机制

mark...待续

2017-10-21 22:38:34 8321

原创 SpringBoot学习笔记(二):YAML在SpringBoot的作用和机制

mark...待续

2017-10-21 22:37:00 5260

原创 SpringBoot学习笔记(一):POM和Maven插件

POM依赖逻辑和管理(可作为学习Maven的经典案例教材)一、spring-boot-starter-parent(POM) : parent引用spring-boot-dependencies作为打算使用SpringBoot进行开发的私人项目的父类POM引入 这样项目若想使用spring-boot-starter-web则只需依赖spring-boot-sta

2017-10-21 22:02:05 2343

转载 Java多线程之自旋锁与队列锁

Java多线程之自旋锁与队列锁锁 算法 多线程 java xint 2016年04月14日发布编写高效的并发程序,需要对互斥问题重新研究,设计出适用于多线程的互斥协议。那么问题来了,如果不能获得锁,应该怎么做?旋转:继续进行尝试,如自旋锁,延迟较短;阻塞:挂起自己,请求调度器切换到另一个线程

2017-10-20 21:01:18 245

转载 代码重构----使用java有限状态机来消除太多的if else判断

【转】http://www.cnblogs.com/davidwang456/p/3535377.html1. 状态机基本概念http://zh.wikipedia.org/wiki/%E6%9C%89%E9%99%90%E7%8A%B6%E6%80%81%E6%9C%BA状态存储关于过去的信息,就是说:它反映从系统开始到现在时刻的输入变化。转移指示状态变更,并且用必须

2017-10-20 17:48:03 1559

转载 Java的LockSupport.park()实现分析

LockSupport类是Java6(JSR166-JUC)引入的一个类,提供了基本的线程同步原语。LockSupport实际上是调用了Unsafe类里的函数,归结到Unsafe里,只有两个函数:12publicnative void unpark(Thread jthread);publicnativ

2017-10-20 16:53:54 157

原创 Spring MVC 使用Jackson转换Mybaits等代理类时的问题

一、问题原因:我们知道,ORM中高级关联和集合映射是一个深度的主题 。这里Mark一下,之后需要深入看看论文和框架的源码再总结。一般而言,ORM会使用懒加载的技术为Domain映射结果,核心技术用Proxy和字节码工具。这自然会在普通的Pojo Domain类上,添加一些透明的属性和方法,这些属性和方法会导致Jackson序列化的时候无法正常工作。二、Jackson错误:C

2017-10-17 23:29:58 228

原创 Mybatis Insert 返回主键的一个小坑

一般而言,网上和官方文档上都是推荐这样做:insertid="insertAuthor"useGeneratedKeys="true"keyProperty="id">insert into Author (username,password,email,bio) values (#{username},#{password},#{email},#{bio})

2017-10-16 12:26:13 1383

转载 AbstractQueuedSynchronizer的介绍和原理分析

简介提供了一个基于FIFO队列,可以用于构建锁或者其他相关同步装置的基础框架。该同步器(以下简称同步器)利用了一个int来表示状态,期望它能够成为实现大部分同步需求的基础。使用的方法是继承,子类通过继承同步器并需要实现它的方法来管理其状态,管理的方式就是通过类似acquire和release的方式来操纵状态。然而多线程环境中对状态的操纵必须确保原子性,因此子类对于状态的把握,需要使用这个同

2017-09-24 04:10:00 278

转载 FindPkgConfig----CMake的pkg-config模块

FindPkgConfig----CMake的pkg-config模块FindPkgConfig----CMake的pkg-config模块FindPkgConfigA pkg-config module for CMake.CMake的pkg-config模块。Finds the pkg-co

2017-09-11 01:44:37 1173

一步一步手动打造Vim成IDE

手动打造Vim成Python C\C++ IDE 内容涵盖: 1:手动编译安装Python 3.6 2:手动编译安装Vim 8.1 3:配置Vundle插件管理 4:基本的vimrc配置

2018-11-30

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除