- 博客(1171)
- 资源 (179)
- 收藏
- 关注
RSS订阅转载 MYSQL中取当前年份的第一天和当前周，月，季度的第一天/最后一天
MYSQL中取当前年份的第一天和当前周，月，季度的第一天/最后一天 mysql 获取当年第一天的年月日格式：SELECTDATE_SUB(CURDATE(),INTERVAL dayofyear(now())-1 DAY);MySQL里获取当前week、month、quarter的第一天/最后一天 当前week
2016-04-20 16:12:44
7186
转载 SpringMVC 中整合JSON、XML视图二
上篇文章介绍了程序整合的准备工作、结合MarshallingView视图完成jaxb2转换XML、xStream转换XML工作，这次将介绍castor、jibx转换XML。还有MappingJacksonView用Jackson转换JSON，自己拓展AbstractView定义Jsonlib的视图完成JSON-lib转换JSON。上一篇文章：http://www.cnblogs.com/h
2016-04-20 15:08:26
655
转载 spring mvc实现Restful返回xml格式数据
SpringMVC中整合了JSON、XML的视图，可以通过这些视图完成Java对象到XML、JSON的转换。转换XML提供了MarshallingView，开发者只需用注入相应的marshaller、和属性配置，即可自动完成Java的Model对象中的数据到XML的编组。Email：[email protected]：http://blog.csdn.net/IBM_hoojo
2016-04-20 15:05:54
7675
转载 JVM调优总结-分代垃圾回收详述2
分代垃圾回收流程示意 选择合适的垃圾收集算法串行收集器 用单线程处理所有垃圾回收工作，因为无需多线程交互，所以效率比较高。但是，也无法使用多处理器的优势，所以此收集器适合单处理器机器。当然，此收集器也可以用在小数据量（100M左右）情况下的多处理器机器上。可以使用-XX:+UseSerialGC打开。
2016-04-20 09:20:30
373
转载 JVM调优总结-分代垃圾回收详述1
为什么要分代 分代的垃圾回收策略，是基于这样一个事实：不同的对象的生命周期是不一样的。因此，不同生命周期的对象可以采取不同的收集方式，以便提高回收效率。 在Java程序运行的过程中，会产生大量的对象，其中有些对象是与业务信息相关，比如Http请求中的Session对象、线程、Socket连接，这类对象跟业务直接挂钩，因此生命周期比较长。但是还有一些对象，主要是
2016-04-20 09:15:20
285
转载 Redis与Memcached的区别
如果简单地比较Redis与Memcached的区别，大多数都会得到以下观点：1 Redis不仅仅支持简单的k/v类型的数据，同时还提供list，set，hash等数据结构的存储。2 Redis支持数据的备份，即master-slave模式的数据备份。3 Redis支持数据的持久化，可以将内存中的数据保持在磁盘中，重启的时候可以再次加载进行使用。在Redis中，并不是
2016-04-19 22:01:46
301
转载 Redis复制流程概述
Redis复制流程概述Redis的复制功能是完全建立在之前我们讨论过的基于内存快照的持久化策略基础上的，也就是说无论你的持久化策略选择的是什么，只要用到了Redis的复制功能，就一定会有内存快照发生，那么首先要注意你的系统内存容量规划，原因可以参考我上一篇文章中提到的Redis磁盘IO问题。Redis复制流程在Slave和Master端各自是一套状态机流转，涉及的状态信息是：
2016-04-19 20:56:46
360
转载 Codis 3.0.1 安装使用文档（官方）
Codis 使用文档Codis 是一个分布式 Redis 解决方案, 对于上层的应用来说, 连接到 Codis Proxy 和连接原生的 Redis Server 没有显著区别 (不支持的命令列表), 上层应用可以像使用单机的 Redis 一样使用, Codis 底层会处理请求的转发, 不停机的数据迁移等工作, 所有后边的一切事情, 对于前面的客户端来说是透明的, 可以简单的认为后边连
2016-04-19 20:49:03
4905
转载 Redis常见集群方案、Codis实践及与Twemproxy比较
前言诚如开篇文章所言，高效运维包括管理的专业化和技术的专业化。前两篇我们主要在说些管理相关的内容，本篇说一下技术专业化。希望读者朋友们能适应这个转换，谢谢。互联网早在几年前就已进入Web 2.0时代，对后台支撑能力的要求，提高了几十倍甚至几百倍。在这个演化过程中，缓存系统扮演了举足轻重的角色。运维进化到今天，已经不是重复造轮子的时代。所以
2016-04-19 20:36:22
2038
转载 基于redis的分布式ID生成器
项目地址https://github.com/hengyunabc/redis-id-generator基于redis的分布式ID生成器。准备首先，要知道redis的EVAL，EVALSHA命令：http://redis.readthedocs.org/en/latest/script/eval.htmlhttp://redis.readthedoc
2016-04-19 20:04:30
1717
转载 基于Redis实现分布式锁，Redisson使用及源码分析
在分布式场景下，有很多种情况都需要实现最终一致性。在设计远程上下文的领域事件的时候，为了保证最终一致性，在通过领域事件进行通讯的方式中，可以共享存储（领域模型和消息的持久化数据源），或者做全局XA事务（两阶段提交，数据源可分开），也可以借助消息中间件（消费者处理需要能幂等）。通过Observer模式来发布领域事件可以提供很好的高并发性能，并且事件存储也能追溯更小粒度的事件数据，使各个应用系统拥有更
2016-04-19 19:53:56
879
转载 10 个 Redis 建议/技巧
Redis 在当前的技术社区里是非常热门的。从来自 Antirez 一个小小的个人项目到成为内存数据存储行业的标准，Redis已经走过了很长的一段路。随之而来的一系列最佳实践，使得大多数人可以正确地使用 Redis。下面我们将探索正确使用 Redis 的10个技巧。1、停止使用 KEYS *Okay，以挑战这个命令开始这篇文章，或许并不是一个好的方式，但其确实可能是最重要的一点。很
2016-04-19 19:46:54
391
转载 Logstash实践: 分布式系统的日志监控
原文出处： 赵杰 1. 前言服务端日志你有多重视？我们没有日志有日志，但基本不去控制需要输出的内容经常微调日志，只输出我们想看和有用的经常监控日志，一方面帮助日志微调，一方面及早发现程序的问题只做到第1点的，你可以洗洗去睡了。很多公司都有做到第2点和第3点，这些公司的服务端程序基本已经跑了很长时间了，已比较稳定，确实无需花太多时间去关注。如果一个新产品，在上线初
2016-04-19 18:14:26
1057
转载 Apache Storm内部原理分析
本文算是个人对Storm应用和学习的一个总结，由于不太懂Clojure语言，所以无法更多地从源码分析，但是参考了官网、好多朋友的文章，以及《Storm Applied: Strategies for real-time event processing》这本书，以及结合自己使用Storm的经历，希望对于想深入一点了解Storm原理的朋友能有所帮助，有不足之处欢迎拍砖交流。Storm集群架构
2016-04-08 00:27:59
571
转载 Java开发者值得关注的7款新工具
云计算、大数据地快速发展催生了不少热门的应用及工具。作为老牌语言Java，其生态圈也出来了一些有关云服务、监控、文档分享方面的工具。本文总结了7款较新的Java工具，大家不妨看下。1. JClarity——性能监控JClarity目前提供两款有关Java性能的工具：Illuminate和Censum，Illuminate是一款性能监控工具，而Censum是一款专注于垃圾回收的日志分
2016-04-08 00:16:22
377
转载 5个强大的Java分布式缓存框架推荐
在开发中大型Java软件项目时，很多Java架构师都会遇到数据库读写瓶颈，如果你在系统架构时并没有将缓存策略考虑进去，或者并没有选择更优的缓存策略，那么到时候重构起来将会是一个噩梦。本文主要是分享了5个常用的Java分布式缓存框架，这些缓存框架支持多台服务器的缓存读写功能，可以让你的缓存系统更容易扩展。1、Ehcache – Java分布式缓存框架Ehcache是一个Java实
2016-04-08 00:14:55
584
转载 分布式服务框架 dubbo/dubbox 入门示例
dubbo是一个分布式的服务架构，可直接用于生产环境作为SOA服务框架。官网首页：http://dubbo.io/ ，官方用户指南 http://dubbo.io/User+Guide-zh.htm上面的几张图画得不错，完全可以当做SOA架构的学习资料淘宝将这个项目开源出来以后，得到了不少同行的支持，包括：当当网的扩展版本dubbox ：https://github.com/dangd
2016-04-07 23:54:41
3989
转载 Dubbo与Zookeeper、SpringMVC整合和使用（负载均衡、容错）
互联网的发展，网站应用的规模不断扩大，常规的垂直应用架构已无法应对，分布式服务架构以及流动计算架构势在必行，Dubbo是一个分布式服务框架，在这种情况下诞生的。现在核心业务抽取出来，作为独立的服务，使前端应用能更快速和稳定的响应。第一：介绍Dubbo背景 大规模服务化之前，应用可能只是通过RMI或Hessian等
2016-04-07 23:47:55
472
转载 MyCat：开源分布式数据库中间件
为什么需要MyCat？虽然云计算时代，传统数据库存在着先天性的弊端，但是NoSQL数据库又无法将其替代。如果传统数据易于扩展，可切分，就可以避免单机（单库）的性能缺陷。MyCat的目标就是：低成本地将现有的单机数据库和应用平滑迁移到“云”端，解决数据存储和业务规模迅速增长情况下的数据瓶颈问题。2014年MyCat首次在上海的《中华架构师》大会上对外宣讲引发围观，更多的人参与进来，随
2016-04-07 23:23:41
843
转载 Mycat 数据库分库分表中间件
Mycat关键特性关键特性支持SQL92标准遵守Mysql原生协议，跨语言，跨平台，跨数据库的通用中间件代理。基于心跳的自动故障切换，支持读写分离，支持MySQL主从，以及galera cluster集群。支持Galera for MySQL集群，Percona Cluster或者MariaDB cluster基于Nio实现，有效管理线程，高并发问题。支持数据的多片自动路由与聚合，支持su
2016-04-07 23:19:36
1077
转载 使用淘宝中间件cobar实现mysql分库分表
cobar 编译安装配置笔记https://github.com/alibaba/cobarwindows下使用eclipse导入cobar项目,eclipse File -> Import -> Git https://github.com/alibaba/cobarlinux下：wget https://codeload.github.com/alibaba/cobar/z
2016-04-07 23:14:57
1287
转载 DataX 介绍
DataX实现跨平台的、跨数据库、不同系统之间的批量数据同步。当我们需要从各种异构数据源之间完成数据同步的时候，是否需要开发很多工具完成？答案是不用，因为你有DataX。DataX独有的Reader/Writer插件体系，你只需要增加一种DataX的插件，便可以无缝对接其他数据源。DataX目前支持的数据源类型ReaderWriter
2016-04-07 22:50:25
8229
1
转载 当当分库分表中间件-sharding-jdbc
使用指南阅读本指南前，请先阅读快速起步。本文档使用更复杂的场景进一步介绍Sharding-JDBC的分库分表能力。数据库模式本文档中提供了两个数据源db0和db1，每个数据源之中包含了两组表t_order_0和t_order_1，t_order_item_0和t_order_item_1。这两组表的建表语句为：CREATE TABLE IF NOT EXISTS `t_
2016-04-07 22:38:27
23017
2
转载 分布式设计很简单--guzz分布式切表功能正式发布
今天，经过一个多月的线上运行，我们很荣幸的发布guzz 1.2.9分布式切表功能。分布式切表是指将一张大表分切成N张小表，并将这些小表储存到不同的数据库（机器）中，从而实现数据的分散存储和分散查询。 对于大型系统和数据规模较大的系统，分布式切表提供了非常好的解决方案，有效的解决了大数据分散存储、查询、归档和维护等诸多的问题。但市面上流行的数据层框架，对于此特性几乎无人涉及。guzz首次将这
2016-04-07 22:32:22
721
转载 Kafka管理工具介绍
Kafka内部提供了许多管理脚本，这些脚本都放在$KAFKA_HOME/bin目录下，而这些类的实现都是放在源码的kafka/core/src/main/scala/kafka/tools/路径下。Consumer Offset Checker Consumer Offset Checker主要是运行kafka.tools.ConsumerOffsetChecker类，对应的脚本
2016-04-05 10:36:28
11026
转载 简单快捷地测试 JPush API
简单快捷地测试 JPush API随着 JPush API v3 版本的推出，加上之前开放的 Report API，JPush API 逐渐切换为比较好的符合 REST API 的规范，从而也很容易地使用一般的 HTTP/REST 工具来进行测试。本文做个汇总，说明简单快捷地测试 JPush API 的方法。这里不会详述编程的方法。简单说一句就是：JPush 官方提
2016-03-31 19:54:46
1520
原创 hbase shell - 使用filter进行scan
在hbase的命令行中，可以直接使用filter进行scan，命令如下所示import org.apache.hadoop.hbase.filter.CompareFilterimport org.apache.hadoop.hbase.filter.SingleColumnValueFilterimport org.apache.hadoop.hbase.filter.Subst
2016-03-31 17:29:55
1115
转载 Java虚拟机解析篇之---内存模型
今天闲来无事来，看一下Java中的内存模型和垃圾回收机制的原理，关于这个方面的知识，网上已经有很多现成的资料可以供我们参考，但是知识还是比较杂的，在这部分知识点中有一本书不得不推荐：《深入理解Java虚拟机》，现在已经是第二版了。这本书就从头开始详细介绍了Java整个虚拟机的模型以及Java的类文件结构，加载机制等。这里大部分的知识点都是可以在这本书中找到的，当然我是主要还是借鉴这本书中的很多内容
2016-03-25 22:54:45
358
转载 Java虚拟机解析篇之---垃圾回收器
上一篇说了虚拟机的内存模型，在说到堆内存的时候我们提到了，堆内存是Java内存中区域最大的一部分，而且垃圾回收器主要就是回收这部分的内容。那么这篇就来介绍一下垃圾回收器的原理以及回收的算法。Java中的垃圾回收器(GC)是Java中比较有特色的一点，不需要我们手动的去管理一个对象，不想C++中的构造函数和析构函数一样，需要程序猿自己去手动的管理，很容易造成内存泄露的问题。当然如果学过OC语
2016-03-25 22:48:10
375
转载 HBase之HFile解析
Sumary:ProtobufBinarySearch 本篇主要讲HFileV2的相关内容，包括HFile的构成、解析及怎么样从HFile中快速找到相关的KeyValue.基于Hbase 0.98.1-hadoop2,本文大部分参考了官方的资源，大家可以先阅读下这篇官方文档，Reference Guide:http://hbase.apache.org/book/
2016-03-25 22:27:00
2199
1
转载 HBase Rowkey的散列与预分区设计
HBase中，表会被划分为1...n个Region，被托管在RegionServer中。Region二个重要的属性:StartKey与EndKey表示这个Region维护的rowKey范围，当我们要读/写数据时，如果rowKey落在某个start-end key范围内，那么就会定位到目标region并且读/写到相关的数据。简单地说，有那么一点点类似人群划分，1-15岁为小朋友,16-39岁为年轻人
2016-03-25 22:20:48
579
转载 Ehcache 整合Spring 使用页面、对象缓存
Ehcache 整合Spring 使用页面、对象缓存Ehcache在很多项目中都出现过，用法也比较简单。一般的加些配置就可以了，而且Ehcache可以对页面、对象、数据进行缓存，同时支持集群/分布式缓存。如果整合Spring、Hibernate也非常的简单，Spring对Ehcache的支持也非常好。EHCache支持内存和磁盘的缓存，支持LRU、LFU和FIFO多种淘汰算法，支持分布
2016-03-23 17:54:40
461
转载 淘宝TDDL——Matrix层的分库分表配置与实现
前言在开始讲解淘宝的TDDL(Taobao Distribute Data Layer)技术之前，请允许笔者先吐槽一番。首先要开喷的是淘宝的社区支持做的无比的烂，TaoCode开源社区上面，几乎从来都是有人提问，无人响应。再者版本迭代速度也同样差强人意，就目前而言TDDL5.0的版本已经全线开源（Group、Atom、Matrix）大家可以在Github上下载源码。 目录一、互联网
2016-03-23 17:28:28
1438
转载 浅谈Storm流式处理框架
Hadoop的高吞吐，海量数据处理的能力使得人们可以方便地处理海量数据。但是，Hadoop的缺点也和它的优点同样鲜明——延迟大，响应缓慢，运维复杂。 有需求也就有创造，在Hadoop基本奠定了大数据霸主地位的时候，很多的开源项目都是以弥补Hadoop的实时性为目标而被创造出来。而在这个节骨眼上Storm横空出世了。 Storm带着流式计算的标签华丽丽滴出场了，看
2016-03-22 17:37:58
859
转载 深入剖析Java中的装箱和拆箱
自动装箱和拆箱问题是Java中一个老生常谈的问题了，今天我们就来一些看一下装箱和拆箱中的若干问题。本文先讲述装箱和拆箱最基本的东西，再来看一下面试笔试中经常遇到的与装箱、拆箱相关的问题。 以下是本文的目录大纲： 一.什么是装箱？什么是拆箱？ 二.装箱和拆箱是如何实现的 三.面试中相关的问题 若有不正之处，请谅解和批评指正，不胜感激。 请尊重作者劳动成果，转载请标
2016-03-21 21:53:16
458
转载 Java 如何有效地避免OOM：善于利用软引用和弱引用
想必很多朋友对OOM（OutOfMemory）这个错误不会陌生，而当遇到这种错误如何有效地解决这个问题呢？今天我们就来说一下如何利用软引用和弱引用来有效地解决程序中出现的OOM问题。下面是本文的目录大纲： 一.了解 强引用、软引用、弱引用、虚引用的概念 二.进一步理解软引用和弱引用 三.如何利用软引用和弱引用解决OOM问题 如果有不正之处，希望谅解和批评指正，不胜感激。
2016-03-21 21:49:52
566
转载 Netty 4.x学习笔记 - 线程模型
1、前言前面两篇学习笔记已经说完了ByteBuf和Channel和Pipeline，这篇开始讲讲前面欠的债——线程模型（EventLoop和EventExecutor）。2、Netty线程模型将具体代码实现前，先来谈谈Netty的线程模型。正如许多博客所提到的，Netty采用了Reactor模式，但是许多博客也只是提到了而已，同时大家也不会忘记附上几张Doug Lee大
2016-03-21 21:37:01
2976
转载 netty-mina深入学习与对比（二）
上文讲了对netty-mina的线程模型以及任务调度粒度的理解，这篇则主要是讲nio编程中的注意事项，netty-mina的对这些注意事项的实现方式的差异，以及业务层会如何处理这些注意事项。1. 数据是如何write出去的java nio如果是non-blocking的话，在每次write(bytes[N])的时候，并不会将N字节全部write出去，每次write仅一部分（具体
2016-03-21 21:33:29
595
转载 netty-mina深入学习与对比（一）
这博文的系列主要是为了更好的了解一个完整的nio框架的编程细节以及演进过程，我选了同父（Trustin Lee）的两个框架netty与mina做对比。版本涉及了netty3.x、netty4.x、mina1.x、mina2.x、mina3.x。这里并没有写netty5.x的细节，看了netty5的修改文档，似乎有一些比较有意思的改动，准备单独写一篇netty4.x与netty5.x的不同。
2016-03-21 21:21:13
634
转载 终于有SpringMvc与Struts2的对比啦
目前企业中使用SpringMvc的比例已经远远超过Struts2,那么两者到底有什么区别，是很多初学者比较关注的问题，下面我们就来对SpringMvc和Struts2进行各方面的比较:1.核心控制器（前端控制器、预处理控制器）：对于使用过mvc框架的人来说这个词应该不会陌生，核心控制器的主要用途是处理所有的请求，然后对那些特殊的请求（控制器）统一的进行处理(字符编码、文件上传、参数接受、异
2016-03-21 21:13:48
497
Apache Sqoop Cookbook
2014-08-02
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人