2018年03月_????0528

转载 java NIO 详解

Java NIO提供了与标准IO不同的IO工作方式： Channels and Buffers（通道和缓冲区）：标准的IO基于字节流和字符流进行操作的，而NIO是基于通道（Channel）和缓冲区（Buffer）进行操作，数据总是从通道读取到缓冲区中，或者从缓冲区写入到通道中。Asynchronous IO（异步IO）：Java NIO可以让你异步的使用IO，例如：当线程从通道读取数据到缓冲区时，...

2018-03-16 22:40:39 191

转载如果看了此文你还不懂傅里叶变换，那就过来掐死我吧【完整版】

我保证这篇文章和你以前看过的所有文章都不同，这是 2012 年还在果壳的时候写的，但是当时没有来得及写完就出国了……于是拖了两年，嗯，我是拖延症患者……这篇文章的核心思想就是：要让读者在不看任何数学公式的情况下理解傅里叶分析。傅里叶分析不仅仅是一个数学工具，更是一种可以彻底颠覆一个人以前世界观的思维模式。但不幸的是，傅里叶分析的公式看起来太复杂了，所以很多大一新生上来就懵圈并从此对它深恶痛绝。老实...

2018-03-16 22:40:11 122

转载我对卷积的理解

在学习机器学习和图像处理的过程中，经常会遇到卷积这个概念。我每次遇到这个概念都有点似懂非懂的样子。有时候清楚它的直观解释，但又搞不清公式中是如何体现的。究其原因，还是我没有完全搞懂这个概念。维基百科上有一个动态图来演示这个概念，但对于我来说还是有些复杂。于是自己在网上找了很多文章来研究，终于有了比较直观的印象，这里就趁热把我理解的解释一下，作为总结。一、一维卷积1.1 数学定义维基百科上，卷积的...

2018-03-16 22:39:46 551

转载跨行清算系统的实现原理

最近看了很多银联方面的清算系统的设计原理，对于跨行清算系统有了很大的了解，写这篇文章的目的是在于从一个程序员的角度去思考一个跨行清算系统的架构是如何实现的以及整个过程中我们有哪些思想是可以借鉴的。由于金融里面涉及到太多的专业名词，包括借贷，备付金，头寸，调拨等等，这里不会涉及到这些，取而代之的是以大家可以理解的概念去解释。下面简单的介绍一下两种跨行清算系统的实现原理以及特点。一种跨清算系统是我们最...

2018-03-16 22:39:22 2232

转载 spring事务管理器设计思想

在最近做的一个项目里面，涉及到多数据源的操作，比较特殊的是，这多个数据库的表结构完全相同，由于我们使用的ibatis框架作为持久化层，为了防止每一个数据源都配置一套规则，所以重新实现了数据源，根据线程变量中指定的数据库连接名称来获取实际的数据源。一个简单的实现如下：public class ProxyDataSource implements DataSource {/** 数据源池配置 */...

2018-03-16 22:39:03 1236 1

转载 ThreaLocal内存泄露的问题

在最近一个项目中，在项目发布之后，发现系统中有内存泄漏问题。表象是堆内存随着系统的运行时间缓慢增长，一直没有办法通过gc来回收，最终于导致堆内存耗尽，内存溢出。开始是怀疑ThreadLocal的问题，因为在项目中，大量使用了线程的ThreadLocal保存线程上下文信息，在正常情况下，在线程开始的时候设置线程变量，在线程结束的时候，需要清除线程上下文信息，如果线程变量没有清除，会导致线程中保存的对...

2018-03-16 22:38:33 117

转载缓存使用的一些注意事项

最近在项目中使用了很多缓存技术，包括局部缓存，远程集中式缓存，分布式缓存，在缓存的使用中也发现一些问题，整体总结如下：1 使用局部缓存要注意内存溢出一般局部缓存使用Map来实现，很容易无限制的往Map中填入数据，导致内存溢出。最好的方法就是使用SoftReference引用对象，而不是强引用对象2 在分布式环境下使用局部缓存，如果缓存是同一类数据,比如同一张表的数据库配置，则需要考虑一个同步措施，...

2018-03-16 22:38:16 560

转载 java语言的线程安全级别

java是支持多线程编程的语言，java中提供了很多类，如果把这些类的实现按照线程安全级别来排序的话，则由强到弱主要可以分为以下几个级别1 绝对线程安全在任何环境下，调用者都不需要考虑额外的同步措施，都能够保证程序的正确性。这个定义要求很严格，java里面满足这个要求的类比较少，对于实现jsr133规范（java内存模型）的jdk（一般指jdk5.0之上），一般的不变类都是满足绝地线程安全的。比如...

2018-03-16 22:38:00 217

转载 java对象初始化顺序

今天用了jmock对进行单元测试编码，发现一个比较奇怪的语法，见下面例子mockery.checking(new Expectations() { { one(new Object()).toString(); will(returnValue("")); } });　下面写一个写一个简单...

2018-03-16 22:37:42 89

转载 Java内存模型-jsr133规范介绍

最近在看《深入理解Java虚拟机：JVM高级特性与最佳实践》讲到了线程相关的细节知识，里面讲述了关于java内存模型，也就是jsr 133定义的规范。系统的看了jsr 133规范的前面几个章节的内容，觉得受益匪浅。废话不说，简要的介绍一下java内存规范。什么是内存规范在jsr-133中是这么定义的A memory model describes, given a program and an e...

2018-03-16 22:37:25 121

转载 java嵌套类(Nested Classes)总结

Nested Classes定义在java语言规范里面，嵌套类(Nested Classes)定义是：A nested class is any class whose declaration occurs within the body of another class or interface. A top level class is a class that is not a nested...

2018-03-16 22:37:03 5839

转载 java中关于try、catch、finally中的细节分析

看了一位博友的一片文章，讲解的是关于java中关于try、catch、finally中一些问题下面看一个例子（例1），来讲解java里面中try、catch、finally的处理流程1234567891011121314151617181920212223public class TryCatchFinally { @SuppressWarnings("finally") publi...

2018-03-16 22:36:44 91

转载 java中volatile关键字的含义

在java线程并发处理中，有一个关键字volatile的使用目前存在很大的混淆，以为使用这个关键字，在进行多线程并发处理的时候就可以万事大吉。Java语言是支持多线程的，为了解决线程并发的问题，在语言内部引入了同步块和 volatile 关键字机制。 synchronized 同步块大家都比较熟悉，通过 synchronized 关键字来实现，所有加上synchronized 和块语句，在多...

2018-03-16 22:36:16 85

转载 JAVA 中BIO,NIO,AIO的理解

【转自】http://qindongliang.iteye.com/blog/2018539在高性能的IO体系设计中，有几个名词概念常常会使我们感到迷惑不解。具体如下：序号问题1 什么是同步？2 什么是异步？3 什么是阻塞？4 什么是非阻塞？5 什么是同步阻塞？6 什么是同步非阻塞？7 什么是异步阻塞？8 什么是异步非阻塞？散仙不才，在查了一部分资料后，愿试着以通俗易懂的方式解释下这几个名词。...

2018-03-16 22:35:55 106

转载分库分表带来的完整性和一致性问题

在最近做的一个项目中，由于每天核算的数据量过于庞大，需要把数据库进行分库保存。当数据分散到各个库之后，带来的数据更新操作就会存在一个一致性和完整性的问题。下面是一个典型的场景假设目前存在三个物理库，现在有一个文件，里面有1W条数据，根据分库的规则，可以把文件里面的数据分到三个库中，现在需要保证这1W条数据要要完整的保存到这三个库里面，并且数据是一致性的，也就是说三个库里面已导入的数据完全和文件里...

2018-03-16 22:35:41 682

转载 Java中的注解是如何工作的？

自Java5.0版本引入注解之后，它就成为了Java平台中非常重要的一部分。开发过程中，我们也时常在应用代码中会看到诸如@Override，@Deprecated这样的注解。这篇文章中，我将向大家讲述到底什么是注解，为什么要引入注解，注解是如何工作的，如何编写自定义的注解(通过例子)，什么情况下可以使用注解以及最新注解和ADF(应用开发框架)。这会花点儿时间，所以为自己准备一杯咖啡，让我们来进入注...

2018-03-16 22:35:25 97

转载查找（二）简单清晰的B树、Trie树详解

散列表散列表是普通数组概念的推广。由于对普通数组可以直接寻址，使得能在O(1)时间内访问数组中的任意位置。在散列表中，不是直接把关键字作为数组的下标，而是根据关键字计算出相应的下标。使用散列的查找算法分为两步。第一步是用散列函数将被查找的键转化为数组的一个索引。我们需要面对两个或多个键都会散列到相同的索引值的情况。因此，第二步就是一个处理碰撞冲突的过程，由两种经典解决碰撞的方法：拉链法和线性探测法...

2018-03-16 22:34:05 252

转载全面理解Java内存模型

Java内存模型即Java Memory Model，简称JMM。JMM定义了Java 虚拟机(JVM)在计算机内存(RAM)中的工作方式。JVM是整个计算机虚拟模型，所以JMM是隶属于JVM的。如果我们要想深入了解Java并发编程，就要先理解好Java内存模型。Java内存模型定义了多线程之间共享变量的可见性以及如何在需要的时候对共享变量进行同步。原始的Java内存模型效率并不是很理想，因此Ja...

2018-03-16 22:33:45 127

转载 mysql 索引列为Null的走不走索引

要尽可能地把字段定义为 NOT NULL，即使应用程序无须保存 NULL（没有值），也有许多表包含了可空列（Nullable Column）这仅仅是因为它为默认选项。除非真的要保存 NULL，否则就把列定义为 NOT NULLMySQL难以优化引用了可空列的查询,它会使索引、索引统计和值更加复杂。可空列需要更多的储存空间，还需要在MySQL内部进行特殊处理。当可空列被索引的时候，每条记录都需要一个...

2018-03-16 22:33:28 4547

转载 redis主从复制和集群实现原理

redis主从复制redis主从配置比较简单，基本就是在从节点配置文件加上:slaveof 192.168.33.130 6379主要是通过master server持久化的rdb文件实现的。master server 先dump出内存快照文件，然后将rdb文件传给slave server，slave server 根据rdb文件重建内存表。redis复制过程如下：1、slave server启动...

2018-03-16 22:33:12 285

转载 memcache、redis原理对比

一、问题：数据库表数据量极大（千万条），要求让服务器更加快速地响应用户的需求。二、解决方案： 1.通过高速服务器Cache缓存数据库数据 2.内存数据库（这里仅从数据缓存方面考虑，当然，后期可以采用Hadoop+HBase+Hive等分布式存储分析平台）三、主流解Cache和数据库对比：上述技术基本上代表了当今在数据存储方面所有的实现方案，其中...

2018-03-16 22:32:55 114

转载 Java多线程系列目录(共43篇)

最近，在研究Java多线程的内容目录，将其内容逐步整理并发布。(一) 基础篇01. Java多线程系列--“基础篇”01之基本概念02. Java多线程系列--“基础篇”02之常用的实现多线程的两种方式03. Java多线程系列--“基础篇”03之 Thread中start()和run()的区别04. Java多线程系列--“基础篇”04之 synchronized关键字05. Java多线程...

2018-03-16 22:32:34 266

转载 ConcurrentHashMap源码剖析

ConcurrentHashMap是Java5中新增加的一个线程安全的Map集合，可以用来替代HashTable。对于ConcurrentHashMap是如何提高其效率的，可能大多人只是知道它使用了多个锁代替HashTable中的单个锁，也就是锁分离技术（Lock Stripping）。实际上，ConcurrentHashMap对提高并发方面的优化，还有一些其它的技巧在里面（比如你是否知道在get...

2018-03-16 22:32:18 146

转载自旋锁、阻塞锁、可重入锁、悲观锁、乐观锁、读写锁、偏向所、轻量级锁、重量级锁、锁膨胀、对象锁和类锁

1、自旋锁自旋锁可以使线程在没有取得锁的时候，不被挂起，而转去执行一个空循环，（即所谓的自旋，就是自己执行空循环），若在若干个空循环后，线程如果可以获得锁，则继续执行。若线程依然不能获得锁，才会被挂起。使用自旋锁后，线程被挂起的几率相对减少，线程执行的连贯性相对加强。因此，对于那些锁竞争不是很激烈，锁占用时间很短的并发线程，具有一定的积极意义，但对于锁竞争激烈，单线程锁占用很长时间的并发程序，自旋...

2018-03-16 22:31:57 372

转载 spring和springMVC父子容器的原理

要想很好理解这三个上下文的关系，需要先熟悉spring是怎样在web容器中启动起来的。spring的启动过程其实就是其IoC容器的启动过程，对于web程序，IoC容器启动过程即是建立上下文的过程。spring的启动过程：首先，对于一个web应用，其部署在web容器中，web容器提供其一个全局的上下文环境，这个上下文就是ServletContext，其为后面的spr...

2018-03-16 22:31:39 213

转载 java 垃圾回收总结

以前看过很多次关于垃圾回收相关的文章，都只是看过就忘记了，没有好好的整理一下，发现写文章可以强化自己的记忆。 java与C,c++有很大的不同就是java语言开发者不需要关注内存信息，不会显式的直接操作内存，而是通过jvm虚拟机来实现。java虚拟机运行的时候内存分配图如下图： jvm虚拟机栈：一个是线程独有的，每次启动一个线程，就创建一个jvm虚拟机栈，线程退出的时候就销毁。这里面主要保存线程本...

2018-03-16 22:31:06 104

转载浅谈mysql的索引设计原则以及常见索引的区别

索引定义：是一个单独的，存储在磁盘上的数据库结构，其包含着对数据表里所有记录的引用指针.数据库索引的设计原则：为了使索引的使用效率更高，在创建索引时，必须考虑在哪些字段上创建索引和创建什么类型的索引。那么索引设计原则又是怎样的？1．选择唯一性索引唯一性索引的值是唯一的，可以更快速的通过该索引来确定某条记录。例如，学生表中学号是具有唯一性的字段。为该字段建立唯一性索引可以很快的确定某个学生的信息。如...

2018-03-16 22:30:45 112

转载 Java集合及concurrent并发包总结（转）

1.集合包集合包最常用的有Collection和Map两个接口的实现类，Colleciton用于存放多个单对象，Map用于存放Key-Value形式的键值对。 Collection中最常用的又分为两种类型的接口：List和Set，两者最明显的差别为List支持放入重复的元素，而Set不支持。List最常用的实现类有：ArrayList、LinkedList、Vector及Stack；Se...

2018-03-16 22:23:43 201

转载 Java并发问题--乐观锁与悲观锁以及乐观锁的一种实现方式-CAS

首先介绍一些乐观锁与悲观锁:　　悲观锁：总是假设最坏的情况，每次去拿数据的时候都认为别人会修改，所以每次在拿数据的时候都会上锁，这样别人想拿这个数据就会阻塞直到它拿到锁。传统的关系型数据库里边就用到了很多这种锁机制，比如行锁，表锁等，读锁，写锁等，都是在做操作之前先上锁。再比如Java里面的同步原语synchronized关键字的实现也是悲观锁。　　乐观锁：顾名思义，就是很乐观，每次去拿数据的时候...

2018-03-16 22:22:01 131

转载阿里巴巴常考面试题及汇总答案

一、String,StringBuffer, StringBuilder 的区别是什么？String为什么是不可变的？答： 1、String是字符串常量，StringBuffer和StringBuilder都是字符串变量。后两者的字符内容可变，而前者创建后内容不可变。2、String不可变是因为在JDK中String类被声明为一个final类。3、StringBuffer是线程安全的，而Str...

2018-03-16 22:19:21 728

转载面试5

1.关键字transient1）一旦变量被transient修饰，变量将不再是对象持久化的一部分，该变量内容在序列化后无法获得访问。2）transient关键字只能修饰变量，而不能修饰方法和类。注意，本地变量是不能被transient关键字修饰的。变量如果是用户自定义类变量，则该类需要实现Serializable接口。3）被transient关键字修饰的变量不再能被序列化，一个静态变量不管是否被t...

2018-03-16 22:18:34 173

转载面试4

1，java堆，分新生代老年代，新生代有Eden，from surviver，to surviver三个空间，堆被所有线程共。eden内存不足时，发生一次minor GC，会把from survivor和eden的对象复制到to survivor，这次的to survivor就变成了下次的from survivor，经过多次minor GC，默认15次，达到次数的对象会从survivor进行老年代...

2018-03-16 22:17:19 106

转载面试4

1. Java有什么新特性Java语言编译器类库工具Java运行时1. 1 Java语言Lambda表达式（闭包）允许把函数作为一个方法的参数，或者把代码看成数据。[java] view plain copy Arrays.asList("a","b","d").forEach(e->System.out.println(e)); Arrays.asList( "a", "b", "

2018-03-16 22:17:03 100

转载面试题2

Volatile的特征：A、禁止指令重排（有例外） B、可见性Volatile的内存语义：当写一个volatile变量时，JMM会把线程对应的本地内存中的共享变量值刷新到主内存。当读一个volatile变量时，JMM会把线程对应的本地内存置为无效，线程接下来将从主内存中读取共享变量。Volatile的重排序1、当第二个操作为volatile写操做时,不管第一个操作是什么(普通读写或者volatil...

2018-03-16 22:16:46 109

转载面试3

自我介绍做过的项目（Java 基础） Java的四个基本特性（抽象、封装、继承，多态），对多态的理解(多态的实现方式)以及在项目中那些地方用到多态 Java的四个基本特性抽象：抽象是将一类对象的共同特征总结出来构造类的过程，包括数据抽象和行为抽象两方面。抽象只关注对象有哪些属性和行为，并不关注这些行为的细节是什么。  继承：继承是从已有类得到继承信息创建新类的过程。提供继承信息的类被称为父类（...

2018-03-16 22:16:21 483

转载 Java实现HTML页面转PDF解决方案

最近在工作中遇到了一个很囧的事情。要把HTML页面转换成PDF或者tiff图片等其他形式，目前tiff还是一头雾水，如果各位大师有真的可行的想法（不要是别人那边抄的，百度最近搜索的质量严重的打击了我对国货的信心。）希望能够告诉我，先谢了。言归正传。所以，我就做了把HTML转换成PDF的形式。目前可以完美支持一比一转换，下面就把我的解决方案贴出来。首先，当然是找到能够解析PDF的完美组件，百度和谷歌...

2018-03-15 15:08:50 933

转载 UML类图与类的关系详解

在画类图的时候，理清类和类之间的关系是重点。类的关系有泛化(Generalization)、实现（Realization）、依赖(Dependency)和关联(Association)。其中关联又分为一般关联关系和聚合关系(Aggregation)，合成关系(Composition)。下面我们结合实例理解这些关系。基本概念类图（Class Diagram）: 类图是面向对象系统建模中最常用和最重要...

2018-03-15 15:07:06 206

转载 Redis:存储对象的两种方式(序列化和json字符串)

方式一：序列化操作public class SerializeUtil { /* * 序列化 * */ public static byte[] serizlize(Object object){ ObjectOutputStream oos = null; ByteArrayOutputStream baos = null; ...

2018-03-15 15:06:20 59947 4

转载阻塞和非阻塞，同步和异步

1 例子故事：老王烧开水。出场人物：老张，水壶两把（普通水壶，简称水壶；会响的水壶，简称响水壶）。老王想了想，有好几种等待方式1.老王用水壶煮水，并且站在那里，不管水开没开，每隔一定时间看看水开了没。－同步阻塞老王想了想，这种方法不够聪明。2.老王还是用水壶煮水，不再傻傻的站在那里看水开，跑去寝室上网，但是还是会每隔一段时间过来看看水开了没有，水没有开就走人。－同步非阻塞老王想了想，现在的方法聪明...

2018-03-15 15:05:16 139

转载步步深入：MySQL架构总览->查询执行流程->SQL解析顺序

前言：　　一直是想知道一条SQL语句是怎么被执行的，它执行的顺序是怎样的，然后查看总结各方资料，就有了下面这一篇博文了。　　本文将从MySQL总体架构--->查询执行流程--->语句执行顺序来探讨一下其中的知识。一、MySQL架构总览：　　架构最好看图，再配上必要的说明文字。　　下图根据参考书籍中一图为原本，再在其上添加上了自己的理解。　　从上图中我们可以看到，整个架构分为两层，上...

2018-03-15 15:04:12 106

legendShop3.0.6

空空如也