- 博客(411)
- 资源 (1)
- 收藏
- 关注
RSS订阅转载 MongoDB之GridFS
【MongoDB是什么？】MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。MongoDB是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库当中功能最丰富，最像关系数据库的。它支持的数据结构非常松散，是类似json的bson格式，因此可以存储比较复杂的数据类型。Mongo最大的特点是它支持的查询语言非常强大，其语法有点类...
2018-06-07 21:33:51
606
转载 MongoDB 分片集群技术
分类: NoSQL,其他 在了解分片集群之前，务必要先了解复制集技术！ 1.1 MongoDB复制集简介 一组Mongodb复制集，就是一组mongod进程，这些进程维护同一个数据集合。复制集提供了数据冗余和高等级的可靠性，这是生产部署的基础。1.1.1 复制集的目的 保证数据在生产部署时的冗余和可靠性，通过在不同的机器上保存副本来保证数据的不会因为单点损坏而丢失。能够随时应对数据丢失、机器...
2018-06-06 18:32:38
260
转载 MongoDB常用操作命令
如果你想创建一个“myTest”的数据库，先运行use myTest命令，之后就做一些操作（如：db.createCollection('user')）,这样就可以创建一个名叫“myTest”的数据库。一、数据库常用命令1、Help查看命令提示[sql] view plain copyhelp db.help(); db.yourColl.help(); db.youColl.find()....
2018-06-06 17:04:53
205
转载 WebService 工作原理及实例教程
一、WebService到底是什么?先来看下标准的定义：Web Service也叫XML Web Service WebService是一种可以接收从Internet或者Intranet上的其它系统中传递过来的请求，轻量级的独立的通讯技术。是:通过SOAP在Web上提供的软件服务，使用WSDL文件进行说明，并通过UDDI进行注册。其实，一言以蔽之：WebService是一种跨编程语言和跨操作系统平...
2018-06-06 16:44:33
711
转载 BSON与JSON的区别
BSON是由10gen开发的一个数据格式，目前主要用于MongoDB中，是MongoDB的数据存储格式。BSON基于JSON格式，选择JSON进行改造的原因主要是JSON的通用性及JSON的schemaless的特性。BSON主要会实现以下三点目标：1.更快的遍历速度对JSON格式来说，太大的JSON结构会导致数据遍历非常慢。在JSON中，要跳过一个文档进行数据读取，需要对此文档进行扫描才行，需要...
2018-06-05 21:17:06
111
转载 Java并发编程：Timer和TimerTask
下面内容转载自： http://blog.csdn.net/xieyuooo/article/details/8607220 其实就Timer来讲就是一个调度器,而TimerTask呢只是一个实现了run方法的一个类,而具体的TimerTask需要由你自己来实现,例如这样:123456Timer timer = new Timer();timer.schedule(new TimerTask(...
2018-06-05 20:55:22
99
转载 Java并发编程：Callable、Future和FutureTask
在前面的文章中我们讲述了创建线程的2种方式，一种是直接继承Thread，另外一种就是实现Runnable接口。 这2种方式都有一个缺陷就是：在执行完任务之后无法获取执行结果。 如果需要获取执行结果，就必须通过共享变量或者使用线程通信的方式来达到效果，这样使用起来就比较麻烦。 而自从Java 1.5开始，就提供了Callable和Future，通过它们可以在任务执行完毕之后得到任务执行结果。 ...
2018-06-05 20:54:34
88
转载 Java并发编程：并发容器之ConcurrentHashMap
下面这部分内容转载自： http://www.haogongju.net/art/2350374 JDK5中添加了新的concurrent包，相对同步容器而言，并发容器通过一些机制改进了并发性能。因为同步容器将所有对容器状态的访问都串行化了，这样保证了线程的安全性，所以这种方法的代价就是严重降低了并发性，当多个线程竞争容器时，吞吐量严重降低。因此Java5.0开始针对多线程并发访问设计，提供了...
2018-06-05 20:53:22
124
转载 Java并发编程：阻塞队列
在前面几篇文章中，我们讨论了同步容器(Hashtable、Vector），也讨论了并发容器（ConcurrentHashMap、CopyOnWriteArrayList），这些工具都为我们编写多线程程序提供了很大的方便。今天我们来讨论另外一类容器：阻塞队列。 在前面我们接触的队列都是非阻塞队列，比如PriorityQueue、LinkedList（LinkedList是双向链表，它实现了Dequ...
2018-06-05 20:51:44
95
转载 Java并发编程：同步容器
为了方便编写出线程安全的程序，Java里面提供了一些线程安全类和并发工具，比如：同步容器、并发容器、阻塞队列、Synchronizer（比如CountDownLatch）。今天我们就来讨论下同步容器。 以下是本文的目录大纲： 一.为什么会出现同步容器？ 二.Java中的同步容器类 三.同步容器的缺陷 若有不正之处请多多谅解，并欢迎批评指正。 请尊重作者劳动成果，转载请标明原文链接： ...
2018-06-05 20:50:53
102
转载 Java并发编程：Lock
在上一篇文章中我们讲到了如何使用关键字synchronized来实现同步访问。本文我们继续来探讨这个问题，从Java 5之后，在java.util.concurrent.locks包下提供了另外一种方式来实现同步访问，那就是Lock。 也许有朋友会问，既然都可以通过synchronized来实现同步访问了，那么为什么还需要提供Lock？这个问题将在下面进行阐述。本文先从synchronized的...
2018-06-05 20:47:34
102
转载 Java并发编程：synchronized
虽然多线程编程极大地提高了效率，但是也会带来一定的隐患。比如说两个线程同时往一个数据库表中插入不重复的数据，就可能会导致数据库中插入了相同的数据。今天我们就来一起讨论下线程安全问题，以及Java中提供了什么机制来解决线程安全问题。 以下是本文的目录大纲： 一.什么时候会出现线程安全问题？ 二.如何解决线程安全问题？ 三.synchronized同步方法或者同步块 若有不正之处，请多多谅解...
2018-06-05 17:38:50
102
转载 Java并发编程：Thread类的使用
在前面2篇文章分别讲到了线程和进程的由来、以及如何在Java中怎么创建线程和进程。今天我们来学习一下Thread类，在学习Thread类之前，先介绍与线程相关知识：线程的几种状态、上下文切换，然后接着介绍Thread类中的方法的具体使用。 以下是本文的目录大纲： 一.线程的状态 二.上下文切换 三.Thread类中的方法 若有不正之处，请多多谅解并欢迎批评指正。 请尊重作者劳动成果，转...
2018-06-05 17:25:59
109
转载 Java并发编程：如何创建线程？
在前面一篇文章中已经讲述了在进程和线程的由来，今天就来讲一下在Java中如何创建线程，让线程去执行一个子任务。下面先讲述一下Java中的应用程序和进程相关的概念知识，然后再阐述如何创建线程以及如何创建进程。下面是本文的目录大纲： 一.Java中关于应用程序和进程相关的概念 二.Java中如何创建线程 三.Java中如何创建进程 若有不正之处，请多多谅解并欢迎批评指正。 请尊重作者劳动成果...
2018-06-05 17:22:06
118
转载 tcp心跳机制
一、心跳包很多应用层协议都有HeartBeat机制，通常是客户端每隔一小段时间向服务器发送一个数据包，通知服务器自己仍然在线，并传输一些可能必要的数据。使用心跳包的典型协议是IM，比如QQ/MSN/飞信等协议。心跳包之所以叫心跳包是因为：它像心跳一样每隔固定时间发一次，以此来告诉服务器，这个客户端还活着。事实上这是为了保持长连接，至于这个包的内容，是没有什么特别规定的，不过一般都是很小的包，或者只...
2018-06-04 22:29:39
20265
1
转载 tcp、http协议的长连接和短连接
转载：http://www.cnblogs.com/onlysun/p/4520553.html 当网络通信时采用TCP协议时，在真正的读写操作之前，server与client之间必须建立一个连接，当读写操作完成后，双方不再需要这个连接时它们可以释放这个连接，连接的建立是需要三次握手的，而释放则需要4次挥手，所以说每个连接的建立都是需要资源消耗和时间消耗的 示意图： ...
2018-06-04 22:05:07
4939
2
转载 kafka面试
1、请说明什么是Apache Kafka?Apache Kafka是由Apache开发的一种发布订阅消息系统，它是一个分布式的、分区的和重复的日志服务。2、请说明什么是传统的消息传递方法?传统的消息传递方法包括两种：排队：在队列中，一组用户可以从服务器中读取消息，每条消息都发送给其中一个人。发布-订阅：在这个模型中，消息被广播给所有的用户。3、请说明Kafka相对传统技术有什么优势?Apache ...
2018-06-04 21:39:38
543
转载 MongoDB入门
为什么我们要使用MongoDB？特点:高性能、易部署、易使用，存储数据非常方便。主要功能特性有：面向集合存储，易存储对象类型的数据。模式自由。支持动态查询。支持完全索引，包含内部对象。支持查询。支持复制和故障恢复。使用高效的二进制数据存储，包括大型对象（如视频等）。自动处理碎片，以支持云计算层次的扩展性支持Python，PHP，Ruby，Java，C，C#，Javascript，Perl及C++语...
2018-06-04 21:23:25
208
转载 MongoDB面试
一、面试题11.什么是NoSQL数据库？NoSQL和RDBMS有什么区别？在哪些情况下使用和不使用NoSQL数据库？ NoSQL是非关系型数据库，NoSQL = Not Only SQL。 关系型数据库采用的结构化的数据，NoSQL采用的是键值对的方式存储数据。 在处理非结构化/半结构化的大数据时；在水平方向上进行扩展时；随时应对动态增加的数据项时可以优先考...
2018-06-04 21:15:23
1595
转载 jdk、spring、mybatis、线程的源码分析
基础篇从为什么String=String谈到StringBuilder和StringBufferJava语法糖1：可变长度参数以及foreach循环原理Java语法糖2：自动装箱和自动拆箱 集合篇图解集合1：ArrayList图解集合2：LinkedList图解集合3：CopyOnWriteArrayList图解集合4：HashMap图解集合5：不正确地使用HashMap引发死循环及元素丢失图解集...
2018-06-01 22:50:14
193
转载 树型结构
树型结构的基本概念对大量的输入数据，链表的线性访问时间太慢，不宜使用。本文探讨另外一种重要的数据结构----树，其大部分时间可以保证操作的运行平均时间复杂度为O(logN)，第一部分先来看一下树的一些预备知识。首先看一下树形结构的样子，下图代表的是树型结构的一般形态：由上图看得出树是一些节点的集合，总结一下树的一些基本概念：1、结点：树中的数据元素都称之为结点2、根：最上面的结点称之为根，一颗树只...
2018-06-01 22:40:59
283
转载 数据结构-二叉树
浅谈数据结构-二叉树二叉树是树的特殊一种，具有如下特点：1、每个结点最多有两颗子树，结点的度最大为2。2、左子树和右子树是有顺序的，次序不能颠倒。3、即使某结点只有一个子树，也要区分左右子树。一、特殊的二叉树及特点 1、斜树所有的结点都只有左子树（左斜树），或者只有右子树（右斜树）。这就是斜树，应用较少2、满二叉树所有的分支结点都存在左子树和右子树，并且所有的叶子结点都在同一层上，这样就是满二叉树...
2018-06-01 22:35:13
160
转载 memcache面试
memcached是怎么工作的？Memcached的神奇来自两阶段哈希（two-stage hash）。Memcached就像一个巨大的、存储了很多memcached最大的优势是什么？请仔细阅读上面的问题（即memcached是如何工作的）。Memcached最大的好处就是它带来了极佳的水平可扩展性，特别是在一个巨大的系统中。由于客户端自己做了一次哈希，那么我们很容易增加大量memcached到集...
2018-06-01 22:21:57
394
转载 MemCache详解
MemCache是什么MemCache是一个自由、源码开放、高性能、分布式的分布式内存对象缓存系统，用于动态Web应用以减轻数据库的负载。它通过在内存中缓存数据和对象来减少读取数据库的次数，从而提高了网站访问的速度。MemCaChe是一个存储键值对的HashMap，在内存中对任意的数据（比如字符串、对象等）所使用的key-value存储，数据可以来自数据库调用、API调用，或者页面渲染的结果。Me...
2018-06-01 22:20:12
146
转载 分布式Session的几种实现方式
一。分布式Session的几种实现方式1.基于数据库的Session共享2.基于NFS共享文件系统3.基于memcached 的session，如何保证 memcached 本身的高可用性？4. 基于resin/tomcat web容器本身的session复制机制5. 基于TT/Redis 或 jbosscache 进行 session 共享。6. 基于cookie 进行session共享或者是：...
2018-06-01 22:17:42
217
转载 40个Java多线程问题总结
前言Java多线程分类中写了21篇多线程的文章，21篇文章的内容很多，个人认为，学习，内容越多、越杂的知识，越需要进行深刻的总结，这样才能记忆深刻，将知识变成自己的。这篇文章主要是对多线程的问题进行总结的，因此罗列了40个多线程的问题。这些多线程的问题，有些来源于各大网站、有些来源于自己的思考。可能有些问题网上有、可能有些问题对应的答案也有、也可能有些各位网友也都看过，但是本文写作的重心就是所有的...
2018-06-01 22:07:38
189
转载 假如有Thread1、Thread2、ThreaD3、Thread4四条线程分别统计C、D、E、F四个盘的大小，所有线程都统计完毕交给Thread5线程去做汇总，应当如何实现？
一般情况，我们实现多线程都是Thread或者Runnable(后者比较多)，但是，这两种都是没返回值的，所以我们需要使用callable(有返回值的多线程)和future(获得线程的返回值)来实现了。[java] view plain copy/** * 假如有Thread1、Thread2、ThreaD3、Thread4四条线程分别统计C、D、E、F四个盘的大小，所有线程都统计完毕交给Thr...
2018-06-01 22:00:59
909
转载 redis分布式锁实现--jedisLock
一、使用分布式锁要满足的几个条件：系统是一个分布式系统（关键是分布式，单机的可以使用ReentrantLock或者synchronized代码块来实现）共享资源（各个系统访问同一个资源，资源的载体可能是传统关系型数据库或者NoSQL）同步访问（即有很多个进程同事访问同一个共享资源。没有同步访问，谁管你资源竞争不竞争）二、应用的场景例子 管理后台的部署架构（多台tomcat服务器+redis【多台...
2018-05-31 22:24:24
223
转载 分布式锁实现方式
目前几乎很多大型网站及应用都是分布式部署的，分布式场景中的数据一致性问题一直是一个比较重要的话题。分布式的CAP理论告诉我们“任何一个分布式系统都无法同时满足一致性（Consistency）、可用性（Availability）和分区容错性（Partition tolerance），最多只能同时满足两项。”所以，很多系统在设计之初就要对这三者做出取舍。在互联网领域的绝大多数的场景中，都需要牺牲强一致...
2018-05-31 22:18:13
185
转载 Redis的SETNX
SETNX是Redis中的一个指令，全称是“Set If Not Exist”，只有当key不存在的时候，才会给key设置value，否则不进行任何操作。SETNX也可以用来实现Redis中的锁。问题引入在介绍如何使用SETNX实现锁之前，先让我们考虑这么一个问题：假设我们现在有一个热点数据，数据存储在mysql中，我们使用redis做了一层缓存，在某个时间点缓存失效，这时候有大量的请求到来，他们...
2018-05-31 21:03:19
350
转载 Java并发编程：线程池的使用
在前面的文章中，我们使用线程的时候就去创建一个线程，这样实现起来非常简便，但是就会有一个问题： 如果并发的线程数量很多，并且每个线程都是执行一个时间很短的任务就结束了，这样频繁创建线程就会大大降低系统的效率，因为频繁创建线程和销毁线程需要时间。 那么有没有一种办法使得线程可以复用，就是执行完一个任务，并不被销毁，而是可以继续执行其他的任务？ 在Java中可以通过线程池来达到这样的效果。今天我...
2018-05-31 15:44:49
131
转载 DDL、DML和DCL的区别与理解
DML、DDL、DCL区别 .总体解释：DML(data manipulation language)：它们是SELECT、UPDATE、INSERT、DELETE，就象它的名字一样，这4条命令是用来对数据库里的数据进行操作的语言DDL(data definition language)：DDL比DML要多，主要的命令有CREATE、ALTER、DROP等，DDL主要是用在定义或改变表(TABLE...
2018-05-31 11:39:58
10287
转载 基于redis的悲观锁
所谓悲观锁：具有强烈的独占和排他特性。它指的是对数据被外界（包括本系统当前的其他事务，以及来自外部系统的事务处理）修改持保守态度，因此，在整个数据处理过程中，将数据处于锁定状态。悲观锁的实现，往往依靠数据库提供的锁机制（也只有数据库层提供的锁机制才能真正保证数据访问的排他性，否则，即使在本系统中实现了加锁机制，也无法保证外部系统不会修改数据）。悲观锁的并发性能差，但是能保证不会发生脏数据的可能性小...
2018-05-30 22:19:51
3059
转载 基于redis的乐观锁实践
基于redis的事务机制以及watch指令（CAS）实现乐观锁的过程。所谓乐观锁，就是利用版本号比较机制，只是在读数据的时候，将读到的数据的版本号一起读出来，当对数据的操作结束后，准备写数据的时候，再进行一次数据版本号的比较，若版本号没有变化，即认为数据是一致的，没有更改，可以直接写入，若版本号有变化，则认为数据被更新，不能写入，防止脏写。 下面，看看如何基于redis实现乐观锁。 首先，看看re...
2018-05-30 21:37:03
1650
转载 ORACLE EXPLAIN PLAN的总结 (优化SQL语句）
ORACLE EXPLAIN PLAN的总结文章分类:数据库在ORACLE数据库中,需要对SQL语句进行优化的话需要知道其执行计划,从而针对性的进行调整.ORACLE的执行计划的获得有几种方法,下面就来总结下1、EXPLAIN的使用Oracle RDBMS执行每一条SQL语句，都必须经过Oracle优化器的评估。所以，了解优化器是如何选择(搜索)路径以及索引是如何被使用的，对优化SQL语句有很大的...
2018-05-29 20:54:11
6044
转载 MySQL 性能优化技巧
原文地址：MySQL 性能优化技巧博客地址：http://www.extlight.com一、背景最近公司项目添加新功能，上线后发现有些功能的列表查询时间很久。原因是新功能用到旧功能的接口，而这些旧接口的 SQL 查询语句关联5,6张表且编写不够规范，导致 MySQL 在执行 SQL 语句时索引失效，进行全表扫描。原本负责优化的同事有事请假回家，因此优化查询数据的问题落在笔者手中。笔者在查阅网上 ...
2018-05-25 21:52:02
324
转载 Nagios+zabbix+ganglia的相关参数分析和优缺点介绍
最近开始接触Linux运维，安装了Nagios，zabbix和ganglia三种监控工具并使用了一周后总结出一些优缺点，这里贴出来以供参考Nagios是一款开源的企业级监控系统，能够实现对系统CPU、磁盘、网络等方面参数的基本系统监控，以及SMTP，POP3，HTTP，NNTP等各种基本的服务类型。另外通过安装插件和编写监控脚本，用户可以实现应用监控，并针对大量的监控主机和多个对象部署层次化监控架...
2018-05-24 21:38:29
261
转载 Zabbix 3.0 从入门到精通(zabbix使用详解)
第1章 zabbix监控1.1 为什么要监控 在需要的时刻，提前提醒我们服务器出问题了 当出问题之后，可以找到问题的根源 网站/服务器 的可用性1.1.1 网站可用性 在软件系统的高可靠性（也称为可用性，英文描述为HA，High Available）里有个衡量其可靠性的标准——X个9，这个X是代表数字3~5。X个9表示在软件系统1年时间的使用过程中，系统可以正常使用时间与...
2018-05-24 21:31:08
261
转载 lvs、haproxy、nginx 负载均衡的比较分析
对软件实现负载均衡的几个软件，小D详细看了一下，从性能和稳定上还是LVS最牛，基本达到了F5硬件设备的60%性能，其他几个10%都有点困难。 不过就因为LVS忒牛了，配置也最麻烦了，而且健康检测需要另外配置Ldirector，其他HAPROXY和NGINX自己就用，而且配置超级简单。 所以小D建议，如果网站访问量不是门户级别的用HAPROXY或者NGINX就OK了，到了门户级别在...
2018-05-24 21:26:47
115
转载 基于HAProxy+Keepalived高可用负载均衡web服务的搭建
一 原理简介1.HAProxyHAProxy提供高可用性、负载均衡以及基于TCP和HTTP应用的代理，支持虚拟主机，它是免费、快速并且可靠的一种解决方案。HAProxy特别适用于那些负载特大的web站点，这些站点通常又需要会话保持或七层处理。HAProxy运行在时下的硬件上，完全可以支持数以万计的并发连接。并且它的运行模式使得它可以很简单安全的整合进当前的架构中， 同时可以保护web服务器不被暴露...
2018-05-24 21:22:40
336
来自史上最简单的 SpringCloud 教程的springcloud Finchley.RELEASE版本代码案例
2018-07-01
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人