- 博客(367)
- 收藏
- 关注
RSS订阅原创 Spring建议使用的数据源有Apache的DBCP，和C3P0
Spring建议使用的数据源有Apache的DBCP，和C3P0。如果使用高性能的应用服务器（WebLogic\WebSphere),可以使用JNDI数据源。 1. Apache-DBCPDBCP依赖commons-pool对象池。所以需要的jar包有：commons-dbcp.jar,commons-pool.jarDBCP的BasicDataSource提供了c...
2015-03-06 14:00:06
178
原创 Extjs grid 行 鼠标悬浮小提示
//extjs grid每行鼠标悬浮提示 grid.on('render', function(grid) { var store = grid.getStore(); // 捕捉数据 var view = grid.getView(); // 捕捉视图 grid.tip = new Ex...
2014-10-29 11:10:26
618
linux iostat命令详解
原文地址：linux iostat命令详解作者：天之翼Linux系统出现了性能问题，一般我们可以通过top、iostat、free、vmstat等命令来查看初步定位问题。其中iostat可以给我们提供丰富的IO状态数据。基本使用$iostat -d -k 1 10参数 -d 表示，显示设备（磁盘）使用状态；-k某些使用block为单位的列强制使用Kilobytes为单位；1 10表...
2014-10-09 10:59:00
110
IO负载高的来源定位
前言：在一般运维工作中经常会遇到这么一个场景，服务器的IO负载很高（iostat中的util），但是无法快速的定位到IO负载的来源进程和来源文件导致无法进行相应的策略来解决问题。这个现象在MySQL上更为常见，在5.6（performance_schema提供io instrument）之前，我们通常只能猜到是MySQL导致的高IO，但是没法定位具体是哪个文件带来的负载。例如是ibd...
2014-10-09 10:58:00
96
linux命令——iotop
iotop命令是专门显示硬盘IO的命令，界面风格类似top命令。这个命令只有在kernelv2.6.20及以后的版本中才有。类似命令：1) vmstat : vmstat 1查看bi和bo列.2) iostat : iostat -k -x -d 5 33) dstat : dstat -d4) pidstat : pidstat -d -p pid可以查看单个进程I/O使用情况...
2014-10-09 10:58:00
144
TCP 的那些事儿
（上）TCP是一个巨复杂的协议，因为他要解决很多问题，而这些问题又带出了很多子问题和阴暗面。所以学习TCP本身是个比较痛苦的过程，但对于学习的过程却能让人有很多收获。关于TCP这个协议的细节，我还是推荐你去看W.Richard Stevens的《TCP/IP 详解 卷1：协议》（当然，你也可以去读一下RFC793以及后面N多的RFC）。另外，本文我会使用英文术语，这样方便你通过这些英文关键词...
2014-10-09 10:58:00
117
一次Linux系统被攻击的分析过程
IT行业发展到现在，安全问题已经变得至关重要，从最近的“棱镜门”事件中，折射出了很多安全问题，信息安全问题已变得刻不容缓，而做为运维人员，就必须了解一些安全运维准则，同时，要保护自己所负责的业务，首先要站在攻击者的角度思考问题，修补任何潜在的威胁和漏洞。一次Linux被入侵后的分析下面通过一个案例介绍下当一个服务器被rootkit入侵后的处理思路和处理过程，rootkit攻击是L...
2014-10-09 10:58:00
129
zookeeper 运维管理
1.部署本章节主要讲述如何部署ZooKeeper，包括以下三部分的内容：1. 系统环境2. 集群模式的配置3. 单机模式的配置系统环境和集群模式配置这两节内容大体讲述了如何部署一个能够用于生产环境的ZK集群。如果仅仅是想在单机上将ZK运行起来，进行一些开发与测试，那么第三部分或许是你的菜。1.1系统环境1.1.1平台支持平 台运行client...
2014-10-09 10:58:00
93
分布式服务框架 Zookeeper -- 管理分布式环境中的数据
转自：http://www.ibm.com/developerworks/cn/opensource/os-cn-zookeeper/Zookeeper 分布式服务框架是 Apache Hadoop 的一个子项目，它主要是用来解决分布式应用中经常遇到的一些数据管理问题，如：统一命名服务、状态同步服务、集群管理、分布式应用配置项的管理等。本文将 从使用者角度详细介绍 Zookeeper ...
2014-10-09 10:58:00
77
正确的使用dd进行磁盘读写速度测试
正确的使用dd进行磁盘读写速度测试dd是Linux/UNIX 下的一个非常有用的命令，作用是用指定大小的块拷贝一个文件，并在拷贝的同时进行指定的转换，所以可以用来测试硬盘的顺序读写能力。可以写文件，可以写裸设备。dd语法---------------------------------------------------------功能说明：读取，转换并输出数据。语 法：dd [bs=<字...
2014-10-09 10:58:00
119
linux 同步IO: sync、fsync与fdatasync
传统的UNIX实现在内核中设有缓冲区高速缓存或页面高速缓存，大多数磁盘I/O都通过缓冲进行。当将数据写入文件时，内核通常先将该数据复制到其中一个缓冲区中，如果该缓冲区尚未写满，则并不将其排入输出队列，而是等待其写满或者当内核需要重用该缓冲区以便存放其他磁盘块数据时，再将该缓冲排入输出队列，然后待其到达队首时，才进行实际的I/O操作。这种输出方式被称为延迟写（delayed write）（Bach...
2014-10-09 10:57:00
82
Stom概念
实时计算系统S4 storm puma自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式（单机已无法满足要求）、可扩展、容错2.容易在上面开发应用程序，消息不丢失败、消息严格有序Storm优势1.简单的编程模型 类似于MapReduce的Spout/Bolt2.是一个服务框架，支持热部署，及时上线下线App3.可以使用多种编程语言(Cloj...
2014-10-09 10:57:00
156
统治世界的十大算法
软件正在统治世界。而软件的核心则是算法。算法千千万万，又有哪些算法属于“皇冠上的珍珠”呢？Marcos Otero 给出了他的看法。什么是算法？通俗而言，算法是一个定义明确的计算过程，可以一些值或一组值作为输入并产生一些值或一组值作为输出。因此算法就是将输入转为输出的一系列计算步骤。—Thomas H. Cormen，Chales E. Leiserson，算法入门第三版简而...
2014-10-09 10:57:00
89
程序员必须知道的10大基础实用算法及其讲解
算法一：快速排序算法快速排序是由东尼·霍尔所发展的一种排序算法。在平均状况下，排序n个项目要Ο(nlogn)次比较。在最坏状况下则需要Ο(n2)次比较，但这种状况并不常见。事实上，快速排序通常明显比其他Ο(nlogn)算法更快，因为它的内部循环（innerloop）可以在大部分的架构上很有效率地被实现出来。快速排序使用分治法（Divideandconquer）策略来把一个串行（list）...
2014-10-09 10:57:00
71
分布式日志收集系统Apache Flume的设计介绍
概述Flume是Cloudera公司的一款高性能、高可能的分布式日志收集系统。现在已经是Apache Top项目。Github地址。同Flume相似的日志收集系统还有Facebook Scribe，Apache Chuwka，Apache Kafka(也是LinkedIn的)。Flume是后起之秀，本文尝试简要分析Flume数据流通过程中提供的组件、可靠性保证来介绍Flume的主要设计，不涉...
2014-10-09 10:57:00
102
JVM日志和参数的理解
转自：http://hot66hot.iteye.com/blog/2075819写这篇wiki的目的:最近在调整Hbase的JVM,翻了些文档和wiki,想写点东西,给自己和想了解jvm日志和参数的同 学提供些帮助.一:理解GC日志格式,读GC日志的方法1:开启日志-verbose:gc-XX:+PrintGCDetails-XX:+PrintGCDateStamp...
2014-10-09 10:57:00
109
Avro简介
一、引言1、简介Avro是Hadoop中的一个子项目，也是Apache中一个独立的项目，Avro是一个基于二进制数据传输高性能的中间件。在Hadoop的其他项目中例如HBase(Ref)和Hive(Ref)的Client端与服务端的数据传输也采用了这个工具。Avro是一个数据序列化的系统。Avro 可以将数据结构或对象转化成便于存储或传输的格式。Avro设计之初就用来支持数据密集型应用，...
2014-10-09 10:57:00
272
大数据时代的 9 大Key-Value存储数据库
在过去的十年中，计算世界已经改变。现在不仅在大公司，甚至一些小公司也积累了 TB 量级的数据。各种规模的组织开始有了处理大数据的需求，而目前关系型数据库在可缩放方面几乎已经达到极限。一个解决方案是使用键值（Key-Value）存储数据库，这是一种 NoSQL（非关系型数据库）模型，其数据按照键值对的形式进行组织、索引和存储。KV 存储非常适合不涉及过多数据关系业务关系的业务数据，同时能有效...
2014-10-09 10:57:00
150
AIX 下磁盘 I/O 性能分析
转自：http://www.ibm.com/developerworks/cn/aix/library/1203_weixy_aixio/磁盘 I/O 的概念I/O 的概念，从字义来理解就是输入输出。操作系统从上层到底层，各个层次之间均存在 I/O。比如，CPU 有 I/O，内存有 I/O, VMM 有 I/O, 底层磁盘上也有 I/O，这是广义上的 I/O. 通常来讲，一个上层的...
2014-10-09 10:57:00
106
在浏览器中解析Base64编码图像
上一篇介绍中，我们将二进制文件(BLOB)保存为Base64编码的文本，这些文本可以内嵌在XML的标签中，因此二进制信息它可以随着XML文件被拷贝、下载而不用担心信息会缺失。这项技术也在email邮件中被广泛使用。浏览器对Base64的支持图像是最经常被使用的一种二进制文件。而现代的浏览器的进步日新月异，IE7，FireFox和其他浏览器为包括Base64在内各种编码的图像信息提供了很好的支持。...
2014-10-09 10:56:00
243
细说Java IO相关
细说Java IO相关概述 在大部分的行业系统或者功能性需求中，对于程序员来说，接触到io的机会还是比较少的，其中大多也是简单的上传下载、读写文件等简单运用。最近工作中都是网络通信相关的应用，接触io、nio等比较多，所以尝试着深入学习并且描述下来。 io往往是我们忽略但是却又非常重要的部分，在这个讲究人机交互体验的年代，io问题渐渐成了核心问题。Java传统的io是基于流的i...
2014-10-09 10:56:00
137
Java IO流学习总结
Java流操作有关的类或接口：Java流类图结构：流的概念和作用流是一组有顺序的，有起点和终点的字节集合，是对数据传输的总称或抽象。即数据在两设备间的传输称为流，流的本质是数据传输，根据数据传输特性将流抽象为各种类，方便更直观的进行数据操作。IO流的分类根据处理数据类型的不同分为：字符流和字节流根据数据流向不同分为：输入流和输出流字符...
2014-10-09 10:56:00
59
浅谈RAID写惩罚（Write Penalty）与IOPS计算
浅谈RAID写惩罚（Write Penalty）与IOPS计算05/08. 2014介绍通常在讨论不同RAID保护类型的性能的时候，结论都会是RAID-1提供比较好的读写性能，RAID-5读性能不错，但是写入性能就不如RAID-1，RAID-6保护级别更高，但写性能相对更加差，RAID10是提供最好的性能和数据保护，不过成本最高等等。其实决定这些性能考虑的因素很简单，...
2014-10-09 10:56:00
1002
MySQL体系结构
了解MySql必须牢牢记住其体系结构图，Mysql是由SQL接口，解析器，优化器，缓存，存储引擎组成的。1 Connectors指的是不同语言中与SQL的交互2 Management Serveices & Utilities： 系统管理和控制工具3 Connection Pool: 连接池。管理缓冲用户连接，线程处理等需要缓存的需求4 SQL Inte...
2014-10-09 10:56:00
64
使用 Twitter Storm 处理实时的大数据
流式处理大数据简介Storm 是一个开源的、大数据处理系统，与其他系统不同，它旨在用于分布式实时处理且与语言无关。了解 Twitter Storm、它的架构，以及批处理和流式处理解决方案的发展形势。Hadoop（大数据分析领域无可争辩的王者）专注于批处理。这种模型对许多情形（比如为网页建立索引）已经足够，但还存在其他一些使用模型，它们需要来自高度动态的来源的实时信息。为了解...
2014-10-09 10:56:00
184
初探单点登录 SSO
单点登录单点登录（Single sign-on，SSO）是一种访问控制，在多个软件应用中，用户只需登录其中一个应用，就可以成功访问其他应用；同样，用户只需注销其中一个应用，就可以成功注销其他应用。当一个公司产品线越来越复杂，做的东西越来越多，考虑到用户的便利性和业务的交集，单点登录也就变得越来越必然。譬如，阿里巴巴中的淘宝网，天猫，聚划算和一淘，考虑下面的场景：我们用户登录淘宝网购物，紧...
2014-10-09 10:56:00
165
深入浅出DDoS攻击防御
文/魏兴国敌情篇 ——DDoS攻击原理DDoS攻击基础DDoS（Distributed Denial of Service，分布式拒绝服务）攻击的主要目的是让指定目标无法提供正常服务，甚至从互联网上消失，是目前最强大、最难防御的攻击之一。按照发起的方式，DDoS可以简单分为三类。第一类以力取胜，海量数据包从互联网的各个角落蜂拥而来，堵塞IDC入口，让各种强大的硬件防御系统、快...
2014-10-09 10:56:00
97
关于分布式系统的数据一致性问题
现在先抛出问题，假设有一个主数据中心在北京M，然后有成都A，上海B两个地方数据中心，现在的问题是，假设成都上海各自的数据中心有记录变更，需要先同步到主数据中心，主数据中心更新完成之后，在把最新的数据分发到上海，成都的地方数据中心A，地方数据中心更新数据，保持和主数据中心一致性（数据库结构完全一致）。数据更新的消息是通过一台中心的MQ进行转发。先把问题简单化处理，假设A增加一条记录Mess...
2014-10-09 10:56:00
165
mysql 性能优化方案
内容简介：这是一篇关于mysql 性能优化的文章。网上有不少mysql 性能优化方案，不过，mysql的优化同sql server相比，更为麻烦，同样的设置，在不同的环境下 ，由于内存，访问量，读写频率，数据差异等等情况，可能会出现不同的结果，因此简单地根据某个给出方案来配置mysql是行不通的，最好能使用status信息对mysql进行具体的优化。mysql> show global...
2014-10-09 10:56:00
60
Linux 系统实时监控的瑞士军刀—Glances
早些时候，我们提到过有很多可以用来监视系统性能的 Linux系统监视工具。 但我们估计，或许更多的用户会倾向与绝大多数 Linux 发行版都带的工具 （top命令）。top 命令是 Linux 下的一个实时任务管理器， 同时也是用于在GNU/Linux发行版中寻找系统性能方面的瓶颈，并帮助我们作出正确操作的常用系统监视工具。 她有着一个极为简洁的界面，并自带少量的可以帮助我们快速了...
2014-10-09 10:55:00
114
JAVA多线程和并发基础面试问答
原文链接译文连接作者：Pankaj 译者：郑旭东校对：方腾飞多线程和并发问题是Java技术面试中面试官比较喜欢问的问题之一。在这里，从面试的角度列出了大部分重要的问题，但是你仍然应该牢固的掌握Java多线程基础知识来对应日后碰到的问题。（校对注：非常赞同这个观点）Java多线程面试问题1. 进程和线程之间有什么不同？一个进程是一个独立(self contained)的运行环境，它...
2014-10-09 10:55:00
62
Linux服务器性能评估
一、影响Linux服务器性能的因素1. 操作系统级CPU内存磁盘I/O带宽网络I/O带宽2. 程序应用级二、系统性能评估标准影响性能因素影响性能因素评判标准好坏糟糕CPUuser% + sys%< 70%user% + sys%= 85%user% + sys% >=90%内存Swap In（si...
2014-10-09 10:55:00
78
select、poll、epoll之间的区别总结
select、poll、epoll之间的区别总结05/05. 2014select，poll，epoll都是IO多路复用的机制。I/O多路复用就通过一种机制，可以监视多个描述符，一旦某个描述符就绪（一般是读就绪或者写就绪），能够通知程序进行相应的读写操作。但select，poll，epoll本质上都是同步I/O，因为他们都需要在读写事件就绪后自己负责进行读写，也就是说这个读写过程...
2014-10-09 10:55:00
59
五种开源协议的比较(BSD,Apache,GPL,LGPL,MIT) – 整理
五种开源协议的比较(BSD,Apache,GPL,LGPL,MIT) – 整理04/25. 2014当Adobe、Microsoft、Sun等一系列巨头开始表现出对”开源”的青睐时，”开源”的时代即将到来！最初来自：sinoprise.com/read.php?tid-662-page-e-fpage-1.html（遗憾的是这个链接已经打不开了），我基本未改动，只是进行了一些...
2014-10-09 10:55:00
233
Java NIO 系列教程
原文地址：http://tutorials.jenkov.com/java-nio/index.html作者：Jakob Jenkov 译者：郭蕾 校对：方腾飞Java NIO(New IO)是一个可以替代标准Java IO API的IO API（从Java 1.4开始)，Java NIO提供了与标准IO不同的IO工作方式。Java NIO: Channels and Buffer...
2014-10-09 10:55:00
77
微博平台的RPC服务化实践
2014年第一分钟，新浪微博的发布量以808298条再次刷新记录，第一秒微博发布量相较去年提升55%。（数据来源：新浪科技）这是微博平台 RPC 框架 “Motan” 上线后第一次抗峰值，整体表现平稳，基本达到最初的“应用方无感知”的目标。在RPC服务化这个事情上，微博平台不是第一个吃螃蟹的：早的有亚马逊和eBay等国外先驱，近的有Twitter的finagle，淘宝的dubbo等等，网上...
2014-10-09 10:55:00
80
服务过程中会遇到的问题
服务化，也可以叫SOA，但在我们还是尽量避免用这个词，因为它被炒得太热，一味的套SOA的概念，容易迷失原有的方向。要向服务化推进，当然就需要搭建一些基础设施，来协助这个过程的实现，那都有哪个方面的工作要做呢，这里把我暂时想到的列一列。1. 服务的定义服务提供者要怎么暴露一个服务？服务消费者要怎么引用一个服务？肯定需要一个声明式服务定义框架，可以用注解，描述文件，DSL等，这个要不要用标准，要看这...
2014-10-09 10:55:00
631
互联网网站架构升级----消息中间件的实现方案
消息中间件对目前大中型互联网来说是非常重要的，在业务数据流动中仅次于RPC服务调用，担负着越来越复杂的网站业务从主流程上解耦的重要责任； 从目前互联网对消息中间件的需求来看应该分为两种类型，一种是和钱相关的需求，一种是和钱无关的需求；和钱相关的需求消息的可靠性是放在第一位的，和钱无关的需求是速度放在第一位的，但这两种需求又是矛盾的，很难设计出一种既可靠又高效的系统，除非将两套方案捏合成一个系统，...
2014-10-09 10:55:00
70
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人