2014年10月_wangshfa

转载 LSM树由来、设计思想以及应用到HBase的索引

讲LSM树之前，需要提下三种基本的存储引擎，这样才能清楚LSM树的由来：哈希存储引擎是哈希表的持久化实现，支持增、删、改以及随机读取操作，但不支持顺序扫描，对应的存储系统为key-value存储系统。对于key-value的插入以及查询，哈希表的复杂度都是O(1)，明显比树的操作O(n)快,如果不需要有序的遍历数据，哈希表就是your Mr.RightB树存储引擎是B树（关于B树的由来

2014-10-31 09:01:26 549

转载成功大数据团队的“三驾马车”

作者：张霖星期五, 一月 3, 2014动态, 大数据暂无评论对于那些着手尝试大数据应用的企业来说，成败的关键是组建一个优秀的大数据团队，但是不要指望一个“首席数据官(CDO)”或者数据科学家搞定所有的事情，成功的大数据团队需要三驾马车：一位业务分析师、一位机器学习专家和一位数据工程师。随着大数据企业应用的火热开展，数据科学家正在闹人才荒，可谓一将难

2014-10-30 15:40:34 2921

转载大数据

1、大数据核心是什么？“大数据”作为时下最火热的IT行业的词汇，随之而来的数据仓库、数据安全、数据分析、数据挖掘等等围绕大数据的商业价值的利用逐渐成为行业人士争相追捧的利润焦点。大数据(big data)，或称巨量资料，指的是所涉及的资料量规模巨大到无法透过目前主流软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。(在维克托·迈尔-舍恩

2014-10-30 10:50:36 1129

Spring实现aop是依赖两种技术,一种是jdk动态代理,被切入的类需要实现接口,如果在配置文件中不指明实现什么接口,spring会自动搜索其实现接口并织入advice,别一种是借助动态修改类的技术,使用cglib动态地扩展类来实现切面,cglib可以实现字节码级地修改,执行效率比jdk动态代理要高,但创建实例时没有前者快.默认情况下,使用jdk动态代理,通过下面的配置,可以显式指明到底使用哪种

2014-10-29 11:31:58 1042

转载 java对cookie的操作

java对cookie的操作比较简单，主要介绍下建立cookie和读取cookie，以及如何设定cookie的生命周期和cookie的路径问题。建立一个无生命周期的cookie，即随着浏览器的关闭即消失的cookie，代码如下1234HttpServletRequest request Ht

2014-10-23 09:59:22 500

转载 apache shiro的工作流程分析

apache shiro非常易于使用，如果是在标准java web环境下使用，你没有必要去了解内部的工作流程。如果需要在非标准java web环境使用，就必须深入到它的整个对象图中去。我希望在clojure ring的环境中使用shiro，我还不知道行不行，我正在了解中。本文基于shiro的web环境，用宏观（也就是不精确）的角度去理解shiro的工作流程，先看shiro官方的一张

2014-10-21 14:13:55 1306

转载 Shiro源码分析-初始化-Realm

http://dead-knight.iteye.com/blog/2041905在上一篇介绍SecurityManager的初始化过程中，也有realm的粗略介绍。 realm的概念在安全领域随处可见：各种中间件的realm、spring security的realm、shiro的realm。。。如下： tomcat的realm：http://tomcat.apache.org

2014-10-21 14:08:50 1699

转载 Shiro 之 Filter（上）：ShiroFilter

在上一篇中，我们分析了 Shiro Web 应用的入口 —— EnvironmentLoaderListener，它是一个 ServletContextListener，在 Web 容器启动的时候，它为我们创建了两个非常重要的对象：WebSecurityManager：它是用于 Web 环境的 SecurityManager 对象，通过读取 shiro.ini 中 [main] 片

2014-10-21 14:07:33 28082

转载 Shiro框架Web环境下过滤器结构分析

Shiro的过滤器的配置是结合使用Spring的DelegatingFilterProxy与FactoryBean2种技术来完成自身过滤器的植入的，所以理解Shiro的过滤器首先要理解这2者的使用。1. DelegatingFilterProxySpring提供的一个简便的过滤器的处理方案，它将具体的操作交给内部的Filter对象delegate去处理，而这个deleg

2014-10-21 14:06:46 3424

转载 getAttribute和getParameter区别

1.getAttribute是取得jsp中用setAttribute設定的attribute 2.parameter得到的是string；attribute得到的是object 3.request.getParameter()方法传递的数据，会从Web客户端传到Web服务器端，代表HTTP请求数据；request.setAttribute()和getAttribute()方法传递的数据只

2014-10-21 14:01:33 648

转载在 Web 项目中应用 Apache Shiro

Apache Shiro 是功能强大并且容易集成的开源权限框架，它能够完成认证、授权、加密、会话管理等功能。认证和授权为权限控制的核心，简单来说，“认证”就是证明你是谁？ Web 应用程序一般做法通过表单提交用户名及密码达到认证目的。“授权”即是否允许已认证用户访问受保护资源。关于 Shiro 的一系列特征及优点，很多文章已有列举，这里不再逐一赘述，本文重点介绍 Shiro 在 Web Appli

2014-10-20 10:50:35 1073

转载 jQuery EasyUI 为Combo,Combobox添加清除值功能

效果图：图标[javascript] view plaincopy(function($){ //初始化清除按钮 function initClear(target){ var jq = $(target); var opts = jq.

2014-10-15 14:29:05 26699

原创 sql查询in包含null的情况

sql查询in包含null的情况下，查询结果为空。

2014-10-12 19:00:37 10006

转载互联网全站HTTPS的时代已经到来

前言我目前在百度从事HTTPS方面的性能优化工作。百度无线搜索目前已经支持https，手机访问地址是https://m.baidu.com。在HTTPS项目的开展过程中明显感觉到目前国内互联网对HTTPS并不是很重视，其实也就是对用户隐私和网络安全不重视。本文从保护用户隐私的角度出发，简单描述现在存在的用户隐私泄露和流量劫持现象，然后进一步说明为什么HTTPS能够保护用户安全以及H

2014-10-12 15:25:16 939

wangshfa的专栏