十五楼亮哥

1、数据治理的概念数据治理并不是一个新生事物，可以说，有数据的地方就存在数据治理，只不过随着数据应用的迅猛发展将它提到了一个高度，作为一个独立的研究领域。数据治理并没有标准的、严格的定义，概况地讲所有为提高数据质量而展开的业务、技术和管理活动都属于数据治理范畴。2、数据治理的目标Ensure metadata management and data documentation。确保元数据管理和数据文档Simplify data access and facilitate data usage a

1、DDL建表语句表和字段必须有描述信息drop表前面加上IF EXISTS判断create表前面加上IF NOT EXISTS判断设置合理的生命周期，保证有用的历史数据不被删除，同时避免存储资源浪费使用常见的字段类型 DataTime、Bigint、Double、String，如使用其他字段，需要项目组评估DROP TABLE IF EXISTS ITSL_dev.dwd_sl_ams_tb_vms_cs_carinfo_d ;CREATE TABLE IF NOT EXISTS ITS

1、数据建模的意义设想一下：情景1：如果需要建一个工厂，需要加入一条新的线路，上面2个情况，哪个更容易加呢？情景2：如果线路发生故障，需要排查问题点在哪里，上面2个情况，哪个更容易呢？这就引出了数据建模的作用：加快数据的运算效率，更方便扩展，适应新的数据产品需求。2、数据落仓将业务数据、日志数据、爬虫数据通过ETL工具，加载到数据中台的ODS层进行存储，这个过程就叫数据落仓。3、数据探索数据落仓之后，需要数仓开发人员，申请相关ODS层表的读取权限，审核通过之后，就可以进行数据探索了。数

表空间利用率：SELECT a.tablespace_name, --total "表空间大小", -- free "表空间剩余大小", -- (total - free) "表空间使用大小", total / (1024 * 1024 * 1024) "表空间大小(G)", (total - free) / (1024 * 1024 * 1024) "表空间使用大小(G)", free / (1024 * 1024 * 1024) "表空

数据采集，在数仓开发过程中至关重要，它要求数据类型全、数据量完整、尽可能覆盖数据流转的各个环节，它是数仓建设的核心底座，毕竟巧妇难为无米之炊嘛。1、数据的来源(1)数据库数据库不用过多介绍，业务系统例如CRM、ERP、财务系统等等，每天都会生成大量的业务数据，存储在mysql、SqlServer、Oracle等关系型数据库中。(2)日志日志也是采集数据的重要来源，因为日志记录了程序执行的情况，例如用户登录数据、用户操作数据等，使用这些数据可以统计PV、UV等指标。(3)前端埋点用户很多前端请求

这里涉及到两个概念：数据指标和指标体系。数据指标：对业务中产生的内部数据或者互联网中爬取的外部数据，按照一定的业务逻辑，使用一定的技术手段进行加工处理，能够描述、分析、预测业务的结果数据。指标体系：‍指标体系是将零散单点的具有相互联系的指标，系统化的组织起来，通过单点看全局，通过全局解决单点的问题。那就产生了一个问题，既然有了指标，干嘛还需要指标体系呢？一个指标没办法解决复杂的业务问题，这就需要使用多个指标从不同维度来评估业务，也就是使用指标体系。比如说衡量一个淘宝店的业务发展，我们可以用一个核心

很多人数仓开发人员有一个误解，认为数仓开发的门槛极低，只需要会写SQL就可以了。其实不然，专业的数仓开发需要很多方便的知识沉淀，包括但不限于：需求理解，培养业务sense，指标梳理、数据采集、落仓、数据探索、数据建模、调度配置、数仓上线、数据核对、数仓下线等等。会搭建数仓不难，但是搭建一个规范的、高效的、高扩展的、低成本的数据仓库，绝对不是一件简单的事情。这既要知识面的宽度，更需要知识面的深度，当然少不了需要经验的积累。这里的经验就是多做项目，多踩坑，经过不断的总结和提升，你就能在新的项目和产品中少走一些

SELECT 表名 = Case When A.colorder=1 Then D.name Else '' End, 表说明 = Case When A.colorder=1 Then isnull(F.value,'') Else '' End, 字段序号 = A.colorder, 字段名 = A.name, ...

1、Eclipse Console输出日志中文乱码解决办法：直接打开eclipse的ini，在最后一行加上-Dfile.encoding=utf-8

1、Eclipse Console输出日志中文乱码解决办法：直接打开eclipse的ini，在最后一行加上-Dfile.encoding=utf-8

package com.unis.core;import java.io.BufferedReader;import java.io.IOException;import java.io.InputStreamReader;import java.io.PrintWriter;import java.net.HttpURLConnection;import java.net.Inet...

在解决同一个浏览器登录多个账户，解决sesson覆盖问题的时候，我想到的办法是为每一个用户的session定义唯一的key，例如“sessionUser”+accessToken.accessToken是登录校验成功后，生成的唯一字符串，你可以使用UUID策略。这样，我需要给所有的ajax请求带上这个accessToken,有没有简单的办法，有的，Ajax-hook可以做到。Ajax-hook...

1、SubjectSubject一词是一个安全术语，其基本意思是“当前的操作用户”。称之为“用户”并不准确，因为“用户”一词通常跟人相关。在安全领域，术语“Subject”可以是人，也可以是第三方进程、后台帐户（Daemon Account）、定时作业（Corn Job）或其他类似事物。它仅仅意味着“当前跟软件交互的东西”。但考虑到大多数目的和用途，你可以把它认为是Shiro的“用户”概念。在...

debug后跟进去观察后发现FormAuthenticationFilter成功登陆后，会调用它的onLoginSuccess方法。 protected boolean onLoginSuccess(AuthenticationToken token, Subject subject, ServletRequest re...

最近在做Oauth SSO单点登录集成，目标有三个：A：各个业务系统在统一门户登录，各业务系统不用再次登录，即SSO；B：原来各业务系统的登录入口暂时保留；C：解决同一个浏览器登录多个账户，session覆盖的问题。因为业务系统使用的是SpringMVC，并且使用了shiro安全框架。我的实现逻辑是，先执行OauthFilter，后执行Shiro认证。但是在shiro中session设置...

需要安装插件：SQLPrompt插件安装地址：插件安装方法：先安装SQLPrompt_6.3.0.344.exe打开SQL Server Management Studio，可以看到出现一个新的菜单：SQL Prompt打开 SQL Prompt ->help -> Enter Serial Number先断开网络，然后运行注册机SQL.Prompt.Keygen.exe...

大数据助力企业营销的核心在于：在「合适的时间」，基于对用户的了解，把你希望推送的东西通过「合适的载体」，以「合适的方式」，推送给「合适的人」。一：什么是标签体系说到客户标签，不得不说用户画像。用户画像，有个类似的概念叫「受众定向」。“用户画像”既有人口属性、生活状态这些基本静态信息，又包括用户“最近要不要旅游”、“准备买多少钱的车”这样能驱动直接效果的动态信息。从这层意思来看，用“受众定向”更...

API网关是一个更为智能的应用服务器，它的定义类似于面向对象设计模式中的Facade模式，它的存在就像是整个微服务架构系统的门面一样，所有的外部客户端访问都需要经过它来进行调度和过滤。它除了要实现请求路由、 负载均衡、 校验过滤等功能之外，还需要更多能力，比如与服务治理框架的结合、请求转发时的熔断机制、服务的聚合等一系列高级功能。在SpringCloud中了提供了基于NetflixZuul实现的A...

11

前面已经讲了Eureka注册中心服务器已经客户端的搭建，接下来通过一个例子，来实现Eureka client微服务之间的调用。RestTemplate需要配合@LoadBalanced才能通过服务名spring.application.name解析到具体的服务上。Ribbon在Netflix组件是非常重要的一个组件，在Zuul中使用Ribbon做负载均衡，以及Feign组件的结合等。在Spri...

@SpringBootApplication@EnableEurekaClientpublic class ProviderUserApplication { public static void main(String[] args) { SpringApplication.run(ProviderUserApplication.class, args); }}使用...

Eureka包含了服务器端和客户端组件。服务器端，也被称作是服务注册中心，用于提供服务的注册与发现。客户端组件包含服务消费者与服务生产者。在应用程序运行时，Eureka客户端向注册中心注册自身提供的服务并周期性的发送心跳来更新它的服务租约。同时也可以从服务端查询当前注册的服务信息并把他们缓存到本地并周期性的刷新服务状态。...

首先，先介绍一下SpringCloud，它是基于SpringBoot的微服务架构。Eureka：注册中心，单个微服务将自己注册到eureka上供其它服务调用。Ribbon：客户端负载均衡，负责对eureka中的服务进行调用。Hystrix：客户端容错保护，负责当ribbon出现问题时保证整个服务的畅通。...

1、@Controller与@RestController的区别@Controller类中的方法可以直接通过返回String跳转到jsp、ftl、html等模版页面。在方法上加@ResponseBody注解，也可以返回实体对象。@RestController类中的所有方法只能返回String、Object、Json等实体对象，不能跳转到模版页面。@RestController相当于@Resp...

一：多数据源配置1、主数据源配置文件package com.bert.datasource;import org.apache.ibatis.session.SqlSessionFactory;import org.mybatis.spring.SqlSessionFactoryBean;import org.mybatis.spring.SqlSessionTemplate;i...

很多程序员经常陷入迷茫，技术发展日新月异，没有充足的时间精力去学习新技术，每天都疲于产品经理、市场、领导的各种需求的编码实现，没有丝毫的成就感。如果要想有成就感，就需要了解业务，清楚自己做的东西对用户和公司的价值。马云在创建阿里巴巴的时候，就明确了公司和员工的使命：让天下没有难做的生意。可是，如果让程序员说说业务流程，大部分人描述的只是文档中的逻辑和流程。这让我想起来《亮剑》中李云龙跟楚云...

A：需求阶段，帮助用户挖掘需求用户不一定清楚自己需要什么？我以公司内部业务系统的开发为例，业务方就是用户。最初评审设计原型的时候，业务方可能无法发现一些体验问题，开发完成之后，业务方在真正使用中，就发现了问题，又要求研发改设计。生活中有很多反人性的设计，例如：买水果或者蔬菜，有些商家总需要在上面粘上塑料标签，既浪费资源，又影响消费者健康。再比如，我们公司公共卫生间，...

开门见山，一图胜千言，先来看看单体架构跟微服务架构的区别？ 单体服务架构，将所有的功能模块(service)打包到一起并放在一个web容器中运行。 微服务架构，就是将复杂臃肿的单体应用进行细粒度的服务拆分，每个微服务可以交给小的团队进行开发和维护，拆分出来的服务各自独立打包部署。这两种架构各有优缺点：我之前工作过的几个公司，基本都是单体架构，顶多加一个负载均衡。很多人都有疑问，...

一：优化说明A：有数据表明，用户可以承受的最大等待时间为8秒。数据库优化策略有很多，设计初期，建立好的数据结构对于后期性能优化至关重要。因为数据库结构是系统的基石，基础打不好，使用各种优化策略，也不能达到很完美的效果。B：数据库优化的几个方面 ​​ 可以看出来，数据结构、SQL、索引是成本最低，且效果最好的优化手段。C：性能优化是无止境的，当性能可以满足需求时即可，不要过度优化...

现在的网站架构基本上都是前后端分离，然后出现了前端工程师和后端工程师的岗位区分(当然你也可以是全栈的)。前端和后端的唯一联系，变成了API接口；API文档变成了前后端开发人员联系的纽带，变得越来越重要相信大多数朋友都遇到过上面的场景：明明调用的是之前约定好的API，拿到的结果却不是想要的。可能因为是有人修改了API的接口，却忘了更新文档；又或者是文档写的有歧义，大家的理解各不相同。一般...

全局属性有两种赋值方式：静态赋值和动态赋值Page({ data: { message:'加载中' //静态赋值 } }) //动态赋值 that.setData({ message:'加载中' })

<view class="group"> <block wx:for="{{iconSize}}"> <icon type="success" size="{{item}}"/> </block&a

app.json是小程序的全局配置文件，主要配置项有：注意：类型String Array,就是字符串数组"pages": [ "pages/login/login", "pages/index/index" ]Object类型，就是json对象"window": { "backgroundText

方案一：scroll-view绑定bindscrolltolower<scroll-view scroll-y="true" style="height:{{scrollHeight}}px;" bindscrolltolower="bindDownLoad" > &amp

1：配置环境变量 C:\Windows\Microsoft.NET\Framework\v4.0.30319 2：编译CS文件3：运行exe文件

开发中的页面，可以放在app.json中pages列表中第一个，这样可以普通编译模式，随时查看修改后的结果。 整体调试的话，再切换到登录编译模式

如果是树形结构，展示在列表中，我们希望按照树形结构的排序，怎么做呢？可以使用视图。USE [ADataBase]GOSET ANSI_NULLS ONGOSET QUOTED_IDENTIFIER ONGOCREATE VIEW [dbo].[VW_RP_CLASSIFY]ASWITH temp AS ( SELECT ID, Level, IsUse, L...

先跑个题，最近听了一场分享，我不想谈分享的主题，因为主题不是每个人都关心的。但是其中的一些方法论对我们都会有一些启示。经验不是万能的，方法论才是万能的。一：企业要做一件事情，需要搞懂3个W和一个H When：时势，现在处于一个什么时代。 Where：在一个什么样的行业背景里 Why：做这件事情的意义 How：做这件事情的战略战术二：提纲挈领 一个企业不可能什么都做，但是需要抓...

一：概述 在SQLServer中，存储数据的最小单位是页，每一页所能容纳的数据为8060字节.而页的组织方式是通过B树结构。在聚集索引B树中，只有叶子节点实际存储数据，而其他根节点和中间节点仅仅用于存放查找叶子节点的数据.每一个叶子节点为一页，每页是不可分割的. 而SQLServer向每个页内存储数据的最小单位是表的行(Row).当叶子节点中新插入的行或更新的行使得叶子节点无法容纳当前更...

如果你到一家公司去面试，大多数的面试流程都是这样的： A：自我介绍 如果面试官让你做个自我介绍，面试官不仅仅是想了解你的基本情况。因为他要想了解你的情况，从简历上就可以看。面试官的套路在于，通过你的描述，看你表达是否清晰有条理，是否有亲切感。B：介绍一下最近的项目 跟自我介绍一样，项目经历简历上都有。面试官的套路在于，通过描述项目，感觉你的项目经历是否真实，你是不是真正了解自己做的的项目...

开篇分享：学习技术不仅学会怎么应用，还需要了解技术产生的背景。让我们先来看一段简单的代码： 在一个集合里面添加元素，我们看一下集合add()方法的源码： add方法传入的参数是一个E对象，而所有对象的父类默认都是Object。 所以集合默认可以添加任何类型的元素。上面的例子添加了若干String数据，最后在第7行添加了一个元素10，其实这里用到了自动装箱，其实原理是这样的： l

亮哥分享： 一种技术的出现，肯定是为了解决某种技术的不足。最近复习了一遍Java基础，受益匪浅。 第一遍学Java知识，是为了找工作。简单了解了一下java的思想和语法，掌握一些工作中经常用到的知识(常用的数据结构、IO流、多线程、数据库、框架等等) 工作几年后再来看一遍Java知识，你会更关注一些细节，有更多的思考，掌握一些解决问题的思想。今天我们来了解一下JDK5的新特性之一：自

支付无小事，开发支付平台前，首先要制定规则： (1)支付接口交易金额单位为[分]，不能带小数;对账的时候，单位为[元](2)时间戳，标准北京时间，时区为东八区 自1970年1月1日 0点0分0秒以来的[秒数]。 注意：部分系统取到的值为毫秒级，需要转换成秒(10位数字)。(3)商户订单号，自定义生成，必须保证唯一性。 重新发起一笔支付要使用原订单号，避免重复支付； 已支付过或已关

您认识这个神器吗？猜猜它是干嘛的？^_^这是古代一种装有转轴的凳子。用足掌推动，刺激涌泉等穴，有养生﹑治病之效。它的名字叫做”滚凳”。明 屠隆 《考槃馀事·起居器服笺·滚凳》：“以木为之，长二尺，阔六寸，高如常。四桯镶成，中分一铛，内二空中，车圆木二根，两头留轴转动，凳中凿窍活装。以脚踹轴，滚动往来。盖涌泉穴精气所生之地，故必以运动为妙。再看看古代的卧室家具格局。个人觉得，当今的西式家具跟中国古人的

上图这个物件叫“陀螺”，抽陀螺是一种古老传统民俗游戏活动。小时候玩什么玩具跟季节也有一定关系。小时候入冬水面结冰之后，就流行做陀螺、抽陀螺了。下面再讲为什么是在冬季？我小时候搞一个陀螺并不容易，大多是自己动手做。找一根粗细适当的木头，我一般用杨木，因为杨木硬度低。先把一头慢慢削尖，然后锯下来，再在尖头上嵌一粒钢珠，嵌钢珠是技术活，孔挖大了，钢珠嵌不紧，容易掉；孔挖小了，钢珠嵌不进去，所以那个孔是关键

公司按规模分为三类:创业公司、中等规模公司、大公司。文章最后简单比较一下三种公司上班是一种什么样的体验，有兴趣的可以直接在文章结尾阅读。参加工作将近七年了，我大部分都是在创业公司工作，而且见证了两家公司创业失败。这几年里让我明白了一些事情,创业真的不是一般人玩得起的，有些事情，你真的需要知道：1：创业公司最重要的是设计一个好的产品，有创新，能够实实在在解决用户的痛点，给社会带来正面的价值。2：有了产

文化只是一种思想观念、行为习惯、处事风格，家有家风，国有国法。IT团队也一样，团队要想有凝聚力，需要有良好的团队文化。1：完善管理完善管理，就是完善项目管理的各个流程。1)可以借助一些工具来实施： 项目管理工具：可以用禅道，JIRA等开源软件。 知识管理工具：可以用WIKI 版本控制工具：可以用SVN 文件服务器：可以搭建FTP服务器。2)部门共治 可以在文件服务里上建一个文件夹，取名“部

数据库备份很重要，很多服务器经常遭到黑客的恶意攻击，造成数据丢失，如果没有及时备份的话，后果不堪设想。一：备份的目的：做灾难恢复：对损坏的数据进行恢复和还原 需求改变：因需求改变而需要把数据还原到改变以前二：备份的分类：1:根据是否需要数据库离线 冷备（cold backup）：需要关mysql服务，读写请求均不允许状态下进行； 温备（warm backup）： 服务在线，但仅支持读请求，不允

最近公众号没有更新，其实不是小编懈怠了，一方面工作比较忙碌，另一方面也不知道写些什么。最近在做产品设计，数据库设计的时候，时而有一些感触，简单整理一下。先来讲一个案例:产品中，物流公司可以发布货源，数据库中记录了货源的发布时间publishTime，司机来进行抢单。但是物流公司发出的货源，当天不一定有司机来抢单，达成运单交易。于是给物流公司增加了一个重新发布货源的功能。简单来说就是修改货源的publ

微信小程序已经内测将近一个月了，网上对微信小程序的讨论也异常火爆，从发布到现在微信小程序一直占领着各种技术论坛的头条。说实话，小编心里也是痒痒的，也想做第一波吃螃蟹的人，今天就来简单实践了一把。 关于微信为什么要开发小程序，什么是小程序，这里就不做介绍了。因为这已经是昨日黄花，朋友圈以及各种论坛都已经讲过了，不清楚的可以搜索一下。 官网资料1：官方文档： https://mp.

1：前提有一个认证过的服务号2：在微信公众平台-接口权限-网页账号-网页授权获取用户基本信息，配置授权回调域名。请注意，这里填写的是域名（是一个字符串），而不是URL，因此请勿加 http:// 等协议头；例如：www.qq.com3：生成微信网页授权的链接或者二维码。二维码方式可以解决授权链接不能在普通浏览器使用的问题，授权链接只能在微信浏览器打开。做成扫码的方式，就可以自动调用微信浏览器进行网页

1：团队精神和协作能力这是程序员应该具备的最基本的，也是最重要的安身立命之本。早期的乔布斯在职业生涯中，因为性格原因遭受了一些挫折，后来有所改善，造就了一段传奇和伟大的公司。性格好，与他们进行良好的沟通协作非常重要！任何公司都喜欢这样的人，不喜欢虽然有些本事，但是浑身带刺的人。2: 代码整洁,健壮。不解释，很重要，很重要，很重要！3：需求理解能力这个能力的培养，跟阅历和经验有很大的关系。有些人沟通起

今天在浏览关注的微信公众号的时候，发现有有个公众号名称更改了，这让我眼前一亮，很是兴奋。难道微信公众号规则有变化。我马上在网上搜索了一下，原来在8月22号微信公众号就发了系统公告：微信公众号的名称很重要： 如果名字起的够吸引人，可以提高公众号的搜索率，促进粉丝增长。 名字就确定了公众号的主题和方向。微信的每一次迭代都很谨慎，这次突然开放改名(当然有唯一性原则)，好奇心驱使我去猜想一下原因：微信之

1：什么是Code Review Code Review代码评审是指在软件开发过程中，通过对源代码进行系统性检查的过程。通常的目的是查找各种缺陷，包括代码缺陷、功能实现问题、编码合理性、性能优化等。 2：为什么要Code Review (1)提高代码质量。 (2)及早发现潜在缺陷，降低修改/弥补缺陷的成本。 (3)促进团队内部知识共享，提高团队整体水平。 (4)评审过程对于评审人员来说，也

有时候，做代码的单元测试的时候，可能会发生一些诡异的事情。想破脑袋都搞不清楚是怎么回事。一般遇到这种情况，我首先想到的是”没病不会死人”，出现问题，肯定有它发生的原因。解决这种问题，一靠经验，二靠运气，三靠细心。 有经验的人，可能曾经遇到相似的问题，举一反三，很快就能找到问题所在。 有的时候，也需要一点运气，或者说是灵感。很长时间没有头绪的问题，可能在某一个时间点就能想到问题的解决方法。 有时

一、规范存在的意义 应用编码规范对于软件本身和软件开发人员而言尤为重要 (1)好的编码规范可以尽可能的减少一个软件的维护成本 , 并且几乎没有任何一个软件，在其整个生命周期中，均由最初的开发人员来维护； (2)好的编码规范可以改善软件的可读性，可以让开发人员尽快而彻底地理解新的代码； (3)好的编码规范可以最大限度的提高团队开发的合作效率； (4)长期的规范性编码还可以让开发人员养成好的编

昨天研究了一下用DWR框架，做了一个消息推送的demo。根据网上的资料，写一个demo并不难。当demo跑起来并能成功向客户端推送消息的时候，我以为会用DWR了。但是当我把DWR集成到springMVC中的时候，又走了一些弯路。根本原因是对DWR的机制原理不了解。DWR做消息推送只是它的一种功能，如果把它理解成消息推送就太狭隘了。当我们研究一门新技术的时候，需要搞清楚几个问题。这个技术用来解决什么问

DWR,Direct Web Remoting 是一个开放源码的使用Apache许可协议的解决方案，它包含服务器端Java库、一个 DWR servlet以及 JavaScript库。，它的实现是基于Ajax的，可实现无刷新的效果。 这个框架最大的优点就是可以在JS中调用Java方法，传递参数，并且可以得到返回值。不得不说Apache真的是良心组织，为开源社区做出了巨大贡献。我们都知道Apache

1.1 Memcached介绍Memcached 是一个高性能的分布式内存对象缓存系统，用于动态Web应用以减轻数据库负载。它通过在内存中缓存数据和对象来减少读取数据库的次数，从而提供动态、数据库驱动网站的速度。1.2 Memcached工作方式分析许多Web应用都将数据保存到 RDBMS中，应用服务器从中读取数据并在浏览器中显示。 但随着数据量的增大、访问的集中，就会出现RDBMS的负担加重、数据

一：RDBMS vs NoSQL在现代的计算系统上每天网络上都会产生庞大的数据量。 这些数据有很大一部分是由关系数据库管理系统（RDMBSs）来处理。 1970年 E.F.Codd’s提出的关系模型的论文 “A relational model of data for large shared data banks”，这使得数据建模和应用程序编程更加简单。 通过应用实践证明，关系模型是非常适合于

管理者和领导者的区别是经常被谈起的问题。很多人对这两个概念的理解还是模糊的。在你的职业生涯中，如果能遇到一个好的领导者或者管理者是件很幸运的事情。在管理过程中，管理者使用的主要是权力，而领导者使用的更多的是魅力(威望)。其次，在日常的工作过程中，管理者更注重绩效，而领导者则更注重文化。任何一个经理人实际都是管理者和领导者的结合体，但由于职位不同，每个经理人在管理和领导者的杠杆上会有不同的侧重。领导是

河北省保定市阜平县天生桥镇不老树村，一个群山围绕的小村庄。给人的印象是民风淳朴，村民本本分分。但是由于没有什么特产，又没地理优势，祖祖辈辈都靠种地为生。村民生活过得比较清贫，当然近几年农村政策好了，而且修了公路，生活改善了很多。老爸也是老实勤劳，一辈子靠出力气挣钱养活一家子。几年前承包了一片荒山，那时候山上除了杂草，灌木丛就是石头。经过老爸几年一点一滴的付出，山上已经大变样。坡上种上了杨槐树，坡下种

有数据表明：用户可以承受的最大等待时间为8秒。 之前曾见过某个产品的一个列表页，40秒左右才能加载出来，几乎没有进行任何优化措施。 没有索引，没有缓存机制，没有进行sql优化(sql语句很长，并且各种left join表关联)。 数据库优化策略有很多，设计初期，建立好的数据结构对于后期性能优化至关重要。因为数据库结构是系统的基石，基础打不好，使用各种优化策略，也不能达到很完美的效果。一：规范化

之前bert君一直从事web和微信公众号开发，基本没有接触过APP开发。现在的工作，需要给APP客户端提供服务器接口。因为之前设计不周，在一次版本升级后，造成旧版APP用户无法正常使用，影响了系统订单的成交量，血的教训啊！App跟网站不一样，即使你发新版了还是有很高几率用户不买账不更新的。所以最好在最初设计接口的时候就想的长远些，API的URL不能随便动，代码写的可扩展性高一些方便以后兼容，数据库中

mybatis在java开发中已经成为主流，它有很多优点，例如 1. 易于上手和掌握。 2. sql写在xml里，便于统一管理和优化。 3. 解除sql与程序代码的耦合。 4. 提供映射标签，支持对象与数据库的orm字段关系映射 5. 提供对象关系映射标签，支持对象关系组建维护 6. 提供xml标签，支持编写动态sql。如图：我们在使用mybatis的时候，经常会这样写接口服务。

上篇文章介绍了java的几种任务调度实现的方式，今天用一个例子来说明一下 quartz 2的使用方法。Talk is cheap, show me the code. 废话不多说！package quartz2;import static org.quartz.JobBuilder.newJob;import static org.quartz.SimpleScheduleBuilder.si

java常用的任务调度实现方式主要有： Timer ScheduledExecutor 开源工具包 Quartz 开源工具包 JCronTab1:Timer相信大家都已经非常熟悉 java.util.Timer 了，它是最简单的一种实现任务调度的方法Talk is cheap. Show me the code！Timer timer = new Timer(); timer.sched

今天开始读《大型网站技术架构：核心原理与案例分析》，觉得这本书将的全面而又通俗易懂，有兴趣的同学可以看一看。下面对大型网站的架构演化，发展历程做了整理，小伙伴们一起来学习一下。 传统企业应用面对的挑战：复杂，千变万化的业务逻辑。（功能性需求） 大型网站面对的挑战：处理超大量的用户访问和海量的数据处理。（非功能性需求）网站核心架构要素：性能，可用性，伸缩性，扩展性，安全性大型网站软件系统的特点:

随着近几年各类移动终端的迅速普及，在手机移动定位app中，附近的人，附近的地点功能十分常见,基于地理位置的服务（LBS）和相关应用也越来越多，而支撑这些应用的最基础技术之一，就是基于地理位置信息的处理。st_distance 函数 st_distance 函数是从mysql5.6.1才加入的。 SET @g1 = POINT(1,1), @g2 = POINT(2,2); select st

对于任何DBMS，索引都是进行优化的最主要的因素。对于少量的数据，没有合适的索引影响不是很大，但是，当随着数据量的增加，性能会急剧下降。 如果对多列进行索引(组合索引)，列的顺序非常重要，MySQL仅能对索引最左边的前缀进行有效的查找。例如： 假设存在组合索引(c1,c2)，查询语句select * from t1 where c1=1 and c2=2能够使用该索引。查询语句select

数据库查询优化的思路： 1：优化sql 2：添加索引 3：加缓存，如memcached 4：主从复制或主主复制，读写分离 5：分区 6：垂直切分 垂直切分就是要把表按模块划分到不同数据库中，这种拆分在大型网站的演变过程中是很常见的。当一个网站还在很小的时候，只有小量的人来开发和维护，各模块和表都在一起，当网站不断丰富和壮大的时候，也会变成多个子系统来支撑，这时就有按模块和功能把表划分出

SQL优化有很多方法，今天来说一说数据库索引。举例说明： 假设有一个图书Book表，里面有字段id，name, isbn等。如果图书数量巨大的话，我们通过isbn查询通常是比较慢的。 添加索引： create index index_isbn ON book (isbn);再次执行查询： 查询时间从0.134缩短到0.001,效果还是很明显的。接下来通过一个故事来说明一下，索引是什么？很

一：多线程的意义平时的开发中线程是个少不了的东西，比如tomcat里的servlet就是线程，没有线程我们如何提供多用户访问呢？不过很多刚开始接触线程的开发工程师却在这个上面吃了不少苦头。怎么做一套简便的线程开发模式框架让大家从单线程开发快速转入多线程开发，这不是一件简单的事情。那具体什么是线程呢？首先看看进程是什么，进程就是系统中执行的一个程序，这个程序可以使用内存、处理器、文件系统等相关资源。例

在JDK5后主要提供的多线程处理都在java.util.concurrent包中，多线程的主要抽象不是Thread，而是Executor，Executor为接口，定义在java.util.concurrent包下，只定义了一个方法：public interface Executor { void execute(Runnable command); } 它提供了一种标准的方法将任务

一、 介绍：shiro是apache提供的强大而灵活的开源安全框架，它主要用来处理身份认证，授权，企业会话管理和加密。 shiro功能：用户验证、用户执行访问权限控制、在任何环境下使用session API，如cs程序。可以使用多数据源如同时使用oracle、mysql。单点登录(sso)支持。remember me服务。详细介绍还请看官网的使用手册：http://shiro.apache.org

前两天互联网行业发生了一件大事：滴滴获得苹果公司10亿美元战略投资。这是苹果成立40年来首笔少数股权投资和首次投资中国互联网公司，也是滴滴打车迄今为止获得的单笔最大投资。这让无数的互联网公司羡慕嫉妒恨啊。对于入股滴滴这件事，苹果首席执行官 Tim Cook 是这么说的：滴滴彰显了中国 iOS 开发者社群的锐意创新精神。滴滴打造的出行平台及其卓越的管理团队令人赞叹，我们期待支持滴滴的长期发展。

哈佛大学有一个非常著名的关于目标对人生影响的跟踪调查。调查的对象是一群智力、学历、环境等条件都差不多的大学毕业生。结果是这样的： 第一类人：27%的人，没有目标； 第二类人：60%的人，目标模糊； 第三类人：10%的人，有清晰但比较短期的目标； 第四类人：3%的人，有清晰而长远的目标。 以后的25年，他们开始了自己的职业生涯。 25年后，又对这些调查对象跟踪调查，他们的职业和生活状况发生

1：spring加载ehcache配置文件 <bean id="ehCacheManager" class="org.springframework.cache.ehcache.EhCacheManagerFactoryBean"> <property name="configLocation" value="classpath

在整个 Spring MVC 框架中， DispatcherServlet 处于核心位置，负责协调和组织不 同组件以完成请求处理并返回响应的工作 。SpringMVC 处理请求过程： 1). 若一个请求匹配 DispatcherServlet 的请求映射路径(在 web.xml 中指定), WEB 容器将该请求转交给 DispatcherServlet 处理 2). DispatcherServl

上学时，学习编程语言的时候，想象中程序员应该是这样的： 工作两年之后，才明白，现实中的程序员是这样的： 一提到程序员，人们都会想到这些词“苦逼”，“屌丝”，“收入可观”，“开始用健康换金钱，后来用金钱买健康”，“加班”，“不善言辞”…… 。作为程序员，天天在电脑前，脑海中一堆的bug等着你去解决，需求时不时地改一下，你除了惆怅和不爽之外，无能为力。每天苦于没有时间陪女朋友，甚至有的人没有时间去交

1：什么是负载均衡负载平衡（Load balancing）是一种计算机网络技术，用来在多个计算机（计算机集群）、网络连接、CPU、磁盘驱动器或其他资源中分配负载，以达到最佳化资源使用、最大化吞吐率、最小化响应时间、同时避免过载的目的。2：应用场景负载平衡主要应用于Web网站，大型的Internet Relay Chat网络，高流量的文件下载网站，NNTP（Network News Transfer

上次bert君讲述了自己选择offer的纠结，小伙伴们可以回复关键字“3022”即可查看文章《传统互联网or新兴互联网，向左or向右？》，今天来讲讲bert君后续的经历。上篇文章讲到传统互联网和新兴互联网，现在bert君觉得这是个伪命题。大多数的人认为：传统互联网的对立面是移动互联网。 其实互联网本身是没有区别的，网只有一个，不分互联网和移动互联网，从这个角度，这个问题关键在于终端。移动终端的出现

1：安装SVNyum -y install subversion2：检验svn是否安装成功[root@iZ25knm9r1gZ ~]# svnserve --versionsvnserve, version 1.6.11 (r934486)compiled Aug 17 2015, 08:37:433：创建版本库目录[root@iZ25knm9r1gZ online]# mkdir -p /mn

一：memached简介在许多高并发的应用中，把业务数据保持久化 ( 保存到数据库，磁盘文件或其它 ) 后，应用从持久化设备中读取数据并在浏览器中显示，随用户量，数据量增大，访问的集中，会出现持久化设备负担过重（典型的就是数据库），影响应用响应速度，应用延迟严重等重大问题。典型的应用就是 WEB 应用中的高并发网站。 这时候应用就需要一种缓存机制来提高并发读取速度的性能 ， memcached 能

“多线程”在大型软件程序中有着很广泛的应用，其优点如下： 第一，将原来在一个大流程中实现的功能放到了多个小流程中，程序更加的简洁和易于阅读。 第二，将不同的功能放到不同的线程中，提高了程序的执行效率。 第三，“多线程”使得程序的模块化更强，有利于追踪程序执行过程和排查问题。1：为什么要线程同步？线程同步是为了防止多个线程访问一个数据对象时，对数据造成破坏。 线程的同步是保证多线程安全访问资源

人的一生总是在做选择：刚出生，家长要给孩子选择奶粉，国产的or进口的，惠氏or诺优能？到两三岁，又要选择幼儿园，比较价钱，比较教学质量。之后继续选择初中，选择大学，选择专业。人的一生有很多这样的时刻，你做出的选择会影响你成为一个什么样的人，收获什么样的人生。然而即便我们知道这些选择至关重要，有时候我们还是会做出日后让我们后悔的选择。按我自己的理解，传统行业，主要关心业务的实现，不关心新技术，能满足自

1：MemcachedMemcached是一个高性能的分布式内存对象缓存系统，用于动态Web应用以减轻数据库负载. 它通过在内存中缓存数据和对象来减少读取数据库的次数，从而提升网站的访问速度.Memcached基于一个存储键/值对的hashmap。2：RedisRedis是一个key-value存储系统，和Memcached类似。但是它支持存储的value类型相对更多，包括string(字符串)、

1：什么是性能调优？在说什么是性能调优之前我们先来说一下，计算机的体系结构。如上图，简单来说包括三块：硬件、操作系统、应用程序。其实，性能调优就是调节这些内容。2：为什么进行性能调优？一是为了获得更好的系统性能（就是你现有的系统运行的还不错，但优化一下可以运行的更好）。二是通过性能调优来满足不断增加的业务需求。3：怎么进行性能调优？(1)硬件选择 一是为了获得更好的系统性能（就是你现有的系统运行的

开头先理解一下所谓的“均衡” 不能狭义地理解为分配给所有实际服务器一样多的工作量，因为多台服务器的承载能力各不相同，这可能体现在硬件配置、网络带宽的差异，也可能因为某台服务器身兼多职，我们所说的“均衡”，也就是希望所有服务器都不要过载，并且能够最大程序地发挥作用。一、http重定向当http代理（比如浏览器）向web服务器请求某个URL后，web服务器可以通过http响应头信息中的Location

五一到了，祝小伙伴们五一玩的开心，天气热了，注意防晒，多喝水，身体是革命的本钱啊！ bert君最近想发一些软文，技术文章发多了，就显得单调了。小伙伴们千万不要取消关注啊，干货还是会有的！最近一年公司的主要业务是面相全国的中小学教育，虽然我只是一个程序员，但是作为一个两岁孩子的老爸，还是想聊一聊中国的教育问题。bert君来自农村，小时候家长基本采取的是放养式的教育。父母每天都要去地里干农活，或者打工

2016注定是不平凡的一年，经济下滑，房地产高烧不退，科比退役了，一大批互联网创业公司纷纷倒闭。bert君，也赶上这股风暴，在如此的风头浪尖上，做了房奴，又碰巧在这个时候，公司宣布经营不下去了，我又面临再次选择工作。孩子又快要在北京上幼儿园了，真是”屋漏偏逢连夜雨”,友谊的小船说翻就翻.下面就简单讲讲bert君这一年的经历。 C公司成立于2014年10月份，从事移动互联网教育行业，聚焦于K12阶段

一：连接命令在windows下的cmd或者linux执行telnet 127.0.0.1 11211就可以连接上memcached。[root@iZ2513wqj05Z ~]# telnet 127.0.0.1 11211Trying 127.0.0.1...Connected to 127.0.0.1.Escape character is '^]'.执行quit退出连接。quitConn

一：服务化： 这里说到的“服务”，本质上来说，就是指“RPC”。单纯的RPC功能实现，其实很简单，无非就是client发起调用，中间某个组件（甚至就是client本身）拦截调用信息，序列化后将信息传输到server端，server端收到调用请求后反序列化，根据请求详细发起实际调用后返回响应传输回给client端。这样的RPC很常见，比如常见的存储过程调用就是一例。但是在一个复杂的业务环境，如何管理

一：下载mysql解压缩版，并配置环境变量到官网下载mysql-5.5.10-win32.zip，然后将mysql解压到任意路径，如：C:\mysql-5.5.10-win32 打开计算机->属性->高级系统设置->环境变量，新建一个环境变量，变量名为：MYSQL_HOME，变量值为你的mysql根目录，如：C:\mysql-5.5.10-win32 然后在系统变量Path中添加：;%MYSQL

一：前言前面一篇文章讲了在linux环境中按日期切割tomcat生成的Catalina.out日志。虽然日志切割了，但是生成的日志文件还是会占用磁盘空间。积累一段时间还是会造成磁盘空间不够用的情况。 之前的做法是手动的删除tomcat日志，但是当磁盘空间满了，再去清理，已经对系统的使用造成了影响。于是，可以考虑试用定时任务删除N天前的日志文件，于是本文的主角crontab就成了首选。二：cront