2017年12月_A__loser

12月 11月 10月 09月 06月 05月 04月 03月

原创 Flume

FlumeFlume介绍概述Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统Flume可以采集文件，socket数据包等各种形式源数据，又可以将采集到的数据输出到HDFS、hbase、hive、kafka等众多的外部存储系统中。一般的采集需求，通过对flume的简单配置即可实现Flume针对特殊的场景也具有良好的自定义扩展能力，因此，flume可以适用于大部分的日常数据采集场景

2017-12-20 21:42:09 364

原创 SpringMVC中一个请求的经历过程

SpringMVC中一个请求的经历过程浏览器发起请求，请求中包含请求的UEL和一些其他信息。请求首先到达DispathckerServlet.DispatcherServlet查询一个或者多个处理器映射来确定下一站在哪里。处理器映射会根据请求所携带的URL信息来进行决策。确定了合适的控制器之后，DispatcherServlet将请求发送给选中的控制器。控制器将要返回给用户的信息打包，并且

2017-12-20 19:52:49 614

原创 mapreduce实践篇

mapreduce实践篇MAPREDUCE实例编写及编码规范编程规范用户编写的程序分成三个部分：Mapper,Reducer,Driver(提交运行mr程序的客户端)Mapper的输入数据是KV对的形式（KV类型可以自定义）Mapper的输出数据是KV对的形式（KV的类型可自定义）Mapper中的业务逻辑写在map()方法中map()方法（maptask进程）对每一个一个简单的Mapre

2017-12-20 18:12:51 688

原创 SQL Server安全管理

SQL Server安全管理数据库的安全性是指保护数据以防止因不合法的使用而造成的数据的泄密和破坏SQL Server的安全性机制SQL Server的安全体系结构可以划分为以下4个层次：客户操作系统的安全性在使用客户计算机通过网络实现对SQL Server服务器的访问时，用户首先要获得计算机操作系统的使用权限。SQL server的服务器安全性 SQL Server服务器安全性建立在控

2017-12-19 15:29:42 4682

原创 HIVE详解

HIVE详解HIVE基本概念HIVE简介什么是hive？hive是基于hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能。为什么使用Hive直接使用hadoop所面临的问题：人员学习成本太高项目周期要求太短 MapReduce实现复杂查询逻辑开发难度太大为什么使用HIve 操作接口采用类SQL语法，提供快速开发的能力避

2017-12-19 13:28:01 1658

原创 Zookeeper入门笔记

Zookeeper入门笔记Zookeeper概念简介zookeeper是一个分布式协调服务；就是为用户的分布式应用程序提供协调服务。A.zookeeper是为别的分布式程序服务的B.zookeeper本身就是一个分布式程序（只要有半数以上节点存活，zk就能正常服务）C.Zookeeper所提供的服务涵盖：主从协调，服务器节点动态上下线、统一配置管理、分布式共享锁、统一名称服务。。D.虽说可以提供各种

2017-12-16 22:27:01 375

原创关于使用虚拟机克隆后eth0见的问题

直接修改 /etc/sysconfig/network-script/ifcfg-eth0 删掉UUID HWADDR 配置静态地址然后： rm -rf 　/etc/udev/rules.d/70-persistent-net.rules 然后 reboot

2017-12-15 14:28:53 276

原创 YUM本地源制作

YUM本地源制作1.准备一台Linux服务器，用最简单的版本CentOS-6.7-x86_64-minimal.iso2.配置好这台服务器的IP地址3.上传CentOS-6.7-x86_64-bin-DVD1.iso到服务器4.将CentOS-6.7-x86_64-bin-DVD1.iso镜像挂载到某个目录mkdir /var/isomount -o loop CentOS-6.7-x86_64-b

2017-12-15 14:27:13 297

原创 hadoop-mapreduce原理篇

MAPREDUCE原理篇mapreduce是一个分布式运算程序的编程框架，是用户开发“基于hadoop的数据分析应用”的核心框架。Mapreduce核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序，并发运行在一个hadoop集群上。分为三块：MRAppMaster(mapreduce application master)/MapTask/Reduce TaskMAPR

2017-12-08 21:26:20 338

原创 hadoop--hdfs入门讲解

HDFS基本概念篇HDFS前言设计思想：分而治之：将大文件、大批量文件，分布式存放在大量服务器上，以便于采取分而治之的方式对海量数据进行运算分析：在大数据系统中的运用：为各类分布式运算框架提供数据存储服务。重点概念：文件切块，副本存放，元数据HDFS概念和特性重要特性：采用分块存储HDFS文件系统会给客户端提供一个统一的抽象目录树，客户端通过目录来访问文件。目录结构及文件分块信息（元

2017-12-05 21:00:10 482

Junit5用户文档

2020-07-09

ASM4 使用指南.pdf

ASM 中文使用指南 ASM

2020-07-06

j2EE核心模式

《J2EE核心模式》(原书第2版)：“Java领域的版图上撒满了各种类库、工具和技术规范。而缺乏的则是把这些内容融合在一起、解决真实情况下的问题的专业能力。本书中的这些模式，成为了J2EE软件建设过程中的智能水泥。, ——John Vlissides，《设计模式》的作者之一, 　　“《J2EE核心模式》的作者们提取了一组真正实用的模式。他们介绍了应该如何应用这些模式、如何重构你的系统以便从模式中获益。这就像有一个专家组坐在你旁边一样。, ——Grady Booch，Rational软件公司首席科学家, 　　“作者们介绍了大量对于应用架构极有帮助的模式，这是一项了不起的工作。单单是书中的‘重构’部分就值整本书的价钱！”, ——Craig McClanahan，Struts首席架构师，JavaServer Faces技术规范组负责人, 　　开发者们常常把“学会一种技术”和“学会使用这种技术进行设计”混为一谈。在本书中，Sun Java中心的资深架构师们分享了他们多年积累的使用J2EE技术进行设计的经验。, 　　本书关注的主要内容，是使用J2EE的核心技术蜒包括JSPTM、Servlet、EJBTM、JMSTMAPI等蜒实现企业应用过程中的模式、最佳实践、设计策略以及经过验证的解决方案。其中的J2EE模式目录包括21个模式以及大量策略，有助于记录、促成运用以上技术的最佳实践。

2017-09-26

Struts2权威指南

Struts2是一个基于MVC设计模式的Web应用框架，它本质上相当于一个servlet，在MVC设计模式中，Struts2作为控制器(Controller)来建立模型与视图的数据交互。Struts 2是Struts的下一代产品，是在 struts 1和WebWork的技术基础上进行了合并的全新的Struts 2框架。其全新的Struts 2的体系结构与Struts 1的体系结构差别巨大。Struts 2以WebWork为核心，采用拦截器的机制来处理用户的请求，这样的设计也使得业务逻辑控制器能够与ServletAPI完全脱离开，所以Struts 2可以理解为WebWork的更新产品。虽然从Struts 1到Struts 2有着太大的变化，但是相对于WebWork，Struts 2的变化很小。