2015年02月_liyonghui123

12月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

原创 maven 把依赖的jar包拷到lib目录下

maven打包jar时候，依赖的第三方jar往往不好找到，如果都打包一个文件下，岂不是很好找到了。 <build> <plugins> <plugin> <groupId>org.apache.maven.plugins</groupId&gt...

2015-02-27 18:26:00 1165

原创 js/jquery 去掉空格.回车.换行

Jquery:$("#accuracy").val($("#accuracy").val().replace(/\ +/g,""));//去掉空格.replace(/\ +/g,"") //去掉空格方法$("#content").val($("#content").val().replace(/[ ]/g,"")); //去掉空格.repla

2015-02-27 17:27:51 147

原创 tomcat配置文件server.xml详解

注意：Tomcat配置文件中(即server.xml文件)不能出现中文，否则服务是无法启动的。  <Server port="8005" shutdown="SHUTDOWN" debug="0"> &l...

2015-02-25 15:10:05 165

原创 tomcat配置多个web网站的配置

废话不多说，直接说重点：假如只有一台服务器，需要配置多个web网站，该怎么样配置tomcat呢，其实很简单，只需要将tomcat 下面的 server.xml 中增加两个甚至是多个<Host>……</Host> 标签即可，标签的内容如下例子，其中需要注意的是每个web 项目的目录不要在同一个目录下，host标签中的 name 不能想能相...

2015-02-25 14:19:29 138

原创 Hive metastore三种配置方式

Hive的meta数据支持以下三种存储方式，其中两种属于本地存储，一种为远端存储。远端存储比较适合生产环境。Hive官方wiki详细介绍了这三种方式，链接为：Hive Metastore。一、本地derby 这种方式是最简单的存储方式，只需要在hive-site.xml做如下配置便可 <?xml version="1.0"?> ...

2015-02-24 12:03:10 179

原创 HBase基本数据操作详解

引言之前详细写了一篇HBase过滤器的文章，今天把基础的表和数据相关操作补上。本文档参考最新（截止2014年7月16日）的官方 Ref Guide、 Developer API编写。所有代码均基于“hbase 0.96.2-hadoop2 ”版本编写，均实测通过。概述对于建表，和RDBMS类似，HBase也有names...

2015-02-23 14:22:04 367

原创 Sqoop 1.99.3 安装

1.安装准备工作：已经装好的hadoop环境是hadoop 2.2.0下载的sqoop安装包（注意是hadoop200）http://www.us.apache.org/dist/sqoop/1.99.3/sqoop-1.99.3-bin-hadoop200.tar.gz2.解压文件到工作目录:hadoop@hadoopMaster:$ sudo tar -xvf...

2015-02-13 14:00:11 87

原创用新的Java API（>=0.96.0）操作HBase数据库

package com.my.hbase;import java.io.IOException;import java.util.*;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.CellUtil;import org.apache.hadoop.hbase....

2015-02-09 16:03:18 119

原创 HBase预分区设计

HBase中，表会被划分为1...n个Region，被托管在RegionServer中。Region二个重要的属性:StartKey与 EndKey表示这个Region维护的rowKey范围，当我们要读/写数据时，如果rowKey落在某个start-end key范围内，那么就会定位到目标region并且读/写到相关的数据。简单地说，有那么一点点类似人群划分，1-15岁...

2015-02-09 11:15:37 631

原创 MySQL字符串连接函数 ,分组连接函数

MySQL中 concat 函数使用方法： CONCAT(str1,str2,…) 返回结果为连接参数产生的字符串。如有任何一个参数为NULL ，则返回值为 NULL。注意：如果所有参数均为非二进制字符串，则结果为非二进制字符串。如果自变量中含有任一二进制字符串，则结果为一个二进制字符串。一个数字参数被转化为与之相等的二进制字符串格式；若要避免这种情况，可使用显式类型 ...

2015-02-06 16:03:49 296

原创 linux svn客户端常用命令

1、将文件checkout到本地目录svn checkout path（path是服务器上的目录）例如：svn checkout svn://192.168.1.1/pro/domain简写：svn co2、往版本库中添加新的文件svn add file例如：svn add test.php(添加test.php)svn add *.php(添加当前目录下所有的php文件)3、将改动的文件...

2015-02-06 16:00:46 105

原创用Java代码通过JDBC连接Hiveserver2

我们可以通过CLI、Client、Web UI等Hive提供的用户接口来和Hive通信，但这三种方式最常用的是CLI；Client 是Hive的客户端，用户连接至 Hive Server。在启动 Client 模式的时候，需要指出Hive Server所在节点，并且在该节点启动 Hive Server。 WUI 是通过浏览器访问 Hive。今天我们来谈谈怎么通过Hive...

2015-02-06 15:57:25 675

原创 Hive建分区表语句

** 用户属性表（日） ************************************************************CREATE TABLE ZB_DWD.DWD_D_PRD_AL_USER_ATTR_PROV(MONTH_ID STRING,PROV_ID STRING,USER_ID STRING,ATTRIBUTE_TYPE...

2015-02-06 15:47:33 338

原创 HbaseUtils，HBase Java Api

package com.xx.xx.service.spark;import java.io.IOException;import java.util.ArrayList;import java.util.Arrays;import java.util.Collection;import java.util.HashMap;import java.u...

2015-02-06 14:14:44 180

原创本地文件加载到hive表

本地文件加载到hive表1.在hxl数据库下创建表hive> create table tb_emp_info > (id int, > name string, > age int, > tel string) > ROW FORMAT DELIMITED > FIELDS TE...

2015-02-03 09:42:50 1078

原创 Linux下git安装配置

Git是分布式的版本控制系统，实际上是不需要固定的服务器的,Git与svn的最大区别是，它的使用流程不需要联机，可以先将对代码的修改，评论，保存在本机。等上网之后，再实时推送过去。同时它创建分支与合并分支更容易，推送速度也更快。Gitosis则是方便通过Git与ssh架设中央服务器的软件。一、Linux下git安装配置 1、yum安装 ...

2015-02-03 09:31:24 323