- 博客(26)
- 资源 (2)
- 收藏
- 关注
RSS订阅转载 Hadoop、Pig、Hive、Storm、NOSQL 学习资源收集【Updating】
Hadoop、Pig、Hive、Storm、NOSQL 学习资源收集【Updating】http://my.oschina.net/leejun2005/blog/140462#OSC_h3_2
2013-10-09 10:32:25
758
原创 UDF永久生效变通方法
UDF永久生效现在是只能修改源代码.不过可以变通一下处理也可以实现.在HIVE_HOME的bin目录下新建一个.hiverc的文件,把写好的udf的注册语句写在这里就可以类似HIVE内置的用法一样用原理是，在运行./hive命令时，同时会加载HIVE_HOME/bin/.hiverc and $HOME/.hiverc作为初始化所需要的文件 在.hiverc文件中加入以下内
2013-08-05 14:21:27
728
转载 hive udf上传
1.编写UDF类 01import org.apache.hadoop.hive.ql.exec.UDF;02 03public class NewIP2Long extends UDF {04 publi
2013-07-31 16:32:13
1035
转载 Streaming简介
Streaming简介 Streaming框架允许任何程序语言实现的程序在Hadoop MapReduce中使用，方便已有程序向Hadoop平台移植。因此可以说对于hadoop的扩展性意义重大，今天简单说一下。Streaming的原理是用Java实现一个包装用户程序的MapReduce程序，该程序负责调用MapReduce Java接口获取key/value对输入，创建一个
2013-07-24 11:24:20
920
转载 hive参数
hive.exec.mode.local.auto 决定 Hive 是否应该自动地根据输入文件大小，在本地运行（在GateWay运行） true hive.exec.mode.local.auto.inputbytes.max 如果 hive.exec.mode.local.auto 为 true，当输入文件大小小于此阈值时可以自动在本地模式运行，默
2013-07-19 10:19:58
686
原创 Java中RSA非对称密钥加解密使用示例
一、简介：RSA加密算法是最常用的非对称加密算法，CFCA在证书服务中离不了它。RSA是第一个比较完善的公开密钥算法，它既能用于加密，也能用于数字签名。这个算法经受住了多年深入的密码分析，虽然密码分析者既不能证明也不能否定RSA的安全性，但这恰恰说明该算法有一定的可信性，目前它已经成为最流行的公开密钥算法。二、RSA的公钥、私钥的组成，以及加密、解密的公式可见于下表三、使用方式：①
2013-06-26 17:34:45
724
原创 oracle over partition by
select * from test数据:A B C 1 1 1 1 2 2 1 3 3 2 2 5 3 4 6 ---将B栏位值相同的对应的C 栏位值加总select a,b,c, SUM(C) OVER (PARTITION BY B) C_Sumfrom testA B C C_SUM 1 1 1 1 1 2 2 7 2 2 5 7
2013-06-26 17:34:43
370
原创 pl/sql developer快速输入select * from
pl/sql developer快速输入select * fromTools->Preferences->Editor->AutoReplace->选上Enabled，并Edit文件，加入以下内容： sf=select * from scf=select count(*) from s=select f=from w=where d=delete u=upda
2013-06-26 17:34:41
662
原创 concurrent包,多线程信号量Semaphore
信号量大家都不陌生引用百度百科上的解释 信号量：在多线程环境下使用的一种设施，是可以用来保证两个或多个关键代码段不被并发调用。在进入一个关键代码段之前，线程必须获取一个信号量；一旦该关键代码段完成了，那么该线程必须释放信号量。其它想进入该关键代码段的线程必须等待直到第一个线程释放信号量。 下面学习一下concurrent包下的 Semaphore 类 举个
2013-06-26 17:34:38
461
原创 [ERROR] Failed to execute goal org.apache.maven.plugins:maven-install-plugin:2.3
maven报错[ERROR] Failed to execute goal org.apache.maven.plugins:maven-install-plugin:2.3.1:install (default-install) on project Upload: Execution default-install of goal org.apache.maven.plugins:mave
2013-06-26 17:34:36
4479
原创 CountDownLatch经典模拟
import java.util.concurrent.CountDownLatch;import java.util.concurrent.ExecutorService;import java.util.concurrent.Executors;public class CountDownLatchTest { // 模拟了100米赛跑，10名选手已经准备就绪，只等裁判
2013-06-26 17:34:34
511
原创 3d标签云
/** * @author myemptynae */function JsTagCloud(config) { // 对对的 Div 标标 var cloud = document.getElementById(config.CloudId); this._cloud = cloud; // w, h 是 Div 宽的高 var w = p
2013-06-26 17:34:32
624
原创 jquery autocomplete 与struts2 json插件结合简单例子
一个 简单的 自动补全例子：js代码：$('#username').autocomplete({ source: function(request, response) { $.ajax({ url:'userList', type: 'POST', data: {"key":$('#use
2013-06-26 17:34:30
407
原创 linux后台运行命令
1.在下达的命令后面加上&，就可以使该命令在后台进行工作，这样做最大的好处就是不怕被ctrl+c这个中断指令所中断。 2. 那大家可能又要问了，在后台执行的程序怎么使它恢复到前台来运行呢？很简单，只用执行fg这个命令，就可以了。 3.可能有些同学又要问了，我现在已经在前台运行的命令，我能把它放到后台去运行么？当然可以了，只要执行ctrl+z就可以做到了。是不是很赞啊! 4.说到这
2013-06-26 17:34:28
533
原创 myibatis判断为空更新 小试牛刀
myibatis判断为空更新 <![CDATA[ update User ]]> user_age=#{userAge}, userName=#{userName}, <![CDATA[ where user_id= #{userId}
2013-06-26 17:34:26
913
原创 Java中RSA非对称密钥加解密使用示例
一、简介：RSA加密算法是最常用的非对称加密算法，CFCA在证书服务中离不了它。RSA是第一个比较完善的公开密钥算法，它既能用于加密，也能用于数字签名。这个算法经受住了多年深入的密码分析，虽然密码分析者既不能证明也不能否定RSA的安全性，但这恰恰说明该算法有一定的可信性，目前它已经成为最流行的公开密钥算法。二、RSA的公钥、私钥的组成，以及加密、解密的公式可见于下表三、使用方式：...
2013-04-16 10:45:08
72
oracle over partition by
select * from test数据:A B C 1 1 1 1 2 2 1 3 3 2 2 5 3 4 6 ---将B栏位值相同的对应的C 栏位值加总select a,b,c, SUM(C) OVER (PARTITION BY B) C_Sumfrom testA B C C_SUM 1 1 1 1 1 2 2 7 2 2 5 7...
2013-03-13 14:45:07
95
原创 pl/sql developer快速输入select * from
pl/sql developer快速输入select * fromTools->Preferences->Editor->AutoReplace->选上Enabled，并Edit文件，加入以下内容： sf=select * from scf=select count(*) from s=select f=from w=where d=de...
2013-01-10 18:26:14
110
原创 concurrent包,多线程信号量Semaphore
信号量大家都不陌生引用百度百科上的解释 信号量：在多线程环境下使用的一种设施，是可以用来保证两个或多个关键代码段不被并发调用。在进入一个关键代码段之前，线程必须获取一个信号量；一旦该关键代码段完成了，那么该线程必须释放信号量。其它想进入该关键代码段的线程必须等待直到第一个线程释放信号量。 下面学习一下concurrent包下的 Semaphore 类 ...
2012-11-22 16:13:47
100
原创 [ERROR] Failed to execute goal org.apache.maven.plugins:maven-install-plugin:2.3
maven报错[ERROR] Failed to execute goal org.apache.maven.plugins:maven-install-plugin:2.3.1:install (default-install) on project Upload: Execution default-install of goal org.apache.maven.plugins:mave...
2012-11-21 17:14:10
301
原创 CountDownLatch经典模拟
import java.util.concurrent.CountDownLatch;import java.util.concurrent.ExecutorService;import java.util.concurrent.Executors;public class CountDownLatchTest { // 模拟了100米赛跑，10名选手已经准备就绪，只...
2012-11-20 13:27:16
83
原创 3d标签云
/** * @author myemptynae */function JsTagCloud(config) { // 对对的 Div 标标 var cloud = document.getElementById(config.CloudId); this._cloud = cloud; // w, h 是 Div 宽的高 var w = p...
2012-11-19 14:49:25
96
jquery autocomplete 与struts2 json插件结合简单例子
一个 简单的 自动补全例子：js代码：$('#username').autocomplete({ source: function(request, response) { $.ajax({ url:'userList', type: 'POST', data: {"key":$('#...
2012-10-31 18:06:56
80
linux后台运行命令
1.在下达的命令后面加上&，就可以使该命令在后台进行工作，这样做最大的好处就是不怕被ctrl+c这个中断指令所中断。 2. 那大家可能又要问了，在后台执行的程序怎么使它恢复到前台来运行呢？很简单，只用执行fg这个命令，就可以了。 3.可能有些同学又要问了，我现在已经在前台运行的命令，我能把它放到后台去运行么？当然可以了，只要执行ctrl+z就可以做到了。是不是很赞啊! ...
2012-10-30 21:50:37
129
原创 myibatis判断为空更新 小试牛刀
myibatis判断为空更新 <update id="UpdateOne" parameterType="User"> <![CDATA[ update User ]]> <set> <if test="user_age!=null"> user_age=#{us
2012-10-29 15:46:06
360
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人