南方嘉木.-CSDN博客

原创 hplsql例子

存储过程：vim test_prc2.sqlcreate procedure sp_fi(in iv_dt string,out rlt string)i_dt string;begini_dt = iv_dt;insert into table test.test_1 select customerid||current_date cust_id,i_dt from xx.info ...

2018-12-19 15:12:01 1093 3

原创 hplsql安装

hive ——HPLSQL安装一、简要介绍目前版本的Hive中没有提供类似存储过程的功能，使用Hive做数据开发时候，一般是将一段一段的HQL语句封装在Shell或者其他脚本中，然后以命令行的方式调用，完成一个业务或者一张报表的统计分析。好消息是，现在已经有了Hive存储过程的解决方案（HPL/SQL –Procedural SQL on Hadoop），并且在未来的Hiv...

2018-12-19 14:55:52 771

原创 kettle集群部署

Kettle集群部署1) Kettle集群简介集群技术可以用来水平扩展转换，使得他们能够同时运行在多台服务器上。它将转换的工作量均分到不同的服务器上。这一部分，我们将介绍怎样配置和执行一个转换，让其运行在多台机器上。一个集群schema由一台主服务器，和一些子服务器组成，主服务器作为一个集群的控制器。简单的说，我们提到的Carte控制服务器就是主服务器，其他的Carte服务器...

2018-11-29 17:22:08 1259

原创 Kettle连接hadoop

Kettle连接hadoopkettle连接hive步骤修改kettle配置文件修改plugin.properties 配置文件路径： data-integration\plugins\pentaho-big-data-plugin\plugin.properties，查看data-integration\plugins\pentaho-big-data-plugin\hadoo...

2018-11-14 10:31:44 1322

原创 mysql互为主从复制MM+keepalived高可用

mysql双主MM+keepalived高可用方案一.安装单机mysql服务器1.资源分配服务器名 IP VIP MYSQL版本 Master 10.15.107.177 10.15.107.188 ...

2018-11-13 10:42:22 607

原创 Azkaban安装步骤

Azkaban安装步骤1.下载Azkaban的源码wget https://github.com/azkaban/azkaban/archive/3.38.0.tar.gztar -zxvf azkaban-3.38.0.tar.gz -C /opt/source/cd azkaban-3.38.0/$>wget https://services.gradle.org/...

2018-11-13 10:40:38 3708 1