阿龙的专栏

XinXiang Police

我的kafka JAVA调试代码

kafka 是很好的供所有分析库从生产库多次提取数据的中转库,特别是kafka 0.9后出现的kafka connect,个人认为能作为实时的ETL工具。 另外,kafka和storm都是流,但kafka不处理数据,storm可在kafka的基础上处理数据。storm在原理上和hadoop的map...

2016-06-23 22:04:28

阅读数 1370

评论数 0

我的SPARK调试java代码

仅供自己参考,其他人可能看不懂。 import org.apache.spark.SparkConf; import org.apache.spark.api.java.JavaRDD; import org.apache.spark.api.java.JavaSparkContext; imp...

2016-06-23 21:53:58

阅读数 607

评论数 0

spark、hive、impala、hbase、gbase在结构化数据方面查询原理对比(含parquet/orc)

spark、hive、impala、hbase、gbase在结构化数据方面查询原理对比(含parquet/orc)

2015-12-11 23:26:49

阅读数 8221

评论数 0

kettle变量及常用备注

我以前使用Talend作为ETL工具,但总感觉非常麻烦,特别是在变量方面,而且网上也没多少资料,我的文章反倒被看了不少;书也没有。后来接触kettle,感觉上手非常快,但和talend比起来,有一个缺点,就是容易死,而且死后不报警。下面是在使用kettle中的总结的一点经验。 1、命令行窗口执行k...

2015-09-28 23:10:29

阅读数 2920

评论数 0

Hadoop Spark 集群简便安装总结

Hadoop 安装简单说就是:ssh、配JAVA_HOME / HADOOP_HOME等profile参数、配 数据存放目录 / MR要用yarn 及 master是谁 。 本文还提供涉及到的文件下载。

2015-07-05 02:03:48

阅读数 8392

评论数 0

actionscript3写飘雪花程序,为培养孩子编程兴趣

本周,上4年级的小孩开始学方程式,用到了代数。为了方便孩子理解,并学以致用,打算教他一点编程。    程序的选择上不能太难,比如JAVA、C#应该不行,学习javascript应该行,但是会比较枯燥,于是决定让他玩玩FLASH。虽然随着HTML5 的兴起,FLASH正在没落,但FLASH却简单易懂...

2015-05-07 21:27:47

阅读数 1805

评论数 0

私网安装Ambari实现Hadoop、Hbase等自动化安装(离线 本地源)

这几天一直尝试通过安装Ambari来实现HBASE的分布式安装,但因为是私网,而安装过程都需要yum安装(yum安装和rpm包安装的区别就是一个网上安装一个离线安装),所以调试了好几天,最终配置了本地yum源特别是操作系统本地源,才得以安装成功,记下来。 我这是安装概述和注意事项

2015-03-23 13:42:59

阅读数 9503

评论数 1

SQLServer2008-2012资源及性能监控

http://blog.csdn.net/dba_huangzj/article/details/8614817

2014-05-27 18:17:14

阅读数 987

评论数 0

SQL SERVER 2012 的分页方法创新版

关于SQL SERVER的分页方法,早在2004年,我就写了分页算法,

2014-05-08 21:11:04

阅读数 1544

评论数 0

ORACLE和SQL SERVER 分区索引的区别

ORACLE和SQL SERVER都可以建立与表分区不一样的

2014-05-07 13:23:55

阅读数 1847

评论数 0

talend的常用控件使用教程

1、建立作业,然后在“元数据”下,配置数据库连接。 2、元数据。元数据是将常用的schema“结构”(即数据结构,或者是数据库的表结构)。在这里配置后,对常用的配置,可以免得以后在作业设计时再配置。 3、input是针对该软件的input,实际是数据库的抽取功能;output,实际是写入功能。 4...

2014-03-24 20:49:29

阅读数 15782

评论数 0

talend中的传值

1、如果你想写到context中去,就要先在“上下文”中定义变量,并拖到作业中;无论你如何从数据库提取哪些字段,都必须要有key和value字段(其中key外面要用中括号 [ ],否则key作为数据库关键字无法引用,如:select 'abc' value,'mykey' [key] ),然后还要...

2014-03-21 11:36:47

阅读数 2324

评论数 0

SQL SERVER的表锁

为提高数据库表效率,可以不使用表锁。 使索引的中2个含lock的选项为OFF。 创建分区表后,使用: ALTER TABLE Person.Address SET (LOCK_ESCALATION = AUTO) 这样可以使表设定在分区,而不是默认的表锁。

2014-02-24 20:12:21

阅读数 503

评论数 0

用半行代码实现在LINUX(SUSE/RH)下安装ORACLE 12C

最近新到单位的朋友总是抱怨在LINUX下安装ORACLE,实在是太麻烦了,而且这些步骤既不知是什么意思,也记不住;索性,我就分析了一下,经过实践,实现了只用半行代码(确切的说,只消4个字母)就可实现在LINUX下的ORACLE 安装了。 1、建立用户oracle(什么名字都行)。 2、将桌面环境...

2014-02-21 00:33:06

阅读数 3030

评论数 0

基于SSD固态硬盘的数据库性能优化

NOR和NAND NOR和NAND都是闪存技术的一种,NOR是Intel公司开发的,它有点类似于内存,允许通过地址直接访问任何一个内存单元,缺点是:密度低(容量小),写入和擦除的速度很慢。NAND是东芝公司开发的,它密度高(容量大),写入和擦除的速度都很快,但是必须通过特定的IO接口经过地址...

2014-01-23 17:03:05

阅读数 4873

评论数 0

装修心得体会(家装团购实战版)

经过3个月的前期准备,和2个月的装修实战,家里基本装修差不多了。虽然有较多的前期准备,但装修过程中还是难免有一些遗憾,现记录下来,以备后用,或给大家提个醒。         我原本是要找个装修公司的,因为我对装修一无所知;原本想找一家能28800元就能全包的,可遗憾的是,这家公司倒闭了(近来才看到...

2014-01-02 21:48:08

阅读数 1831

评论数 0

c#中反射的用法(即如何根据字符找到已定义的变量)

常常羡慕javascript中,用$('#ab'),即可找到某个变量或控件,然后赋值或取值。而c#这种静态语言就不好办了,但其有反射,可以达到目的。     反射要先:1、引用using System.Reflection; 2、定义一个类。举例如下:   public class ids ...

2013-07-20 08:06:52

阅读数 2948

评论数 0

sql中case的用法

Case具有两种格式。简单Case函数和Case搜索函数。 --简单Case函数 CASE sex          WHEN '1' THEN '男'          WHEN '2' THEN '女' ELSE '其他' END --Case搜索函数 CASE WHEN se...

2013-06-14 15:13:23

阅读数 507

评论数 0

.NET FrameWork 各版本程序的兼容测试

我用VS2012写了一个程序,结果无法部署到 WINDOWS XP上,于是,就测试了一下.NET程序的兼容情况: 1、.NET 4.5 无法在 .NET 4 上运行。即使将 XX.exe.config 中: ,4.5改为4.0,也仍然运行不了。 2、.NET 2.0程序不可以在只安装了.NE...

2013-06-14 09:20:29

阅读数 4291

评论数 0

装修文章心得体会

一、交房 1、开发商应主动向购房者出示建设工程质量检验合格单和商品房房地产权证(大产证),不出示的,购房者可以拒绝验收。 2、根据《商品住宅实行住宅质量保证书和住宅使用说明书制度的规定》等相关法规,商品房交付使用时,应当提供住宅质量保证书和住宅使用说明书。 3、开发商已取得国家认可的专业测绘...

2013-06-07 15:22:34

阅读数 931

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭