2015年08月_DataFlow范式

10月 09月 08月 07月 06月 05月 03月 02月

原创 HBase Default Configuration

The documentation below is generated using the default hbase configuration file, hbase-default.xml, as source. hbase.tmp.dir Description Temporary directory on the local filesystem. C

2015-08-19 21:24:23 1887

转载 Hive日期格式转换用法

1.日期函数UNIX时间戳转日期函数: from_unixtime语法:from_unixtime(bigint unixtime[, stringformat]) 返回值: string 说明: 转化UNIX时间戳（从1970-01-0100:00:00 UTC到指定时间的秒数）到当前时区的时间格式举例： hive> select from_unixtime(1323308943,'

2015-08-17 21:57:39 5475

原创 HBase介绍

HBase是一个分布式，面向对象的开源数据库，该技术来源于Google论文“Bigtable：一个结构化数据的分布式存储系统”。就像Bigtable利用了Google文件系统（File System）所提供的分布式数据存储一样，HBase在hadoop之上提供了类似于Bigtable的能力。 HBase是apache的Hadoop项目的子项目。 HBase不同于一般的关系型数据库，它是一个

2015-08-16 22:17:33 3356

原创 Exception in thread "main" java.lang.NoClassDefFoundError: Demo (wrong name: com/zhangyun/Demo)解决办法

介绍一个Java初学者可能会遇到的问题首先，我在MyEclipse中创建一个类，如下：文件名：Demo.java package com.zhangyun; public class Demo { /** * @param args */ public static void main(String[] args) { // TODO Auto-gen

2015-08-12 22:31:27 2598

转载 8个值得关注的SQL-on-Hadoop框架

数据的操作语言是SQL，因此很多工具的开发目标自然就是能够在Hadoop上使用SQL。这些工具有些只是在MapReduce之上做了简单的包装，有些则是在HDFS之上实现了完整的数据仓库，而有些则介于这两者之间。这样的工具有很多，来自于Shoutlet的软件开发工程师Matthew Rathbone最近发表了一篇文章，他列举了一些常用的工具并对各个工具的应用场景和未来进行了分析。 Apache

2015-08-09 15:20:16 1131