一问一答-CSDN博客

原创 Gradle自动化构建到Travis-CI持续集成的理解

文主要是在本地构建后上传github远程仓库，然后通过Travis-CI服务器持续集成过程中自动化构建和travis-Ci两部分的理解，整个过程如下图Gradle自动化构建：对于初学者其实至少有两个问题需要解决，1、gradle构建在干什么；2、为什么要这么做；至于为什么要用Gradle工具，在网络上的解释就很多了。 Gradle构建在干什么

2016-07-13 16:35:05 1797

原创 RDD工作机制实例详解

RDD工作机制RDD指的是一个只读的，可分区的分布式数据集，这个数据集的全部或部分可以缓存在内存中，在多次计算间重用，是Spark进行大数据处理计算的核心，在设计算法的时候，就是在设计RDD的操作，那么下面通过WordCount实例来详细介绍RDD的工作机制。关于RDD的特性和理论请参考“Spark 入门文档”。1、在介绍RDD工作原理之前再回顾一下WordCount的例子：第一

2016-06-16 10:53:28 1620

原创 spark入门实战windows本地测试程序

在做Spark开发时，一般会在windows下进行Spark本地模式程序调试，在本地调试好了再打包运行在Spark集群上。因此需要在windows上进行Spark开发配置。本文将给出三种开发工具的配置：1、使用eclipse java api开发；2、使用scala IDE开发；3、使用IntelliJ IDEA 开发。1、windows下环境在安装开发软件之前，首先需要安装JAVA 和S

2016-06-16 10:42:57 9853

原创 eclipse下使用java api 进行hbase的常用的操作所需的jar包，以及如何查看java build path下的jar是否使用

对于学习hbase的初学者来说，使用java开发的时候很多朋友直接将hbase/lib下面的所有jar包全部都导入java build path-->libraries中，但实际上常用的操作，比如建表，删表，使用各种滤波器进行各种查询等操作用的jar不多，大部分导入的jar包没有用。本文主要给出在hbase单机环境(使用的是本地文件系统，非hdfs文件系统)下对数据库进行一般操作时

2016-05-11 09:29:16 11479 1

原创局域网内任何一台pc上windows下eclipse远程连接hbase数据库

通过很长一段时间的反复失败，终于在windows下实现远程连接hbase数据库，在不断的尝试过程中深感一个详细的文档的重要性，于是就把我配置的详细过程记录下来。文中如果有些地方用词不当，或者理解错误，欢迎您们评论。一、运行平台hbase服务器端：Ubuntu 14.04 64位；HBASE1.1.3；JAVA 1.8；hbase客服端：windows32/64位；JAVA1.8；ecl

2016-05-10 11:32:53 4763 2

转载 hadoop伪分布环境配置以及hbase 配置

原文章作者：简书作者heamon7 文章地址：http://www.jianshu.com/users/1e2553eec992/latest_articles本文是第一篇，记录了如何在 Ubuntu14.04搭建Hadoop 2.6 伪分布环境，以及运行自带的wordcount实例的详细步骤。本文假设读者对Hadoop并无太多了解，对Ubuntu的常见操作有一定了解，会对部分操

2016-04-08 11:00:33 701

转载 HBase（0.96以上版本）过滤器Filter详解及实例代码

原文章地址：http://blog.csdn.net/u010967382/article/details/37653177 目录：引言 -- 参数基础1. 结构(Structural)过滤器--FilterList2.列值过滤器--SingleColumnValueFilter 2.1.第一种构造函数情况 -- 比较的关键字是字符数组

2016-04-08 10:57:40 475

转载 HBase基本数据操作详解

原文章地址：http://blog.csdn.net/u010967382/article/details/37878701 概述对于建表，和RDBMS类似，HBase也有namespace的概念，可以指定表空间创建表，也可以直接创建表，进入default表空间。对于数据操作，HBase支持四类主要的数据操作，分别是：Put：增加一行，修改一行；Delete：删除一行，删除

2016-04-08 10:54:41 558

原创 ubuntu下Hbase 单机模式配置

ubuntu系统下hbase分布式数据库单机模式配置详情

2016-04-08 09:51:44 2139

hetianguang的博客