2015年09月_taxueguilai1992

原创 phoenix客户端API使用

1.准备条件phoenix与Hbase已经安装好 phoenix-4.3.0 hbase-0.982.客户端使用（服务器上使用客户端）在客户端创建如下文件test.java：import java.sql.Connection;import java.sql.DriverManager;import java.sql.ResultSet;import java.sql.SQLExcepti

2015-09-23 12:16:02 2966

原创 phoenix操作注意点

一.与hbase 的映射1.空表格映射在phoenix中创建表格，会自动映射到hbase中，我们可以通过hbase shell 来查看。举个例子，我们创建了一个表，create table hbase_col_test( pk varchar not null primary key, //primary key 映射到hbase 中的rowkey

2015-09-21 12:31:38 1556

原创 ganglia安装与配置

1.准备条件相关依赖包安装好2.安装过程监控节点安装1.yum install -y ganglia ganglia-gmetad ganglia-web ganglia-gmond 2.修改/etc/ganglia/gmetad.conf data_source “Hadoop” {主机IP}:8649 其中hadoop为集群名 3.修改/etc/ganglia/gmond.conf

2015-09-15 11:41:45 681

1.实际场景在实际工作或者生产环境中，我们常常需要配置服务器的运行环境，比如一个常见的场景：hadoop+hive+hbase ,估计一般人折腾好这三项要做好几天，常常会遇到各种问题，或者ERROR或者是exception，因此一个系统的方法思维是有必要的。2.常规思路一般这些运行环境的配置与安装在网上有各种帖子，或者是官方网站，但这些资料并非完全一致，我们不知道到底听谁的，一般只能找个坑先跳下去

2015-09-10 17:49:34 410

原创 hive1.1.0与hbase0.98 整合

这里就不讲详细的步骤，主要说明几个重要的配置：在/conf/hive-site.xml 文件中需要配置HIVE_AUX_JARS_PATH，这里面尝尝容易缺少包，我将我的配置放在这里：<property> <name>hive.aux.jars.path</name> <value>file:///opt/hive/lib/guava-14.0.1.jar,file:///opt

2015-09-10 15:04:00 832

原创程序打包成可执行的jar包

1.准备环境jdk已安装，win72.具体步骤1.编译class文件 javac sort.java 2.打包成jar包：jar -cvf sort.jar sort.class 3.解压jar包：unzip sort.jar -d tmp 4.修改MANIFEST.MF文件：确定Main-class的入口，注意每一个属性后面需要有空格，最后一行需要有个换行符 5.将MANIFEST.MF文

2015-09-08 17:24:46 591

原创 Hadoop 运行wordcount 实例

一.运行环境操作系统：ubuntu14.04 hadoop版本：hadoop-2.5.2二.操作步骤我在自己电脑上搭建的是hadoop伪分布式的配置，所以wordcount实例只是在一台机器上运行的。在机器上，我的hadoop 安装目录时/usr/local/hadoop,这里我没有配置环境变量，因此是直接在目录下执行的，首先是进入hadoop安装目录 cd /usr/local/hadoop

2015-09-05 10:33:36 1345

lanyizheng blog