![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop相关
文章平均质量分 81
luckymelina
摸爬大数据的小硕
展开
-
apache-hadoop-1.2.1、hbase、hive、mahout、nutch、solr安装教程
目录1 软件环境:...12 角色配置:...13 Hadoop完全分布式集群配置...13.1 下载安装JDK..13.2 SSH安装及设置...23.3安装hadoop.43.4安装eclipse.63.5安装hadoop的eclipse插件...64安装maven.85安装hbase.96 安装hive.原创 2013-11-17 23:08:03 · 13420 阅读 · 0 评论 -
windows下eclipse远程连接linux上的hadoop集群
1、在win7下装一个eclipse(用juno-32位版吧)2、把插件hadoop-eclipse-plugin-1.2.1.jar放到eclipse的plugins下。3、把hadoop-1.2.1解压到win7系统的任意一个位置。4、打开eclipse,配置mapreduce的路径,这个路径就是hadoop-1.2.1解压后放的路径。5、然后打开视图原创 2014-02-25 16:53:24 · 3755 阅读 · 3 评论 -
hadoop-cdh4.1.5-eclipse插件编译(其它CDH版本步骤类似)
1、首先安装maven可以下载离线包apache-maven-3.1.1-bin.tar.gz,解压添加环境变量:测试maven是否安装成功:$ mvn -version 2、安装ant、automake、autoconf、libtool sudoapt-get install antsudo apt-get install automake autoconf libt原创 2014-02-25 17:11:32 · 2590 阅读 · 0 评论 -
HBase导入大数据三大方式之(二)——importtsv +completebulkload 方式
做大数据时,经常需要用到将大量格式化的文本数据导入到hbase中。此处就用到的三种方式:hive类SQL语句方式、importtsv +completebulkload 方式、mapreduce+completebulkload 方式,做下简单示例。上篇介绍了hive类SQL语句方式,现在介绍importtsv +completebulkload 方式:1、 首先在hive shel原创 2014-04-03 18:13:51 · 5980 阅读 · 2 评论 -
HBase导入大数据三大方式之(三)——mapreduce+completebulkload 方式
一、设计HBASE的表名、列名和字段名:1、 创建支持hive查询的hbase表:CREATE TABLE bill(rowkey string, 00_selfnumber string, 01_day string, 02_hour string, 03_duration string, 04_calltype string, 05_targetnumber string,原创 2014-04-03 18:42:46 · 5005 阅读 · 5 评论 -
HBase导入大数据三大方式之(一)——hive类SQL语句方式
做大数据时,经常需要用到将大量格式化的文本数据导入到hbase中。此处就用到的三种方式:hive类SQL语句方式、importtsv +completebulkload 方式、mapreduce+completebulkload 方式,做下简单示例。其中当属hive类SQL语句方式最简单,首先介绍之:实例中,我以虚拟话单作为需要导入的数据,步骤如下:1、首先在hive创建表,创建hba原创 2014-04-03 17:37:56 · 6494 阅读 · 8 评论