- 博客(6)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 Hadoop入门之Sqoop的安装和数据导入导出
sqoop安装1、下载并解压最新版下载地址http://ftp.wayne.edu/apache/sqoop/1.4.6/2、修改配置文件$ cd $SQOOP_HOME/conf$ mv sqoop-env-template.sh sqoop-env.sh打开sqoop-env.sh并编辑下面几行：export HADOOP_COM
2017-09-22 18:16:57
612
原创 Hadoop入门之azkaban的安装和使用
1.azkaban的安装http://blog.csdn.net/sqh201030412/article/details/515483552.azkaban的几种使用2.1 使用小Demo #commandtype=commandcommand=sh /home/hadoop/shell/say_hello.shshel
2017-09-22 16:11:34
1621
原创 Hadoop入门之Flume的几种配置和使用采集日志Demo
1.获取flume压缩包解压 wget http://archive.apache.org/dist/flume/1.6.0/apache-flume-1.6.0-bin.tar.gz2.添加JAVA_HOME到flume配置文件flume_env.sh中 # Enviroment variables can be set here. export JAVA_HOME
2017-09-21 16:08:47
734
原创 Hadoop入门之Hive自定义函数和Transform
1.Java继承UDF类重写evaluate方法后打成Jar包上传,添加到Hive函数中2.使用Transform在SQL中调用自己写的脚本这里主要说下第二种:1. 需要用到的原始表如下,分隔符号为\thive> select * from my_one_table;OK1 songqinghu2 zhangwei
2017-09-20 18:50:38
1387
原创 Hadoop入门之Hive的DDL和DML
1.Hive的表创建(分区,分桶)创建表SQLCREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name [(col_name data_type [COMMENT col_comment], ...)] [COMMENT table_comment] [PARTITIONED BY (col_name dat
2017-09-12 17:56:45
462
原创 Hadoop入门之Hive的安装和连接
1.下载hive wget http://archive.apache.org/dist/hive/hive-1.2.1/apache-hive-1.2.1-bin.tar.gz2.解压hive tar -zxvf apache-hive-1.2.1-bin.tar.gz mv apache-hive-1.2.1-bin.tar.gz app/hi
2017-09-07 18:14:33
1234
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人