【第22期】观点:IT 行业加班,到底有没有价值?

SQOOP——Hive与MySQL数据互导

原创 2016年08月31日 16:32:24

从MySQL导入Hive

sqoop import --connect jdbc:mysql://192.168.11.208:3306/ecap_data?characterEncoding=utf-8 \
               --username root \
               --password root_ \
               --table tc_cfg_key_page_monitor \
               --hive-import \
               --hive-table tc_cfg_key_page_monitor \
               --fields-terminated-by '\001' \
               --m 1 \
               --hive-overwrite

从Hive导入MySQL

sqoop export --connect $C_CONNECTURL2 \
             --username $C_DBUSERNAME2 --password $C_DBPWD2 \
             --table TS_MKT_OC_OVERVIEW_DAY \
             --columns    stat_date,site_id,terminal_type_id,new_old_uv_flag,CAMPAIGN_ID,AD_POSTER_ID,view_num,view_uv_num,click_num,click_uv_num,data_time \
             --export-dir /user/hive/warehouse/hbecap.db/ts_mkt_oc_overview_day/part_year=${year}/part_month=${month}/part_day=${day} \
             --input-fields-terminated-by '\t' \
             --input-null-string '\\N' \
             --input-null-non-string '\\N'
版权声明:本文为博主原创文章,未经博主允许不得转载。 举报

相关文章推荐

sqoop同步mysql数据到hive中

sqoop hive-0.13 hadoop-2.2.0

Hadoop学习全程记录——使用sqoop将mysql中数据导入到hive中

接上一篇文章:[url=http://phz50.iteye.com/blog/941421]Hadoop学习全程记录——hive入门[/url] hive是Facebook的产品,最早研发它的目的是用它来对Facebook网站每天产生的海量日志进行分析。有时我们需要分析的数据可能存在数据库中...
  • phz50
  • phz50
  • 2011-04-09 17:22
  • 5491

程序员升职加薪指南!还缺一个“证”!

CSDN出品,立即查看!

sqoop导oracle.mysql数据到hdfs hive

1. 下载hadoop和sqoop 2. 把hadoop-core-1.2.1.jar放到sqoop的lib文件夹下 3. 把ojdbc6.jar放到sqoop的lib文件夹下 4. 把sqoop的s...

用sqoop进行mysql和hdfs系统间的数据互导

转自:http://abloz.com/2012/07/19/data-between-the-mysql-and-hdfs-system-of-mutual-conductance-using-sqoop.html   sqoop 是apache下用于RDBMS和HDFS互相导数...

利用sqoop将hive和mysql数据互导简单实验

1. Hadoop、Hive、MySQL安装(略) 2. 下载sqoop http://www.apache.org/dyn/closer.lua/sqoop/1.4.6 3. 解压 tar -z...
收藏助手
不良信息举报
您举报文章:深度学习:神经网络中的前向传播和反向传播算法推导
举报原因:
原因补充:

(最多只允许输入30个字)