不同集群 hive 表结构 重新创建

原创 2018年04月17日 09:45:32
导出表结构
#/bin/bash
#hive -e"
#show databases;
#">databases.txt
#sed -i '1d' databases.txt

for database in `cat databases.txt`
do
echo database-------------- ${database}
# hive -e "use ${database};"
# hive -e"
#  use ${database};
#  show tables;
# ">tables.txt
#  sed -i '1d' tables.txt
  for table in `cat tables.txt`
   do
    echo table--${table}
    mkdir -p hive_table_0413/${database}
    hive -e"
       use ${database};
       show create table ${table};">hive_table_0413/${database}/${table}.txt
   done
done

sed -i "s/hdfs:\/\/getui-bi-calc//g" *.txt

sed -i "/2018-04-17/d" *.txt

sed -i  '$r 1' *.txt


使用XPathExpression类对XML进行排序

使用XPathExpression类对XML进行排序net_lover 如果你曾经使用过XSLT,当你需要对XML文档中的字符串或数字进行排序时,你可能会习惯于使用xsl:sort元素,在进行xsl:...
  • net_lover
  • net_lover
  • 2002-07-29 09:04:00
  • 2338

HIVE表创建与表结构修改入门

hive是一个基于hadoop的数据仓库的工具,
  • S530723542
  • S530723542
  • 2014-07-12 16:33:28
  • 3120

不同hadoop集群之间迁移hive数据

不同hadoop集群之间迁移hive数据
  • ggz631047367
  • ggz631047367
  • 2016-02-27 10:03:24
  • 4240

hive表信息查询:查看表结构、表操作等

转自: 问题导读: 1.如何查看hive表结构? 2.如何查看表结构信息? 3.如何查看分区信息? 4.哪个命令可以模糊搜索表...
  • lskyne
  • lskyne
  • 2014-08-07 23:45:13
  • 95886

hive复制表 存储格式转换

在之前的博客中已经介绍过hive的四种存储格式:http://blog.csdn.net/zyzzxycj/article/details/79267635 本文以ORCFile存储格式为例...
  • zyzzxycj
  • zyzzxycj
  • 2018-02-06 14:34:34
  • 79

根据已有的表创建表结构相同的新表

create table newtable as select * from oldtab where 1
  • kejiaming
  • kejiaming
  • 2014-10-13 11:02:07
  • 4069

hadoop跨集群之间迁移hive数据

Hive跨集群迁移数据工作是会出现的事情, 其中涉及到数据迁移, metastore迁移, hive版本升级等。 1. 迁移hdfs数据至新集群 hadoop distcp -skipcrcchec...
  • levy_cui
  • levy_cui
  • 2017-04-13 11:51:04
  • 2065

通过thrift生成hive的php client api

1、在debian下安装thrift   2、接下来要安装fb303,进入到thrift的源码目录,cd contrib/fb303; ./configure; make && make ...
  • hzcyclone
  • hzcyclone
  • 2012-07-02 13:49:33
  • 951

hive 跨集群迁移

hive跨集群迁移数据工作中相对比较常见的事情, 其中涉及到数据迁移, metastore迁移, hive版本升级等.1. 迁移hdfs数据至新集群hadoop distcp -skipcrcchec...
  • w412692660
  • w412692660
  • 2016-01-20 22:49:24
  • 2552

hive中快速对表结构数据进行复制

1. CREATE TABLE new_table LIKE old_table; 2. 使用hadoop fs -cp 命令,把old_table对应的HDFS目录的文件夹全部拷贝到new_t...
  • liu812769634
  • liu812769634
  • 2016-05-13 11:56:54
  • 4431
收藏助手
不良信息举报
您举报文章:不同集群 hive 表结构 重新创建
举报原因:
原因补充:

(最多只允许输入30个字)