自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(9)
  • 收藏
  • 关注

原创 hive 复合类型字段的使用

hive 加载数据文件时,复合字段类型的加载

2022-11-18 14:44:25 676

原创 hbase ExportSnapshot迁移hbase表

ExportSnapshot工具将与快照相关的所有数据(hfiles、日志、快照元数据)复制到另一个集群。

2022-11-18 13:42:37 1018

原创 hive加载TSV/CSV文件数据

hive加载TSV/CSV数据文件

2022-11-17 11:54:44 658

原创 JDBC+Kerberos认证连接impala

JDBC通过Kerberos认证 连接impala 查询数据

2022-11-07 15:17:53 671

原创 查看Linux系统相关信息命令

查看linux系统相关信息命令

2022-10-10 15:58:11 213

原创 数据文件推送sftp文件服务器脚本

脚本:从impala中抽取数据生成文件(.csv/.dat),并生成.chk检查文件将生成的本地文件put到sftp文件服务器#!/bin/bashpath="$(cd "$(dirname "$0")"; pwd)"cd $path##配置文件名conf=${1}# 跑批时间trade=${2}current_date=`date "+%Y%m%d"`current_time=`date "+%H%M%S"`mkdir -p /data/TextData_Transfer

2022-01-05 15:09:42 778

原创 shell 多进程并发(执行)脚本(fifo fd6)

shell多进程并发执行脚本

2022-01-04 14:09:06 664

原创 hbase ImportTsv的使用

标题ImportTsv的使用ImportTsv 是一个将 TSV 格式的数据加载到 HBase 的工具类。它有两种不同的用法:1.通过 Puts 将 HDFS 中的 TSV 格式的数据加载到 HBase 中;2.通过生成StoreFile的方式使用completebulkload将数据加载到HBase中。通过 Puts 将 HDFS 中的 TSV 格式的数据加载到 HBase 中$ bin/hbase org.apache.hadoop.hbase.mapreduce.ImportTsv '-Di

2021-12-29 16:00:40 1470

原创 hbase备份表

hbase备份表disable目标表disable 'accumulation_profit'建立目标表的快照snapshot 'accumulation_profit','accumulation_profit_20211227'克隆目标表的快照clone_snapshot 'accumulation_profit_20211227','accumulation_profit_bak'删除快照delete_snapshot 'accumulation_profit_2

2021-12-27 15:55:28 1043

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除