TDH
冷雨夜下的星空
不负青春、不负卿
展开
-
【TDH】数据转码
通常我们导下来的数据如果没有限定格式,一般会存在乱码问题。为此介绍一下两种转码方式普通转码iconv -f gb18030 -t utf8 jg.csv -o jg.csv.utf8其中jg.csv为需要转码的文件 jg.csv.utf8为转码之后的文件,注意不一定是.csv结尾的文件。强转码iconv -f gb18030 -t utf-8 -c jg.csv > jgutf8....原创 2019-01-23 11:05:40 · 241 阅读 · 0 评论 -
TDH与CDH简介
TDH:Transwarp Data HubTDH是国内落地案例最多的一站式hadoop大数据平台,性能比开源hadoop2还快数十倍,通过内存计算、高效索引、执行优化和高度容错等技术,TDH一个平台即能处理10GB到100PB的数据,企业不再需要MPP或混合架构。CDH:Cloudera Data HubCDH是由cloudera进行开发的大数据一站式平台管理解决方案,基于Hadoop生态...原创 2019-02-01 10:45:04 · 40050 阅读 · 0 评论 -
【TDH】inceptor建内部表、外部表、分区表
一、建内部表create table emp (id string default null comment ‘’,name string default null comment ‘’,id_no string default null comment ‘’)clustered by (id) into 31 bucketsstored as orctblpropertirs (“...原创 2019-03-22 19:07:33 · 2130 阅读 · 0 评论 -
【TDH】常用日期函数
v_etldate 为时间参数–求当前日期昨天的日期select date_add(system,-1) from system.dual;–求当前日期是当年的第几个月v_etldate_monthselect cast(substr(v_etldate,7,1) as int ) from system.dual;–求去年年末v_etldate_last_yearselect a...原创 2019-06-12 15:29:59 · 3390 阅读 · 3 评论 -
TDH--cluster模式和local模式
cluster模式,也就是集群模式,这个server模式一般是针对查询性能要求高的。local模式,也就是本地模式,这个一般对查询性能要求不高,一般用来跑批。...原创 2019-09-20 15:10:05 · 825 阅读 · 2 评论