2017年05月_数据源的港湾

原创 Trafodion 使用transpose生成1~1000序列

Trafodion有一个特殊的语法，是把一串用逗号分隔的字符串转化为多个列，关于tranpose语法的详细介绍，请参考官网：http://trafodion.incubator.apache.org/docs/sql_reference/index.html#transpose_clause这里我们希望使用transpose语法来生成1~1000的序列，方法如下select100*x1 + 10*

2017-05-26 17:33:40 512

原创 Trafodion get region stats查看表对应的region详情

Trafodion中SQL语法”get region stats”可以用于查看表或索引对应的region的详细信息，基本语法如下，get region stats for table <TABLE_NAME>;get region stats for index <INDEX_NAME>;get region stats for table <TABLE_NAME>,summary;get

2017-05-26 17:06:00 740

原创 Trafodion 使用OSIM重现问题现场

Trafodion中有一个功能叫OSIM，是一个用来收集问题现场并重现现场的有利工具。假设有一种场景，我的一条SQL执行很慢，想找人帮忙一起定位问题，但正好某个时间点又找不到一起定位问题的人，这时候我希望把这个出问题的现场保存起来，等别人有时间了只需要根据我保存的文件恢复到当时的场景，便可以很容易的定位问题了。这里分为两个步骤，一个是保存现场，另一个就是恢复现场，具体步骤分别如下，1.保存现场

2017-05-25 15:34:11 889

原创 Trafodion 使用Hadoop命令修改Trafodion表的副本数

前一篇文章，我们提到如何查询Trafodion表占用的存储空间，参考 http://blog.csdn.net/post_yuan/article/details/72530683最近遇到一个Case，客户环境由于磁盘空间有限加上大批量加载数据的任务，导致集群整体磁盘可用空间不足15%，希望能在现有的集群上释放一些空间出来。Hadoop集群释放磁盘空间的其中一个方法就是减少数据的副本数，Hadoo

2017-05-23 12:53:50 1051

原创 Trafodion 查询表占用空间

本文描述如何查询一个Trafodion表实际占用的磁盘空间，我们知道，Trafodion表是存储在HBase中的，HBase是存储在对应的HDFS目录下/hbase，如下[trafodion@n12 ~]$ hadoop fs -ls /Found 7 itemsdrwxr-xr-x - trafodion trafodion 0 2017-05-10 14:48 /bu

2017-05-19 15:21:52 763

原创 Trafodion Troubleshooting - TrxRegionEndpoint cannot be loaded

现象Trafodion安装完成后，做数据库初始化直接退出，如下>>initialize trafodion;Killed通过查看日志，从trafodion.dtm.log中发现以下错误，Caused by: org.apache.hadoop.hbase.ipc.RemoteWithExtrasException(org.apache.hadoop.hbase.DoNotRetryIOExcept

2017-05-18 13:17:01 673

原创 Trafodion 计算当月第一天及最后一天

计算所在月的第一天，>>select cast(date_trunc('month',current_date) as date) from dual;(EXPR)----------2017-05-01计算所在月的最后一天（需先计算下个月第一天再减去一天），>>select cast(dateadd(day,-1,date_trunc('month',add_months(current_dat

2017-05-12 15:52:38 754

原创 Trafodion 自定义排序

大家都知道在SQL语句中，我们一般使用ORDER BY 来排序SQL输出的结果，可以使用ASC（默认）指定升序排列，DESC指定降序排列，比如>>select a,b from test order by a asc, b asc;A B----------- ---------- 1 A 2 B 2 C

2017-05-10 14:18:24 420

原创 Trafodion Troubleshooting - HBase.client.ScannerTimeoutException

现象在Trafodion中执行非常复杂的SQL语句时，有时候会报以下错误，*** ERROR[8448] Unable to access Hbase interface. Call to ExpHbaseInterface::nextRow returned error HBASE_ACCESS_ERROR(-706). Cause: java.util.concurrent.Execution

2017-05-04 17:29:05 787

数据源的港湾