2018年03月_数据源的港湾

原创 Linux配置Oracle ODBC驱动并使用odb工具测试连接

前面多篇文章我们介绍了Trafodion的odb工具，包括如何配置Trafodion的ODBC驱动，如何使用odb数据进行数据的加载、抽取、转换。odb可以在不同的关系型数据库之间进行数据传输而不用数据落地。由于odb是基于ODBC，使用odb从关系型数据库A迁移数据到关系型数据库B之前，需要提前配置好A和B的ODBC连接。本文我们主要描述如何配置Oracle的ODBC并使用odb测试是否可以正常...

2018-03-28 14:52:47 3128

原创 Oracle使用sqlldr加载数据

最新正好遇到往Oracle数据库表中导入大批量数据的问题，于是了解到Oracle自带sqlldr工具，支持快速地向Oracle数据库中导入大批量数据。概括地说，使用sqlldr往Oracle表中导入文本文件需要经历以下几个步骤，1 创建目标表drop table perf_tbl1;create table perf_tbl1(c1 number not null,c2 varc...

2018-03-27 12:52:37 497

原创 Trafodion集成Sentry实现Hive权限控制

本文主要描述如何在CDH上安装并配置Hive使用Sentry，并介绍如何使用trafodion用户实现Hive对象的权限控制。主要步骤及描述如下，一、安装并配置使用Sentry1 CDH Manager添加Sentry服务 2 配置Hive使用Sentry （1）打开Hive的Sentry服务（2）关闭hiveserver2 impersonatio...

2018-03-19 16:54:13 1758

原创 EsgynDB子集备份恢复常用命令

本文主要列出EsgynDB在线备份恢复之子集备份恢复涉及到的常用命令，主要分为表级别和模式级别的备份恢复。1 创建测试表和模式create schema schema_20180316;set schema schema_20180316;create table table_1 (a int, b varchar(10));create table table_2 (a int...

2018-03-19 13:40:18 416 1

原创使用php+odbc连接Trafodion样例

PHP是一门高效的动态编程语言，而ODBC是用于连接编程语言和数据存储的软件驱动工具。通过ODBC驱动，可以用PHP连接到各种数据库，包括MySQL、PostgreSQL等等，当然也包括Trafodion。下文介绍如何配置PHP连接Trafodion数据库并执行简单的数据库查询。1 安装PHP工具yum install -y php php-odbc2 打开PHP交互式命令行测试P...

2018-03-16 12:25:21 1056

原创 Sqoop抽数报IO Error: Connection reset

现象在使用Sqoop从Oracle抽数据到Hive表时，有时候会遇到以下报错，Error: java.lang.RuntimeException: java.lang.RuntimeException: java.sql.SQLRecoverableException: IO Error: Connection reset at org.apache.sqoop.mapredu...

2018-03-08 16:35:24 2658

原创 Trafodion 使用DATEDIFF计算两个时间差

在Trafodion中，我们使用DATEDIFF内嵌函数来计算两个时间差值，计算的时间差可以包括多种粒度，如YEAR、MONTH、DAY、HOUR、MINUTE、SECOND、QUARTER、WEEK。DATEDIFF的用法如下，DATEDIFF (datepart, startdate, enddate)其中，以上datepart即上述YEAR、MONTH、DAY等这些不同的粒度...

2018-03-07 15:08:22 1174

原创 CentOS使用ISO镜像做本地YUM源

有时候在没有外网连接的时候无法使用YUM从外网下载RPM包，这时可能需要创建本地YUM源，如果有一个现成的完整的ISO镜像，可以挂载ISO镜像文件做为本地YUM源。主要步骤如下，1 创建iso存放目录和挂载目录mkdir /mnt/iso mkdir /mnt/cdrom2 上传iso镜像文件到iso存放目录/mnt/iso下3 挂载iso镜像到挂载目录/mnt/cdrom下...

2018-03-06 11:00:30 17961

原创 Linux 列出RPM包依赖的两个命令

以下两个命令可以列出RPM包的依赖情况， 1 yum deplist pakcageyum deplist ntpLoaded plugins: fastestmirrorFinding dependencies: Loading mirror speeds from cached hostfile * base: mirrors.sohu.com * epel: mirror...

2018-03-06 09:25:53 5723

原创使用yumdownloadonly下载RPM包及依赖包

如何使用yumdownloadonly下载RPM包及依赖包的步骤：1 下载yumdownloadonly插件yum install yum-plugin-downloadonly2 下载到指定目录（依赖包会一起下载）yum install --downloadonly --downloaddir=/root/httpd httpd...

2018-03-05 18:14:06 20099

数据源的港湾