2016年11月_河南骏

原创 Where is $HADOOP_HOME on CDH 5.X, Parcels

With CDH4 and CDH5 there's no longer a 'HADOOP_HOME' env-var. It has been instead renamed to 'HADOOP_PREFIX', which for a default parcel environment can be set to/opt/cloudera/parcels/CDH/lib/hadoop

2016-11-30 11:44:52 1744

原创 OGG的Oracle与Hadoop集群准实时同步详解

Oracle里存储的结构化数据导出到Hadoop体系做离线计算是一种常见数据处置手段。近期有场景需要做Oracle到Hadoop体系的实时导入，这里以此案例做以介绍。Oracle作为商业化的数据库解决方案，自发性的获取数据库事务日志等比较困难，故选择官方提供的同步工具OGG（Oracle GoldenGate）来解决。安装与基本配置环境说明软件配置角

2016-11-29 19:22:37 4287 1

翻译 Presto Query FAQs

Table of ContentsQ: How can I migrate Hive queries into Presto?Q: What functions are available in Presto?Q: My query is not working. How can I fix it?Solution: Start with a sma

2016-11-29 09:29:06 2423

翻译 Using Presto to combine data from Hive and MySQL in one SQL-like query

Tutorial: Using Presto to combine data from Hive and MySQL in one SQL-like query Tutorials • Comments (4)Presto (originated at Facebook) is a yet another distributed SQL query engine fo

2016-11-28 18:27:43 1276

转载 presto 系统连接器中各种监控指标很有用

System ConnectorThe System connector provides information and metrics about the currently running Presto cluster. It makes this available via normal SQL queries.ConfigurationThe System conne

2016-11-28 15:37:35 2960

原创 oracle 中CLOB与BLOB、BFILE

一、oracle中Blob和Clob类型的区别BLOB和CLOB都是大字段类型，BLOB是按二进制来存储的，而CLOB是可以直接存储文字的。其实两个是可以互换的的，或者可以直接用LOB字段代替这两个。但是为了更好的管理ORACLE数据库，通常像图片、文件、音乐等信息就用BLOB字段来存储，先将文件转为二进制再存储进去。而像文章或者是较长的文字，就用CLOB存储，这样对以后的查询更新存储等操作都提

2016-11-28 14:36:31 4403

转载 presto 剖析详解

转载自：http://blog.csdn.net/jiangshouzhuang/article/details/524612741. 概述Presto是一个分布式SQL查询引擎，用于查询分布在一个或多个不同数据源中的大数据集。 Presto通过使用分布式查询，可以快速高效的完成海量数据的查询。如果你需要处理TB或者PB级别的数据，那么你可能更希望借助于Had

2016-11-25 10:50:32 10464

原创用PL/SQL developer 连接Oracle服务器报错ORA-12537

最近遇到这种情况，配置tnsnames.ora，启动监听（LSNRCTL START），sqlplus 连接数据库都正常，就是用PL/SQL工具远程连接Oracle数据库就报错或者在sqlplus **/**@orcl也报错失去连接。今天问题重现了，我今天搞定了,在此记录一下：用Oracle用户启动监听。lsnrctl start用oracle 用户启动数据库.sqlplus /as

2016-11-25 09:37:58 3327 2

原创 presto连接Oracle数据库

这个Oracle 的plugin官方真的没有，谷歌一下，有资源，按照下面步骤做的https://github.com/marcelopaesrech/presto-oraclePresto OraclePluginThis is a plugin for Presto that allow you to use Oracle Jdbc ConnectionConnectio

2016-11-17 11:41:01 7975 4

原创 how to enable MySQL query log?

1、to enable the query log,put this in /etc/my.cnf in the [mysqld] sectionlog=/usr/local/mysql_query.log2、this worked for me(Mysql 5.6.12 on windows),set parameter int the mysql console:set globa

2016-11-17 11:04:07 500

原创 presto错误记录

1.错误：1) Error: Defunct property 'task.max-memory' (class [class com.facebook.presto.execution.TaskManagerConfig]) cannot be configured. at com.facebook.presto.server.ServerMainModule.setup(ServerM

2016-11-16 16:06:01 4573

resto 是 Facebook 推出的一个基于Java开发的大数据分布式 SQL 查询引擎，可对从数 G 到数 P 的大数据进行交互式的查询，查询的速度达到商业数据仓库的级别，据称该引擎的性能是 Hive 的 10 倍以上。Presto 可以查询包括 Hive、Cassandra 甚至是一些商业的数据存储产品，单个 Presto 查询可合并来自多个数据源的数据进行统一分析。Presto 的目标是

2016-11-15 09:25:26 4096

转载 presto集群安装步骤

Presto是一个运行在多台服务器上的分布式系统。完整安装包括一个coordinator（调度节点）和多个worker。由客户端提交查询，从Presto命令行CLI提交到coordinator。 coordinator进行解析，分析并执行查询计划，然后分发处理队列到worker目录：环境基本要求集群规划连接器安装步骤config.propertiesnode.propertiesj

2016-11-14 16:35:24 2991

转载 oracle监听器启动lsnrctl status例程的状态为unknown

以前同事问及为何数据库例程在监听器中状态为unnkown，这是何意．有何影响．查阅了资料，解决如下：# listener.ora Network Configuration File: E:\oracle\product\10.2.0\db_1\network\admin\listener.ora# Generated by Oracle configuration tools.

2016-11-11 10:42:12 34708

转载 SQuirreL SQL Client: 与异构数据库环境进行交互的开放源代码的独立前端

转载于：http://www.ibm.com/developerworks/cn/data/library/techarticles/dm-0312bhogal/index.html本文描述了一个叫做 SQuirreL SQL Client 的开放源代码应用程序，它提供了到 DB2 UDB 和像 Oracle 和 SQL Server 等许多其他销售商数据库的易于使用的界面。如果您

2016-11-04 11:21:49 1047

转载 oracle GoldenGate

利用GoldenGate实现Oracle实时同步方案简介：OracleGolden Gate软件是一种基于日志的结构化数据复制备份软件，它通过解析源数据库在线日志或归档日志获得数据的增量变化，再将这些变化应用到目标数据库，从而实现源数据库与目标数据库同步。OracleGolden Gate可以在异构的IT基础结构（包括几乎所有常用操作系统平台和数据库平台）之间实现大量数据亚

2016-11-04 11:01:00 528

河南骏的博客