架构师实战感悟

安装CDH 6.3.2 版本时初始化集群服务过程中出现oozie server启动失败的情况，第一次创建集群成功，第二次失败了，分析日志信息。分析日志内容，发现因为表不存在导致oozie服务启动失败。于是准备手工创建数据库表结构，初始化数据库，然后再来启动oozie服务。

CM服务默认端口是 7180， 默认账号以及初始密码是：admin/admin。登录系统后将会做基础的配置，根据需要选择合适的版本，企业版需要购买License，Express 版本免费使用，但是支持的功能有限。CM服务是集群的管理节点，CM负责管理大数据集群内所有的数据节点，数据节点上需要部署 agent 服务，agent服务负责与CM服务通信，CM 服务通过 agent 服务来管理集群内所有的数据节点。准备好CDH安装包资源，官方网站下载需要账号，如果没有账号可以去网上到处搜搜。

首先创建一张用于测试的表，表明为 TREE，表中有3个字段，分别是，ID，NANE，UP_ID。UP_ID 是 ID 的上层，主要实现树形结构的存储。1.1 初始化测试数据1.1.1 写入数据1.1.2 树形结构如下图root(8)一(1)二(2)三(3)五(5)root(6)四(4)2. 树形结构遍历查询2.1 从父节点遍历查询结果如下：2.2 从子节点开始遍历查询结果是：2.3 start with 条件 connect by prior

hbase简介 HBase是一个分布式的、面向列的开源数据库，该技术来源于 Fay Chang 所撰写的Google论文“Bigtable：一个结构化数据的分布式存储系统”。就像Bigtable利用了Google文件系统（File System）所提供的分布式数据存储一样，HBase在Hadoop之上提供了类似于Bigtable的能力。HBase是Apache的Hadoop项目的子项目。HBas

spark介绍spark是一套并行计算的框架，由于在计算过程中，数据在内存中传递，所有，性能要比hadoop的map/reduce在磁盘中传递的效率高很多。下边在使用hdfs和zookeeper的基础上，安装spark单机环境。1.启动hadoop服务 2.安装spark程序包 3.启动spark服务器启动hadoop服务如过尚未安装hadoop，请参考hadoop安装文档cd $HADOOP_

hadoop版本 2.7.3下边将一步一步的介绍在ubuntu系统中搭建hadoop环境。安装sun jdk配置免密码登录下载hadoop可执行包修改hadoop配置文件启动hadoop服务安装sun jdk如果你的机器上已经安装了openjdk，请先卸载，如果没有，请按照下面方法继续操作。 在oracle官网上下载最新的jdk包，在这里我选则的是jdk1.8.0_121，具体下载地址

Oracle表分区目的：在数据处理过程中，通常对于数据比较大的表进行分区管理，而分区的依据往往是数据日期，每一天或者每几天数据存储在一个指定的分区中，当数据量一天天增加后，通过分区进行过滤，有利于快速查询某一天的数据。在向分区表中插入数据时，分区表必须有能够装载这条数据的分区，比如将2018-01-08的数据全部放在P20180102这个分区，而这个分区条件是数据日期小于等于2018-01...

首先切换到db2inst1用户（或者别的实例用户下）通过客户端远程数据库时，需要首先进行"编目".编目的作用就像 oracle数据库配置  tnsnames.ora  .编目一般分为2个步骤。# db2 catalog tcpip node local remote localhost server 50000上面这步可以理解为使用 local 这个标示符 代表了 远程数据库

关于oracle数据库备份，可以使用oracle提供的exp和imp工具。如会用sys用户登陆到oracle数据库：sqlplus  /nologSQL>conn /as sysdbaSQL>exp userid=sys/passwd@remote_ip/oracle_sid    file=/home/hello.dmp  log=/home/hello.dmp  feedbac

使用游标修改数据定义一个游标，游标名称为 mycursor更新scott用户中emp表中empno为7369的销售额-- Created on 2015/11/30 by ZHANW declare he emp%rowtype; cursor mycursor(pid integer) is select * from emp where empno = pid for update;......

1. 主键在表中是唯一性的，并且主键所在的字段不能为空，且一个表中，只有一个主键或一个联合主键。2. 当一个表引用外键时，被引用的表中字段必须是主键或unique3. 如果要删除表中数据，但是表中的某个主键又被其他的表当做外键使用了，那么可以删除表中主键（要加cascade关键字），然后再删除数据，当主键被删除后，其他表中引用的外键自动被删除。4.当主键被被其他

1. 解锁oracle用户下某个用户（以scott

1.首先安装好jdk后，sun公司的活IBM的。

服务器1       os: AIX 5.3       ip: 192.168.0.1       db: oracle 11gR2服务器2：       os: AIX       IP: 192.168.0.5       db: DB2 v9.7主要目的：       通过在服务器1中构建透明网关，实现在oracle数据库中连接服务器2中的DB2数据库。