自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(29)
  • 资源 (1)
  • 收藏
  • 关注

原创 Veridata安装配置

Oracle GoldenGate Veridata是GoldenGate中用于比较数据库间数据同步效果的一个对比软件。Veridata基于Web,支持大据量的数据对比,能够在不停止数据同步的情况下就可以比较数据。本文内容基于Oracle Linux 7.4环境下的Oracle GoldenGate Veridata 12.2.1版本,Oracle数据库版本为11.2.0.4,主要描述了Oracl...

2019-02-28 18:05:18 2284 5

原创 linux下安装anconda

从官网下载对应最新版本的anconda放至/home/tf/resources/anconda3,然后进入文件夹(路径按照自己的来)开始安装:[tf@AIanconda3]$ bash Anaconda3-5.1.0-Linux-x86_64.sh回车然后接受license,然后显示默认安装路径,这里没有做修改最后会加环境变量

2018-04-12 17:22:33 12014 1

原创 HIVE笔记

返回两个表中满足关联条件的记录。

2023-12-28 15:21:27 1260

原创 hive full join多表多关联键联合查询

hive full join多表多关联键联合查询

2022-12-20 15:22:15 1972 2

原创 IMP-00019 IMP-00003 ORA-12899

IMP-00019: row rejected due to ORACLE error 12899IMP-00003: ORACLE error 12899 encounteredORA-12899: ? "USERNAME"."TABLENAME"."BSY" ???? (???: 42, ???: 32)字符集问题:源库192.168.1.1为oracle 9.2.0.6 ZHS16B...

2020-04-06 10:23:51 780

原创 ORA-02375 ORA-12899 ORA-02372

ORA-02375: conversion error loading table "USERNAME"."TABLENAME" partition "SYS_P5867"ORA-12899: value too large for column XFDZDH (actual: 126, maximum: 120)ORA-02372: data for row: XFDZDH : 0X'B9F...

2020-04-06 10:21:30 914

原创 离线安装cloudera manager和cloudera hadoop(cdh5.10.0)

对于要学习大数据的同学来说,hadoop可以说是肯定要接触的,而环境搭建是避免不了的。对于快速的傻瓜式搭建分布式环境,cloudera manager是一个很好的选择。下面进行详细的讲解1 相关操作系统和软件:1.1虚拟软件:vmware1.2操作系统:Oracle Linux 7 Update 4 for x86 64 bit V921569-01...

2020-02-03 12:26:48 1350

原创 ls: cannot access /home/spark-2.4.4-bin-hadoop2.6/lib/spark-assembly-*.jar: No such file or director

在安装了spark之后,一直正常的hive启动时出现报错:原因是spark升级到spark2以后,原有lib目录下的大JAR包被分散成多个小JAR包,原来的spark-assembly-*.jar已经不存在,所以hive没有办法找到这个JAR包。解决办法:将 sparkAssemblyPath=`ls ${SPARK_HOME}/lib/spark-assembly-*.jar`...

2019-12-27 10:20:04 815

原创 OGG(oracle goldengate)实现oracle到mysql异构环境数据同步

环境介绍source数据库版本:Oracle RDBMS 11.2.0.3goldengate版本:OGG for oracle OGG-12.2.0.1IP:192.168.1.1安装目录:/home/oggsOGG数据库用户:ggsOGG数据库表空间:oggtbstarget数据库版本:MySQL 5.7.24goldengate版本:OGG for mysql O...

2019-09-24 17:51:46 1566

原创 OGG(oracle goldengate)实现oracle到oracle数据DDL同步

注:本篇文章是在已经配置过DML同步或者源端数据库已经开启归档、添加了附加日志等基础上记录的,如未设置,请参考另外一篇:https://blog.csdn.net/weixin_41229271/article/details/101196319然后再进行下面的步骤。源端在ogg安装目录下登陆数据库SQL> @marker_setup.sqlMarker setup scr...

2019-09-23 18:21:45 1302

原创 OGG(oracle goldengate)实现oracle到oracle数据实时同步

目录源端配置数据库起归档安装OGG创建ogg管理用户配置OGG添加附加日志添加checkpoint管理进程配置抽取进程配置投递进程配置目标端配置安装OGG创建ogg管理用户配置OGG添加checkpoint管理进程配置源端启动进程初始化目标端数据应用进程配置启动目标端应用进程源端配置数据库起归档此文档源端目...

2019-09-23 15:40:12 6230 2

原创 goldengate——OGG11,12版本安装

安装包下载网址https://www.oracle.com/technetwork/middleware/goldengate/downloads/index.html1、OGG12版本安装(源端和目标端安装方法相同,安装在对应的文件夹中即可)1.1、进入解压文件夹,解压安装包[oracle@localhost ~]$ cd ogg[oracle@localhost ogg]...

2019-08-08 22:15:20 3401

转载 goldengate——简介

GoldenGate软件是一种基于日志的结构化数据复制软件,它通过解析源数据库在线日志或归档日志获得数据的增量变化,再将这些变化应用到目标 数据库,从而实现源数据库与目标数据库同步。GoldenGate 可以在异构的IT基础结构(包括几乎所有常用操作系统平台和数据库平台)之间实现大量数据亚秒一级的实时复制,从而在可以在应急系统、在线报表、实时数据 仓库供应、交易跟踪、数据同步、集中...

2019-08-08 22:04:25 1986

原创 ogg pump 进程 Lag at Chkpt 时间延迟解决

上午遇见ogg数据同步不及时问题,查看抽取投递应用三进程状态正常,但是投递进程Lag at Chkpt(时间延迟)较大再比对查看抽取和投递进程的日志(均正常抽取投递),但抽取文件号到了7400多,但投递刚过7300,相差一百多队列文件没有投递再在目标端的dirdat查看,队列文件每半个小时才接收到一个,确定是pump进程投递投递过慢,文件出现延迟(但查看网络应该是正常的,不是网络IO问题)...

2019-06-25 20:12:01 5079

原创 Java was started but returned exit code =-1

将jdk文件下的bin目录下的javaw.exe文件的全部路径复制到Myeclipse配置文件.ini中的vm后依然报错解决办法:将MyEclipse的安装目录下面的configuration\org.eclipse.osgi\将该文件夹下的内容清空,再启动myeclipse问题解决...

2019-06-17 11:13:24 547

原创 linux上安装sql developer

安装JDK下载地址:https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html1)root用户下:首先查询系统自带的jdk:rpm -qa | grep java然后移除系统自带的jdk:yum remove java-1.*2)安装oracle JDK将JD...

2019-03-16 22:08:07 3392

原创 ORA-01078 LRM-00109

[oracle@hostname ~]$ sqlplus / as sysdbaSQL*Plus: Release 11.2.0.3.0 Production on Fri Mar 15 20:26:55 2019Copyright (c) 1982, 2011, Oracle. All rights reserved.Connected to an idle instance....

2019-03-15 21:59:15 235

原创 ORA-02380

ORA-02380: 概要文件 MY_PROFILE 不存在失败的 sql 为:CREATE USER "USERNAME" IDENTIFIED BY VALUES 'S:93584320FE91646C4A64FF824BDB3FD0706648175FB6B213B1430EDDE3A9;11FD4CE862C25F95' DEFAULT TABLESPACE "TS_TEST" TE...

2019-03-14 13:36:37 3477

原创 ORA-39002 ORA-39070 ORA-29283 ORA-06512 ORA-29283

在expdp数据导出时报错:ORA-39002: invalid operationORA-39070: Unable to open the log file.ORA-29283: invalid file operationORA-06512: at "SYS.UTL_FILE", line 536ORA-29283: invalid file operation如果是单节点,...

2019-03-14 13:33:44 1831

原创 UDI-12154 ORA-12154

在数据导入时报错:impdp username/pwd@test directory=DATA_PUMP PARALLEL=12 cluster=N dumpfile=aaa.DMP logfile=imp_aaa.log SCHEMAS=testDATA_OPTIONS=SKIP_CONSTRAINT_ERRORSImport: Release 11.2.0.3.0 - Product...

2019-03-14 13:25:58 7641 3

原创 SQL语句查看DATAVG使用情况,表空间使用情况,用户下及用户下各表使用表空间情况

查看DATAVG等使用情况select name,type,state,total_mb/1024,free_mb/1024, round(free_mb*100/total_mb,0) 空闲比例  from v$asm_diskgroup;查看某用户使用表空间情况select sum(t.bytes /1024/1024/1024) 已使用表空间G from dba_segmen...

2019-02-27 15:10:25 371

原创 java-hadoop学习之路3 org.apache.hadoop.security .AccessControlException: Permission denied错误解决

org.apache.hadoop.security.AccessControlException: org.apache.hadoop.security .AccessControlException: Permission denied: user=Administrator, access=WRITE, inode="hadoop": hadoop:supergroup:rwxr-xr-x...

2019-02-21 11:57:01 1071

原创 java-hadoop学习之路2 java删除读取HDFS

新建class(右键src,新建class) package hadoop_class1;import java.io.IOException;import java.net.URI;import java.net.URISyntaxException;import org.apache.hadoop.conf.Configuration;import org.apach...

2019-02-21 11:48:29 234

原创 java-hadoop学习之路1 搭建hadoop的eclipse开发环境

第一步:安装java环境参考:https://blog.csdn.net/weixin_41229271/article/details/85254106第二步:安装Eclipse,官网下载后直接解压即可使用第三步:获取hadoop的jar包解压hadoop安装包(自己使用的版本即可),将解压后的文件夹里的jar包移至一个文件夹中(创建一个文件夹hadoopjar),需要的jar包...

2019-02-21 11:29:15 466

原创 JDK安装配置(windows/linux)

一:JDK下载通过官方网站获取JDK:https://www.oracle.com/technetwork/java/javase/downloads/index.html针对不同操作系统,下载不同的JDK版本。目前最新的JDK已经有11的版本,但是建议安装1.8的版本。二:windows下的安装1)安装下载后直接双击运行文件进行安装即可。2)环境变量的配置    2.1)p...

2018-12-25 21:03:12 147

转载 StringBuffer的用法

StringBuffer的用法1、StringBuffer对象的初始化StringBuffer对象的初始化不像String类的初始化一样,Java提供的有特殊的语法,而通常情况下一般使用构造方法进行初始化。例如:StringBuffer s = new StringBuffer();这样初始化出的StringBuffer对象是一个空的对象,就是我犯的错误。如果需要创建带有内...

2018-10-23 15:49:09 165

原创 linux系统下扩展磁盘空间

        在vmware中创建虚拟机,往往不会给太多的磁盘空间,这样在使用的过程中经常会遇到空间不足的情况,就需要扩充磁盘的空间,下面进行图文详解:...

2018-06-06 15:32:06 20762 4

原创 windows下tensorflow环境搭建

l  首先到Anaconda官网下载安装Anaconda,安装完成,步骤略。然后查看是否成功安装:conda –versionl  查看看装了哪些conda环境:conda info –e(envs),默认只有一个l  创建名为tensorflow的环境,并指定python的版本:conda create –name tensorflow python=3.5.2(环境会创建在anaconda安装...

2018-05-16 16:12:14 1913

原创 oracle12c创建用户,在PDB下创建scott用户,并创建相关表

    最近安装oracle12c后,创建用户遇到了一点小麻烦,因为12c引入了CDB与PDB的特性,即数据库容器与可插拔数据库。在CDB下的用户可以称公共用户,在PDB下的用户可以称之为本地用户。在CDB下创建公共用户    在CDB下创建公共用户的方法和之前创建方法一样,首先在sqlplus下用sys登陆CDB数据库(默认情况下直接登陆的就是CDB数据库),然后创建用户:    语句:crea...

2018-03-29 23:06:44 2990

JMeter学习笔记

文档包含JMeter的下载安装,以及使用。Apache JMeter是Apache组织开发的基于Java的压力测试工具。用于对软件做压力测试,它最初被设计用于Web应用测试,但后来扩展到其他测试领域。 它可以用于测试静态和动态资源,例如静态文件、Java 小服务程序、CGI 脚本、Java 对象、数据库、FTP 服务器, 等等。JMeter 可以用于对服务器、网络或对象模拟巨大的负载,来自不同压力类别下测试它们的强度和分析整体性能。另外,JMeter能够对应用程序做功能/回归测试,通过创建带有断言的脚本来验证你的程序返回了你期望的结果。为了最大限度的灵活性,JMeter允许使用正则表达式创建断言。

2019-02-19

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除