酒伴果粒橙-CSDN博客

原创 linux下python2与python3并存

当前环境是centos7.7，默认带有python2.7.51.安装python3python -V查看是否安装了python进入可执行文件目录下cd /usr/bin/ll python*查看python指向python指向的是python2.7我们要安装python3版本，所以python要指向python3才行，目前还没有安装python3，先备份,备份之前先安装相关包，用于下载编译python3yum -y install zlib-devel bzip2-devel openss

2021-03-14 16:35:17 390

原创 oracle归档

1.登录oracle数据库sqlplus system/oracle@192.168.253.103/ORACLCDB2.查看当前日志操作模式select log_mode from v$database;3.开启日志归档，首先停止数据库权限不足，必须要以dba用户操作linux切换到oracle用户su oracle登录到oracelsqlplus / as sysdba提示错误原因：这台服务器有多个库在环境变量文件/home/oracle/.bash_profile中也

2021-03-12 16:21:03 478

原创 oracle性能报告

oracle10g以后，oracle提供了一个性能检测的工具：awr（automatic workload repository 自动工作负载库）这个工具可以自动采集oracle运行中的负载信息，并生成与性能相关的统计数据。我们可以根据这些统计数据来分析一些潜在的问题。1.awr的原理　　oracle启动后，后台会有个进程去每小时采集一次系统的快照信息，信息采集来源为： v$active_session_history视图。该视图可以展示最近活动会话的历史记录。并将采集到的信息保存8天。（查询sql：s

2021-03-12 16:07:49 942

原创 airflow调度安装

1.安装gccyum install gcc -y后续安装airflow如果不成功，可以再次执行，它会更新包2.安装setuptools安装airflow，需先安装pip，而安装pip，需先安装setuptools下载setuptools:wget https://pypi.python.org/packages/source/s/setuptools/setuptools-19.6.tar.gz#md5=c607dd118eae682c44ed146367a17e26解压：tar -zxvf

2021-03-11 20:42:19 142

原创 yum不可用

yumcentos7自带的python版本为2.7，当改变默认python为3.6之后，将发现yum不可用问题原因：yum是使用python2*等开发，在升级到python3之后语法报错解决方案：修改/usr/bin/yum和/usr/libexec/urlgrabber-ext-down文件，指定使用python2.7作为yum的解释器...

2021-03-11 20:15:08 126

原创 kerbors安全模式下使用开源datax

一.开源版本的datax目前仅支持hdfswriter与kerbors的集成二.kerbors下使用datax进行数据导出到hdfs有以下几种方式1.（此法以测通）找到三个xml文件，core-site.xml hive-site.xml hdfs-site.xml将这三个文件放到hdfswriter-0.0.1-SNAPSHOT.jar中该jar包位于/opt/datax/plugin/writer/hdfswriter下jar -ur hdfswriter-0.0.1-SNAPSHOT.j

2021-03-05 11:17:38 608 1

原创 CDH sqoop1的使用

1.mysql和pg数据库安装客户端：yum install mysqlyum install postgresql-10服务端：yum install mysql-serveryum install postgresql-10-serverpg数据库root使用psql命令，将psql的bin路径添加到 ~/.bash_profile即可2.测试sqoop导入添加用户和权限：创建组groupadd supergroup添加用户useradd cdh -u 1001 -d /home/c

2021-01-10 14:04:46 601

原创 CDH5.16.2三节点安装部署

1.安装虚拟机，最小化安装2.设置相关参数：设置ip地址：vi /etc/sysconfig/network-scripts/ifcfg-ens33删除默认路由：DEFROUTE=yes删除UUID设置开机启动ONBOOT=yes设置IPADDR=192.168.220.128增加DNS:DNS1=114.114.114.114DNS2=8.8.8.8重启网卡：service network restartping下外网是否正常关闭防火墙：systemctl stop firewall

2021-01-09 12:53:44 729

qq_44003428的博客