- 博客(103)
- 收藏
- 关注
RSS订阅原创 oracle数据库（十一）_脚本杂烩
oracle数据库（十一）_脚本杂烩1 ，修改字符集2 ，数据库系统脚本3 ，创建用户4，数据泵导出导入5，锁表解除6，统计查询1 ，修改字符集set ORACLE_SID=orclsqlplus / nolog; --sqlplus / as sysdba --sqlplus system/[email protected]:1521/ORCLCDBconn / as sysdba;--查看系统字符集编码SELECT USERENV('LANGUAGE') FROM DUAL; --查看
2022-01-05 18:08:51
574
原创 linux扩容
linux扩容df -hfdisk -lfdisk /dev/sda # mnp3w # 新分区设置卷轴 fdisk /dev/sda # t3l8ew # 修改为8e类型reboot # 重启mkfs.ext4 /dev/sda3 # 格式化新分区为ext4pvcreate /dev/sda3 # 创建PV(物理卷)pvscan # 查看硬盘情况vgdisplay # 查看当前物理卷vgextend centos /dev/sda3 # 把物理卷添加到VG里面lvextend -L
2020-12-11 13:46:42
301
原创 hue_安装
hue_安装依赖初始化配置创建数据库配置oracle_client启动服务浏览UI修改配置重启链接依赖yum install -y asciidoc cyrus-sasl-devel cyrus-sasl-gssapi cyrus-sasl-plain gcc gcc-c++ krb5-devel libxml2-devel libxslt-devel openldap-devel python-devel openssl-devel sqlite-devel mysql-devel gmp-devel
2020-11-16 14:26:53
206
原创 win安装mysql.zip
win安装mysql.zip加入环境变量根目录新建目录 data根目录新建文件 my.ini [mysql]# 设置mysql客户端默认字符集default-character-set=utf8[mysqld]#设置3306端口port = 3306 # 设置mysql的安装目录basedir=D:\\program\\mysql-5.7.31_x64# 设置mysql数据库的数据的存放目录datadir=D:\\program\\mysql-5.7.31_x64\\d
2020-08-29 09:18:22
127
原创 spark安装与使用
spark安装tar -zxvf ...gzcp spark/conf/spark-env.sh.template spark/conf/spark-env.shecho 'export SPARK_DIST_CLASSPATH=$(/usr/local/hadoop/bin/hadoop classpath)' >> spark/conf/spark-env.shspark...
2020-07-13 08:41:58
479
原创 oracle数据库（零）_特性汇总
oracle数据库（零）_特性汇总1 理论基本1.1 使用总结1.2 sql语言类型1.3 分层逻辑（BI开发基本流程）1.4 常用数据类型1.5 特性2 常见问题2.1 plsql乱码问题2.2 plsql过期1 理论基本1.1 使用总结sql引用内存位置组合数据分页跑p，分批提交，速度更快更稳定避免子查询，不走索引，每个子查询都遍历一次数据，改用链接避免集合的使用避免模糊查询...
2020-07-13 08:35:40
195
原创 prowerDesigner使用基础
prowerDesigner使用基础根据sql创建模型Database -> update model from database / [ctrl+R]复制注释到name' to nameOption Explicit ValidationMode = True InteractiveMode = im_BatchDim mdl ' the current model' get the current acti
2020-07-13 08:33:14
222
原创 hive（一）_基础使用
hive（一）_基础使用1 库1.1 建库1.2 查询库1.3 使用库1.4 删除库2 表3 查询1 库1.1 建库-- 语法-- 默认路径：/user/hive/warehouse/db_name.db/table_name/partition_nameCREATE DATABASE [IF NOT EXISTS] dbname [COMMENT database_comment]...
2020-07-13 08:31:34
253
原创 python操控oracle数据库
oracle数据库控制# -*- coding:utf-8 -*- # 忽略警告信息import warningswarnings.simplefilter(action = "ignore", category = FutureWarning)warnings.filterwarnings("ignore")import reimport pandas as pd import numpy as npimport itertoolsimport cx_Oraclefrom s
2020-07-10 21:04:05
111
原创 linux安装svn及使用
安装与启动# 关闭防火墙systemctl stop firewalld# 或添加端口3690及telnetfirewall-cmd --permanent --add-port=3690/tcpfirewall-cmd --permanent --add-service=telnetfirewall-cmd --reloadfirewall-cmd --list-allsystemctl restart firewalldfirewall-cmd --state # 安装yum i
2020-06-27 08:38:34
203
原创 anaconda安装与使用
yum install -y bzip2yum 失败时：yum clean all;rpm --rebuilddbbash Anaconda3-5.3.1-Linux-x86_64.sh一直回车和yes环境变量 export PATH=$PATH:/home/software/anaconda3/bin验证python3
2020-06-25 18:06:35
442
原创 sqoop安装
sqoop 安装解压sqoop-1.4.7.bin__hadoop-2.6.0.tar解压依赖zookeeper-3.4.6.tar复制commons-lang-2.6.jar到lib/复制mysql-connector-java-8.0.20.jar到lib复制ojdbc6.jar到lib配置cp $SQOOP_HOME/conf/sqoop-env-template.sh $SQOOP_HOME/conf/sqoop-env.shvi $SQOOP_HOME/conf/sqoop-en
2020-06-07 09:00:27
165
原创 linux安装mysql
linux安装mysql解压修改配置文件初始化修改密码远程登录解压# 解压tar -zxvf mysql-5.7.28-linux-glibc2.12-x86_64.tar.gz# 移动mv mysql-5.7.28-linux-glibc2.12-x86_64 /usr/local/mysql# 创建记录文件夹mkdir -p /usr/local/mysql/data# 建用户useradd -m mysql# 修改所属和权限chmod -R 755 /usr/local/
2020-05-18 21:40:16
149
原创 spark_快速搭建_1host
spark_快速搭建_1host解压修改配置文件启动查看命令行模式解压echo 'SPARK_HOME=$HOME/program/spark' >> ~/.bash_profileecho 'PATH=$PATH:SPARK_HOME/bin' >> ~/.bash_profiletar -zxvf spark.tarmv spark $SPARK_HOME...
2020-04-29 16:12:51
238
原创 hive_快速搭建_1host
hive_快速环境搭建_1host解压修改配置文件启动解压echo 'export HIVE_HOME=$HOME/program/hive'echo 'PATH=$PAHT:$HIVE_HOME/bin'tar -xvf hive.tarmv hive $HIVE_HOME修改配置文件cd $HIVE_HOME/confcp hive-default.xml.template...
2020-04-29 14:04:41
221
原创 hadoop_ 快速搭建_1host
hadoop_精简环境，1host伪分布式1 root用户配置1.1 修改静态ip1.2 修改主机名称1.3 修改时区1.4 关闭防火墙1.5 配置hosts1.6 安装java1.7 创建用户，并开启免密登录2 hadoop用户配置2.1 安装hadoop2.2 安装zookeeper2.3 编辑用户环境变量2.4 配置SSH2.5 配置hadoop2.6 启动1 root用户配置1.1 修...
2020-04-28 22:17:14
427
原创 oracle数据库（十）_表空间
oracle数据库（十）_表空间表空间概述默认表空间创建及维护表空间撤销表空间作用使用临时表空间概述使用表空间概述数据库的最高逻辑层应该根据具体应用情况，建立不同类型的表空间，用以提升效率。例如专门存放表数据或索引逻辑结构：数据库，表空间，段，盘区，数据块物理结构：数据文件，操作系统块默认表空间example：存放个样例sysaux：syste表空间的辅佐空间，存放数据字典...
2020-04-27 17:41:55
227
原创 oracle_cdc环境配置
oracle_cdc环境配置1 同步1.1 系统用户设置1.2 发布用户设置1.3 订阅用户设置1.4 订阅用户使用1 同步1.1 系统用户设置-- 系统设置===============================================================-- 修改系统参数alter system set java_pool_size=50000000;-...
2020-04-26 19:59:33
801
1
原创 oracle数据库（九）_文件管理
文件管理控制文件作用多路复用创建控制文件备份控制文件恢复控制文件删除控制文件查询控制文件重做日志文件特点创建重做日志归档日志文件控制文件作用【控制文件记录对应数据库结构信息：数据文件及位置，日志文件及位置，数据库当前参数设置】多路复用至少要为数据库建立两个控制文件，否则无法启动控制文件保存在不同磁盘上更安全CONTROL03.CTL需要手动复制，需先停止OracleServiceO...
2020-04-26 19:56:28
195
原创 虚拟机网络配置
1， 编辑=》虚拟机网络编辑器，设置子网地址2，设置虚拟网络地址3，选择nat网络模式4，设定虚拟机网络地址5，测试ping 10.10.10.10
2020-04-18 20:04:05
102
原创 随机数
随机数# 环境变量# import os,sys# base = os.path.abspath('..')# sys.path.insert(0,base)# 忽略警告信息# import warnings# warnings.simplefilter(action = "ignore", category = FutureWarning)# warnings.filterwa...
2020-04-05 13:20:02
112
原创 oracle数据库（一）_安装与使用
oracle数据库（一）_权限控制1 创建用户2 常用系统操作1 创建用户-- 首次登陆sqlplus /nologconnect / as sysdba-- 切换账户conn scott/tigerconn / as sysdba-- 创建用户create user test identified by 123 ACCOUNT UNLOCK;-- 更改密码alter ...
2020-04-02 16:54:06
171
原创 oracle数据库（六）_PLSQL
oracle数据库（六）_PLSQL格式类型表类型hello world流程控制ifcase循环loopwhilefor游标动态SQL其他格式[DECLARE] --declaration statements ①BEGIN --executable statements ② [EXCEPTION] --exception statements ...
2020-04-02 16:52:51
518
原创 oracle数据库（二）_基础使用
oracle数据库_基础篇1 注意事项1.1 效率1.2 sql语言类型1.3 分层逻辑（BI开发基本流程）1.4 基本数据类型1.5 特性2 常见问题2.1 plsql乱码问题2.2 plsql过期3 控制基础4 语法基础4.1 创表4.2 视图4.3 增删改4.4 查5 函数基础5.1 数字数5.2 字符函数5.3 日期函数5.4 转换函数5.5 聚合函数5.6 通用函数6 常用实例1 注...
2020-04-02 16:52:27
204
原创 oracle数据库（三）_进阶查询
oracle数据库_进阶层级关联字符串函数进阶界定符listagg，列组合排名的区别intervaloverkeep层级关联select level,empno,ename,mgrfrom empconnect by prior empno = mgrstart with mgr is nullorder by level;字符串函数进阶translate(expr,from_s...
2020-04-02 16:50:41
418
原创 python3在oracle插入中文编码问题
正常读取读取解决中文乱码，修改一下变量保持和oracle一致import osos.environ['NLS_LANG'] = 'SIMPLIFIED CHINESE_CHINA.UTF8'查看oracle的NLS_LANGselect * from V$NLS_PARAMETERS;正常insert和update需要修改os.py源文件：C:\Users\Admini...
2020-03-03 16:39:27
402
原创 python_matplotlib_常用例子
python_matplotlib_常用例子正常显示中文折线图条形图正常显示中文import matplotlib.pyplot as pltplt.rcParams['font.sans-serif'] = ['SimHei']plt.rcParams['axes.unicode_minus'] = False 折线图# 数据df = pd.DataFrame(np.aran...
2020-02-07 11:28:33
211
原创 爬天猫，京东品牌
淘宝品牌# -*- coding:utf-8 -*-# 爬虫_seleniumimport jsonimport itertoolsfrom selenium import webdriverfrom selenium.webdriver.common.by import Byfrom selenium.webdriver.support.ui import WebDriverW...
2020-02-07 11:26:50
187
原创 爬虫_requests_html
爬虫_requests_html安装基本使用生成htmlscript支持安装pip3 install requests_html基本使用# 导入# from requests_html import HTMLSession,HTML# 生成会话session = HTMLSession()# 设置头部headers={ 'User-Agent':'Mozilla/5...
2020-02-07 11:25:04
157
原创 python_pandas_常用例子
pandas_常用例子杂烩多维分组并降维多维分组并降维# -*- coding:utf-8 -*- import pandas as pd import numpy as np df = pd.DataFrame(np.arange(12).reshape(3,4),index=list('abc'),columns=list('qwer'))# 数值切片bins = [0,5...
2020-02-07 11:21:42
1311
原创 win下配置java
下载https://www.oracle.com/technetwork/java/javase/downloads/index.html安装jdk-8u241-windows-x64.exe添加环境变量'JAVA_HOME':'C:\Program Files\Java\jdk1.8.0_241''CLASSPATH':'.;%JAVA_HOME%\lib;%JAVA_HOME%\...
2020-02-06 14:42:56
100
原创 oracle杂记_PLSQL
PLSQL-- 输出DECLAREret VARCHAR2(20);BEGIN ret := 'hello world!'; DBMS_OUTPUT.PUT_LINE(ret);END;-- select...intoDECLAREret VARCHAR2(20);BEGIN select "ts_code" INTO ret from "code...
2020-01-14 17:57:46
163
原创 oracle杂记_基础
Oracle表创建表约束表修改表列数据主要数据类型查询example转化有数据的列类型表创建表CREATE TABLE "student"( "sno" VARCHAR2(10) PRIMARY KEY, "name" VARCHAR2(10) NOT NULL, "sex" VARCHAR2(2) CHECK("sex"='男' OR "sex"='女'), "age" NUMBE...
2020-01-13 16:22:52
330
原创 解析器_etree
from lxml import etreesrc_str='''<?xml version="1.0" encoding="ISO-8859-1"?><bookstore><book category="COOKING"> <title lang="en">Everyday Italian</title> &l...
2020-01-06 17:12:28
332
原创 pyinstaller
安装pip install pyinstaller使用# 标准使用pyinstaller -F demo.py # 指定模块pyinstaller.py -F -p C:\python27; ..\demo.py# 添加图标pyinstaller.py -F -p C:\python27; -i ..\a.ico ..\demo.py...
2019-11-15 09:52:30
113
原创 安装redis
@[toc]安装redisWindows# 指定配置文件启动redis进程redis-server.exe redis.windows.conf# 客户端连接redis并指定地址redis-cli.exe -h 127.0.0.1 -p 6379Linux$ wget http://download.redis.io/releases/redis-2.8.17.tar.gz$ ...
2019-08-16 09:11:52
92
原创 mongoDB安装
mongoDB安装Windows快速启动配置服务启动服务LinuxWindows快速启动# 指定数据存储目录C:\mongodb\bin\mongod --dbpath c:\data\db# 创建日志文件mkdir c:\data\log# 连接C:\mongodb\bin\mongo.exe配置服务可以创建一个新配置文件的并指定位置C:\mongodb\mongo...
2019-08-16 08:41:10
235
原创 scrapy_常用技术
scrapy_常用技术中间件简明数据库链接MySqlMongoDB对接selenium对接Docker中间件简明middlewares.pyDOWNLOADER_MIDDLEWARESSpider与Downloader的中间件from scrapy import signalsfrom fake_useragent import UserAgentclass RandomUse...
2019-08-10 14:53:22
209
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人