- 博客(22)
- 收藏
- 关注
RSS订阅原创 DataX oracle同步mysql(新增及变化)
Datax 同步orcale 到 mysql 全量、新增及变化，使用Navicat转换oracle建表语句，在mysql中生成表结构。
2022-07-11 16:06:16
2437
原创 PyCharm整合Hive并通过SparkSQL执行引擎去操作Hive表
使用SparkSQL整合Hive其实就是让SparkSQL去加载Hive 的元数据库，然后通过SparkSQL执行引擎去操作Hive表
2022-07-08 10:28:59
612
原创 orcale 获取本周、月、季、年第一天和最后一天
orcale 特殊日期查询本周第一天本周最后一天本月第一天本月最后一天本季第一天本季最后一天本年第一天本年最后一天获取前一天的开始时间获取前一天的结束时间获取上个月开始时间获取上个月结束时间dual 是系统自带的日期表trunc() 系统时间函数 sysdate 可以获取当前日期 last_day(sysdate) 获取本月最后一天本周第一天select trunc(sysdate, 'd') + 1 from dual;本周最后一天select trunc(sysdate, 'd')
2022-01-13 09:48:19
1096
原创 requests跨域登录不了问题解决
requests 模块去访问登录Django web项目时因跨域问题登录不了，网上大部分解决方案是关闭Django内部的跨域配置，真是服了，这里我用的是请求端的解决方案。跨域请求登录不成功主要配置有两个1.header头中需要加Cookie：crsftoken=xxxxxxx urlcsrf = "http://10.197.24.60:7100/users/user_login/" result = requests.get(url=urlcsrf) csrfcookie =
2021-12-16 08:59:56
1312
1
原创 Ngnix 实现Oracle数据库端口转发
通过访问服务器8000端口，转发到本地Oracle数据库的1528端口编辑 ngnix.conf 文件worker_processes 1;stream{ server{ listen 10.175.95.58:8000; //监听服务器的8000端口； proxy_pass 10.175.95.58:1528; //当有人访问服务器的8000端口会转发到 1528端口的服务 }}events{ worker_connections 1024;}重启ngni
2021-11-16 15:19:38
2088
原创 oracle触发器实现主键自增
oracle触发器实现主键自增直接上代码解释直接上代码解释CREATE SEQUENCE **"SHINE"."S_USER_DETAIL"** MINVALUE 0 MAXVALUE 9999999999999999999999999999 INCREMENT BY 1 START WITH 1 **CACHE 20** ORDER NOCYCLE ;create or replace trigger **T_USER_DETAIL** before insert or update
2021-10-29 14:52:30
333
原创 数据库建模
1数仓理论1.1范式理论1.1.1范式的概念定义：范式可以理解为设计一张数据库表结构符合某种标准级别的规范和要求。优点：在关系型数据库建表时遵循一定的规范要求，目的降低数据的冗余性。缺点：在获取数据时通过jion拼接出完整数据。分类：目前业界范式有：第一范式、第二份范式、第三范式、巴斯-科德范式、第四范式、第五范式1.1.2 函数的依赖1.完全函数依赖比如通过,（学号和课程）可以推断出分数，但是单独的学号推断不出分数，那么就可以说分数完全依赖与（学号和课程）即：通过AB可以得
2021-03-02 14:24:45
594
原创 网络云盘springboot后端项目部署启动
这里默认小伙伴们已经看了前四篇文章，那么环境已经搭建好了。启动zookeeper[root@huachuan01 ~]# /opt/module/zookeeper-3.4.9/bin/zkServer.sh start启动hadoop的HDFS[root@huachuan01 ~]# start-dfs.sh启动Hbase[root@huachuan01 ~]# /opt/module/hbase-1.2.4/bin/start-hbase.sh查看后台java进程跟我一样就ok啦
2021-01-31 14:56:29
350
原创 网络云盘搭建 MySQL安装虚拟机准备（四）
#虚拟机准备（四）1 下载并安装mysql的YUM源：1.1 卸载自带的Mysql-libs（如果之前安装过mysql，要全都卸载掉）[shine@huachuan01 ~]$ rpm -qa | grep -i -E mysql\|mariadb | xargs -n1 sudo rpm -e --nodeps1.2 进入/opt/software/下载并安装[shine@huachuan01 /]$ cd /opt/software/2 安装MySQL2.1 下载Mysql yum 源
2021-01-18 17:21:59
245
原创 网络云盘搭建 虚拟机准备（三）
虚拟机准备（三）1 zookeeper安装部署1.1 进入到Zookeeper安装包路径下cd /opt/software/1.2 解压安装文件到/opt/module下面[shine@huachuan01 software]$ lltotal 514236-rw-rw-r-- 1 shine shine 214092195 Jan 17 16:14 hadoop-2.7.3.tar.gz-rw-rw-r-- 1 shine shine 104497899 Jan 17 16:28 hba
2021-01-17 21:14:28
369
原创 网络云盘搭建 虚拟机准备（二）
虚拟机准备（jdk安装）1 卸载现有JDK[shine@huachuan ~]$ rpm -qa | grep -i java | xargs -n1 sudo rpm -e --nodeps2在/opt目录下创建文件夹2.1在/opt目录下创建module、software文件夹[shine@huachuan opt]$ sudo mkdir module[shine@huachuan opt]$ sudo mkdir software2.2 修改module、software文件夹的所
2021-01-17 18:45:45
499
原创 网络云盘搭建 虚拟机环境准备（一）
虚拟机环境准备（修改主机名、创建自己的用户）1 修改主机名1.1修改主机名称[shine@huachuan ~]$ sudo hostnamectl --static set-hostname huachuan011.2配置主机名称映射，打开/etc/hosts[shine@huachuan ~]$ sudo vim /etc/hosts添加以下内同(我这里用的阿里云服务器，公网ip和主机名注意要写你自己的)192.168.1.100 hauchuan011.3修改windows的主
2021-01-16 23:03:24
1012
3
原创 小柒心得jQuery入门(一)
jQuery讲解及用法在传统的获取对象方式中，我们使用js的DOM对象进行获取html元素的对象例如：通过id获取html对象var obj = document.getElementById(id值)我们发现上述代码仅仅获取一个对象代码就要写很长，使用起来不是很方便优化方案：以后每次调用getId函数即可<script TYPE="text/javascript"> function getId(id) { var obj = document.getEl
2020-10-12 11:17:29
115
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人