PyCharm整合Hive并通过SparkSQL执行引擎去操作Hive表 使用SparkSQL整合Hive其实就是让SparkSQL去加载Hive 的元数据库，然后通过SparkSQL执行引擎去操作Hive表
orcale 获取本周、月、季、年第一天和最后一天 orcale 特殊日期查询本周第一天本周最后一天本月第一天本月最后一天本季第一天本季最后一天本年第一天本年最后一天获取前一天的开始时间获取前一天的结束时间获取上个月开始时间获取上个月结束时间dual 是系统自带的日期表trunc() 系统时间函数 sysdate 可以获取当前日期 last_day(sysdate) 获取本月最后一天本周第一天select trunc(sysdate, 'd') + 1 from dual;本周最后一天select trunc(sysdate, 'd')
requests跨域登录不了问题解决 requests 模块去访问登录Django web项目时因跨域问题登录不了，网上大部分解决方案是关闭Django内部的跨域配置，真是服了，这里我用的是请求端的解决方案。跨域请求登录不成功主要配置有两个1.header头中需要加Cookie：crsftoken=xxxxxxx urlcsrf = "http://10.197.24.60:7100/users/user_login/" result = requests.get(url=urlcsrf) csrfcookie =
Ngnix 实现Oracle数据库端口转发 通过访问服务器8000端口，转发到本地Oracle数据库的1528端口编辑 ngnix.conf 文件worker_processes 1;stream{ server{ listen 10.175.95.58:8000; //监听服务器的8000端口； proxy_pass 10.175.95.58:1528; //当有人访问服务器的8000端口会转发到 1528端口的服务 }}events{ worker_connections 1024;}重启ngni
oracle触发器实现主键自增 oracle触发器实现主键自增直接上代码解释直接上代码解释CREATE SEQUENCE **"SHINE"."S_USER_DETAIL"** MINVALUE 0 MAXVALUE 9999999999999999999999999999 INCREMENT BY 1 START WITH 1 **CACHE 20** ORDER NOCYCLE ;create or replace trigger **T_USER_DETAIL** before insert or update
数据库建模 1数仓理论1.1范式理论1.1.1范式的概念定义：范式可以理解为设计一张数据库表结构符合某种标准级别的规范和要求。优点：在关系型数据库建表时遵循一定的规范要求，目的降低数据的冗余性。缺点：在获取数据时通过jion拼接出完整数据。分类：目前业界范式有：第一范式、第二份范式、第三范式、巴斯-科德范式、第四范式、第五范式1.1.2 函数的依赖1.完全函数依赖比如通过,（学号和课程）可以推断出分数，但是单独的学号推断不出分数，那么就可以说分数完全依赖与（学号和课程）即：通过AB可以得
网络云盘springboot后端项目部署启动 这里默认小伙伴们已经看了前四篇文章，那么环境已经搭建好了。启动zookeeper[root@huachuan01 ~]# /opt/module/zookeeper-3.4.9/bin/zkServer.sh start启动hadoop的HDFS[root@huachuan01 ~]# start-dfs.sh启动Hbase[root@huachuan01 ~]# /opt/module/hbase-1.2.4/bin/start-hbase.sh查看后台java进程跟我一样就ok啦
网络云盘搭建 MySQL安装虚拟机准备（四） #虚拟机准备（四）1 下载并安装mysql的YUM源：1.1 卸载自带的Mysql-libs（如果之前安装过mysql，要全都卸载掉）[shine@huachuan01 ~]$ rpm -qa | grep -i -E mysql\|mariadb | xargs -n1 sudo rpm -e --nodeps1.2 进入/opt/software/下载并安装[shine@huachuan01 /]$ cd /opt/software/2 安装MySQL2.1 下载Mysql yum 源
网络云盘搭建 虚拟机准备（三） 虚拟机准备（三）1 zookeeper安装部署1.1 进入到Zookeeper安装包路径下cd /opt/software/1.2 解压安装文件到/opt/module下面[shine@huachuan01 software]$ lltotal 514236-rw-rw-r-- 1 shine shine 214092195 Jan 17 16:14 hadoop-2.7.3.tar.gz-rw-rw-r-- 1 shine shine 104497899 Jan 17 16:28 hba
网络云盘搭建 虚拟机准备（二） 虚拟机准备（jdk安装）1 卸载现有JDK[shine@huachuan ~]$ rpm -qa | grep -i java | xargs -n1 sudo rpm -e --nodeps2在/opt目录下创建文件夹2.1在/opt目录下创建module、software文件夹[shine@huachuan opt]$ sudo mkdir module[shine@huachuan opt]$ sudo mkdir software2.2 修改module、software文件夹的所
关注
