杨杨little-CSDN博客

原创 git操作

问题：git pull代码报错 has no tracked branch解决：远程和本地关联git remote add origin 远程地址git pullgit branch —set-upstream-to=origin/远程分支本地分支

2021-07-07 12:16:11 92

import requestsimport jsonimport demjsonimport pandas as pdresp = requests.get('http://fund.eastmoney.com/data/Fund_JJJZ_Data.aspx?t=7&page=1,1000000&js=reData&sort=mui,desc')data = resp.textdata = data.replace('var reData=','')b = demjs

2021-05-07 00:01:50 221

原创 DataFrame行列求和，指定列求和，指定行求和

想统计某些公司在各个省份的xxdf = pd.DataFrame([['A公司', 1, 2, 3, 4, 5], ['B公司', 0, 0, 1, 0, 0], ['C公司', 2, 3, 4, 5, 0]], columns=['公司名', '北京', '江苏', '浙江', '上海', '广东'], index=None)df_sum = df.sum() # 全部列求和df_sum = df[['北京', '江苏', '浙江', '上海', '广东']].sum() # 指定列求和，默

2021-05-04 00:37:45 25455

原创数据结构和算法

基础算法1. 优先级，内存空间1. 优先级，内存空间1 +2 == 3 -->> True1 + 2 is 3[1] + [2] = [1,2][1] + [2] is [1,2]

2021-04-23 00:31:12 51

原创 2020-09-20

import osfrom openpyxl import load_workbookfrom openpyxl.styles import Border, Font, Side, colorsimport datetimeimport pandas as pdimport numpy as npclass SQLList: sql_1 = pd.DataFrame(np.random.rand(3, 8)) sql_2 = pd.DataFrame(np.random.ra

2020-09-20 21:54:14 2076

原创元数据采集

好迷茫啊~哎，那就写一篇流水账吧。总结总结吧。Oracle角色：dba,all，user。主要采集的是dba角色的视图，部分采集的是all。dba 数据库管理员角色user 当前用户all 介于两者之间主要采集了[objects, tables, tab_columns,]MySQLinformation_schema用户下的所有表HIVEhive的元数据以mysql或者oracle作为backend，所以实际是采集的mysql或者oracle的表。version，数据库相关：d

2020-07-22 23:11:27 2327

原创 Airflow学习笔记

1. 安装环境cetnos 7 64位python3.6.8pip3安装命令pip install apache-airflow2. 初始化airflow initdb– 创建airflow数据库create database airflow;– 创建用户create user airflow@‘localhost’ identify by ‘airflow’;– 查看权限show grants for airflow@‘localhost’;– 授权GRANT all

2020-07-21 01:04:51 154

原创 oracle last_day函数和instr函数

last_day(datetype)函数 --返回每月的最后一天select last_day(to_date(sysdate)) from dual;select last_day(to_date('20190523','yyyymmdd')) lastday from dual;instr字符串查找函数第一种类型： instr(‘源字符’,‘目标字符’) select ...

2019-05-23 23:24:32 332

原创解决Xshell6中文乱码的问题

解决Xshell6中文乱码的问题最后在终端输入 export LC_ALL=zh_CN.UTF-8解决之后：不乱码了试了很多种方法都没有成功，最后在终端输入 export LC_ALL=zh_CN.UTF-8解决之后：不乱码了...

2018-12-16 19:31:32 10041

原创 selenium安装及基本使用

安装 pip install selenium 下载chromediver，版本要与自己的chrome对应下载地址：http://blog.csdn.net/huilan_same/article/details/51896672 下载成功后：解压到python解释器的路径下使用创建selenium对象，driver = webdrive.Chrome() #如果第二步安装...

2018-09-16 12:15:48 239

weixin_42326779的博客