ling_xiao_csdn-CSDN博客

转载 Pandas - Dataframe 实现 SQL Where

sql中的where语句的功能非常丰富，常用关键包括 =，<>，>=，<=，>，<，in，not in，isnull，like，and，or等关键字，下面我们就来看看，如果是在pandas中该如何实现。>>> import pandas as pd>>> import numpy as npdf = pd.read_excel(r'D:/myExcel/1.xlsx')>>> df = pd.read_ex

2021-09-26 20:45:28 499

原创 Pandas - Dataframe 用to_numeric类型转换后比对数据

用Pandas Dataframe 做数据对比时踩的坑：1. String 转成 Dataframe后数据类型被置为了object| cnt || 461 |expect_table = request.context[entity]logger.info(f"EXPECTED DATAFRAME: {expect_table}")for field_count, field in enumerate(datatable.query_table.rows): # pylint.

2021-09-13 17:56:01 1324

转载 Python 中的new()，init()，call()

__new__方法：类级别的方法特性：1.是在类准备将自身实例化时调用，并且至少需要传递一个参数cls, 此参数在实例化时由python解释器自动提供；2.始终是类的静态方法，即使没有被加上静态方法装饰器；3.必须要有返回值，返回实例化出来的实例；在自己实现__new__()时需要注意：可以return父类（通过super(当前类名，cls)）.__new__出来的实例，或者直接是object的__new__出来的实例class A(object): pass a=A().

2021-09-02 23:05:36 111

原创 sqlalchemy 构建mysql , s3, snowflake 通用连接

项目在做mysql 到snowflake的迁移，做一个通用连接模块适配不同数据库系统的建联早期sqlalchemy目标是提供能兼容众多数据库（如 SQLite、MySQL、Postgres、Oracle、MS-SQL、SQLServer 和 Firebird）的企业级持久性模型代码如下:1. 因为mysql是搭建在云端，需要SSH桥接，加入ssh_tunnel 连接库"""SSH Tunnel Connector"""import loggingimport osimport s

2021-08-26 15:24:18 340

原创 Aktana & Real Chemistry 达成战略合作

2021 年 8 月 24 日，美国加利福尼亚州旧金山（全球新闻通讯社）—— Real Chemistry 全球健康创新公司和 Aktana全球生命科学行业智能客户互动体验的领导者，今天宣布建立合作伙伴关系，这将改变商业战略、参与和执行。两家公司的解决方案之间的融合，将把 Real Chemistry 来自 200,000 名有影响力的健康领域人员和 30,000 名医疗从业人员 (HCP) 的 15 亿医疗社会数据点和保险数据转化为生命科学销售、营销和医疗团队的动态、可操作的洞察关于 Aktana

2021-08-26 14:45:30 306

转载 node.js和npm的关系

一、npm是什么当一个网站依赖的js代码越来越多，程序员发现这是一件很麻烦的事情：去 jQuery 官网下载 jQuery去 BootStrap 官网下载 BootStrap去 Underscore 官网下载 Underscore……有些程序员就受不鸟了，于是npm就出来了，全称是 Node Package Manager 包管理工具。这一点和maven、gradle十分相似，只不过maven、gradle是用来管理java jar包的，而npm是用来管理js的。NPM 的实现思路...

2021-08-22 23:00:29 99

原创 SQL 常用

Mysql:

2021-08-09 10:57:01 52

转载 Shell 常用

Linux中shell变量$#,$@,$0,$1,$2的基本含义:（转自https://www.cnblogs.com/bethal/p/5741879.html）变量说明:$$Shell本身的PID（ProcessID）$!Shell最后运行的后台Process的PID$?最后运行的命令的结束代码（返回值）$-使用Set命令设定的Flag一览$*所有参数列表。如"$*"用「"」括起来的情况、以"$1 $2 … $n"的形式输出所有参...

2021-08-08 20:58:37 53

原创 bitbucket pipeline - caches

在项目中想利用bitbucket pipeline的cache机制节省build时间项目采用poetry 安装 python 依赖库，在pipeline上每次执行安装耗时非常长。尝试用pipeline caches来引入poetry cache:definitions: caches: sonar: ~/.sonar/cache poetry: ~/.poetry/cache services: docker: memory: 2048 .

2021-08-08 14:54:13 605

转载 git pull remote access denied(Public Key error)

偶尔会遇到git pull 或push的时候提示git pull remote access denied. 查找解决方案时发现ssh-agent里面的密匙被莫名的原因清空了，解决方案：1. ssh-add -l 看是key添加到agent的状态，如果查询为空，执行下一步2.ssh-add ~/.ssh/${your_private_key}再尝试git push/pull, 解决。参考：ssh-add命令是把专用密钥添加到ssh-agent的高速缓存中。该命令位置在/usr/..

2021-08-08 10:52:15 370

ling_xiao_csdn的博客