自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(12)
  • 收藏
  • 关注

原创 了解 log4j远程代码执行漏洞

因为log4j辛苦修了一天代码,必须简单吃下这个瓜~~输入${jndi:rmi://ip:port/obj}即可触发的漏洞,从修复方案看,升级log4j版本,或者临时方案如:改配置文件 log4j2.formatMsgNoLookups=True添加jvm启动参数 -Dlog4j2.formatMsgNoLookups=true修改环境变量FORMAT_MESSAGES_PATTERN_DISABLE_LOOKUPS 设置为true接下来开始一步步简单吃下瓜临时解决方案均是关闭lookup,

2021-12-15 23:29:28 976

原创 常用数据规范化方法: min-max规范化,零-均值规范化等

数据变换是数据准备的重要环节,将数据转换成适用于数据挖掘的形式。数据变换的常用方式:数据平滑:去除噪声,将数据离散化数据聚集:如sql中的聚集函数,count(), sum()数据概化:数据由较低概念 抽象为 较高概念数据规范化:统一尺度属性构造:构造新的属性 (特征工程)相关代码地址接下来,介绍数据规范化的几种方法:1 Min-Max 规范化(最小-最大规范化)将原始数据映...

2020-02-21 15:07:29 13231 1

原创 排查解决 json.decoder.JSONDecodeError: Expecting value: line 1 column 1 (char 0)

python爬虫起步时碰到该错误,如下代码:(python版本,3.7)url = https://www.douban.com/j/search_photo?q=熊猫&limit=20&start=0html = requests.get(url).text response = json.loads(html)运行时报错:json.decoder.JSONDeco...

2020-02-18 16:51:12 29077 2

原创 sql join连接 及 聚合函数

1 sql语句基础sql(结构化查询语言)分为两个部分:DML,DDLDML 数据操作语言(查询和更新指令)指令含义select获取数据update更新数据delete删除数据insert插入数据DDL 数据定义语言(create / alter / drop)创建/修改/删除 database/table创建/删除 index...

2020-02-03 16:30:42 2047

原创 sql 条件判断 if / case when then / ifnull

1 if 和 ifnullif 类似三元运算符,if(?=?,a,b) 为true等于a,false等于b,类似三元表达式ifnull函数用于在MySQL中将NULL值替换为另外一个值2 case 流程控制简单case函数枚举某个字段 或者 某个字段函数的所有值如:CASE country WHEN '中国' THEN '亚洲' WHEN '美国' THEN ...

2020-02-02 18:34:23 649

原创 mac环境 python3.7安装 ssl module 及 lzma.py 报错解决

emmm, 折腾了三个小时的环境。import ssl 报错 No module named ‘_ssl’吐槽一波后,还是要处理哇环境:macpython版本:3.71 No module named '_ssl’最终解决方式1 确认是否安装ssl查看openssl版本 openssl version OpenSSL 1.0.2s ...

2019-08-28 15:19:51 3856

原创 代理模式 以及 php对象实例化的应用场景

0 代理模式代理模式,即通过 代理对象 访问 目标对象,可以在目标对象实现的基础上,增加额外的功能性操作静态代理即在代理类中重写需要调用的方法,实现思路直接,但需要维护很多代理类动态代理相关内容作为参数传入,如java的 newProxyInstance1 php适合代理模式的__call()方法当对象调用不存在 或者 受权限限制的方法时,__call()会被自动调用...

2019-07-23 20:18:53 283

原创 git 实用问题整理

上车前只熟悉了add, commit,然后就碰上了 一不小心玩坏了。。。mark一下1. git reflog 查看之前的所有记录,git log不能查看已删除的commit3146d6f (HEAD -> master) HEAD@{0}: reset: moving to 3146d6f17082abcadb2e254616f603ef4ecdc4d7fd7d8a5 ...

2018-08-29 23:36:25 116

原创 select / poll / epoll 结合源码分析

0. IO基础0.1 计算机IO控制方式询问方式(CPU和IO设备串行工作)a. 查询指令,用来查询设备是否就绪b. 传送指令,设备就绪时,执行数据交换c. 转移指令,设备未就绪时,执行转移指令转向查询指令继续查询缺点:CPU的反复查询过程,浪费时间;且CPU需参与数据的传送过程中断方式(CPU和IO设备可实现部分并行)a. 外围设备仅当操作正常或异常...

2018-05-16 01:24:21 412

原创 请求url的底层数据通信过程

对url加载过程中底层通信过程的分析。访问某网址时,即使通过本地缓存即可完成域名解析,但与对应IP地址建立TCP连接的前提是:本机可与服务器进行数据报的交互,因此对该过程进行一定的了解。0. TCP/IP五层模型 TCP/IP层 主要协议及功能 应用层 HTTP, SMTP 传输层 提供端对端的接口TCP/UDP 网络层 为数据包选择路...

2018-05-13 13:24:24 533

原创 数据分析——特征工程

1. 数据预处理1.1 缺失值处理根据经验值填充失数据计算均值,中位数,众数。。等填充数据重新获取缺失数据1.2 数据格式/字符类型不符1.3 逻辑错误数据重复,去重操作数据逻辑不合理,如存在相关性的值之间存在矛盾(eg: 身份证号码和填写生日)1.4 非需求数据处理1.5 文本数据无关数据脏数据1.6 图片数据图片...

2018-05-13 09:57:10 894

原创 前端缓存(web缓存)

前端缓存(web缓存)

2018-01-15 22:34:29 759

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除