自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(9)
  • 收藏
  • 关注

原创 Mysql--“insert ignore“与“replace into“的用处

‘insert ignore into 表’这种方法如果表内有相同(主键)数据,则不会插入数据库,直接跳过,不相同的则会存入数据库‘replace into 表’这种方法如果表内有相同(主键)数据,新数据会覆盖掉老数据,不同的也会存入数据库两种方式根据不同需求使用...

2020-07-14 15:01:17 156

原创 雪碧图下载-python

data:image/png;base64,iVBORw0KGgoAAAANSUhEUgAAAF4AAAAmCAIAAADCwbuVAAACR0lEQVR42t2ZsU7EMAyGLbEgsTPwJLAxwIMwshzvPx0nVYoq23F+O46v1yoDPdI6+fLbcVy6nvq6XP7Cz9L17NeNTgzQ+dGEAVGxSh/Iv6jehx9FPkVoilEOzSGAqEacR0ODdCPJ0m7hwFZJx7CFD2NWNbilAjRs5Ybe5FDN0h2x1zMRWXvVcGB7Or

2020-06-15 13:56:25 542

原创 mysql--批量更改数据库某字段内数据

mysql–批量更改数据库某字段内数据UPDATE table_name SET 字段B = replace(字段B, '已有内容', '改变数据')

2020-05-21 14:53:20 848

原创 mysql--仅以年月日形式取出datetime格式数据

mysql–仅以年月日形式取出datetime格式数据select date(create_time) from table_name

2020-05-21 14:49:25 406

原创 爬虫--线程池

写爬虫为啥要用多线程呢?IO密集型代码(文件处理、网络爬虫等),多线程能够有效提升效率(单线程下有IO操作会进行IO等待,造成不必要的时间浪费,而开启多线程能在线程A等待时,自动切换到线程B,可以不浪费CPU的资源,从而能提升程序执行效率)。线程池:import threadpooldef main(url): req = requests.get(url).text ...

2020-04-10 15:34:37 200

原创 execjs 报错----navigator is not defined

使用execjs运行js时遇到navigator is not defined报错,解决办法:在js里加入global.navigator={ userAgent: 'node.js', };即可

2020-04-10 15:03:22 6035

原创 爬虫--js混淆的一些解决方法

爬虫--js混淆的一些解决方法js混淆1.由颜文字组成的混淆代码2.由符号组成的混淆代码由各种括号等组成的混淆代码js混淆1.由颜文字组成的混淆代码如上所示,这就是混淆成颜文字的js,这类混淆的解决办法,复制代码到控制台,删除最后表情(·-·)和‘;’,加上.toString(),运行后就会出现混淆前的js.2.由符号组成的混淆代码上图就是由符号形成的混淆代码,复制代码到控制台,删除...

2020-03-23 14:00:10 1318

原创 写爬虫时遇到一些反爬虫--汇总

写爬虫时遇到一些反爬虫--汇总1.最最常见的就是封ip了2.请求头3.登录4.数据加密5.字体反爬6.js加密7.滑块验证码8.selenium9.HOOK1.最最常见的就是封ip了有条件呢,当然是买代理好,质量高,数量多;没有条件的,像我就是自己搭一个代理池,抓一些免费的高匿代理用用,因为我遇到的项目数据量要求不太大,足够使用了。给大家推荐一个代理池代理池,安装及其简便,很舒服2.请求头...

2020-03-16 15:09:46 346

原创 破解selenium封禁--去哪儿酒店爬虫

本文通过对去哪儿酒店信息的爬取,来分享一种破解selenium因特殊标识符被识别的封禁的方法。

2019-05-31 18:07:37 2142 1

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除