python
Cqw150
这个作者很懒,什么都没留下…
展开
-
scrapy 异步插入数据库pipeline 通用代码
核心代码class MysqlTwistedPipeline(object): """ 异步存储到MySQL """ def __init__(self, dbpool): self.dbpool = dbpool # self.redis_client = redis.StrictRedis( # host=settings.REDIS_HOST, # port=settings.REDIS_PORT,原创 2021-07-20 15:43:21 · 280 阅读 · 0 评论 -
基于pyppeteer 破解极验滑块验证码
本文章主要介绍 如何使用pyppeteer破解滑块验证码,主要分为3个步骤:1.下载滑块验证码的原图和缺口图片。2.计算缺口偏移量3.模拟滑块滑动,并处理结果 首先这次的目标网站是国家企业标准网:http://www.qybz.org.cn/standardProduct/toAdvancedResult.do这个网站打开的时候就有一个滑块验证码需要点击,首先是获取原图和缺口图async def get_pic(page): '''获取图片 ...原创 2021-06-28 16:23:52 · 1893 阅读 · 0 评论