![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python3.x
cool_soup29
host文件的位置::C:\Windows\System32\drivers\etc
展开
-
python3 实现定时任务模块apscheduler
定时任务说明from apscheduler.schedulers.blocking import BlockingScheduler# 定时任务 cron@gl_error_register # 装饰器,用于捕捉程序异常的操作def time_job(func): ''' 定时执行 func 函数 :param func:函数名 :return: ''' scheduler = BlockingScheduler() schedule原创 2021-01-12 09:55:37 · 367 阅读 · 0 评论 -
python3 requests.post接口抓取实例
主要涉及到知识点requests.post的应用lxml的etree模块的xpath应用post抓取实例原创 2019-11-26 15:05:34 · 743 阅读 · 0 评论 -
基于[pypyeteer] 的脚本开发记录
pyppeteer新利器?没有官方的中文文档,网上很多分享文档有点硬生生翻译别人的英文文档,看起来相当别扭,那么我们就自己踩坑理解吧,加油!笔记基于lazada后台登录发送消息脚本的笔记,各路大神,如有错误,多多指教!原创 2019-11-09 11:49:44 · 343 阅读 · 4 评论 -
[杂] python3.x 那些新奇好玩的模块,待续
将中文转成拼音pip3 install xpinyinfrom xpinyin import Pinyinp = Pinyin()p.get_pinyin("中文字符串")python3 操作excel表原创 2019-06-22 15:40:47 · 534 阅读 · 0 评论 -
python3使用pyppeteer绕过navigator.webdriver的脚本特征值检测
如今,网上说的检测脚本特征值的办法是# F12 console 输入navigator.webdriver# 脚本被识别则返回>> true # 正常浏览器会返回>> undefined# 或者>>False以上是目前网上比较流行的脚本检测一种说法,如果有其他pyppeteer 是什么?pyppeteer是基于node.js操作chro...原创 2019-07-09 11:09:45 · 1324 阅读 · 0 评论 -
Ubuntu18安装scrapy,出现command 'gcc' failed with exit status 1 解决方案
安装scrapy,获取其他出现这个问题解决方案如下:1. 参考自己的python 的版本当遇到这个错误,请在错误之前注意它可能说你是缺少一个包或头文件,你会发现那些并安装它们,并验证其是否工作正常。(例如ssl - > libssl)#对于Python 2.x使用:sudo apt-get install python-dev#对于Python 2.7使用:sudo apt-...原创 2019-07-09 14:34:39 · 647 阅读 · 0 评论 -
淘宝,速卖通,天猫同理,商品视频下载过程分享,2019/10/21更新
正常来说,小网站的图片和视频非常容易下载,匹配到视频展示的那个节点找到视频链接就可以开始进行下 载了。可是对于淘宝之类的大一点的手段,增加难度,在video节点那里并非是直接调用音频视频链接啥的,打开video上面。回归正题,打开淘宝的商品详情页F12打开,再播放视频,会看到以下情况这个taobaolive,在不断地加载,应该是和视频有关。至于这种技术,希望有天能了解接触。每个...原创 2019-09-27 16:03:18 · 2088 阅读 · 0 评论