Python 爬虫
Python 爬虫,scrapy相关的代码
Fly.Py
这个作者很懒,什么都没留下…
展开
-
selenium 控制打开的谷歌浏览器
【代码】selenium 控制打开的谷歌浏览器。原创 2024-05-20 13:48:17 · 150 阅读 · 0 评论 -
Python程序监控其他Python程序是否卡死二
if cpu_percent < 0.01 and create_time > 60: # 当CPU占用率小于0.01且运行时间超过一分钟,则判断程序卡死。# 本代码是使用psutil库打开被监控的程序,对这个程序的运行时间和CPU占用率,内存占用率进行监控,判断程序是否卡死。process = psutil.Popen(["Python解释器的绝对路径","被监控程序的绝对路径"])print("程序已经卡死!# 判断被监控程序的运行时间和CPU占用率。# 运行被监控的程序。原创 2024-01-10 10:06:18 · 458 阅读 · 0 评论 -
Python程序监控其他Python程序是否卡死一
subprocess.run(["Python解释器位置","其他脚本位置"]) # 位置都用绝对路径。print('程序运行完毕后的操作')print('程序已经卡死!# 重新启动程序(程序卡死后的操作)# 创建一个新的线程来执行目标程序。# 设置多长时间监控一次。# 检查程序是否在运行。# 启动其他Python脚本。原创 2024-01-05 11:46:31 · 437 阅读 · 0 评论 -
爬虫调用JS文件出现--AttributeError: ‘NoneType‘ object has no attribute ‘replace‘
然后找到init函数,把下面的encoding改为‘utf-8’找到这个并进入这个python文件中。import execjs 前面去。原创 2023-03-09 18:22:28 · 423 阅读 · 0 评论 -
scrapy-Redis分布式爬虫
scrapy-Redis分布式爬虫的代码讲解原创 2023-06-14 11:49:25 · 123 阅读 · 0 评论