Python
xy_8625
这个作者很懒,什么都没留下…
展开
-
微博热搜榜爬虫2.0
微博热搜榜爬虫2.0 6月份出了一个微博热搜爬虫,在我电脑上设置了自动化12点爬取,结果到了9月份,执行不了。 一直没时间弄,今天来更新一下: 解决了两个问题, 1 >之前的话请求头比较单一,只有headers,目前直接访问,会被反爬。(js) 2 > 之前的re.findall 取不到值了,研究了一下网页也没什么变化啊。加了这个<a href="(.*?)" “点星问” P.s=需要用的小伙伴Cookies 就用你自己的吧。 小作业,直接Copy没意思。 # -*- Coding utf原创 2021-11-19 14:06:40 · 868 阅读 · 0 评论 -
学Scrapy Anaconda3 win 64位版下载
学Scrapy 安装都是个技术活! Anaconda3 的官网为什么访问还要FQ, 还好下载链接还可以用。 下面的链接可以直接迅雷! 直接迅雷https://repo.anaconda.com/archive/Anaconda3-2020.07-Windows-x86_64.exe原创 2020-10-31 16:01:50 · 86 阅读 · 0 评论 -
Python 清理文件目录的小程序
Python 清理文件目录的小程序 前言 学习Python爬虫后,会抓取一些需要清理的无用数据在此问题之下,我写了一个清理指定目标文件夹的小程序 话不多说:代码如下(示例): # -*- Coding utf-8 -*- # @time : 2020-10-10 上午 11:52 # @Author : Peter Xiang # @File :Del_jpg.py # @Software : PyCharm import os # def get_path_AllFile(): input_Path原创 2020-10-11 11:59:53 · 238 阅读 · 2 评论