- 博客(6)
- 收藏
- 关注
RSS订阅原创 安装paddlepaddle
官网：https://www.paddlepaddle.org.cn/install/quick?docurl=/documentation/docs/zh/install/pip/windows-pip.html（CUDA 工具包11.0配合cuDNN v8.0.4）按照https://blog.csdn.net/learningpawn/article/details/118567429安装cuda 和cudnn根据官网命令在控制台安装paddlepaddle...
2021-11-11 15:33:03
1073
原创 LAC模块安装后提示“找不到指定模块“
在pycharm以及控制台能够正确安装模块，但是在调用的时候提示错误:找不到指定模块。我也不知道错误在哪，我的是amd处理器，按照https://blog.csdn.net/fuck_hang/article/details/114578986所说下载并安装一个小程序就能完美解决。...
2021-10-06 15:14:13
449
原创 微博移动版获取评论时返回{ok:0}的解决办法
评论获取的方法可以参考这篇文章https://www.jianshu.com/p/8dc04794e35f，讲的非常详细。 但是可能一些朋友还是会和我遇到一样的问题：无论做什么尝试在第一页之后评论返回的都是{ok:0}，这是因为第一页之后的评论想要获取需要登录！！！但是一部分同学在加入登录账号后的cookies值之后依然返回的是{ok:0},这是因为微博限制了评论获取的次数，即便你登陆了账号，短时间也只能获取1次评论！！！！！！（如果多次获取便会返回{ok:0}） ...
2021-09-14 15:26:51
1209
原创 Ajax数据爬取
1.Ajax简介： 简单来说，就是爬取数据时保持URL不变，通过Ajax请求向服务器请求资源以丰富界面的技术[比如说在https://m.weibo.cn往下滑获得更多的微博，B站主页也采用了此技术]。它的过程也很简单：1.发送ajax请求 2.解析服务器返回的内容 3.浏览器中渲染网页。2.Ajax分析： 以https://m.weibo.cn/u/6481722754(夹带私货，嘿嘿)为例。 1.查看请求。依次：①鼠标右键选择“检查”进入开发者选...
2021-09-06 10:38:30
423
原创 Scrapy框架downloader middleware实现随机User-Agent设置
1.在middleware.py中添加一个新类：class RandomUserAgentMiddleware(): def __init__(self): # 随机的列表 self.user_agents = ['User-Agent_01','User-Agent_02','...'] def process_request(self,request,spider): request.headers['User-Agent'] = r
2021-08-27 19:59:43
81
原创 豆瓣TOP250电影相关信息获取
刚开始学爬虫，根据Python爬虫编程基础5天速成（2021全新合集）Python入门+数据分析_哔哩哔哩_bilibili学习，自己简单敲了一遍：import urllib.requestimport urllib.errorimport refrom bs4 import BeautifulSoupimport xlwtbaseurl = 'https://movie.douban.com/top250?start='findLink = re.compile(r'&l...
2021-08-18 18:06:19
312
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人