- 博客(3)
- 收藏
- 关注
原创 Python爬虫学习记录(三):scrapy抓取结果的排序
Python爬虫学习记录(三):scrapy抓取结果的排序目标学了一点scrapy框架,自己实际操作一下,原来scrapy的多线程机制导致抓回来的数据是无序的,而我的测试目标是抓一本小说保存到一个txt文件中,对一个小白来说,可是让我想了好一阵子。先想到的一个办法是存数据库,又觉得写库操作硬盘又得查询太麻烦;python什么结构能像数据库一样存东西呢,知道的实在是太少,只想起了Pandas...
2019-11-20 14:40:07 2206
原创 Python爬虫学习记录(二):selenium
Python爬虫学习记录(二):selenium今天学习了一点selenium,做个记录。selenium的安装:Linux: sudo pip3 install seleniumWindows: python -m pip install seleniumselenium包安装好之后还要安装浏览器驱动chromedriver(谷歌)、geckodriver(火狐)。我只试用了谷歌,...
2019-11-19 13:33:18 451 1
原创 Python爬虫学习记录(一)
Python爬虫学习记录(一)如何插入一段漂亮的代码片如何插入一段漂亮的代码片去博客设置页面,选择一款你喜欢的代码片高亮样式,下面展示同样高亮的 代码片.// An highlighted blockvar foo = 'bar';headers={} us=UserAgent() useragent = us.random header...
2019-11-18 12:02:50 235 1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人