![](https://img-blog.csdnimg.cn/20201014180756930.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫
shouwangzhelv
这个作者很懒,什么都没留下…
展开
-
scrapy安装问题及解决(win10 x64)
安装的话直接pip install scrapy就可以,下面说说可能出现的问题及解决1、no module named win32api安装pywin32:http://www.lfd.uci.edu/~gohlke/pythonlibs/#pywin32, 我是64位python2.7,所以下载pywin32-220-cp27-none-win_amd64.whl2、原创 2016-03-22 23:19:03 · 1993 阅读 · 0 评论 -
python爬取动态生成的网页——以百度手机助手为例
在爬取js动态生成的页面时,直接打开页面是获取不到内容的,比如,我在爬取百度手机助手的应用时,就遇到了这样一个问题。在搜索旅游类应用时,返回数据有几页的内容,但是不管你翻到第几页,查看源代码发现都一样,都是第一页内容的源代码。分析原因我觉得可能是这样的:假设百度应用一页内容有八个应用,你把查询提交后他把内容的前8个生成一个html,然后再你翻页时,通过js,ajax等方式替换原来的8个应用,比如你原创 2016-04-15 01:07:20 · 5373 阅读 · 0 评论