爬虫
一米半
这个作者很懒,什么都没留下…
展开
-
selenium 获取属性
正常获取一个a标签的href,可以通过xpath//a/@href但是在selenium中finf_*只能找到元素,所以我们需要get_attrivute(),例:driver.find_element_by_xpath("//div[@id='J_section_0']/a").get_attribute("href")原创 2017-09-17 23:39:52 · 8180 阅读 · 0 评论 -
requests禁止重定向
在requests.get 中添加属性 allow_redirects=False原创 2017-09-10 13:52:12 · 20330 阅读 · 0 评论 -
关于requests的session方法保持cookie的问题。
转载自:http://blog.csdn.net/falseen/article/details/46962011最近在做爬虫的时候遇到了一个问题,在用requests的session方法保持cookie的时候发现requests不能保持手动构建的cookie。起初以为requests只能自动保持由服务器返回的set-cookie语句中的cookie。后来查了很多资料,才终于明白。原来re转载 2017-11-06 10:18:46 · 8721 阅读 · 2 评论