![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Python
文章平均质量分 70
123jinse
这个作者很懒,什么都没留下…
展开
-
构造表单模拟登陆GitHub
1、输入登陆网址:url = https://github.com/login?return_to=%2Fjoin输入注册过的账号密码,登陆成功之后,查看post请求的session,查看需要提交的formdata表单,然后构造字典数据。2、观察发现除了authenticity_token之外,别的可以直接构造字典,authenticity_token这个比较复杂,查看源代码发现在一个hidden...原创 2018-04-23 13:16:00 · 355 阅读 · 0 评论 -
Python爬虫:抓取智联岗位信息保存csv
from urllib.parse import urlencodeimport requestsimport reimport csvfrom tqdm import tqdmfrom lxml import etree# 获取一页的HTMldef get_one_page(city, keyword, region, page): params = { ...原创 2018-04-23 10:59:15 · 869 阅读 · 0 评论 -
pyspider爬取统计局统计动态
#!/usr/bin/env python# -*- encoding: utf-8 -*-# Created on 2018-05-28 10:33:42# Project: tongjijufrom pyspider.libs.base_handler import *from lxml import etreeclass Handler(BaseHandler): crawl_conf...原创 2018-05-28 11:24:54 · 400 阅读 · 0 评论 -
pyspider爬取豆瓣延禧攻略短评和回应
#!/usr/bin/env python# -*- encoding: utf-8 -*-# Created on 2018-08-30 15:08:10# Project: yanxigonglve_doubanfrom pyspider.libs.base_handler import *from lxml import etreeclass Handler(BaseHan...原创 2018-08-31 09:52:05 · 462 阅读 · 1 评论