Python爬虫
小小练习生
钻
展开
-
python——自动填写调查问卷
文章目录工具和环境背景思想代码和解释问题总结工具和环境seleniumpycharm背景思想作为大学生的我们,可能每天会被学校里的各种问卷调查而烦恼,恐怖的每天可能填写数十次问卷突发奇想,使用python自动化填写代码和解释from selenium import webdriver# 对问卷网站的自动填充和提交def submit(): driver.get('https://www.wjx.cn/m/81295146.aspx') # 调查问卷的网址,你首先需要仔原创 2020-06-11 15:40:54 · 1770 阅读 · 0 评论 -
python爬虫----我来给你查火车票
文章目录工具和环境分析12306 官网建立爬虫基础模型结果分析和提取有用成分结果制表输出说明工具和环境pycharmimport requestsimport jsonfrom prettytable import PrettyTable分析12306 官网https://www.12306.cn/index/ 进入官网填好参考的出发地 、到达地、出发时间点击查询看到如上画面F12 找到 Network一栏,ctrl+R 刷新一次,在Name列表里找到原创 2020-06-08 13:35:51 · 509 阅读 · 0 评论 -
爬虫请求模块
文章目录1. urllib.request1.1 版本1.2 常用方法1.3 响应对象 response 的方法2. urllib.parse2.1 urlencode()2.2 quote()3. 请求方式3.1 GET3.2 POST4. request模块4.1 安装4.2 request常用方法4.3 响应对象response的方法4.4 发送post请求4.5requests设置代理4....原创 2020-05-19 17:11:26 · 124 阅读 · 0 评论 -
爬虫简介
文章目录1. 通讯协议1.1 端口1.2通讯协议2. 网络模型2.1 HTTPS2.2 SSL3. 爬虫介绍3.1 什么是爬虫?3.2 为什么需要爬虫?3.3 企业获取数据的方式?3.4 Python 做爬虫的优势3.5 爬虫的分类4. 几个概念4.1 GET和POST4.2 URL的组成4.3 User-Agent 用户代理4.4 Referer4.5 状态码5. 抓包工具1. 通讯协议...原创 2020-04-29 13:07:52 · 224 阅读 · 0 评论