爬虫
我叫陈叉叉叉叉
这个作者很懒,什么都没留下…
展开
-
爬虫小汇总
Table of Contents1 request 使用get爬取2 request 使用post爬取2.1 Data形势传递2.2 payloadData 形势传递3 selenium4 Xpath 网页解析request 使用get爬取get函数适合静态网页get一般传入三个参数url:网页的URLheaders:表头,包含cookies等信息timeout原创 2021-05-09 10:55:13 · 258 阅读 · 0 评论 -
【requests:动态网页爬取】慕课评价
import requestsimport numpy as npimport pandas as pdimport warningswarnings.filterwarnings("ignore")pd.set_option("display.max_columns", None)# 定义表头、url和post的data参数header = {'cookie': 'EDUWEBDEVICE=bb5489f443964ee181e9a14c09814664; __yadk_uid=LqHB.原创 2020-10-27 20:29:44 · 788 阅读 · 1 评论