![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫
Along1617188
AI-follower
展开
-
Python qichacha 上市公司 专利 爬虫
from bs4 import BeautifulSoupimport requestsimport timeimport pandas as pdfrom selenium import webdriverimport csvimport reimport numpy as npimport osafterLogin_headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.3原创 2021-12-02 19:32:22 · 1235 阅读 · 0 评论 -
Python requests 接口测试
当启动一个通过HTTP唤起的API服务时,需要用到接口测试,requests是其中最简单的方式之一import requestsr = requests.get(url='http://localhost:8080/2021.07.22/GCT20210722')if r.status_code != 200:# 状态码200表示连接成功,有正常返回值 print("pdfReportGenerator connection error")else: print("pdfReport原创 2021-07-23 09:19:28 · 105 阅读 · 0 评论 -
Selenium免登录
Selenium免登录方法1Selenium免登录一、方法1二、方法2一、方法1加cookies, 方法参考二、方法2设置用户目录,将登陆信息保存在一个文件夹中from selenium import webdriverchrome_driver = r'D:\code\patent_info\chromedriver.exe'chrome_options = webdriver.ChromeOptions()chrome_options.add_argument(r'--user-原创 2021-06-23 20:20:24 · 294 阅读 · 0 评论 -
城市空气质量(AQI)数据爬虫
城市空气质量(AQI)数据爬虫全国各城市(网页上有的)空气质量爬虫,包括城市名称,AQI等信息,保存为.csv文件格式网址首页:https://www.aqistudy.cn/historydata/index.php首先是获取城市名称模块,实质就是从网页上得到可检索的所有“城市”字符串列表;import requestsfrom lxml import etreeimport timefrom urllib import parseimport pandas as pdfrom原创 2020-11-09 21:00:28 · 3981 阅读 · 2 评论