Python安全开发——WEB爬虫库&数据解析库

目录

（一）Python-WEB爬虫库&数据解析库

0x01 请求方式

1、GET请求

2、post请求

（二）配合fofa

0x01 获取名字

0x02 获取域名

0x03 组合爬取数据

---

图 0-0 项目方案

网络爬虫是一个自动提取网页的程序，它为搜索引擎从万维网上下载网页,是搜索引擎的重要组成。传统爬虫从一个或若干初始网页的URL开始，获得初始网页上的URL,在抓取网页的过程中，不断从当前页面上抽取新的URL放入队列，直到满足系统的一定停止条件。

（一）Python-WEB爬虫库s数据解析库

---

请求方式&POST提交&带入请求头s回显处理&加入代理等

0x01 请求方式

#coding:utf-8
#author :jinyouxin
import requests

1、GET请求

---

import requests
for i i