代理指纹怎么提取？

最新推荐文章于 2022-10-11 15:07:44 发布

ffhh123321

最新推荐文章于 2022-10-11 15:07:44 发布

阅读量346

点赞数

分类专栏：飞鱼ip

本文链接：https://blog.csdn.net/ffhh123321/article/details/108276707

版权

本文探讨如何从代理IP中提取指纹信息，用于代理IP的查找与分析。通过nmap扫描和HTTP响应头部信息，获取如MikroTik http proxy等服务标识，以及HTTP响应头部的server字段。提取的数据包括14000个有效响应，并指出某些常见的服务器类型可能需要结合其他信息来判断。同时列举了一些代理服务器的指纹，如MicrosoftProxy和CCProxy等，邀请读者分享更多思路。

摘要由CSDN通过智能技术生成

代理IP的挖掘与分析，通过真实可用的IP提取分析代理的指纹信息，可以用来作为代理IP分析的指纹特征。在工作中可以用来进行代理IP的查找与分析。

代理指纹提取
既然网上这么多多的代理IP，这些代理IP和端口绝大多数是批量扫描得到的，因此，如果掌握了这些代理的指纹信息，就可以批量扫描代理的IP和端口了。选择其中部分代理的IP进行分析，通过nmap与抓包形式分析其指纹数据。这里随意选择一个代理IP地址：58.252.6.165,其代理端口为9000。对其进行数据分析，通过nmap探测到其9000端口对应的服务为MikroTik http proxy，这些数据应该可以作为代理的指纹。

基于Nmap扫描而来的代理指纹
基于HTTP响应提取的代理指纹

指纹提取思路:
本人的思路是直接提取HTTP响应头部信息，得到的是这样的：
看了一下，数据量有点大，一般情况下web服务类型是通过HTTP响应头部的server字段来返回的，因此代码优化了一下，直接提取出server字段，代码如下：

#coding:utf-8
from requests import *
headers = {
""User-Agent"": ""Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:56.0) Gecko/20100101 Firefox/56.0"",
""Accept"": ""*/*"",
""Accept-Language"": ""en-US,en;q=0.5"",
""Accept-Encoding"": ""gzip