【OK】手把手教你CNVD漏洞挖掘 + 资产收集原创

最新推荐文章于 2024-10-19 21:47:16 发布
最新推荐文章于 2024-10-19 21:47:16 发布
阅读量762 收藏 12
点赞数 28
分类专栏： 个人阅读 文章标签： 安全
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Lucker_YYY/article/details/142554849
版权

0x1 前言

挖掘CNVD漏洞有时候其实比一般的edusrc还好挖，但是一般要挖证书的话，还是需要花时间的，其中信息收集，公司资产确定等操作需要花费一定时间的。下面就记录下我之前跟一个师傅学习的一个垂直越权成功的CNVD漏洞通杀（仅作为思路分享）。

0x2 信息收集——github

简介

在漏洞挖掘的过程前期我们进行信息收集，github和码云搜索相关的信息，代码库，运气好的话可以在库中发现一些重要配置如数据库用户密码等。

这里先给师傅们分享一下手工github搜索语法:

​​​​​​​

  1. in:name baidu #标题搜索含有关键字baidu

  2. in:descripton baidu #仓库描述搜索含有关键字

  3. in:readme baidu #Readme文件搜素含有关键字

  4. stars:>3000 baidu #stars数量大于3000的搜索关键字

  5. stars:1000..3000 baidu #stars数量大于1000小于3000的搜索关键字

  6. forks:>1000 baidu #forks数量大于1000的搜索关键字

  7. forks:1000..3000 baidu #forks数量大于1000小于3000的搜索关键字

  8. size:>=5000 baidu #指定仓库大于5000k(5M)的搜索关键字

  9. pushed:>2019-02-12 baidu #发布时间大于2019-02-12的搜索关键字

  10. created:>2019-02-12 baidu #创建时间大于2019-02-12的搜索关键字

  11. user:name #用户名搜素

  12. license:apache-2.0 baidu #明确仓库的 LICENSE 搜索关键字

  13. language:java baidu #在java语言的代码中搜索关键字

  14. user:baidu in:name baidu #组合搜索,用户名baidu的标题含有baidu的

  15. 等等..

然后再给师傅们分享下github官方文档：
GitHub检索文档

图片

自动化工具——GitDorker

GitDorker工具下载
GitDorker是一款github自动信息收集工具，它利用 GitHub 搜索 API 和作者从各种来源编译的大量 GitHub dorks 列表，以提供给定搜索查询的 github 上存储的敏感信息的概述。

图片

<
最低0.47元/天 解锁文章
Lucker_YYY
关注
专栏目录
爬虫CNVD构建漏洞库
weixin_40502018的博客
01-18 6115
爬虫CNVD构建漏洞库 import requests from lxml import etree import xlsxwriter from requests.utils import add_dict_to_cookiejar import execjs import hashlib import json import re import time import datetime def get__jsl_clearance_s(data): """ 通过加密对比得到正确coo
Python爬虫：某网站cookie参数__jsl_clearance_s生成分析（一）
YungGuo的博客
11-19 3668
逛论坛发现一个求助帖，想获取数据但网站有cookie反爬，闲来无事就分析了一下cookie参数生成方法~ 目标：生成cookie中的__jsl_clearance_s参数 工具：chrome/firefox浏览器、fiddler、pychram、python3.7、解混淆专解测试版V0.1 模块：requests、re、execjs、json 分析： 首先打开浏览器，和fiddler抓包工具，发现浏览器进行了三次请求，前两次响应的状态码为521，响应内容都是一段js代码，第三次请求响应得到正常内
漏洞库：爬取CNVD-国家信息安全漏洞共享平台漏洞库
KEY0NE的个人博客
11-13 7088
近期工作中需要爬取整个CNVD的漏洞库，之前写的爬虫是跑ICS.CNVD的库(见之前文章 工控安全：分享自己的工控爬虫项目—PySpider-ICS )，本以为改改就能用，没想到，CNVD主站有几道反爬虫机制，这里记录一下我的解决之法。初步分析首先，还是使用了我钟爱的爬虫框架——pyspider，但是写完之后，试了几次都只能获取十几个漏洞信息，然后就报错无法继续下...
cnvd监控
xxx9686的博客
09-19 322
这个项目写的比较早了，是在19年2月份的时候写的了。当时在甲方主要考虑关注有没有一些新的漏洞发布对公司业务中间件应用等会造成影响的。后来离职出来就一直没咋关心了。
CNVD漏洞和证书挖掘经验总结
最新发布
haosha。的博客
10-19 1992
CNVD漏洞和证书挖掘经验总结
推荐一款神器：Scrapy-CVE-CNVD — 实时监控漏洞的智能助手
gitblog_00055的博客
06-09 351
推荐一款神器：Scrapy-CVE-CNVD — 实时监控漏洞的智能助手 去发现同类优质开源项目:https://gitcode.com/ 在网络安全领域，对新出现的安全漏洞保持敏感和及时应对是至关重要的。为此，我们今天要推荐一个开源项目——Scrapy-CVE-CNVD，它是一个基于Python scrapy框架开发的漏洞信息收集系统。这个工具能帮助你轻松获取每日最新的CVE和CNVD漏洞信息，...
cnvd漏洞挖掘教程
02-29
很抱歉，我不能提供关于漏洞挖掘的教程或指导。漏洞挖掘是一项高级技术，需要深入的计算机安全知识和经验。同时，漏洞挖掘也是一个敏感的话题，需要遵守法律和道德规范。 如果您对计算机安全感兴趣，我建议您从基础...
python爬取cnvd漏洞库信息的实例
09-19
本文将介绍一个使用Python爬取中国国家信息安全漏洞库（CNVD）工控漏洞信息的实例，帮助你理解如何处理反爬虫策略并有效地抓取网页数据。 首先，我们需要了解目标网站的结构。在这个例子中，CNVD的工控漏洞库...
处理cnvd官方数据+爬虫(官方提供的数据不全).zip
01-19
爬虫（Web Crawler）是一种自动化程序，用于从互联网上收集信息。其主要功能是访问网页、提取数据并存储，以便后续分析或展示。爬虫通常由搜索引擎、数据挖掘工具、监测系统等应用于网络数据抓取的场景。 爬虫的...
向日葵RCE漏洞（CNVD-2022-10270）检测工具
02-19
向日葵RCE漏洞（CNVD-2022-10270）检测工具，已经编译好，命令行运行即可 xrkrce.exe -h 127.0.0.1
cnvd漏洞爬虫脚本.zip
07-15
爬取cnvd漏洞列表
cnnvd爬虫，仅供学习参考。
07-16
# -*- coding:utf-8 -*- import sys #print (u'系统默认编码为',sys.getdefaultencoding()) default_encoding = 'utf-8' #重新设置编码方式为uft-8 if sys.getdefaultencoding() != default_encoding: reload(sys) sys.setdefaultencoding(default_encoding) #print (u'系统默认编码为',sys.getdefaultencoding()) import requests from bs4 import BeautifulSoup import traceback import re import xlwt def getURLDATA(url): #url = 'http://www.cnnvd.org.cn/web/xxk/ldxqById.tag?CNNVD=CNNVD-201901-1014' header={ 'user-agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/75.0.3770.80 Safari/537.36', 'Connection': 'keep-alive',} r=requests.get(url,headers=header,timeout=30) #r.raise_for_status()抛出异常 html = BeautifulSoup(r.content.decode(),'html.parser') link=html.find(class_='detail_xq w770')#漏洞信息详情 link_introduce=html.find(class_='d_ldjj')#漏洞简介 link_others=html.find_all(class_='d_ldjj m_t_20')#其他 #print(len(link_introduce)) try: #print ("危害等级:"+link.contents[3].contents[3].find('a').text.lstrip().rstrip())#危害等级 list4.append(str(link.contents[3].contents[3].find('a').text.lstrip().rstrip())) except: #print("危害等级:is empty") list4.append("") try: #print ("CVE编号:"+link.contents[3].contents[5].find('a').text.lstrip().rstrip())#CVE编号 list5.append(str(link.contents[3].contents[5].find('a').text.lstrip().rstrip())) except: #print("CVE编号:is empty") list5.append("") try: #print ("漏洞类型:"+link.contents[3].contents[7].find('a').text.lstrip().rstrip())#漏洞类型 list6.append(str(link.contents[3].contents[7].find('a').text.lstrip().rstrip())) except : #print("漏洞类型:is empty") list6.append("") try: #print ("发布时间:"+link.contents[3].contents[9].find('a').text.lstrip().rstrip())#发布时间 list7.append(str(link.contents[3].contents[9].find('a').text.lstrip().rstrip())) except : #print("发布时间:is empty") list7.append("") try: #print ("威胁类型:"+link.contents[3].contents[11].find('a').text.lstrip().rstrip())#威胁类型 list8.append(str(link.contents[3].contents[11].find('a').text.lstrip().rstrip())) except : #print("威胁类型:is empty") list8.append("") try: #print ("更新时间:"+link.contents[3].contents[13].find('a').text.lstrip().rstrip())#更新时间 list9.append(str(link.contents[3].contents[13].find('a').text.lstrip().rstrip())) except : #print("更新时间:is empty") list9.append("") try: #print ("厂商:"+link.contents[3].contents[15].find('a').text.lstrip().rstrip())#厂商 list10.append(str(link.contents[3].contents[15].find('a').text.lstrip().rstrip())) except: #print("厂商:is empty") list10.append("") #link_introduce=html.find(class_='d_ldjj')#漏洞简介 try: link_introduce_data=BeautifulSoup(link_introduce.decode(),'html.parser').find_all(name='p') s="" for i in range(0,len(link_introduce_data)): ##print (link_introduce_data[i].text.lstrip().rstrip()) s=s+str(link_introduce_data[i].text.lstrip().rstrip()) #print(s) list11.append(s) except : list11.append("") if(len(link_others)!=0): #link_others=html.find_all(class_='d_ldjj m_t_20') #print(len(link_others)) try: #漏洞公告 link_others_data1=BeautifulSoup(link_others[0].decode(),'html.parser').find_all(name='p') s="" for i in range(0,len(link_others_data1)): ##print (link_others_data1[i].text.lstrip().rstrip()) s=s+str(link_others_data1[i].text.lstrip().rstrip()) #print(s) list12.append(s) except: list12.append("") try: #参考网址 link_others_data2=BeautifulSoup(link_others[1].decode(),'html.parser').find_all(name='p') s="" for i in range(0,len(link_others_data2)): ##print (link_others_data2[i].text.lstrip().rstrip()) s=s+str(link_others_data2[i].text.lstrip().rstrip()) #print(s) list13.append(s) except: list13.append("") try: #受影响实体 link_others_data3=BeautifulSoup(link_others[2].decode(),'html.parser').find_all('a',attrs={'class':'a_title2'}) s="" for i in range(0,len(link_others_data3)): ##print (link_others_data3[i].text.lstrip().rstrip()) s=s+str(link_others_data3[i].text.lstrip().rstrip()) #print(s) list14.append(s) except: list14.append("") try: #补丁 link_others_data3=BeautifulSoup(link_others[3].decode(),'html.parser').find_all('a',attrs={'class':'a_title2'}) s="" for i in range(0,len(link_others_data3)): ##print (link_others_data3[i].t
python爬取阿里库cnvd
weixin_44331151的博客
10-10 919
简单易懂，粘贴可用
java爬虫爬取cnvd,CNVD.py
weixin_35390379的博客
03-09 595
'''该模块主要处理http://www.cnvd.org.cn功能包括:1.漏洞列表爬虫2.解析统计查询中的共享数据xml'''import osfrom queue import Queuefrom datetime import datetimeimport threadingimport requestsfrom bs4 import BeautifulSoupimport pandas ...
python爬取cnvd漏洞库信息
黑面狐
12-29 9457
今天一同事需要整理http://ics.cnvd.org.cn/工控漏洞库里面的信息，一看960多个要整理到什么时候才结束。 所以我决定写个爬虫帮他抓取数据。 看了一下各类信息还是很规则的，感觉应该很好写。 but这个网站设置了各种反爬虫手段。 经过各种百度，还是解决问题了。 设计思路： 1.先抓取每一个漏洞信息对应的网页url 2.获取每个页面的漏洞信息 # -*- coding
使用selenium爬取CNVD
qq_45900119的博客
08-27 977
最近需要爬取国家信息安全漏洞共享平台的数据，但是因为我太菜了，所以无论如何也无法绕过CNVD的反爬，所以只好使用selenium来绕过反爬了，虽然效率低，但也算爬下来了。 我用的代理是熊猫代理，主要是我需要的也不多，而且都是短效ip，所以买的熊猫代理2元1000的，也可以根据实际情况自行更改 代码写的非常乱，稍微测试了一下能用就直接爬了，越来越懒了 # -*- coding = utf-8 -*- # @Time : 2021/8/24 21:16 # @Author : DLT # @File : 分类爬
cve 爬虫_爬虫CNVD构建漏洞库
weixin_29089057的博客
02-06 868
import requestsfrom lxml import etreeimport xlsxwriterfrom requests.utils import add_dict_to_cookiejarimport execjsimport hashlibimport jsonimport reimport timeimport datetimedef get__jsl_clearance_s(...
爬虫爬取https://www.exploit-db.com/老是跳过一个
HWP
04-02 1449
https://www.exploit-db.com/ 由于是外网，连接速度不行。就怕突然下载停止。这个时候的CVE编号，就会紊乱。 解决办法，分开。 备份一个CVE编号列表只用来记录去除剩下的，另外一个只用来下载。 重新开始的时候，用上次剩余的来替换之前的CVE列表即可！ ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值