漫谈前期信息收集

最新推荐文章于 2022-11-22 10:35:21 发布

weixin_30765577

最新推荐文章于 2022-11-22 10:35:21 发布

阅读量300

点赞数

文章标签：运维大数据爬虫

原文链接：http://www.cnblogs.com/pshell/p/7655480.html

版权

0x00 思维导图

0x01 静默收集(目标无日志记录)

搜索引擎

Google hacking

google基本语法

Index of/　　使用它可以直接进入网站首页下的所有文件和文件夹中
site:　　site:baidu.com将返回所有和这个站有关的URL
intext:　　将返回所有在网页正文部分包含关键词的网页
intitle:　　将返回所有网页标题中包含关键词的网页
cache:　　搜索google里关于某些内容的缓存
define:　　搜索某个词语的定义
filetype:　　搜索指定的文件类型，如：.bak，.mdb，.inc等
info:　　查找指定站点的一些基本信息
inurl:　　搜索我们指定的字符是否存在于URL中
Link:　　link:baidu.com可以返回所有和baidu.com做了链接的URL

+　　把google可能忽略的字列如查询范围。
-　　把某个字忽略，例子：新加 -坡。
~　　同意词。
.　　单一的通配符。
*　　通配符，可代表多个字母。
""　　精确查询。

搜索c段
site: 122.122.122.*

bing

twitter

微步在线

whois查询反查 ip 旁站

WHOIS中包含域名注册者的姓名,邮箱 ,电话,地址,dns服务器等信息

获得一个信息可继续搜索更多信息例如获得邮箱可反查,邮箱可百度,bing搜索足迹,假如搜到知乎可进一步获取个人信息,等

站长之家

爱站

WHOIS Search

7c去查网　　 ip138(ip查询)

ipip(ip查询)　　

备案　

备案查询(工信部)

备案查询(公安部)

IPC备案查询　　

证书查子域名

crt.sh | Certificate Search

censys

https://www.censys.io/certificates?q=baidu.com

dns域传送

DNS服务器使用的TCP/UDP端口号是53

最常用的DNS记录有以下几类

　　A记录 IP地址记录,记录一个域名对应的IP地址

　　AAAA记录 IPv6 地址记录，记录一个域名对应的IPv6地址

　　CNAME记录别名记录，记录一个主机的别名

　　MX记录电子邮件交换记录，记录一个邮件域名对应的IP地址，

　　NS记录域名服务器记录 ,记录该域名由哪台域名服务器解析

　　PTR记录反向记录，也即从IP地址到域名的一条记录

   TXT记录     记录域名的相关文本信息

win下

nslookup

交互下最后无法列出为不存在该漏洞

linux下 dig

dig @dns服务器 axfr 目标域

root@root:~# dig @dns.nwpu.edu.cn axfr nwpu.edu.cn

; &lt;&lt;&gt;&gt; DiG 9.9.1-P1 &lt;&lt;&gt;&gt; @dns.nwpu.edu.cn axfr nwpu.edu.cn
; (1 server found)
;; global options: +cmd
nwpu.edu.cn.            86400   IN      SOA     dns1.nwpu.edu.cn. hxn.nwpu.edu.cn. 2014041801 21600 3600 604800 10800
nwpu.edu.cn.            86400   IN      NS      dns.nwpu.edu.cn.
nwpu.edu.cn.            86400   IN      NS      dns1.nwpu.edu.cn.
nwpu.edu.cn.            86400   IN      NS      dns2.nwpu.edu.cn.
nwpu.edu.cn.            86400   IN      NS      dns3.nwpu.edu.cn.
nwpu.edu.cn.            600     IN      MX      5 nwpu03.nwpu.edu.cn.
nwpu.edu.cn.            600     IN      MX      15 nwpu03.nwpu.edu.cn.
*.nwpu.edu.cn.          86400   IN      A       222.24.192.99
aisheng.nwpu.edu.cn.    86400   IN      CNAME   www.nwpu.edu.cn.
amec.nwpu.edu.cn.       86400   IN      NS      netserver.amec.nwpu.edu.cn.
(省略大量的记录...)
nwpu.edu.cn.            86400   IN      SOA     dns1.nwpu.edu.cn. hxn.nwpu.edu.cn. 2014041801 21600 3600 604800 10800

nmap 也有脚本

nmap --script dns-zone-transfer --script-args dns-zone-transfer.domain=https://www.test.com -p 53 -Pn 192.168.1.2

综合子域名收集

提莫三大模块搜索引擎三方枚举

利用全网IP扫描http端口

在访问IP的80或者8080端口的时候，可能会遇到配置了301跳转的，可以在header里获取域名信息。全网扫描结果如下：

https://scans.io/study/sonar.http

敏感信息泄露

包括子域名用户名密码邮箱源代码等

https://github.com/repoog/GitPrey (GitHub敏感信息扫描工具)

https://github.com/lijiejie/GitHack

https://github.com/dxa4481/truffleHog (GitHub敏感信息扫描工具,包括检测commit等)

https://github.com/0xbug/Hawkeye (企业资产GitHub泄露监控系统）

https://github.com/lianfeng30/githubscan （根据企业关键词进行项目检索以及相应敏感文件和文件内容扫描的工具）

关键字
"baidu.com" API_key
"baidu.com" secret_key
"baidu.com" login 
"baidu.com" aws_key
"baidu.com" password 
"baidu.com" FTP
"baidu.com" github_token
 ALIYUN_ACCESS_KEY
 ALIYUN_ACCESS_ID
各种爆的信息泄露 关键字

seay svn泄露t00ls http://pan.baidu.com/s/1mrNpB

BBScan是一个迷你的信息泄漏批量扫描脚本 https://github.com/lijiejie/BBScan

BBScan.py --full-scan --no-crawl --no-check404 -t2 -p50 -f iqiyi.http.txt

乌云历史信息例如域子名

chrome 插件 wappalyzer

firefox 插件 whatruns

0x02 非静默收集

文件泄露

crossdomain.xml

目录爆破

[7kbscan-WebPathBrute 1.5.6 (集成三字典)(自行扶墙)] (https://mega.nz/#!pNFQ0JYT!AHFfiw76-A7KdpnvBUK6_9uPPbICg0Z4WqNkzjbAq00)

爬虫

本地工具子域

layer

subdomainBrute lijiejie:https://github.com/lijiejie/subDomainsBrute

7kbscan domain gather

wydomain猪猪侠

端口

nmap -v -A -p1-65535 -iL target.com.txt -oX target_all.xml

0x03 cdn

多地ping

如果ip一样很有可能没cdn 最简单的办法修改本地hosts文件，强行将域名与IP解析对应很多厂商可能让www使用cdn，空域名不使用CDN缓存

分站

国外ip访问

mx 邮件

注册验证邮箱, rss订阅, 忘记密码邮件发送的ip 有可能但邮件服务器一般与主站分离 Web版的邮件管理，可以通过常看网页源代码看到IP

历史纪录(未使用cdn)

https://dnsdb.io/zh-cn/ https://x.threatbook.cn/ http://toolbar.netcraft.com/site_report?url= http://viewdns.info/

phpinfo敏感文件等

插远程图片的方法，查看服务器的来源

例如网站标题 title 用fofo 钟馗搜索

0x04 总结

信息收集对整个测试十分重要，对于乙方信息收集一定要全面，细心加耐心加以收集整理

0x05 扩展

国外数据泄露收集与查询平台

https://haveibeenpwned.com/PwnedWebsites https://canar.io/ http://breachalarm.com/ https://pwnedlist.com/ https://archive.fbi.ninja/ https://cryptome.wikileaks.org/frontpage https://cryptome.org/ http://databases.land/ https://vigilante.pw/

扩展阅读

cdn误区

http://rinige.com/index.php/archives/772/

测试标准图

https://www.processon.com/view/583e8834e4b08e31357bb727

0x06 参考

            freebuf 
            mottoin
            安全客
            先知
            t00ls
            i春秋
            CNNETARMY
            nmask
            xiaix
            嘶吼
            圈子
            storm
            lijiejie
            scanners-box

本主题由 yyyxy 于昨天 16:14 生成文章

subdomain.PNG (6.12 KB, 下载次数: 4)