攻防世界之robots(web简单)

题目: 老师上课讲了Robots协议,小宁同学却上课打了瞌睡,赶紧来教教小宁Robots协议是什么吧。
打开网页,发现什么也没有。在这里插入图片描述
既然如此,那么我们根据题目提示,搜索robots,可得: robots是网站跟爬虫间的协议,具体表现为

robots.txt是搜索引擎中访问网站的时候要查看的第一个文件。
当一个爬虫访问一个站点时,它会首先检查该站点根目录下是否存在robots.txt,
如果存在,爬虫就会按照该文件中的内容来确定访问的范围;
如果该文件不存在,所有的爬虫将能够访问网站上所有没有被口令保护的页面。

所以,解法为如下。

解法:
1、打开robots.txt
在这里插入图片描述
2、根据提示,访问f1ag_1s_h3re.php页面。
在这里插入图片描述
提交: cyberpeace{af0b6faa8ac85529d0e1fde1a923e37b}

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值