题目: 老师上课讲了Robots协议,小宁同学却上课打了瞌睡,赶紧来教教小宁Robots协议是什么吧。
打开网页,发现什么也没有。
既然如此,那么我们根据题目提示,搜索robots,可得: robots是网站跟爬虫间的协议,具体表现为
robots.txt是搜索引擎中访问网站的时候要查看的第一个文件。
当一个爬虫访问一个站点时,它会首先检查该站点根目录下是否存在robots.txt,
如果存在,爬虫就会按照该文件中的内容来确定访问的范围;
如果该文件不存在,所有的爬虫将能够访问网站上所有没有被口令保护的页面。
所以,解法为如下。
解法:
1、打开robots.txt
2、根据提示,访问f1ag_1s_h3re.php页面。
提交: cyberpeace{af0b6faa8ac85529d0e1fde1a923e37b}