Training-WWW-Robots 查看网页中的Wiki百科,可以知道: 总而言之,就是一个置于网站根目录下的一个文件,可以通过url访问 可以看到,“/fl0g.php”是一个不可以被爬下来的文件,但是但robots.txt不是命令,也不是防火墙,就像酒店房间门上的提示牌,告诉你哪些可以访问哪些不可以, 而提示牌也不能阻止盗贼的访问 于是我们继续访问“/fl0g.php”文件,得到flag 总结考点:这道题主要考了robots.txt的原理及其本质,也考了访问网页根目录下文件的方法