XCTF Web 新手区002：robots

最新推荐文章于 2022-11-15 17:50:49 发布
最新推荐文章于 2022-11-15 17:50:49 发布
阅读量243 收藏 2
点赞数 1
分类专栏： CTF
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44587962/article/details/104904538
版权

题目描述：
X老师上课讲了Robots协议，小宁同学却上课打了瞌睡，赶紧来教教小宁Robots协议是什么吧。
在这里插入图片描述

解题过程：
1.访问题目给出的URL地址：http://111.198.29.45:44858/
在这里插入图片描述
然而什么都没有

2.F12查看源代码，看注释，说明Flag 不在这里
在这里插入图片描述

3.根据Robots 协议，尝试在URL地址后面加上 /robots.txt
在这里插入图片描述
发现一个 disallow 里面有个 PHP 文件，看到flag的字样是不是觉得离正确答案很近了？
我们尝试访问一下这个PHP文件试试。

4.在根目录下，添加读取该PHP文件f1ag_1s_h3re.php，即可得到Flag
在这里插入图片描述
大功告成！！！

Locking and Coding
关注
专栏目录
PHP robot.txt 的正确写法，robot 作为蜘蛛的遵守法则
09-07 538
PHP robot.txt 的正确写法，robot 作为蜘蛛的遵守法则，里面有禁止拜访的路径，以及提供sitemap的路径，方便蜘蛛采集。 这里我仅仅提供zblog版本，其他自行参考！ 例子如 User-agent: * Disallow: /zb_users/ Disallow: /zb_system/ Disallow: /MemberCenter Sitemap:http://meishi/sitemap_index.xml Sitemap:http://meishih.com/site.
xctf攻防世界—Web新手练习区robots单题思路
邱邱邱邱自强的博客
12-22 1508
xctf攻防世界—Web新手练习区robots单题思路 @邱邱邱自强 前言 随着互联网的发展，互联网界的行为也越来越被重视，那么国际互联网界通行的道德规范是什么呢？它就是Robots协议。 一、Robots协议是什么？ robots协议也叫robots.txt（统一小写）是一种存放于网站根目录下的ASCII编码的文本文件。 二、使用步骤 1.方法 方法一： 通过百度网址，进入百度搜索引擎页面（https://www.baidu.com/） 如何利用百度查看网站的Robots协议 在搜索框里面随便输
XCTF1-web Robots
最新发布
orchid_sea的博客
11-15 751
在robots.txt文件中，如果有多条User-agent记录，说明有多个搜索引擎爬虫会受到该协议的限制，对该文件来说，至少要有一条User-agent记录。如果该项的值设为*，则该协议对任何搜索引擎爬虫均有效，在Robots.txt文件中，“User-agent:*这样的记录只能有一条。如果想单独定义搜索引擎的漫游器访问子目录时的行为，那么可以将自定的设置合并到根目录下的robots.txt，或者使用robots元数据（Metadata，又称元数据）。robots.txt应放置于网站的根目录下。
攻防世界WEB题练习
ing_end的博客
10-30 1216
1.题目描述：X老师让小宁同学查看一个网页的源代码，但小宁同学发现鼠标右键好像不管用了。 法一 按F12查看源代码。 法二 按ctrl+U查看源代码。 2.题目描述：X老师上课讲了Robots协议，小宁同学却上课打了瞌睡，赶紧来教教小宁Robots协议是什么吧。 首先介绍Robots协议：robots协议也叫robots.txt（统一小写）是一种存放于网站根目录下的ASCII编码的文本文件，它通常告诉网络搜索引擎的漫游器（又称网络蜘蛛），此网站中的哪些内容是不应被搜索...
如何记录搜索引擎蜘蛛爬行痕迹
weixin_30810583的博客
10-13 255
1、根目录建立一个robots.php文件,将如下代码加入 function get_naps_bot() { $useragent = strtolower($_SERVER['HTTP_USER_AGENT']); if (strpos($useragent, 'googlebot') !== false){ return 'Google'; } if (...
PHP解析robots,robots.txt作用及用法
weixin_39546501的博客
03-25 837
robot:中文意思即机器人.robots.txt是一个纯文本文件，在这个文件中网站管理者可以声明该网站中不想被robots访问的部分，或者指定搜索引擎只收录指定的内容。当一个搜索机器人(有的叫搜索蜘蛛)访问一个站点时，它会首先检查该站点根目录下是否存在robots.txt，如果存在，搜索机器人就会按照该文件中的内容来确定访问的范围；如果该文件不存在，那么搜索机器人就沿着链接抓取。另外，robot...
xctf-web 新手练习区
尊暮萧的博客
05-31 348
view_source 这道题没什么说的，禁用右键了，F12开发者工具就可以直接调出来，直接出结果了。 robots 题目描述很明显，robots，那就在地址栏后面加上robots.txt 访问这个页面 f1ag_1s_h3re.php 就可以了 backup 通常后缀加上bak就是备份文件，试试？ 下载了，打开之后出flag cookie 那我们就查看cookies，发现look-here，value指向一个页面，二话不说访问页面 让我们看请求头，果然有flag disabled_bu
XCTF篇：Web (新手练习区)
小明师傅博客
06-09 559
1.view_source F12调出，后复制 2.robots 这里打开robots.txt 可以查看不让爬虫爬的目录 3.backup 备份文件，后缀加 .bak 下载下来 4.cookie f12,查看加载的cookie，发现在文件里 访问查看 5.disabled_button f12把disabled删了 6.weak_auth bp爆破 7.simple_php 解释 === 会同时比较字符串的值和类型 == 会先将字符串换成相同类型，再作比较，属于弱类.
xctf新手练习https://adworld.xctf.org.cn/task/task_list?type=misc&number=1&grade=0
weixin_30438813的博客
05-23 2841
view source Q:无法用鼠标右键查看原码，怎么办？A:浏览器地址栏在网址前输入 view-source: 即可查看源码 get post Q:用 get 提交 a=1,用 post 提交 b=2A:url后加 ?a=1，用 hackbar 提交b=2 robots Q:robots.txtA:域名后加 robots.txt backup Q:找到网站的备份文件A:暴力域名。...
XCTF web新手题（全）
qq_46485934的博客
09-22 1171
一.view source 无法右键查看源代码 方法一：ctrl +u 方法二：burp 抓包 二.get post 请用GET方式提交一个名为a,值为1的变量 直接在url后面加上?a=1 请再以POST方式随便提交一个名为b,值为2的变量 可以使用hackbar post传入b=2 三.robots robots协议 Robots协议（也称为爬虫协议、机器人协议等）的全称是“网络爬虫排除标准”（Robots ExclusionProtocol），网站通过Robots协议告诉搜索引擎哪些页面可
web安全：X老师上课讲了Robots协议，小宁同学却上课打了瞌睡，赶紧来教教小宁Robots协议是什么吧
weixin_43148062的博客
04-12 1万+
题目描述： robots协议 robots协议也叫robots.txt（统一小写）是一种存放于网站根目录下的ASCII编码的文本文件，它通常告诉网络搜索引擎的漫游器（又称网络蜘蛛），此网站中的哪些内容是不应被搜索引擎的漫游器获取的，哪些是可以被漫游器获取的。因为一些系统中的URL是大小写敏感的，所以robots.txt的文件名应统一为小写。robots.txt应放置于网站的根目录下。如果想单独...
XCTF攻防世界练习区-web题-Robots
果冻先生的专栏
09-19 1100
0x03. Robots 【题目描述】 X老师上课讲了Robots协议，小宁同学却上课打了瞌睡，赶紧来教教小宁Robots协议是什么吧。 【目标】 掌握robots协议的知识。robots.txt是搜索引擎中访问网站的时候要查看的第一个文件。当一个搜索爬虫访问一个站点时，它会首先检查该站点根目录下是否存在robots.txt，如果存在，搜索爬虫就会按照该文件中的内容来确定访问的范围；如...
攻防世界 web robots
Kni9hT's Blog
02-27 1850
终于见到了一个协议了！！！ 题目描述：X老师上课讲了Robots协议，小宁同学却上课打了瞌睡，赶紧来教教小宁Robots协议是什么吧。 通过题目描述就知道这题要用到robots协议，所以百度一下。 robots协议也叫robots.txt（统一小写）是一种存放于网站根目录下的ASCII编码的文本文件，它通常告诉网络搜索引擎的漫游器（又称网络蜘蛛），此网站中的哪些内容是不应被搜索引擎的漫游器...
robots
weixin_30443895的博客
10-09 76
百度百科：robots 有更详细的介绍。 转载于:https://www.cnblogs.com/Tpf386/p/9758728.html
搜索引擎篇：网站根目录 “robots.txt” 文件写法 ...
测试0901-1
12-30 898
robots.txt声明网站中哪些目录不让搜索引擎收录。robots.txt写法。添加sitemap链接。搜索引擎会优先读取sitemap.xml文件，如果没有就逐个抓取URL。 基本语法 User-agent:定义禁止搜索引擎名字。百度(Baiduspide)、谷歌(Googlebot)、360(360Spider)等。*号代表全部搜索引擎Disall...
xctf攻防世界web新手练习区--write up
热门推荐
qq_43081170的博客
07-05 3万+
** 文章目录 ** view source 题目描述：X老师让小宁同学查看一个网页的源代码，但小宁同学发现鼠标右键好像不管用了。 打开题目后显示FLAG is not here，而且题目描述提示鼠标右键不管用了。这时想到F12键打开开发者工具，查看器可以查看页面源代码。F12----查看器直接得到答案。 get post **题目描述:**X老师告诉小宁同学HTTP通常使用两种请求方法，你...
robots禁止抓取百度还是收录了首页
php小松
02-27 3994
最近在做一个网站，因为域名要备案所以就没有直接放上去，而是放到一个二级域名上，test.XXXX.com,因为是测试的域名所以不希望百度收录 robots.txt的文件内容为 User-agent:* Disallow:/ Disallow:/go/* 结果发现百度收录了这个二级域名，然后site了一下，发现只有首页，百度难道不怎么遵守robots,百度百科里的描述 百度对robots.txt
攻防世界robots
知足且坚定，温柔且上进
01-21 1888
打开页面发现啥也没有 查看源码： 提示flag is not here. 题目是关于robots协议的，所以用御剑扫一下目录 果真，打开robot.txt: 发现“f1ag_1s_h3re.php” 刚开我是直接在原地址后面加上f1ag_1s_h3re.php，没有flag出现 于是更改了一下 拿到flag. 我百度了一下robots协议，原来disallow是该协议的文件写法。 ...
攻防世界 WEB 新手区（robots）
qq_52634817的博客
12-13 157
robots 题目描述：X老师上课讲了Robots协议，小宁同学却上课打了瞌睡，赶紧来教教小宁Robots协议是什么吧。 附件内容如下： 题目解析：如图所示，点开后空空如也，下一步想法当然是果断一手F12看源代码。但是然并卵，这时候我们就需要回到题目本身，题目描述中有一个重点词robots协议，不懂就问百度，robots协议含义如下： 划重点：是txt文件，其中还有一个陌生词为URL，再次运用百度，其释义如下图： 大概理解为网址的意思吧，相当于“http://220.249.52.134:49377/” 由
XCTF移动应用逆向分析：解密安卓app2
作者提供了一个名为XCTF-mobile app2的安卓应用作为示例，用于教学如何进行逆向分析并找到隐藏的flag。" 在安卓逆向工程中，首要步骤是获取应用程序的内部数据。在这个案例中，首先需要将APK安装包的后缀更改为.zip...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值