robots协议

Robots协议用来告知搜索引擎哪些页面能被抓取，哪些页面不能被抓取；可以屏蔽一些网站中比较大的文件，如：图片，音乐，视频等，节省服务器带宽；可以屏蔽站点的一些死链接。方便搜索引擎抓取网站内容；设置网站地图连接，方便引导蜘蛛爬取页面。

问题：如何获取robots.txt?

解决方案：

1）在网址后输入"/robots.txt"

2)按回车键，可看到robots协议，其中，第二个Disallow后就可以看到本题的flag

3）复制“flag_1s_h3re.php”，粘贴到网址栏，替代robots.txt。

4）按回车键，即可获取cyberpeace{ }.