【ctf-web】攻防世界 Training-WWW-Robots

建立靶机，进入给定网址

根据提示词可知，要查看网页的robots.txt（大意为爬虫要看网址的robots.txt，里面写明了网址哪里能爬哪里不能爬）

进入robots.txt后可以看到“Disallow: /fl0g.php”，要求你不能爬fl0g.php这个文件。真是此地无银三百两，当然是看这个文件啦。

查看fl0g.php，获得flag，答案就是cyberpeace{f075874aacd0f8059ed83c9b647aba55}