应用安全 --- CTF考点 之 robots.txt

robots.txt 就像网站公开张贴的爬虫访问规则，指出哪些目录不能访问，哪些可以访问 。在 CTF 中，它经常能帮你发现网站开发者留下的目录线索，但它本身不是安全防护措施。

在网站域名后直接拼接文件路径就可以访问了 例如 http://xxx.com/robots.txt 

这个文件会暴露网站的可访问路径

拼接后访问这个路径极可能存在flag文件