2022年3月2日
robots.txt使用详解
摘要： 在国内，网站管理者似乎对robots.txt并没有引起多大重视，应一些朋友之请求，今天想通过这篇文章来简单谈一下robots.txt的写作。 robots.txt基本介绍 robots.txt是一个纯文本文件，在这个文件中网站管理者可以声明该网站中不想被robots访问的部分，或者指定搜索引擎只收录 阅读全文
posted @ 2022-03-02 17:03 AJAX` 阅读(321) 评论(0) 推荐(0)