随笔分类 -  其他

禁止搜索引擎收录的方法
摘要：一．什么是robots.txt文件? 搜索引擎通过一种程序robot（又称spider），自动访问互联网上的网页并获取网页信息。 您可以在您的网站中创建一个纯文本文件robots.txt，在这个文件中声明该网站中不想被robot访问的部分，这样，该网站的部分或全部内容就可以不被搜索引擎收录了，或者指 阅读全文

posted @ 2016-04-19 10:47 小人物的奋斗 阅读(1388) 评论(0) 推荐(0)

导航