nginx通过robots.txt禁止所有蜘蛛访问（禁止搜索引擎收录）
摘要：
在server {} 块中添加下面的配置 在线测试robots.txt是否生效 https://ziyuan.baidu.com/robots/index robots.txt文件生产工具：http://tool.chinaz.com/robots/ 其他网站参考： https://www.tmal 阅读全文
posted @ 2019-05-12 18:20 林肯公园 阅读(3852) 评论(0) 推荐(0)
浙公网安备 33010602011771号