2014年2月26日
从robots文件看网站用的是哪个程序
摘要： 下面我们来研究这个网站：短美文（http://www.duanmeiwen.com/）它的robots.txt地址是：http://www.duanmeiwen.com/robots.txt文件如下：User-agent: * Disallow: /plus/ad_js.phpDisallow: /plus/advancedsearch.phpDisallow: /plus/car.phpDisallow: /plus/carbuyaction.phpDisallow: /plus/shops_buyaction.phpDisallow: /plus/erraddsave.phpDisallo 阅读全文
posted @ 2014-02-26 10:17 kibi 阅读(187) 评论(0) 推荐(0)