摘要: 最近发现被神马搜索封装爬取,导致网站宽带被疯狂占用,就是这个蜘蛛,同时来100个左右IP采集,把服务器带宽和CPU全都用光了,每次都要把网站卡死了,才消停一会,过半个小时,又来了,简直就是太烦了,我在神马站长后台也去看了,根本没有提交robots的地方,也没有限制频率的功能,反正就是叫天天不应,叫地 阅读全文
posted @ 2025-11-22 11:20 鹅是码农 阅读(0) 评论(0) 推荐(0)