宝塔面板，网站屏蔽垃圾蜘蛛 

宝塔面板，网站屏蔽垃圾蜘蛛：/www/server/nginx/conf/enable-php-74.conf

if ($http_user_agent ~* "TelegramBot|DataForSeoBot|YandexBot|PetalBot|DotBot|facebookexternalhit|AhrefsBot|MJ12bot|SemrushBot|Slurp|twiceler|Scrubby|Robozilla|GPTBot|Amazonbot") {
	return 403;
}

如果谷歌蜘蛛也不要，就加上Googlebot

 

posted @ 2024-12-20 09:02  黄文Rex  阅读(226)  评论(0)    收藏  举报