首先進入寶塔面板,文件管理進入/www/server/nginx/conf目錄,新建空白文件kill_bot.conf。然后將以下代碼保存到當前文件中。
#禁止垃圾搜索引擎蜘蛛抓取if ($http_user_agent ~* "CheckMarkNetwork|Synapse|Nimbostratus-Bot|Dark|scraper|LMAO|Hakai|Gemini|Wappalyzer|masscan|crawler4j|Mappy|Center|eright|aiohttp|MauiBot|Crawler|researchscan|Dispatch|AlphaBot|Census|ips-agent|NetcraftSurveyAgent|ToutiaoSpider|EasyHttp|Iframely|sysscan|fasthttp|muhstik|DeuSu|mstshash|HTTP_Request|ExtLinksBot|package|SafeDNSBot|CPython|SiteExplorer|SSH|MegaIndex|BUbiNG|CCBot|NetTrack|Digincore|aiHitBot|SurdotlyBot|null|SemrushBot|Test|Copied|ltx71|Nmap|DotBot|AdsBot|InetURL|Pcore-HTTP|PocketParser|Wotbox|newspaper|DnyzBot|redback|PiplBot|SMTBot|WinHTTP|Auto Spider 1.0|GrabNet|TurnitinBot|Go-Ahead-Got-It|Download Demon|Go!Zilla|GetWeb!|GetRight|libwww-perl|Cliqzbot|MailChimp|SMTBot|Dataprovider|XoviBot|linkdexbot|SeznamBot|Qwantify|spbot|evc-batch|zgrab|Go-http-client|FeedDemon|JikeSpider|Indy Library|Alexa Toolbar|AskTbFXTV|AhrefsBot|CrawlDaddy|CoolpadWebkit|Java|UniversalFeedParser|ApacheBench|Microsoft URL Control|Swiftbot|ZmEu|jaunty|Python-urllib|lightDeckReports Bot|YYSpider|DigExt|YisouSpider|HttpClient|MJ12bot|EasouSpider|LinkpadBot|Ezooms") {return 403;break;
}#禁止掃描工具客戶端
if ($http_user_agent ~* "crawl|curb|git|Wtrace|Scrapy" ) {return 403;break;
}
2. 修改網站配置文件
-
進入網站設置:
- 在寶塔面板左側導航欄中選擇“網站”。
- 找到并點擊您要配置的網站,進入網站設置頁面。
-
編輯配置文件:
- 在網站設置頁面左側導航欄中選擇“配置文件”。
-
插入自定義配置:
- 在?
#SSL-START SSL相關配置,請勿刪除或修改下一行帶注釋的404規則
?上方空白行插入以下代碼: - #屏蔽垃圾蜘蛛
- include kill_bot.conf;
- 在?
include kill_bot.conf;
- 保存配置:
- 保存并應用配置文件。
- 保存并應用配置文件。
3. 驗證配置
-
重啟Nginx:就可以在網站日志里看到防御效果了。
- 在寶塔面板左側導航欄中選擇“軟件商店”。
- 找到并點擊“Nginx”,然后點擊“重啟”按鈕。