求攔截爬蟲的IP插件

klg548

求攔截爬蟲的IP插件

我知道答案 回答被采納將會獲得1 貢獻 已有3人回答

湖中沉

攔截IP最好是在服務(wù)器設(shè)置，PHP層面攔截意義不大，因為他已經(jīng)訪問PHP了，再攔截也無法阻止資源消耗

klg548

湖中沉 發(fā)表于 2023-9-16 18:46
攔截IP最好是在服務(wù)器設(shè)置，PHP層面攔截意義不大，因為他已經(jīng)訪問PHP了，再攔截也無法阻止資源消耗 ...

謝謝大神解惑！

false001

這應(yīng)該是國外的蜘蛛吧，多遵守互聯(lián)網(wǎng)規(guī)則，可以使用robots.txt

User-agent:AHrefs
Disallow:*
User-agent:Semrush
Disallow:*
試下。


如果服務(wù)器能夠打承受起訪問壓力，不用管它。