守护时光 发表于 2024-8-7 13:46:45

有什么好办法屏蔽掉这些垃圾爬虫

超多蜘蛛及各种爬虫

AhrefsBot,bingbot,Bytespider,Baiduspider,SemrushBot,YisouSpider,facebook,applebot,sogou,mj12bot

一只眠羊 发表于 2024-8-7 13:47:02

ng里屏蔽就行了。很简单啊

惊艳了一生 发表于 2024-8-7 13:47:15

宝塔设置UA黑名单

走不尽山川 发表于 2024-8-7 13:47:27

ahrefs、semrush和脸书不是直接屏蔽UA关键词就行了吗，他们把名字直接写在UA里了啊

字节和一搜如果你想屏蔽的话，也直接屏蔽关键词就行了

如果是你截图上的那些，全都极为简单

说得来 发表于 2024-8-17 00:42:51

专业抢沙发的！哈哈

人间妖孽 发表于 2024-8-18 21:33:43

我只是路过，不发表意见

乐观 发表于 2024-8-19 19:08:36

回个帖子，下班咯~

孤独无败 发表于 2024-8-20 02:44:17

众里寻他千百度，蓦然回首在这里！

心有翅膀 发表于 2024-8-21 00:11:16

回个帖子，下班咯~

解放 发表于 2024-8-21 14:33:09

不错 支持下
页: [1] 2
查看完整版本: 有什么好办法屏蔽掉这些垃圾爬虫