全球主机交流论坛

标题: 服务器90%的流量来自亚马逊爬虫 [打印本页]

作者: 会翻车吗    时间: 2024-9-15 12:17
标题: 服务器90%的流量来自亚马逊爬虫
本帖最后由 会翻车吗 于 2024-9-15 15:28 编辑

每天亚马逊的爬虫给我干出上G的流量,请求数也多的一匹,有人知道亚马逊爬虫是干啥的吗?亚马逊不是不做搜索引擎吗?为什么有爬虫来???


作者: Maiw    时间: 2024-9-15 12:17
提示: 作者被禁止或删除 内容自动屏蔽
作者: 会翻车吗    时间: 2024-9-15 12:18
Maiw 发表于 2024-9-15 12:17
香港2核2G 15元 4核4G 25元 8核8G 50元 16核16G 100元  美国Cera机房8核8G30G数据盘100M带宽100G防御 33元  ...

你怎么还没被封号
作者: DogeLee2    时间: 2024-9-15 12:31
会不会是那个alex 的ai,他们拿来训练
作者: zsj1259    时间: 2024-9-15 13:04
不喜欢的话直接把亚马逊的asn禁止访问就好了
作者: wps    时间: 2024-9-15 13:05
这不是az吗?怎么就亚马逊了?
作者: 生鱼片leo    时间: 2024-9-15 13:52
都是训练AI用的
带不来网站流量
我把亚马逊和OPENAI蜘蛛都封了
服务器负载都低了好多

作者: 会翻车吗    时间: 2024-9-15 15:28
wps 发表于 2024-9-15 13:05
这不是az吗?怎么就亚马逊了?

我把ip复制错了 总之就是亚马逊哈
作者: 145611    时间: 2024-9-15 16:04
禁国外
作者: 1069    时间: 2024-9-15 16:06
cloudflare 可以只接受 搜索引擎爬虫
还有 seo爬虫 也是费资源,不能带来流量的 全禁止了。
作者: Mer    时间: 2024-9-15 17:02
屏蔽不就可以了




欢迎光临 全球主机交流论坛 (https://lilynana.eu.org/) Powered by Discuz! X3.4