大神帮我看看，这是爬虫吗？？服务器负载一直超50% ~~~

laosiji · 发表于 2024-8-8 00:44:52

byhefei 发表于 2024-8-8 00:44
禁止不了， N多个IP。。

禁不完

那就禁UA

byhefei · 发表于 2024-8-8 00:45:19

我不是大傻瓜发表于 2024-8-7 23:35
我采集的，咋滴

大佬别开玩笑。。

rangered · 发表于 2024-8-8 00:49:09

限制速率啊，10秒之内请求大于多少，直接全部拒绝。

byhefei · 发表于 2024-8-8 00:59:59

rangered 发表于 2024-8-8 00:49
限制速率啊，10秒之内请求大于多少，直接全部拒绝。

刚限制了 10秒 10次请求！

我想知道这是为什么，，被人搞了还是爬虫

lordong · 发表于 2024-8-8 03:33:16

就是爬虫

byhefei · 发表于 2024-8-8 12:29:47

lordong 发表于 2024-8-8 03:33
就是爬虫

这要是1U 1G的机器还真不一定扛得住它爬

lewissue · 发表于 2024-8-8 12:31:30

机器能抗住就别反爬，为了开放的互联网（

yang1707 · 发表于 2024-8-8 12:36:46

可能是爬虫，检查访问日志。

rangered · 发表于 2024-8-8 23:54:41

本帖最后由 rangered 于 2024-8-8 23:55 编辑

byhefei 发表于 2024-8-8 00:59
刚限制了 10秒 10次请求！

我想知道这是为什么，，被人搞了还是爬虫

我都加了N多个黑名单IP了。互联网哪有什么为什么的。人家有可能专门来搞你，也有可能只是刚好扫到你而已。
人家抓鱼，网子大了，总能抓到鱼。你只能加强你的安全设置，别让网到你。

另外你这10秒10次请求也太少了，会影响用户正常访问的。单纯的一次访问会有很多请求的，有什么css、js之类的。具体要设置多少，你自己测试一下。

byhefei · 发表于 2024-8-10 19:56:32

rangered 发表于 2024-8-8 23:54
我都加了N多个黑名单IP了。互联网哪有什么为什么的。人家有可能专门来搞你，也有可能只是刚好扫到你而已 ...

谢谢老哥！

		自动登录	找回密码
密码			注册

大神帮我看看， 这是爬虫吗？？ 服务器负载一直超50% ~~~

大神帮我看看，这是爬虫吗？？服务器负载一直超50% ~~~