1M的带宽做站，收录多的话会不会被蜘蛛爬死

lonefly · 发表于 2019-10-11 21:08:22

不套CDN的情况下，帮朋友问下

hotkk · 发表于 2019-10-11 21:10:40

既然不是你问，那你就告诉朋友答案就好了。你如果也不知道，那就直接说是你问的

一灰 · 发表于 2019-10-11 21:19:38

lonefly 发表于 2019-10-11 21:17

1M带宽撑死了也就100多K的速度，全被蜘蛛占用了网站不是很慢
你看我签名站

100K的话，就是同时几十个蜘蛛在爬，一分钟就是1000多，一小时就是60000，请问你的站都这个规模了，还用个毛线1M小水管啊。

一颗红心向党 · 发表于 2019-10-11 21:17:00

毛细血管建站吗

work · 发表于 2019-10-11 21:09:06

朋友同事亲戚 = 你

jdunion · 发表于 2019-10-11 21:09:22

让他们排队爬，过5秒钟换下一个，可以自己设置

hxuf · 发表于 2019-10-11 21:10:04

那就给套上CDN让蜘蛛爬

lonefly · 发表于 2019-10-11 21:11:19

我没用过1M做站，平时看我的流量没人访问光蜘蛛都有100K/s,所以问下会不会被爬死

南瓜头 · 发表于 2019-10-11 21:12:37

等要被蜘蛛爬死了你的站应该权重也高了这时候升级带宽不就好了

一灰 · 发表于 2019-10-11 21:13:03

本帖最后由一灰于 2019-10-11 21:18 编辑

压缩后，100K还能爬死，说明你的站的权重也很高了。

你看我签名站

100K的话，就是同时几十个蜘蛛在爬，一分钟就是1000多，一小时就是60000，请问你的站都这个规模了，还用个毛线1M小水管啊。

		自动登录	找回密码
密码			立即注册