设为首页收藏本站

全球主机交流论坛»论坛 › 技术交流分享 › Web技术 › 谷歌蜘蛛坑爹啊，抓取页面的时候直接导致网站崩溃 ...

返回列表发新帖

查看: 26|回复: 2

谷歌蜘蛛坑爹啊，抓取页面的时候直接导致网站崩溃

英语实在不好

82 主题	123 回帖	560 积分

积分: 560

发消息

发表于 2017-3-18 00:04:04 | 显示全部楼层 |阅读模式

查询了下日志，104: Connection reset by peer，http请求超时，然后网站无法访问了。

是不是应该把它关进小黑屋去？

回复

使用道具举报

16 主题	157 回帖	366 积分

积分: 366

发消息

发表于 2017-3-18 00:18:13 | 显示全部楼层

这都能崩溃？

回复

使用道具举报

464 主题	6643 回帖	1万积分

积分: 14772

发消息

发表于 2017-3-18 00:19:46 | 显示全部楼层

我用2歐建站都因此被它弄死了數次
每個BOT IP 1000+ 爬得好厲害
之後轉去用vultr

回复

使用道具举报

返回列表发新帖

Archiver|手机版|小黑屋|Discuz! X

GMT+8, 2025-4-21 23:48 , Processed in 0.016201 second(s), 3 queries , Gzip On, Redis On.

Powered by Discuz! X3.5

© 2001-2024 Discuz! Team.

快速回复 返回顶部 返回列表