论坛 › Web技术 › 昨天被百度蜘蛛抓取了三十多万次

kyotrue 发表于 2018-5-3 16:27:02

围观楼上神仙

背影 发表于 2018-5-3 16:27:59

zhongziso 发表于 2018-5-3 16:23

被你发现了？ 千万别DDCC，我的小鸡没防御
请问你是怎么收集种子的，你不也是爬人家的站吧

the2ndface 发表于 2018-5-3 17:07:11

zhongziso 发表于 2018-5-3 16:23

被你发现了？ 千万别DDCC，我的小鸡没防御
你的小鸡也太慢了，还时不时的打不开，营养快线都要过期了

hundouluo 发表于 2018-5-3 17:10:20

zhongziso 发表于 2018-5-3 16:24

看了ip地址，反查都是百度蜘蛛啊。
百度蜘蛛就一串代码，我也可以伪装：Mozilla/5.0 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html).
011.gif

ry-ss 发表于 2018-5-3 16:23:00

传说中的被爬虫爬死系列？

satao1382 发表于 2018-5-3 17:21:16

网监正在搜集证据呢楼主快跑

查看完整版本: 昨天被百度蜘蛛抓取了三十多万次