同IP站点查询的原理和防止被查询的方法
站长工具的“同IP站点查询”是使用bing对网页的抓取特点来实现的,只要禁止bing的spider爬行,不让bing收录自己的站点即可。这种说法我也是第一次听说,现在将原帖发出来供大家一起研究。很多站长工具中都有“同IP站点查询”、“IP反查域名”这种服务不少人都不知道是什么原理,其实这些服务几乎都是用BING(以前的LIVE)来实现的,BING有个特别功能 BING抓取页面时会把站点的IP也记录下来,用户可以搜索指定IP下的结果 同IP站点查询就是利用这个实现的
如 http://cn.bing.com/search?q=ip:67.220.92.38,这个功能很有用 但很多站长工具都会把结果提交到搜索引擎比较讨厌,如果不希望自己的网站出现在结果中 可以用ROBOTS.TXT拒绝BINGBOT抓取,但已抓取的结果仍然会显示出来,只能等半年后抓取结果过期删除,才能从BING的搜索结果中消失。
[ 本帖最后由 xspoco 于 2011-1-26 21:23 编辑 ] 这东西 不准的 我也搞不懂是个什么工作原理? 几乎所有蜘蛛都有记录,google里你也可以用 ip:a.b.c.d 来查询,所以禁止 bing 并没有多大用处。
除非你禁止所有的蜘蛛,但是这样做站还有什么意义呢?
页:
[1]