找回密码
 立即注册
搜索
热搜: 活动 交友 discuz
楼主: scand

额,淘宝的robots.txt

[复制链接]

42

主题

2305

回帖

4782

积分

论坛元老

积分
4782
发表于 2013-5-15 23:30:28 | 显示全部楼层


回复

使用道具 举报

72

主题

505

回帖

1258

积分

金牌会员

积分
1258
发表于 2013-5-15 23:31:27 | 显示全部楼层
不抓取不等于不索引,只是索引库里是空数据,标题由外链的锚文本补充。

这个百度好像早一两年就讨论过了吧?
回复

使用道具 举报

46

主题

559

回帖

1292

积分

金牌会员

积分
1292
 楼主| 发表于 2013-5-15 23:57:32 | 显示全部楼层

一灰 发表于 2013-5-16 00:34



不抓取不等于不索引,只是索引库里是空数据,标题由外链的锚文本补充。

这个百度好像早一两年就讨论过了吧 ...

额  我还不晓得呢  
回复

使用道具 举报

181

主题

4176

回帖

8907

积分

论坛元老

积分
8907
发表于 2013-5-16 00:34:20 | 显示全部楼层
百度无视robots
回复

使用道具 举报

12

主题

2325

回帖

4702

积分

论坛元老

积分
4702
发表于 2013-5-16 01:07:29 | 显示全部楼层
早在很久以前。。马云就说了。。不被百度收录了
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|手机版|小黑屋|Discuz! X

GMT+8, 2025-1-15 07:00 , Processed in 0.017769 second(s), 4 queries , Gzip On, Redis On.

Powered by Discuz! X3.5

© 2001-2024 Discuz! Team.

快速回复 返回顶部 返回列表