找回密码
 立即注册
搜索
热搜: 活动 交友 discuz
楼主: scand

额,淘宝的robots.txt

[复制链接]

42

主题

2306

回帖

4786

积分

论坛元老

积分
4786
发表于 2013-5-15 23:30:28 | 显示全部楼层


回复

使用道具 举报

78

主题

519

回帖

1304

积分

金牌会员

积分
1304
发表于 2013-5-15 23:31:27 | 显示全部楼层
不抓取不等于不索引,只是索引库里是空数据,标题由外链的锚文本补充。

这个百度好像早一两年就讨论过了吧?
回复

使用道具 举报

46

主题

563

回帖

1300

积分

金牌会员

积分
1300
 楼主| 发表于 2013-5-15 23:57:32 | 显示全部楼层

一灰 发表于 2013-5-16 00:34



不抓取不等于不索引,只是索引库里是空数据,标题由外链的锚文本补充。

这个百度好像早一两年就讨论过了吧 ...

额  我还不晓得呢  
回复

使用道具 举报

186

主题

4643

回帖

9856

积分

论坛元老

积分
9856
发表于 2013-5-16 00:34:20 | 显示全部楼层
百度无视robots
回复

使用道具 举报

12

主题

2325

回帖

4702

积分

论坛元老

积分
4702
发表于 2013-5-16 01:07:29 | 显示全部楼层
早在很久以前。。马云就说了。。不被百度收录了
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|手机版|小黑屋|Discuz! X

GMT+8, 2025-1-20 03:37 , Processed in 0.018477 second(s), 3 queries , Gzip On, Redis On.

Powered by Discuz! X3.5

© 2001-2024 Discuz! Team.

快速回复 返回顶部 返回列表