您的位置:seo首页 >> SEO咨询 >> 咖啡驳新浪博客屏蔽百度引擎事件-子虚乌有
咖啡驳新浪博客屏蔽百度引擎事件-子虚乌有
© lcfqyk / 2010-8-18 / 10:31 / SEO咨询
咖啡驳新浪博客屏蔽百度引擎事件-子午须有
说实话咖啡今天很冲动。我出来冒尖了。前两天听说新浪博客屏蔽百度的事。也没有在意。那时觉得是不可能的事。一直没有关注,今天有朋友拿问题来找咖啡。问到底robots.txt文件怎么写。是不是新浪博客屏蔽了百度,还给咖啡展示了新浪博客的robots.txt文件。不看不知道,一看吓一跳。我看到了donews上的新闻,标题:新浪博客屏蔽百度引擎 “屏蔽门”再起波澜。
新闻大体内容截图如下。

看完我再对照下新浪博客的robots.txt文件。新浪博客robots.txt截图:

无名之火冲上心头。真是子午须有,不懂装懂之辈的谣言,新浪博客robots.txt文件直接提到了限制百度抓取的目录,限制目录之外的文件是允许抓取的。robots.txt不是继承关系。是并的关系。咖啡在其他的seo论坛更是看到有自认为精通seo者说给大家列举出一堆主流免费博客,扬言这些博客以后大家也不能用了,屏蔽百度蜘蛛了。结果咖啡又顺藤摸瓜的去看了下楼主提到的博客,典型的就是和讯网。和讯博客是百度旗下的产品。和讯的robots.txt文件中是屏蔽了一些不想让搜索引擎收录的页面。但是根本不涉及什么屏蔽百度蜘蛛抓取内容的事情。在与楼主的对话中,楼主3次修改帖子。对此咖啡无语。只是深深的祝福那位仁兄一路好走。加油!
至于新闻中提到的那个自己博客文章在百度搜索不到,于是又发现徐静蕾的博客文章也在百度搜索不到,懂seo的人都应该知道是怎么回事。而新浪博客的robots.txt文件中是允许百度蜘蛛抓取除admin,include,html等文件夹下的文件的。并不是完全屏蔽。知道robots.txt文件作用的朋友应该可以理解。
另外,咖啡找到一个robots.txt文件检测工具:http://tool.motoricerca.info/robots-checker.phtml。咖啡推荐大家的网站使用谷歌网站管理员工具检测自己的robots.txt文件。需要指出的是,新浪博客的robots.txt文件用工具检测是存在错误的。如果你是站长请认真学习下robots.txt文件的写法吧。做中文网站的朋友可以去读下<百度搜索帮助中心>的文件。
抱歉,咖啡很激动。无心伤害谁,只是希望把事情跟大家说清楚。加油朋友们!
阅读过本文的朋友出发去了:
[什么是图片优化]
© 英文SEO和外贸SEO文章内容皆为人工编辑,如有错误,敬请指正。




2010-8-18 10:47:37
抢沙发坐着看
2010-8-18 15:52:55
写的不错,,正在学习中了~
2010-8-18 21:03:37
哈哈,咖啡写的很好啊,又学了些robots的知识
2010-8-19 10:05:42
哈哈 赛欧那帮人 把那个帖子的评论都屏蔽了 ...
http://www.imseoer.com/thread-4974-1-1.html
这帮人......唉....
2010-9-6 19:32:13
拜访博主咖啡兄!
咖啡兄的文章说的有道理,严谨的批判精神确实令人佩服!但是兄台没能准确了解到实际情况,上文很大程度上也是和其他人一样,被安安文章中的一个本来不应该有的歧义所误导(当然这文章是有几个小错误)。changming说的也有道理,但大可不必用“这一帮人”这个词,因为你注册论坛并加入我们QQ群的那一刻起你也是赛欧的一员了。另外,这个帖子我也没有屏蔽。今天的留言没其他意思,大家共同探讨一起学习seo而已。
谢谢!