专注矿山机械设备网络营销

我的个人生活和工作记录博客,欢迎广大同行人多多与我交流,一起做好网络推广事业...

说说robots.txt在网站被百度收录错误网址时的作用

robots.txt是什么?怎么用?您百度下:robots.txt看看介绍和规则就OK 或者直接点击看百度百科:http://baike.baidu.com/view/1280732.htm

robots.txt必须写在网站根目录下,如:http://www.seozz.net/robots.txt

如果不会写robots.txt,打开一个网站,在它的根目录下输入:robots.txt 仿照它的写就OK

今天阿权站长就和大家谈谈robots.txt在特殊时期的作用,阿权站长的一个网络推广论坛www.floyou.net用的是动网论坛系统,并且伪静态化了,因为动网论坛系统所生成的网址比较复杂,所以伪静态规则也比较难弄,于是,百度就总收录一些错误的伪静态页面,具体如下图所示(因为404错误页面定义的是首页):

百度收录错误

百度收录错误网址页面

分析收录的错误网址后发现,伪静态网址后面会加很多其它东西,结尾都是move=next或move=pre
于是8月31日我在robots.txt中写入了两行语句:
Disallow: /*move=next$
Disallow: /*move=pre$

结果:9月1日,收录就正常了,如下图所示:

百度收录正常

robots.txt限制后百度收录正常

可见,当搜索引擎无法对网站进行检索索引的时候,或总收录错误网址的时候,用robots.txt来限制或引导就是很好的方法。

以上,阿权站长拙见,若有不妥,敬请谅解!

本文地址:http://www.seozz.net/zzseo/robots.html

本文标题:说说robots.txt在网站被百度收录错误网址时的作用

« 上一篇 下一篇 »

  • 相关文章:
  • 存款证明 发布于 2011/9/7 13:31:12
  • 学习了~~就是不知道伪静态这样处理好吗~
  • 2011/9/7 13:31:12 回复该留言
  • 北极绒保暖内衣 发布于 2011/9/6 0:21:42
  • 为什么你博客可以收录这么快啊
  • 2011/9/6 0:21:42 回复该留言
  • 海天网络营销 发布于 2011/9/6 0:03:09
  • robots.txt可是不能写错了
  • 2011/9/6 0:03:09 回复该留言
  • 济宁红房子医院 发布于 2011/9/5 14:42:22
  • 呵呵,博主挺细心,robots.txt这个都能发现
  • 2011/9/5 14:42:22 回复该留言
  • 诸葛晓东 发布于 2011/9/4 23:30:11
  • 能帮我看看我的robots.txt 设置是否正确呢
  • 2011/9/4 23:30:11 回复该留言
  • 宁夏枸杞子 发布于 2011/9/3 16:05:12
  • 很实用啊
  • 2011/9/3 16:05:12 回复该留言
  • 水泥垫块机 发布于 2011/9/3 8:54:30
  • 不错 学习了
  • 2011/9/3 8:54:30 回复该留言
  • 独立博客排行大全 发布于 2011/9/3 1:18:15
  • 独立博客排行大全,根据博主提议,小幅度更新!首页更加人性化,域名换成了简短标题,增加了SEO博客推荐及侧边栏博客推荐,内容页增加了最近10篇文章标题及链接,欢迎亲临指导,提出意见!
  • 2011/9/3 1:18:15 回复该留言
  • 成都seo 发布于 2011/9/2 23:27:50
  • 很实用啊
  • 2011/9/2 23:27:50 回复该留言
  • 治疗口臭的偏方 发布于 2011/9/2 21:50:15
  • 不错啊,这个有作用!
  • 2011/9/2 21:50:15 回复该留言

发表留言:取消回复

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。

版权所有:郑州阿权站长 备案号:豫ICP备12001452号-4 联系我们 Your WebSite.给我留言 Some Rights Reserved.

免责声明:本站仅做个人博客使用,部分图片和内容源自于互联网,若有侵权或不妥请联系删除! Powered By 郑州阿权站长