继续上次网站优化失败案例进行剖析,今天阿权闲下来了,用网站日志分析工具看了看muer.ganhuo.org的日志,不看不知道一看吓一跳,原来如此多的异常返回代码,见:HTTP状态码代表含义
部分日志截图如下:
网站日志中有很多的404错误,具体位置如下:
/favicon.ico
/c/文件夹子下的(根目录就没这个文件夹)
/tag.php(新网站是asp的根本没这个文件)
/search.php
/chatrpad.php
/dbheimuer/151.html (页面估计被删除了)
/998/(无此文件)
/dbheimuer/images/up.png (根本没这个文件)
除此之外还很多很多的302,304,206等异常返回数据,不过这些倒不是很关键。
怎么办?
第一步:分析原因,因为这是一个别人用过的域名,所以会产生如此多的错误抓取。
第二步:改写robots.txt,让蜘蛛禁止收录出现404的位置,禁止抓取动态文件,禁止抓取php文件。
第三步:制作一个.ico文件放根目录。
第四步:更新网站,时时观察收录及网站日志。
以上,仅属阿权工作之余爱好,阿权会继续打理好网站,希望能带来好的收获
本文地址:http://www.seozz.net/zzseo/404304206.html
本文标题:网站日志中有很多404,304,302,206等莫名返回数据