网站改版后如何解决404页面抓取错误的问题

发表日期：2015-04-17   资讯来源：佰牛科技   浏览：126

网站改版都是希望网站可以很好的进行优化，但是对于网站改版的不同阶段，搜索引擎会对网站进行不同的要求。一般网站改版后，对网站的优化都会造成一些影响，这个时候，就进行有效地控制，减少改版造成的404页面过多情况。如果搜索引擎对网站的404错误页面抓取过多，就会导致网站有可能被降权，这对以后网站权重的恢复也会造成很大的影响。下面佰牛网络【深圳网站建设】具体的跟大家分析下404页面的解决情况。

1、利用日志分析工具找到404错误抓取页面

想要知道搜索引擎有没有到网站抓取，到网站抓取多少页面，抓取了哪些页面。这时就需要对网站的日志进行分析。对于网站日志的看法比较困难，就可以使用光年日志进行转化。首先利用FTP下载好最近几天的网站LOG日志，当然，想更多的分析，那么多下载一段时间的LOG日志也可以，利用日志分析工具新建任务分析各个阶段的百度蜘蛛抓取情况。

2、利用百度站长死链提交工具进行死链提交

对于404页面同，百度搜索引擎是如何进行理解的呢?事实上，对于404页面。百度搜索引擎认为404状态码代表‘Not Found'，spider更新时会认为该页面已失效，此时呢将在索引库中删除，短期内spider再次发现该url不再会抓取。但是如果通过网站日志就可以发现，对于404页面，百度蜘蛛还是会进行抓取的，这也是为什么网站改版以后，百度蜘蛛还是会对404错误页面进行一些抓取。

3、利用robots.txt和nofollow标签引导蜘蛛抓取

网站存在错误页面时，百度蜘蛛就会抓取 到一部分的错误页面。浪费了蜘蛛抓取资源，而对于网站的正确页面抓取就会减少一部份。这就造成页面的资源丢失。这时站长就需要对百度蜘蛛进行一些引导，让蜘蛛抓取想让他抓的一些页面，对于一些404页面进行robots限制抓取，对于网站中一些不参与排名的链接实行nofollow，引导蜘蛛抓取重要页面。

 

内容标签：
网站改版
seo在线培训
外贸seo优化
深圳网站建设
推荐案例
{ solution_title }
相关资讯

腾龙公司如何申请直属会员账号流程

日期：2025-07-11    浏览：100

联系我们华纳公司开户客服电话19989979996（万宝路业务办理）

首页-华纳公司-电话【19989979996】【微信】华纳万宝路微同步【在线客服-19989979996】开户电话-客服开户-热线开户-咨询-联系-代理开户-在线开户-开户网址-注册开户-开账号-开会员

日期：2025-06-25    浏览：100

腾龙公司如何申请直属会员账号流程

日期：2016-05-16    浏览：120

首页-腾龙公司官方网站

腾龙公司官方网站【1903-8888885】【腾龙公司线上经纪人薇信号19038888885】公司认为客户、供应商、公司股东、公司员工等一切和自身有合作关系的单位和个人都是自己的合作伙伴，并只有通过努力为合作伙伴创造价值，才能体现自身的价值并获得发展和成功。

日期：2016-05-16    浏览：123

外链建设如何影响网站关键词排名

再次是外链的相关性远比数量重要，很多SEOER做外链基本不注重相关性，在他们看来，只要悬挂外链的网站有高权重即可，并且觉得外链做的越多越好，也就是说十分注重外链的数量，忽略的质量。

日期：2016-05-16    浏览：122

如何识别SEO中的水货？

百科中原理写的是向百度发送数据包。大哥，你发了也得人家接收执行才行。这边如果写成『缓存溢出可执行漏洞』，那还具有一定可行性。而忽悠大师是不会这么深入研究的，他们最擅长的就是抛出一套理论，让你觉得很高深，很有效，其实具体怎么执行，往往他们都说不出个所以然来。

日期：2016-05-16    浏览：120

精简优化代码是做好SEO优化必须的一个步骤

尽量采用局您的页面，局的益处是让搜索引擎爬虫能够更顺遂的、更快的、更友好的爬完您的页面局还可以年夜量缩减网页巨细，这在SEO优化工作中起到很大的浸染，不仅提高浏览的速度，更使得代码更精练、流利、更轻易放置更多内容。

日期：2016-05-16    浏览：121

对于于门第上网站seo优化的网站操作

网站题目：关于一度新站来说是很首要的，第二天你网站题目就成为了呵呵，这可是举例，百度引擎可没有喜爱网站题目没有断变来边去，新站要安靖做兴起，就要想好一度面前的题目，假如斯后需求批改，也最好正在网站有所根底的状况下，遏制修正。

日期：2016-05-16    浏览：130