如何处理重复页面收录的问题

发表日期:2015-02-06   资讯来源:佰牛科技   浏览:116

在做优化的时候,重复页面收录是一件很头疼的事情,搜索引擎对于重复页面目前来说并没有完美的解决方案,之前看到一篇文章,大意是推荐网站管理员自己去屏蔽重复页面,我们对此可以认识百度目前的技术并不能去主动解决重复页面的问题。

重复页面的危害,大多会造成关键词排名下降,甚至降权,那么重复页面是如何产生的呢?经佰牛网络【深圳网站建设】仔细研究后发现,造成重复页面的途径,主要为以下几点:

1.网站改版后URL重构,造成一个页面有2套URL,搜索引擎抓取2套URL后,造成重复页面。

2.网站做伪静态,伪静态后,动态路径和蔚静态共存,搜索引擎抓取后,造成重复页面。

3.追踪参数,为跟踪流量来源,细分流量渠道,多数网站在推广时会在url中带上'?”的标记

解决方案

1.使用Canonial标签

Canonical 是谷歌、雅虎、微软等搜索引擎一起推出的一个标签,它的主要作用是用来解决由于网址形式不同内容相同而造成的内容重复问题。这个标签对搜索引擎作用非常大,简单的说它可以让搜索引擎只抓取你想要强调的内容,我们可以在页面头部设置该标签,告诉搜索引擎该页面的标准URL是什么。

目前已确认谷歌是支持该标签的,百度也曾在站长平台中确认支持该标签,但是根据实际效果来看,百度对此支持的并不完美,仍有误判情况出现。

2.使用robots.txt文件

Robots协议(也称为爬虫协议、机器人协议等)的全称是'网络爬虫排除标准”(Robots Exclusion Protocol),网站通过Robots协议告诉搜索引擎哪些页面可以抓取,哪些页面不能抓取。

我们可以用robots.txt文件来屏蔽其他非标准URL,如动态URL;

3.使用301重定向

页面永久性移走(301重定向)是一种非常重要的'自动转向”技术。网址重定向最为可行的一种办法。当用户或搜索引擎向网站服务器发出浏览请求时,服务 器返回的HTTP数据流中头信息(header)中的状态码的一种,表示本网页永久性转移到另一个地址。在搜索引擎优化中,301技术可以告诉搜索引擎该 页面的新URL地址,确保权重传递不流失。

4.追踪标记用'#”而非'?”

为跟踪流量来源,细分流量渠道,在URL中添加追踪标记是必要的,但是该标记又和seo相违背,因为添加了追踪标记,就会产生重复页面问题。之前百度站长平台也发布公告称:如果是为了追踪流量,那么建议使用'#”标记,而非'?”标记,经过本人的试验发现百度确实不会收录含有'#”标记的URL。

#代表网页中的一个位置,是用来指导浏览器动作的,对服务器端完全无用。所以,HTTP请求中不包括#。

比如,访问网址,www.xxx.cn/post/24.html/#weibo

浏览器实际发出的请求是这样的:

GET /index.html HTTP/1.1

Host:www.xxx.cn/post/24.html

可以看到,只是请求www.xxx.cn/post/24.html,根本没有"#weibo"的部分,搜索一部分实例后发现,百度确实未收录含有'#”的URL;

备注:'#”和"#!"两个标记完全不一样,请勿混淆。

 

内容标签:
网站优化
软文优化
seo基础
深圳网站建设
{ solution_title }
相关资讯

【签约】深圳目路教育官网网站建设项目

目路SEEPATHS专注于为学生家庭提供教育升学的定制服务。团队持续运营超过8年,目前已经发展成为一家以升学结果为导向,多元化道路与学生背景条件相结合的高端专业、实现学生个性化升学规划的服务机构。

日期:2020-09-24    浏览:116

【签约】深圳中浩建设官网建设项目

深圳中浩建设实业有限公司成立于2000年,是一家专业从事沥青路面施工,集工程投资管理,沥青路面,彩色沥青路面,路面养护维修为一体的公司。

日期:2018-07-12    浏览:116

【签约】深圳财阜集团APP开发项目

财阜集团的是一家扎根香港,并专注于为所有客户和会员提供一站式海外资产配置及服务的综合集团。

日期:2019-05-03    浏览:111

【签约】大可智能教育信息网平台网站建设项目

大可智能教育信息网面向全国一线教师和学生,提供高考、留学、考级考试以及 各年级相关备课、迎考的专业资源。

日期:2017-09-20    浏览:111

【签约】深圳活石学院教育平台项目

活石学院,源自香港,提供DSE课程学习,留学权威,服务全球,以及服务香港本地中小幼升学,规划香港及海外大学本科留学,是业内首屈一指的香港教育专家。

日期:2018-11-03    浏览:109

网站长尾关键词优化的六大法宝

长尾关键词,按字面理解就是搜索长度长,有2至3个词组成的词语,而用户有可能会用的这些词进行搜索。那么,对于已经存在的长尾词需要怎么优化呢?接下来分享长尾词优化的六大法宝。

日期:2018-07-05    浏览:163

用户粘性提高才能够保证网站良性发展

网站优化都有很多公司来说都是非常重要的,因为如果你的网站上要是有更多的客户的话,那么势必要在网站优化上下一些功夫,如果网站是比较好的话,那么这种网站它的用户粘性相对来说应该是比较高的,因为用户粘性对于我们建站的人来说是非常的重要的,因为只有用户粘性能够提高的话,才能够保证我们的网站运营中能够良性发展。

日期:2018-07-05    浏览:154

这些网站图片优化小技巧十分受用

图片优化是网站要进行优化的一个十分重要的方面,传统意义上的优化仅仅只是图片要加alt标签或是仅仅压缩。但这样太过粗陋,以下带来详细技巧。

日期:2018-07-05    浏览:122