当前位置:380元网站建设 虎网站 > seo 优化 > 正文

分享!!避免大量重复URL被百度收录

发布日期:2015-07-09

*先声明,我们只谈论有检索意义的URL,也就是用户会从搜索引擎查找的页面。其他页面按照常用的方法做屏蔽就好了。鉴于很多站长都爱讨论整体的收录量,我必须泼一下冷水,也许你的有效收录是1/10。

URL参数

也叫URL query,是一个较复杂,较容易被忽视,较容易被妥协的问题。他是网站运营中必不可少的元素,如果简单的去除,其他部门就无法工作了。 静态化是的话题,URL参数经常被用于以下几方面:
  同一个实体的不同状态展示,比如同一个酒店,在不同时间点会有不同的房间库存:http://www.travel.com/hotel/123/?checkindate=2015-06-09&checkoutdate=2015-06-10
  为了统计不同渠道的流量:https://www.huwz.com/?tracking=website_a
  为了统计不同渠道,具体模块的点击量:http://www.xazcit.com/?tracking=website_a&click_spot=zone_abc
  调试:http://www.a.com/product/item123/?debug=true

出现这种问题的坏处有几点:
  1.浪费搜索引擎对你网站的各项配额,从而影响其他正常的页面。
  2.丢失很多本应拿到的链接加分,站外渠道的链接往往是较优质的。同一个URL的分值可能分散成几十份。
  3.SEO的流量被统计到别的渠道(因为tracking字段写的是别的渠道,而且被收录被点击)
  4.往往形成一种局面,产品用一套URL,SEO用另一套URL, 甚至不同渠道用不同的URL,后期开发和维护的成本极高。

为了解决这个问题,*先要弄清URL的定义。以我的理解,每一个URL是一个静态的、独立不重复的、有意义的实体,一般也有检索意义(就是有人会搜)。比如一个人、一辆车、一条道路、一个0件。而不能混入各种"状态",比如这个人生病的时候,难道就不是他自己了么? 一件商品在促销的状态难道是另一件商品了么?

理论上canonical标签就可以解决这个问题了, 但是从实际测试结果看,百度对这个标签的支持优先级非常0, 几乎可以忽略不计。那么我的解决方案是这样的:
  1.建立好网站的思维导图和元信息。
  2.所有和SEO元信息相关的参数都放到路径中去
  3.所有和SEO元信息不相干的参数都放到#后边,因为#后边不影响web服务器返回的内容。简单的说就是用"#"替代"?"。
  4.每个页面中都利用js获取#后边的参数对,通过二次请求发回给统计服务器
  5.如果#后边的参数影响页面内容,比如酒店的入住日期。那么这部分内容用ajax加载就行,他是不稳定的,不属于页面内容的一部分。(当然还有变通的办法,暂不赘述。)
  6.原始的#锚点定义肯定会冲突,定义一个#后边的变量,并用js控制屏幕滚动,来原始锚点的作用。

有人可能会想到,根据ua判断,如果是搜索引擎爬虫,就用跳转的方式去掉URL参数。但效率较高的方法必然是从一开始就不展示错误URL。那么前面的例子优化后就变成了:

其实很多网站早就使用这种方式了,但是还有很多网站由于开发效率无法及时实现。所以对于一般的小网站,一定要考虑开发成本,不要轻易冒进。只要能避免问题的发生,变通的方法是很多的。

路径中使用非必要元素

很多网站仿照亚马逊的做法,把商品名体现在URL中,然后再通过id来决定页面展示的内容:http://www.amazon.cn/博集典藏馆043•基督山伯爵-亚历山大•仲马/dp/B005TZHJEQ/

这样虽然可以提高一些相关性,但是很危险。在长期甚至短期的时间内,大量商品的名称是非常可能有变化的,那么URL也就跟着变化。成本也是非常高的,因为加大了技术实现难度,不管从站内还是站外,每次增加链接都是一个很麻烦的事情。

在我接手艺龙SEO之前,URL被全部改成了这样,对我早期的工作造成了非常巨大的负担:http://www.a.com/Shangrila_International_Hotel-12345678-hotel/

通过日志分析发现基本所有的百度蜘蛛发起的请求都被301跳转了快速(日志分析方法可参考SEO健康度 )。细致调查后发现,从SEO拼接规则到后台的汉字和翻译数据被一直修改。也就是说,这个URL相关的元素有:
  1.中文 (非必要元素)
  2.由中文翻译的英文 (非必要元素)
  3.id (必要元素)

而当时负责SEO的同事把英文和id拼接在了URL中,那么这样一个URL先后变成过:
  http://www.a.com/Shangrila_International_Hotel-12345678-hotel/
  http://www.a.com/Xianggelila_International_Hotel-12345678-hotel/
  http://www.a.com/XiangGeLiLa_International_Hotel-12345678-hotel/
  http://www.a.com/Shangrila_guoji_Hotel-12345678-hotel/

跟"相关性"比,URL的先进性和稳定性更重要。所以针对这个问题,URL的较佳策略应该是:http://www.a.com/hotel/12345678/

如果这个id是隶属于一个分类下的,比如城市,那么就可以是:http://www.a.com/hotel/beijing/123/

从技术角度说, id一般是数据库的primary key,可以是数字也可以是字符串,那么这个时候URL是一维的; id也可以是联合的先进索引,那么URL就是二维的,就像上面的(bejing,123)缺一不可。电商类网站列表页经常用到三维以上。

大小写

如果网站的技术架构用的是开源系统,一般是不会有这个问题的。如果使用了微软的技术架构,这个问题非常常见:
  https://www.huwz.com/newyork/
  http://www.xazcit.com/Newyork/
  http://www.xazcit.com/NewYork/

我的建议是统一使用小写,大写自动跳转为小写(小心301死循环!)。

目录的规范

很多网站同时存在这样的URL,无形中把收录量扩大了一倍:
  https://www.huwz.com/product/123
  https://www.huwz.com/product/123/
  上边先进个路径的意思是在product目录下有一个123文件。第二个路径的意思是在product目录下有一个123目录,这个目录下可能有很多文件,但是他代表众多文件中的index.html或index.php或default.aspx等优先级较高的那个文件。为了避免歧义,我定义文件都是用".html"结尾的。

虎网科技(西安网站建设)总结:

1.所有部门统一使用SEO定义的URL,屏蔽非SEO URL的入口。
  2.用"#"替代"?"
  3.统一使用小写
  4.目录的规范
  5.把不规范的URL跳转到规范的URL

7月芽庄旅游天气怎么样,7月去芽庄旅游必备攻略

    随着夏季的到来,越来越多的人开始计划去海边旅游,而越南芽庄成为了很多人的。芽庄拥有美丽的海滩、独特的文化以及丰富的海鲜美食,是一个非常适合度假的地方。7月芽庄旅游天气怎么样呢?如果你计划在7月去芽庄旅游,又需要哪些必备攻略呢?本文将为你提供有价值的信息,帮助你更好地规划旅行。 一、7月芽庄旅游天气怎么样? 芽庄属于亚热带气候,全年气温较为稳定,但是7月属于芽庄的雨季。在这个月份,芽庄的降雨量比较...

       香港创富地产物业跟虎网科技签定做网站合作协定 创富坐落于香港中西区悉尼。创富是经香港中西区工商局审核的正规企业,统一社会信用代码:办理中。创富选用虎网站响应式自适应网站案例,此类案例是当今新潮流的网站程序,他除了具备商务型所有功能外,他的特点在于能自动识别互联网和移动网终端设备,既能适用在电脑上浏览同时又适用在平板电脑和各款手机上浏览都能自适应屏幕大小,是企业官网的选择佳品。   创富投资地产公司是专业致力于房地产领域的公司,我们提供地产销售...

       商城网站制作在体验度方面有哪些改进方式 商城网站系统算是制作网站中比较复杂的网站项目,要建设一个完善的商城系统不简单,比较成功并且运营也相当成功的也不多,都有人无时无刻改进体验,提升用户量,才有如今完善的商城。那么商城网站制作在体验度方面有哪些改进方式呢? 商城网站制作在体验度方面有哪些改进方式   很多商城实际上是企业网站,只是商品展示的平台,客户以及商城订单都相当之少。其中一个原因就是用户体验不好。由于商城建设经过多年的发展,已经形...

       FTP错误信息及解决方法 FTP作为企业管理维护网站资源的重要手段,他的安全与正确操作是尤其重要的,但大多时候存在着FTP上传疑问,*先,当您操作出现错误不要急于重试,重试次数过多只会让网站封你的ip地址。要根据提示,找出原因,选择正确的方法,才能够真正解决问题。PS:您*先要确认网络可以使用,如果电脑无法连接网络,一切免谈。   1、421错误   原因:同时连接该ftp的人数过多,一般ftp网站都有同时登陆人数的上...

       深圳罗湖创雅装饰设计同虎网科技签署网站建设事宜 创雅是经深圳市罗湖区工商局审核的正规企业,统一社会信用代码:9144030079045820XG。同时经国家工信部和广东省通信管理局审核通过ICP备案;备案号:粤ICP备15083327号。创雅处于深圳市罗湖区桂圆路39号3楼。创雅选用虎网站定制型网站案例,此类网站主要是按客户要求和提供的风格案例或效果图纸来做,这种属于仿制和定制型网站,是根据功能开发的难易度来评估报价的,价格相对较高,适合于大中...

       如何写网站推广方案 假如你被聘用到一家大型建材企业的网络营销部工作。有一天,部门经理告诉你,该企业的网站已经建立了半年左右的时间,但访问的人数很不理想,没有达到宣传企业产品和最终实现在线交易的初衷。要求你尽快提出一套网站推广方案,以便付诸实施。 现在,请根据该企业的有关情况,提出你的网站推广途径和推广要点 一.首先在网站推广之前,要进行网站的优化,确保网站本身结构、页面、内容的优化,通过对网站结构和布局等的调整,使...

最新模板
少儿英语培训机构网站建设 培训公司网站建设
成人自考网站建设 成人培训网站制作设计版面
智能家居摆设设计网站建设 智能家居装修企业网站建设
铜螺母,铜螺丝,螺栓,螺钉工厂网站建设
废气处理设备,如活性炭吸附箱、RTO蓄热式氧化处理设备、光氧等离子复合设备 低温等离子设备 光氧催化设备等网企业网站建设
图文阅读