网站标准化一直是困扰网站管理员和搜索引擎的问题。据估计,互联网上10%到30%的网址是内容相同但网址不同的非标准化网址。
这导致了几个问题。例如:
对于网站管理员来说,多个URL的存在分散了页面的权重,这不利于排名。
对于搜索引擎,它浪费资源和带宽。
当搜索引擎找到多个内容相同的网站时,它们不会受到惩罚,但会试图找到应该标准化的网站。但毕竟,程序只是一个程序,可能会出错。它可能不是网站管理员想要的标准化网站。
如果网站地址的标准化过于严重,也可能影响网站的收录。对于低权重的域名,可以包含的总页数是有限的。搜索引擎在不规则的网站上花费资源,为真正不同的内容留下更少的资源。
还有许多解决URL规范化问题的选项,例如:
在Google管理员工具中,设置有或没有3W的标准版本。
使用301将所有不规则URL转换为规范化URL
确保使用的CMS系统只生成标准化的网址
确保网站上的所有链接指向标准化网站
指定提交给搜索引擎的网站图中的所有标准化网址
但这些方法有其自身的局限性。
谷歌管理员工具不适用于其他搜索引擎
有些站长因为某种原因不能转301
CMS系统基本失控
内部链接可以由自己控制,但其他链接不能由自己网站的链接控制。
简而言之,尽管有其他解决方案,但网站标准化仍然是一个问题。
谷歌、雅虎和微软联合发布了一个新标签,佳能,以解决网站的标准化问题。
简单地说,就是在HTML文件的头部添加这样一段代码:
这意味着该网页的标准化网站应:
http://www.example.com/product.php?
以下URL可以添加此代码:
http://www.example.com/product.php?item=SwedishFish&category=Gummy
http://www.example.com/product.php?item=瑞典鱼&trackingid=1234&sessionid=5678
这些URL的真正标准化地址是:
http://www.example.com/product.php?
简单地说,这个标签在一页中是一个301的转折点。区别在于用户没有转向,或者停留在同一个网站上,而搜索引擎将其视为301转向处理,也就是说,页面链接的权重集中在规范的网站代码中。