1,防止一样内容有不一样网址:这个做搜索引擎优化兄弟都会接触到,即是一个网站假如有伪静态设置的话,通常会出现一个动态网址和一个伪静态网址,可是里边的内容是一样的,这么baidu录入后会发现不一样网址内容一样,不是很友好。
2,与期望的录入网址不一样:比方一些咱们不期望被搜索引擎录入的网址被录入了,通常咱们期望baidu等搜索引擎能够录入咱们网站的伪静态网址,而去掉对应的动态网址。
3,权重涣散了:还有一个疑问即是一个动态的网址和对应的伪静态网址,假如没有标准化,这么这个页面的权重会涣散,假如标准化301指向一个网址的话,能够使这个页面的权重得到会集。
那么关于网站URL内没有标准化的网址咱们有什么应对3办法呢,简略说说。
1,网站中只运用标准化链接:比方咱们期望运用加www.的网址,那么在咱们优化站内的时分,只需出现内部链接的当地全部都运用加www.的写法,这么无论是实在的用户仍是搜索引擎蜘蛛也都会顺着www.的网址进行抓取,在必定程度上标准了网站的网址。
2,用301跳转或许运用canonical标签:能够依据自个站点的程序或许空间上进行301跳转到标准化网址,或许在head中运用canonical标签,详细用法是在head之间加上(前面加“<”)link rel="canonical" href="本页面的标准化网址" data-ke-src="本页面的标准化网址" /(后边加“>”)即可。
3,用robots.txt屏蔽掉不标准的网址:你能够在robots.txt加上屏蔽掉不标准的网址,比方屏蔽掉动态页面加上Disallow: /*?*,详细的能够依据实际情况进行调整。
SEO网址定律:规范的网址书写方式,有利于提高网站主页权重。
1、出现不规范网址的原因
搜索引擎会自动挑选最合适的URL做为一个网站的网址。众所周知,我们打开IE在地址栏里输入网址,根据各人用户体验的习惯不同,输入的方式也不同。这就是会出现不规范的网址的原因。如:
l http://021jz.com.cn
l http://www.021jz.com.cn
l http://www.021jz.com.cn/
l http://www.021jz.com.cn/index.html
l https://www.021jz.com.cn(较少使用)
以上这五种常见的输入网址的方式,明眼能看出来其实是指向同一个页面:主页。
从技术上来说,在计算机处理时,每一个字符对应一个编码(详见计算机科学导论类书籍);而搜索引擎是把以上网址当成不同的地址来看待,虽然最终返回的都是主页。
现在简要分析一下以上网址的技术问题:
有没有带www,有什么不同?在DNS中,www是你要解析的主机名。在做域名解析时,会要你为域名:021jz.com.cn填写一个主机名,我们一般填:www 。当然,也可以填 bbs或者其它的诸如abcde等等。如果填,那么,主机返回的页面就不一样。对搜索引擎来说,这是两个不同的站点,两个不同的页面。两个都要计算PR值。
具例:http://www.021jz.com.cn和http://focus.021jz.com.cn在搜索引擎看来就是两个不同的站点。其中,http://www.021jz.com.cn的PR值为8,而http://focus.021jz.com.cn的PR值等于6。但从人为上判断,这其实是同一个站点。
另一个问题,带与不带index.html,对用户感觉没什么区别。但对蜘蛛说就感到比较晕:哪一个才是主页?蜘蛛到底该返回哪个页面?这种方法对蜘蛛不友好。
https是加密网址,可以理解为http的安全版,端口:443,采用SSL协议,详见《TCP/IP协议》有关书籍。如果和http同时存在也会被认为是不同的页面,搜索引擎会分别计算,从而降低了http://www.021jz.com.cn页面的权重。如:http://mail.139.com的PR值等于6,而https://mail.139.com的PR值为:n/a。
以上的不同的域名写法,造成的PR值的不同
所以,一个网址在推广时,网址的规范写法很重要。这直接影响到域名的权重。而不带www的域名,对搜索引擎很不友好。毕竟蜘蛛是程序,在不规范的网址中要挑一个出来做为规范的网址,不仅浪费主页的权重,而且还浪费蜘蛛的时间和网络带宽。要知道,蜘蛛一生气,后果很严重。
2、避免不规范网址降低网站首页权重
据估计,现在网络上的网址,不规范的写法近30%。在浪费资源,浪费带宽的同时,有可能搜索引擎选出的规范网址并不是站长想要的。对站长来说,多个不规范的URL链接的存在不但不利于排名,更是分散了主页的权重。不规范的影响了网站的收录不是好事,必须避免。
避免不规范网址,不管是新站还是老站,都是要长期跟进的一项工作。要有恒心才能见到效果。新站从一开始就注意到这点的话,一两年后,效果还是很明显的。具体如下:
l 新站在发展友链时,尽可能地要求对方规范书写网址,统一写法。而老站,应尽可能地修复不规范的友链。
l 内链中,首先自已要规范书写网址,文章发布时,也要规范书写网址。
l 谷歌管理工具中,将不带3w的网址以及其它不规范的写法定向为带3w的规范网址。
l 使用canonical标签。下节讨论。
l 制作sitemap文件,在sitemap文件里全部使用规范网址,以利蜘蛛爬行。
l 一些CMS中添加了许多文章,里面如有大量内链不规范,可在robots文件中禁止蜘蛛爬行,在修复后,再允许蜘蛛爬行。
l 无论网站是否有静态化的功能,在开发和对系统设置时要做到系统只产生规范网址。
l 设置.htaccess文件,用301重定向把其他URL重定向到规范网址。
以上提到的方法可混合使用,具体情况灵活处理。网址规范化是让站长和蜘蛛非常困扰的一个课题。需要站长长期坚持才能见效。
3、canonical标签与301重定向
在2009年,Google,雅虎,微软共同发布了一个新的标签:canonical tag,用于解决网址规范化问题。canonical标签有什么用?
1. 网址规范。
2. 传递、继承页面权重。
3. 重复页面精确重定向,利于蜘蛛收录。
注意,canonical标签只对同一域名下的网址有效,如果跨站,建议用301重定向。这就是canonical标签与301重定向的区别所在。
如下面所示网址的页面是相同的
http://www.021jz.com.cn/archives
http://www.021jz.com.cn/archives/123.html
http://www.021jz.com.cn/archives/234.html
那么我们可以在head meta部分加入如下代码:
这样是告诉搜索引擎:后两个页面的内容是重复内容,是同一个页面,就是告知搜索引擎把相关的搜索信号都传递到第一个网址。
这样一样所有含有这个标签的网页,不管它的URL是什么,搜索引擎最终都会只收录 canonical标签指定的那个页面,所有的权重也会在指定的这个页面上继承。这样,所有原本分散的权重都会集中传递在指定的这个页面上。
另外,使用canonical标签要注意以下几点:
1. 这个标签只是对搜索引擎起到参考和建议的作用,并不是像robots文件那样是个命令,就算是做了canonical标签,也不百分百保证是搜索引擎认可的规范网址,搜索引擎会智能地综合参考其他的因素进行判断。
2. 在canonical标签中,最好使用绝对地址,虽然可以使用相对地址。
3. 针对国内用户的网站特别注意,百度不支持这个标签。
4. canonical标签指定的网址可以是不存在的页面内容,如404页面。如果闲得没事干的话可以这么做。
5. 建议canonical标签在同一域名下使用。是否跨站,争议太大。
什么是301转向?301转向也叫301网址重定向,是用户或者搜索引擎在向服务器发出请求指令时,服务器返回HTTP头的一个信息(一个代码,如:301、404等),用来告诉用户或蜘蛛:原来的网址现在不用了,永远转向新启用的新网址。
301转向,能使新域名继承老域名的权重。
cmfu是起点的老域名,而qidian是新域名。
老域名cmfu.com用301转向新域名,权重也转向新域名。而老域名则被永远认为被转到qidian.com这个新域名上了。
做301域名转向,可以用.htaccess文件,JS代码(如国内某知名电信服务运营商,大家可以查看其JS代码),ASP代码、PHP代码。
现具例如下:
Redirect 301 /path/from/ file.html http://www.domain.tld/path/file.html
上面的代码加到.htaccess文件中,主要是告诉搜索引擎,以后所有到/path/from/ file.html的请求,都转到http://www.domain.tld/path/file.html上。301状态码,就是告诉蜘蛛,原来的页面被永远转走了。
前面我们提到,将所有不规范的不带3w的网址转到规范的网址上。这时就要打开.htaccess文件进行修改。我们打开一个网站的.htaccess文件,中文是我添加的注释:
##
##如果要使用复定向模块,这个选项必须是On
# if you want to use mod_rewrite, set this 'On'
RewriteEngine On
# the path to your site installation
RewriteBase /
# Maintenance Section - Uncomment the lines below according to your need
# Write below your client IP address (e.g.: 127.0.0.1)
# if you need to keep your web access during maintenance
#RewriteCond %{REMOTE_ADDR} !^127.0.0.1$
# Choose your way of closing the access to PMF:
# a. you can simply forbid access (HTTP 403 Error)
#RewriteRule ^(.*)$ underMaintenance.htm [F,L]
# b. return the user an explanation
#RewriteRule ^(.*)$ underMaintenance.htm [L]
##将所有不带3w的网址,转为带3w的规范网址。重定向代码须要写在所有的代码前面。
# url canonicalization
RewriteCond %{http_host} ^abcde.com [NC]
RewriteRule ^(.*)$ http://www.abcde.com/$1 [L,R=301]
##404错误页面
# 404 page
ErrorDocument 404 /404.html
使用301注意一点:HTML静态页面不支持。接下来看看在PHP中如何做301重定向代码:
Header(“HTTP/1.1 301 Moved Permanently”);
Header(“Location:http://www.021jz.com.cn”);
将上面的两行代码加到PHP代码中即可。
301重定向,还有以下用途:
l 多个域名如.cn,.net,.org,.cc等全部转向主域名.com。
l Domaina123b123c123d123e123.com可以转来短域名:doabcde.com
l 网站改版、URL命名系统改变。
l 动态化的URL转静态化的URL。