规范化网址也是搜索引擎优化的技术环节,网址规范化所带来的最大影响,应该是干扰排名,影响权重。网站内部存在多个相同内容,不同URL的版本,这些因素会影响搜索引擎的判断。给网页的排名,造成一定的障碍。
7 x3 h9 X' ]! ]3 o, ]# j) K什么样的情况下,可能会出现网址不规范的情况:
R# t3 t* b, R* ?7 F0 u- @ 国内某些网站内容管理系统(CMS)或者论坛(也可以说有伪静态化功能的程序),基本上都有伪静态化的功能。如果这些功能,在程序员开发程序的时候,做的不够全面和彻底。伪静态化不完全的话,可能就会在某些网页上遗留下来很多的动态URL链接。
& H, \ [; u" Z1 K, l$ ~) [- P 搜索引擎的蜘蛛就会顺着这些链接,一个个的抓取收录。搜索引擎的蜘蛛是十项全能型的选手,网站中任何阴暗处的链接,可能都会被它发现。所以,要检查网站有没有存在网址不规范的问题的最好方式是经常的Site自己的域名。1 G6 t# S2 e( A# S( z. H7 X
发现了网站存在网址不规范化的问题怎么办:
1 u/ K/ Q# j) A% z5 j- h j7 b 首先,需要知道这些网页的URL,都有什么作用,它有没有给搜索引擎收录的必要。最好的例子是一些打印页面,像此类网页的作用是用户体验型的网页,它或许不需要给搜索引擎收录。而且,这种页面给搜索引擎收录之后,以这类页面作为用户的着陆页,往往可能会影响用户体验。因此,它应该没有给搜索引擎收录的必要。' r4 M7 D" t# V. Z' x
第二,在知道了网页的作用之后。接下来,我们需要做的就是告诉搜索引擎不要收录这些页面。具体方法有:" `0 B% Z; N: v$ R( n
一、Meta标签:0 t+ ]$ e* P9 d7 P& ~' _
二、robo ts.txt:User -agent: * Disallow: /print.php
, Y: X. b' |* B, o9 x( e6 C三、出现动态URL的链接,使用nofollow。,需要放在出现禁止搜索引擎收录的那个页面的HTML代码里面。/ {1 y1 W2 `# I. o) t. X
mate标签,有可能某些搜索引擎不会遵守。如果可能的话,尽量还是使用robots.txt来禁止搜索引擎的爬取。但是对于Google来说,nofollow是最好的处理方式。
, k- S: A% Z5 ~4 j9 Q处理这种问题需要注意的就是细节,可能有些大型网站的系统过于庞大,网站内部页面数量众多,检查起来可能会存在一定的难度。 |