网址规范化对干扰SEO排名,影响权重带来的影响应该是最大。网站内部存在多个相同内容,不同URL的版本,这些因素会影响搜索引擎的判断。给网页的关键字排名,造成一定的障碍。
搜索引擎的蜘蛛就会顺着这些链接,http://www.yixiin.com/brand/ 一个个的抓取收录。搜索引擎的蜘蛛是十项全能型的选手,网站中任何阴暗处的链接,可能都会被它发现。所以,要检查SEO网站优化有没有存在网址不规范的问题的最好方式是经常的Site自己的域名。
发现了网站存在网址不规范化的问题怎么办:
首先,需要知道这些网页的URL,都有什么作用,它有没有给搜索引擎收录的必要。最好的例子是一些打印页面,像此类网页设计的作用是用户体验型的网页,它或许不需要给搜索引擎收录。而且,这种页面给搜索引擎收录之后,以这类页面作为用户的着陆页,往往可能会影响用户体验。因此,它应该没有给搜索引擎收录的必要。
第二,在知道了网页的作用之后。接下来,我们需要做的就是告诉搜索引擎不要收录这些页面。具体方法有:http://www.yixiin.com/news/
一、meta标签:<meta name="robots" content="noindex,follow" />
二、robots.txt:User-agent: * Disallow: /print.php
三、出现动态URL的链接,使用nofollow。
<meta name="robots" content="noindex,follow" />,需要放在出现禁止搜索引擎收录的那个页面的HTML代码里面。
mate标签,有可能某些搜索引擎不会遵守。如果可能的话,尽量还是使用robots.txt来禁止搜索引擎的爬取。但是对于Google来说,nofollow是最好的处理方式。
可能有些大型网站的系统过于庞大,网站内部页面数量众多,检查起来可能会存在一定的难度。处理这种问题需要注意的就是细节。