今天再来给大家一个方法,劫富济贫。http://cn.yixiin.com/news/
不知有多少站长分析过你网站的日志文件,那天用软件分析了一下我的网站日志,有一个js文章被爬行抓取了400多次,其次就是一些图片,css样式,抓取的次数都高于了首页,这时我想到了nofollow,rel=”nofollow”标签的出现并不是让我们用在首页屏蔽一些注册、登陆等等的页面,其他页面同样也要用到,js、css、img爬行太多,一定程度上也加大了服务器负担,屏蔽抓取过热的文件,让蜘蛛适当爬行一些未被收录的页面。
每个网站总有些地方的文章收录效果比较好,如我们的反击破碎机网站集成有zblog博客,问答系统,每天网站更新两篇新闻,博客更新一篇文章,问答更新几篇,博客、问答每天都有收录,唯独主站新闻不收录,通过这一点在通过日志文件,可以看出每天蜘蛛爬行博客、问答比较勤快一点,我们不能用nofollow屏蔽掉,这样也并不会迫使蜘蛛爬行新闻,我们要济贫,在博客、问答页面调取最近更新文章,让蜘蛛有效的爬行,收录不收录那就再看文章质量了。
劫富济贫,简单的可以说用nofollow屏蔽一些无用的文件,在蜘蛛爬行频繁的页面调取不经常爬行的页面,效果如何也不能一概而论,还要看你网站的机构、内容的质量度,方法仅供参考,nofollow使用不要过于繁杂,改动量过大同样会影响网站收录。http://cn.yixiin.com/