如果蜘蛛在爬行你的网站时，出现大量死链，是相当不友好的，出现死链的情况多了，会直接导致蜘蛛不再抓取你的网站内容。解决死链有二种办法，一是使用robots.txt 屏蔽或使用301重定位，但如果你的网站内容很多的话，没办发使用 robots.txt 文件屏蔽，只能使用301重定位。另外一种方法，就是我们普遍使用的404错误页面，使用此方法，哪怕出现了死链，通过404引导，也可以让蜘蛛爬取其它内容。同时，这样对用户体验也是相关好的，不至于导致损失大量客户量以流量。当然，以上这两种方法都是从技术上来说的，如果着实不会做301重定向或是404错误页面，那么就只有老老实实更新网站内容，慢慢的吸引蜘蛛，使其删除旧的内容，从而达到收录新页面的目的。
众所周之，nofollow标签是用来传递权重的，同一个网站的每一个页面的作用和权重都是不一样的，通常首页权重最高。所以我们在做外链的时候，通常会链接到首页。但类似于在线留言这样的对网站优化没有任何好处的页面，我们就可以加上nofollow标签，从而使整个网站的权重将不会传递到这种无用的页面上。而且，蜘蛛爬行网站的时间都是有限的，把爬行加上nofollow标签页面的时间留给更有用途的页面，不是更好吗?另外，小小的一个提醒，在做友情链接的时候，千万要留意别人是否在网站上对你的网站链接做了nofollow标签。还有，在发外链的时候，也千万不要到加了nofollow标签的网站中发外链，比如百度经验，这样的外链发了也是白发，因为给你的传递不了任何权重。
本文由__发布
