可能是更改了域名的缘故,原来用的是http://weedvine.tk,而后将其改成了http://xuhehuan.tk,造成了网页中存在死链接。在登陆Google 的网站管理员中心时发现了这个问题,还好不多,但死链接对 SEO 优化是很不利的,要想办法屏蔽。
避免和处理死链接有以下几种方法:
一、从根本上解决,在网站上传前,用网站制作工具等检测网站是否存在死链接,发现并解决问题;
二、死链接的形成一般都是程序错误引起的,检查好程序。定期的维护和检查网站的链接,做到早发现、早解决;
三、制作 404 页面,跳转或者返回首页,减少死链接造成的损失;
四、用 robots.txt 设置屏蔽死链接。
看了看,还是第四种方法方便些,那么如何屏蔽呢?
比如我的网站有这样一条死链:http://xuhehuan.tk/?p=43,如果用 robots.txt 屏蔽的话,就可以写成:
User-agent: *
Disallow: /?p=43
此外也先可以通过 Google 网站管理员工具 -> 网站配置 -> 抓取工具权限 -> 删除网站来添加你需要去除的死链,如下图(点击放大):
欢迎转载,转载请注明出处:蔓草札记 » 用robots.txt屏蔽死链接