百度站长提交死链,一直显示抓取失败的原因

百度站长平台抓取死链失败,如下图:

死链抓取失败.jpg

点开红色感叹号查看详情,提示修改意见:请确保sitemap地址正确,再重新提交。

死链抓取失败详情.jpg

访问sitemap.xml可以正常访问。于是想到使用百度站长的抓取诊断工具尝试一下:

抓取诊断.jpg

点开红色感叹号查看原因,如下:

抓取诊断详情.jpg

原来是robots.txt文件里有禁止死链的链接规则,所以导致百度抓取失败,改掉robots.txt的规则,然后在百度站长里更新robots.txt,再重新提交死链文件即可。

发表回复

后才能评论