404死链如何产生的?对网站有什么影响及解决办法( 二 )


robots文件规则创建完成后 , 再去百度站长平台robots工具校验一下 , 将封禁的错误页面放进去 , 看看是否封禁成功了 , 再将正常的页面放进去 , 看看是否被误封了 。
网站404死链接处理注意事项:
1、在向百度站长平台提交网站404死链接之前 , 一定要先确保这个链接是否是活链接 , 否则将将无法成功提交 , 导致死链接无法删除 。
2、由于某些网站程序问题 , 导致网站很多打不开的页面状态码并不是404 , 这种问题对于用户体验是极不友好的 , 例如有些页面明明打不开 , 但返回码却是301、200、500 , 这种问题建议大家尽快处理好 。
3、找到网站所有404错误页面后找到相同特征 , 与正常页面进行区分 , 写成一个robots文件规则禁止搜索蜘蛛抓取 , 就算提交了死链接 , 也建议robots封禁此类页面 。
4、robots规则只能让蜘蛛不再抓取此类页面 , 不能删除已经收录的页面快照 , 如果你的网站有些页面被黑 , 而且这些页面还被删除了 , 我们除了要将这些页面进行robots封禁外 , 还需要向百度搜索提交死链接 , 这也是删除被黑页面快照的最快办法 。

相关经验推荐