大量黑链接,设置为404后,搜索引擎还没更新删除?
更新时间:05-30 16:57 点击次数:281 次
网站给攻击挂马,大量黑链接,设置为404后,搜索引擎还没更新删除?
原因:设置了Robots禁止蜘蛛抓取动态参数的URL,导致设置页面状态为404后,搜索引擎一年多的时间内也没有更新删除。
已经设置为死链的404状态页面URL常期不更新
一、URL抓取异常,提示Robots封禁,解除封禁设置后,预计搜索引擎更新时间7-30天。
二、检测URL抓取状态是否为404状态
三、批量提交URL死链接,等待搜索引擎更新删除。
标签: