下架的商品链接全部被百度蜘蛛判定为死链接 404 大家是这样

2016-07-07 15:17 来源：www.chinab4c.com 作者：ecshop专家



下架的商品链接全部被百度蜘蛛判定为死链接404大家是这样我的网址 www.baidie88.cn
下面的网址能打开，但是百度蜘蛛反馈的这些页面404这些都是下架了的商品，数据库中没有删除。

另外还有很多JS链接也被返回404 死链接，怎么样用robots屏蔽呢？

http://www.baidie88.cn/goods-544.html
http://www.baidie88.cn/goods-417.html
http://www.baidie88.cn/goods-75.html
http://www.baidie88.cn/goods-265.html
http://www.baidie88.cn/goods-336.html
http://www.baidie88.cn/goods-230.html
http://www.baidie88.cn/goods-363.html


检测的截图如下：
111.gif

也就是说已经下架了的商品，百度蜘蛛下次来是爬去不到了？？？ 是这个意思吗？

回答：
来看那看 ！！！

搜索引擎抓你这个网页的状态不应该是404，而是200.
所以应该重新确定状态404的原因，是否应归于商品下架。
如果判断错了，下面就会有错误的解决方式。

给你顶上去！！