[FS] 关于网站地图与robots.txt

2016-07-07 15:23 来源:www.chinab4c.com 作者:ecshop专家

生成站点地图时提示。
--------------------------------------------------------------------------------
站点地图已经生成到data目录下。
地址为:http://www.domain.com/data/sitemaps.xml
如果您不做出选择,将在 1 秒后跳转到第一个链接地址。
--------------------------------------------------------------------------------

但是在robots.txt里有一句
--------------------------------------------------------------------------------
Disallow: /data/
--------------------------------------------------------------------------------



那么问题就来了,既然爬虫不能访问这个目录,那以下的

Sitemaps 服务旨在使用 Feed 文件 sitemap.xml 通知 Google、Yahoo! 以及 Microsoft 等 Crawler(爬虫)网站上哪些文件需要索引、这些文件的最后修订时间、更改频度、文件位置、相对优先索引权,这些信息将帮助他们建立索引范围和索引的行为习惯

怎么能够实现呢?



已有回复:
如何改变sitemap.xml的放置位置: (http://bbs.ecshop.com/viewthread.php?tid=27560)

还没测试。~~



--------------------------------------------------------
shopzg.com: 在线销售宽嘴鱼服饰的网上商店
--------------------------------------------------------


回答:
哦~对的看过没想到~楼上细心之人~确认问题存在

可以先参考这个贴子来改一下:http://bbs.ecshop.com/viewthread.php?tid=27560
我们后续版本中会改进这点的。

http://www.christian--louboutin.com/这个站为什么网站地图无法显示哦