magento是网店系统，我们突出的是我们的产品，所以，有很多路径我们不想让搜索引擎索引到，所以我们需要用robots文件进行限制下面是麦神magento的robots.txt里面的内容，因为很多url重写和伪静态，所以，不要复制使用，这个格式是针对麦神Magento版本的User-agent: *...
分类：
其他好文 时间：
2014-12-16 11:24:17
阅读次数：
188
今天，接着robots文件设置的DIY部分，更确切的说应该是robots文件的高级阶段，就是不但懂得如何设置robots文件的基础部分，更懂得按照自己网站的需求去设置robots文件。总的原创是，利于搜索引擎对我们网站的收录。一般有如下几点，以下的举例名称只是举例，具体的目录及文件要看自己网站的目录，别照搬就行！
第一：图片目录的屏蔽
说到图片的屏蔽，那么我就给大家提个问题：为什么要屏...
分类：
其他好文 时间：
2014-04-29 13:17:21
阅读次数：
290
