禁止搜索引擎/蜘蛛抓取的规则文件 robots.txt模板

【文件属性】：

文件名称：禁止搜索引擎/蜘蛛抓取的规则文件 robots.txt模板

文件大小：582B

文件格式：TXT

更新时间：2015-09-03 10:03:08

robots模板 屏蔽蜘蛛抓取

禁止搜索引擎/蜘蛛抓取的规则文件 robots.txt模板 参照你们写就可以了，很简单的。这里的规则针对所有的搜索引擎，如果只针对百度 把User-agent: * 修改为 User-agent: baidu 即可，以此类推。