网站Robots文件写法大全

【文件属性】：
文件名称：网站Robots文件写法大全
文件大小：4KB
文件格式：TXT
更新时间：2018-11-17 05:44:38
robots robots.txt写法大全和robots.txt语法的作用 1如果允许所有搜索引擎访问网站的所有部分的话 我们可以建立一个空白的文本文档，命名为robots.txt放在网站的根目录下即可。 robots.txt写法如下： User-agent: * Disallow: 或者 User-agent: * Allow: / 2如果我们禁止所有搜索引擎访问网站的所有部分的话 robots.txt写法如下：