如何生成robots.txt文件
来源:网络收集 点击: 时间:2024-03-06【导读】:
Robots.txt 是存放在站点根目录下的一个纯文本文件。虽然它的设置很简单,但是作用却很强大。它可以指定搜索引擎蜘蛛只抓取指定的内容,或者是禁止搜索引擎蜘蛛抓取网站的部分或全部内容。那么如何一键生成呢,下面就教大家。工具/原料more电脑方法/步骤1/3分步阅读
2/3
3/3
robots.txt
百度”站长工具“,点击打开。

然后点击导航里的”代码转换工具“,选择”MD5加密“。

然后输入限制目录和Sitemap: ,选择搜索引擎,点击”生成“即可。


版权声明:
1、本文系转载,版权归原作者所有,旨在传递信息,不代表看本站的观点和立场。
2、本站仅提供信息发布平台,不承担相关法律责任。
3、若侵犯您的版权或隐私,请联系本站管理员删除。
4、文章链接:http://www.ff371.cn/art_255798.html
上一篇:简笔画教程之船上的猫
下一篇:原神清籁丸沉船下铁门怎么开