Robots.txt 生成器
快速创建专业的 robots.txt 文件,优化搜索引擎爬虫访问
User-agent
* 表示适用于所有搜索引擎爬虫
允许访问的路径 (Allow)
每行一个路径,以斜杠开头
禁止访问的路径 (Disallow)
每行一个路径,以斜杠开头
网站地图地址 (Sitemap)
可选,建议添加 XML 站点地图地址
生成 robots.txt
清空所有
生成的 robots.txt 内容
复制到剪贴板
已复制到剪贴板!