按抓取规则直接生成 robots.txt
支持 User-agent、Allow、Disallow、Host、Sitemap 和 Crawl-delay，适合新站上线和规则调整。
SEO 联调常用字段都能配
可以快速整理测试站隔离、管理后台屏蔽、站点地图声明和抓取节奏控制。
本地生成不上传站点配置
规则输入和结果生成都在浏览器本地完成，更适合处理内部站点或预发布环境。
浏览器本地生成
robots.txt 生成器
快速生成可直接部署的 robots.txt，适合新站上线、测试站隔离和搜索抓取规则整理。
Disallow
Allow
Sitemap
robots.txt 结果
生成后可直接部署到站点根目录。
工具使用说明
robots.txt文件生成器 怎么用
填写 User-agent 和抓取规则
根据站点实际情况填写允许抓取、禁止抓取和延迟规则。
补充 Host 与 Sitemap
把主域名和站点地图地址一并填好，方便搜索引擎按统一口径抓取。
复制结果部署到根目录
生成后直接复制到站点根目录的 `robots.txt` 文件中，再做线上验证。
功能说明
这个工具解决什么问题
为什么要单独做 robots.txt 生成器
很多站点上线初期都会反复调整后台路径、测试目录、Sitemap 地址和抓取节奏，手写 robots.txt 容易漏字段或格式出错。
这个工具把常见配置项整理成固定表单，适合开发、SEO 和运维一起快速对齐。
适合哪些场景
适合新站上线、测试站隔离、后台路径屏蔽、站点地图声明和 robots 规则复核。
如果你只想快速改一两条规则，也可以把已有内容拆开后重新生成，再回贴到正式文件里。
常见问题
关于 robots.txt文件生成器，用户常问这些
会上传 robots 规则吗？
不会，所有字段输入和结果生成都在浏览器本地完成。
支持多个 Sitemap 吗？
支持，多行输入即可生成多条 `Sitemap:` 声明。
如果要允许整个站点抓取怎么办？
把 `Disallow` 留空即可，工具会生成空的 `Disallow:` 行。
生成后能直接上线吗？
多数常见场景可以直接作为草稿使用；上线前仍建议再按站点实际路径复核一遍。