robots.txt 生成在线工具 - 可视化生成 robots.txt

robots.txt 生成在线工具：https://yunhugongju.com/robots.html

robots.txt 生成在线工具是云狐工具旗下的一个在线工具，面向站长与 SEO需求：可视化生成 robots.txt，支持禁止目录、Sitemap 声明与常见 CMS 预设。云狐工具分享 robots.txt 生成在线工具页面，方便有站长与 SEO需求的用户直接访问使用，无需安装软件、无需注册账号。

robots.txt 生成 页面截图

上线新站要告诉搜索引擎哪些能抓、哪些不能抓，手写 robots.txt 容易漏 User-agent 或出语法错。勾选爬虫、填入禁止路径即可实时生成规范文件，内置全站禁止等四个常用预设，可下载后直接放根目录。所有处理都在浏览器本地完成，输入的内容不会被上传到服务器，断网状态下同样可用。

功能特点

• 默认策略 + 12 个搜索引擎单独放行 / 封禁
• WordPress、织梦、Discuz、电商、企业站一键模板
• 支持 Crawl-delay、多条 Sitemap、Baidu Host
• 路径格式校验，误禁整站与 Allow/Disallow 冲突提前预警

使用方法

• 选择面向的爬虫，默认所有爬虫
• 在禁止路径框每行填一条目录或通配
• 需要例外时在允许路径框填写白名单
• 点复制或下载，把文件放到网站根目录

注意事项

• Disallow: / 是什么意思：表示禁止抓取全站，通常只用于上线前的测试环境，正式环境误用会导致搜索引擎不收录，务必及时改回。
• 禁止了就一定不收录吗：Disallow 只是不再抓取，若外部链接指向被禁页面，搜索引擎仍可能只展示网址不展示摘要；要彻底移除需配合 noindex。
• 建议使用 Chrome、Edge 等现代浏览器打开，可获得完整的交互体验；老浏览器可能出现按钮无响应或样式错位。

无论是新站上线前配置抓取规则，还是屏蔽后台目录与搜索页收录、测试环境临时禁止全站抓取，遇到对应需求时都可以直接用 robots.txt 生成处理，用完关掉页面即可，不必安装客户端，也不必把内容交给不明来路的网站。

可以通过直接访问网址 https://yunhugongju.com/robots.html 或者通过搜索引擎搜索“robots.txt 生成”来访问网站。

整体来看，robots.txt 生成界面直接、结果即时，适合有站长与 SEO需求的人日常使用。把它加入书签或收藏夹，需要时点开即用，处理完关掉页面即可。