robots.txt 在线生成
2026-01-11 21:22:24
  • robots.txt 在线生成
介绍

✅ 功能说明(站长必备,超实用)

✅ 纯 PHP 原生编写、单文件直接运行,无数据库 / 框架 / 插件,上传即用,永久免费✅ 可视化配置,无需手写一行代码,新手小白也能一键生成标准合规的robots.txt文件✅ 支持 百度 / 谷歌 / 必应 / 搜狗 / 360 / 神马 等所有主流搜索引擎爬虫配置✅ 核心功能:禁止指定爬虫抓取、允许指定爬虫抓取、屏蔽全站 / 指定目录 / 指定文件、设置站点地图Sitemap地址✅ 支持自定义禁止抓取的目录 / 文件后缀,内置站长高频屏蔽的目录(/admin///api///uploads/等)✅ 生成的robots.txt代码标准合规,符合搜索引擎官方协议,无冗余代码✅ 支持 一键复制生成结果 + 一键下载 robots.txt 文件,直接上传到网站根目录即可生效✅ 响应式界面,适配电脑 / 手机,中文友好,标注详细配置说明,一目了然✅ 附带robots.txt语法说明 + 站长必读规则,新手快速上手



网站标签
热门标签
最新站点