SEO 工具首页网页与设计SEO 工具Robots.txt 测试器SeRobots.txt 测试器本地运行本地运行100% 在你的浏览器中处理。输入和输出绝不会离开你的设备。在本地模拟爬虫,按标准规则解析 robots.txt 并判断 URL 是否允许抓取。固定工具分享爬虫输入模拟器测试路径 / URL指定 User-Agent 名称评估结果禁止访问匹配规则: /admin/目标行: 行 2标准 robots.txt 内容