🌙
首页
›
Robots.txt生成
🤖 Robots.txt生成器
基本设置
Sitemap URL
爬虫延迟 (秒，可选)
快速预设
允许所有
禁止所有
自定义规则
自定义规则
User-Agent
所有爬虫 (*)
Googlebot
Bingbot
百度蜘蛛
搜狗蜘蛛
Allow
Disallow
删除
+ 添加规则
生成的robots.txt
复制代码