OpenClaw 爬虫防封:Agent 抓取速度太快导致办公 IP 被目标网站永久封禁,怎么设置请求延迟?

AI 不知疲倦,一秒钟能发出几十个 HTTP 请求,极其容易被目标服务器的 WAF(防火墙)识别为恶意攻击并封杀 IP。在让 Agent 批量抓取网页时,请在提示词中强制要求:“调用 Web Request 技能时,必须为每次请求设置 2 到 5 秒的随机延迟(Rate Limit)”。更专业的做法是,在底层配置 HTTP Proxy Pool,让 Agent 每抓取一次自动切换一个代理 IP。

作加

类似文章