
Cloudflare:站点侧看见 Personal Assistants,并按单个 agent 设访问策略
工程管理CloudflarePersonal Assistants访问策略Security Analytics代理流量
一句话结论
Cloudflare 在 Security Analytics 里新增 Personal Assistants 类别,可按单个个人代理查看路径、状态码和来源网络,并在「AI Crawler and Agent access policies」里为每个受支持的个人代理选择允许、在广告页拦截或全面拦截。
打开原文
Cloudflare:See the agents, set the terms
背景与理念
个人代理会把用户的指令变成对网站的请求和操作,站点侧却往往只看到一堆自动化流量。用户可能让代理比价、找帮助文档或完成下单,站点若分不清这些访问是在帮生意还是在制造风险,就容易一刀切拦截,连带把真实顾客挡在外面。Cloudflare 认为,先看清是哪个代理、在做什么,再按自己的生意条件设访问策略,比一律封锁更合理。
具体做法
- Security Analytics 的 Bot Analysis 图新增 Personal Assistants 类别,与 Verified Bot、Likely Human、Likely Automated、Automated 并列,安全团队可以只看个人代理流量随时间的变化。
- Top statistics 里的 Personal Assistants 组件会列出访问站点的代理及各自请求量。点选某一个代理后,其他组件会跟着只显示它访问的路径、收到的状态码和来源网络,从而判断它是在登录、浏览商品、进入结算,还是在无法使用的页面上报错。
- 对开启 Account Abuse Protection(目前为抢先体验)的站点,可以进一步看到某个代理代表了哪位用户。人口概览会显示活跃的个人代理、有多少账号在用它们;每次登录和注册也会标明是否由个人代理发起、是哪一个。调查异常登录时,可以区分这是顾客用了好几周的代理,还是今天才第一次出现的新代理。
- 若判断攻击者在某个账号上使用代理,分析师可以按该账号的哈希用户 ID 写 WAF 规则做处置,而不必对所有依赖同一代理的用户一律封锁。
- 策略侧把原有 Agents 策略扩展到受支持的个人代理,设置区改名为 AI Crawler and Agent access policies。可以先设总体 Agents 策略,再为单个代理选择 Allow(不拦截)、Block on pages with ads(在有广告的页面拦截)或 Block;原有的 Search 与 Training 策略保持不变。新接入站点时,引导流程会询问页面是否靠广告变现,并据此给出建议策略。
关键数据/例子
这是一篇产品能力说明,几乎没有给出流量占比或拦截率一类硬指标。可操作的对照是:一家出版社可能允许某个人代理全站访问,好让读者找到文章;另一家则可能只在靠广告养活内容的页面上拦截同一个代理。下一步,Cloudflare 希望在看清「是哪个代理」之外,还能以保护隐私的方式带上用户上下文——对方是不是老客户、授权代理做了什么、有没有订阅——并分清声誉评估和出事时的责任归属。
创新点
第一,把个人代理从「一律当成爬虫或机器人」里拆出来,变成可以识别、可以按单个代理设策略的一类流量。第二,把账号级可见性与站点级策略分开:异常登录可以对着具体用户处置,而不必牺牲其他正常人使用同一代理的权利。
可否复用
- 先看清有哪些个人代理在访问、走了哪些路径、返回了什么状态码,再决定欢迎、限制还是拦截。
- 按自己的变现方式设总体 Agents 策略,再给真正想欢迎的单个代理开例外,而不是对所有自动化流量一刀切。
- 若已有账号保护能力,把可疑登录落到具体用户上处置,避免误伤其他正常人使用的同一代理。