
Anthropic 自建源控 Scion:日合并从约 2500 升到超 3 万后,五个月迁离 Git;基建体积约缩小 200 倍
一句话结论
当 Claude 把日合并量推到人类规模工具撑不住的程度时,Anthropic 用七人小队在五个月内自研服务端中心的 Scion,并把「工程师否决坏方案」当成比逐行读码更关键的工作。
背景与理念
Anthropic 认为写代码已不再是瓶颈,瓶颈在为人规模设计的源控、构建和 CI。2026 年 5 月他们平均每天约合并 2500 次变更,到 9 月已超过每天 3 万次;主分支历史 alone 近 100 GB,压缩工作副本超过 25 GB,仅 CI 每天约 2500 万次 checkout。若天真拉取,那会是每天超过 600 PB 的 git 流量。他们曾靠浅克隆、稀疏检出、数百个内部 git 镜像和种子快照撑着,但合并加速后种子越来越落后、镜像也越来越难运维。核心判断是:几乎所有客户端都是永远在线的 agent 与作业,git 为离线分布式设计的优势反而在拖累规模。
具体做法
- 自研 Scion,并把 monorepo 在五个月内从 git 迁完。同期还上线了评审面 Antique、代码搜索、细粒度 IAM,以及大批量已审代码的落地方式。
- 按 agent 规模重写原则。客户端默认在线;服务器负责历史、blame、提交、合并与 rebase;客户端只做有界缓存与工作副本;源控查询经 API 暴露,许多 CI/工具根本不必本地留仓;数据水平分片,没有完整物化副本,也没有 packfile 维护。
- 变更单元改成服务端 changeset。相对第一父提交只存改动文件与内容寻址 blob;提交、rebase、合并都在服务端完成,无需 push;refs 除主线与发布分支外尽量少用,避免全局锁。
- 检出协议按需取树与 blob。客户端只请求缺失对象,稀疏与虚拟化检出自然成立;节点上的 scion-daemon 与区域 scion-cache 组成分层缓存,命中率超过 99%。
- 用 Claude 加速建设,同时用工程师踩刹车。早期 git→Scion 摄入管线经早期 Mythos Preview 重写后内存约降到原来的 1/20、速度约快 4 倍;日常由 Claude Tag「超级粉丝」盯各组件健康。
关键数据/例子
合并吞吐约提升一个数量级:从约 2500/天到超过 3 万/天。七人小队在五个月内完成 Scion 与 Antique 等系统并完成迁移。相对原先 git 镜像基建,Scion 的 CPU/内存 footprint 约缩小 200 倍;CI 与研究作业检出从分钟级落到秒级,仅 CI 就省下约 25% CPU 容量。各缓存层命中率超过 99%。文中也写明:Anthropic 内部可花的 token 远超一般公司,Scion 并不适合当作通用 git 替代品,真正适用的是超大 monorepo 或大量 agent 写码的场景。
创新点
第一,承认「永远在线的 agent」后,主动放弃「每个客户端都是完整仓库」的假设。第二,把源控做成可水平扩展的查询服务,让 bisect、revert、CI 可以不靠本地仓说话。第三,工程师的价值明确转向系统设计与否决:告诉 Claude「不行」,审查意图而非逐行代码,并在合并队列失效后转向合并后/部署前自动测试。
可否复用
- 先量化真实压力:合并次数、checkout 次数、镜像数量、历史体积,再决定是优化 git 还是换架构。
- 能走服务端 API 的 CI 问题就不要强制全量 clone。
- 小团队做激进迁移时,把「工程师说不」写进流程:约束、审批语义、对抗性评审都要人把关。
- 不要把 Scion 当通用方案照搬;更可复用的是「服务端 RPC + 稀疏/分层缓存」这类可渐进加到现有 git 平台的想法。