脉搏:incident.io 的 AI 支出详情

📌 One-Sentence Summary
incident.io 分享了 AI 支出的详细数据(每年 $1.6M,每位工程师每月 $2,700)、「工作量点」衡量体系,以及生产力方面的影响:采用 AI 智能体后,交付的 PR 数量增加了 3.4 倍,每 1,000 个 PR 对应的事故减少了 60%。
📝 Summary
本文呈现了 incident.io 对软件工程领域 AI 应用情况的数据分析,重点关注支出模式、生产力指标和可靠性结果。公司引入「工作量点」的概念来衡量 AI 生成的工作,并追踪发现,目前有 80% 的生产环境 PR 包含 AI 生成的代码。AI 支出在 7 月达到年化 $3.6M 的峰值,但在采用 Opus 5.5 后降至 $1.6M,单个工程师的月均成本也从 $4,500 降至 $1,600。生产力显著提升:交付的 PR 数量同比增加 3.4 倍,每位工程师的发布频率提高 47%,每 1,000 个 PR 对应的事故减少 60%。不过,公司发现,新工程师在入职首月不使用 AI,长期表现会更好;由于探索性工作大量消耗 token,基础设施团队每个工作量点的成本是其他团队的 5 倍。分析最后建议通过多项指标衡量 ROI,而非依赖单一维度的生产力指标。
💡 Main Points
incident.io 的 AI 支出与成本下降
公司每年在 AI 工具上的支出约为 $1.6M(每位工程师每月 $2,700),2025 年 7 月的年化支出峰值为 $3.6M。采用 Opus 5.5 后,单个工程师的月均成本从 $4,500 降至 $1,600,不到此前支出的一半。
「工作量点」衡量体系
一个工作量点相当于一个中等规模的拉取请求,无论是由人编写还是由 AI 生成。这一指标可以将 AI 生成的 PR 与人工编写的代码进行比较,从而更好地分析成本。该体系追踪了已交付至生产环境的工作量点,数量达到原来的 6 倍;数据显示,每个工作量点的人类评论数量减少了 80%。
采用 AI 带来的生产力提升
采用 AI 智能体后,incident.io 交付至生产环境的 PR 数量同比增加 3.4 倍,每位工程师的发布频率提高 47%(每位工程师每天发布 2.8 次,而此前为 1.9 次),每 1,000 个 PR 对应的事故减少 60%。AI 应用前,工程师每周交付 PR 的中位数为 10.1 个;如今为 10.7 个,而资深工程师交付的 PR 数量增加了 70%。
基础设施团队的成本差异
由于探索生产环境、运行基准测试和反复评估等工作会大量消耗 token,却不一定直接产出 PR,基础设施团队完成一个中等规模 PR 工作量点的支出约为其他团队的 5 倍。
新工程师的入职策略
incident.io 发现,新工程师在入职首月大量使用 AI,长期表现会更差。公司建议新员工首月暂不使用 AI,把重点放在熟悉代码库和导航方式上,而不是追求交付速度。
💬 Key Quotes
今年夏天,AI 支出达到峰值,此后一直在下降。7 月,公司在 AI 上的支出超过 $300K(如果维持这一水平,年化支出将达到 $3.6M)。
如今,交付到生产环境的 PR 中,近 80% 都包含由智能体生成的代码。
每位工程师每周交付的 PR 数量与其资历相关。与两年前相比:工程师交付 PR 数量的中位数增加了约 10%……平均每位工程师交付的 PR 数量增加了约 30%……资深工程师交付的 PR 数量增加了约 70%。
新工程师入职后会被要求暂缓使用 AI 一个月。这家 AI SRE 初创公司收集了新工程师的反馈,发现那些入职后马上大量使用 AI 的新人,在中长期的表现反而更差。
这很好地说明了为什么很难用单一的每个 PR 成本目标来衡量所有团队。例如,我们的 AI 团队会从事 token 消耗很大的工作,比如反复迭代评估。基础设施团队可能会用 Claude 探索生产环境、进行大量分析或运行基准测试等,但这些工作不会产出 PR,因此他们的每个 PR 成本看起来会更高。
📊 Article Meta
AI Screening: 90
Featured: Yes
Source: The Pragmatic Engineer
Author: Ivan Klaric
Category: 软件编程
Language: 英文
Read Time: 7 min
Word Count: 1747
Tags:
编程与工程 , AI 编程 , 开发者工具 , AI Agent , 个人效率
很有价值的分享,感谢整理。
整理得太全面了,省了我不少时间。
路过
楼主辛苦了,内容很有参考价值。
这篇文章分析得很透彻,收藏了!
整理得太全面了,省了我不少时间。
点赞,必须点赞
路过
内容翔实,正好需要,先收藏再看。
讲解得很细致,新手也能看懂。
楼主辛苦了,内容很有参考价值。
点赞,必须点赞