网易首页 > 网易号 > 正文 申请入驻

75%的PR不再人工评审,他们省下了什么?

0
分享至

一个工程团队每周要处理超过1200个由智能体写出的PR。这个数字本身就够吓人了,但真正让团队头疼的不是写代码,而是审代码。


Tessl的工程团队在一个单体仓库里跑着一套"软件工厂"模式,工程师主要通过智能体完成工作。PR量冲到每周1200个以上之后,评审成了瓶颈,也成了最大的变动成本。那些最终没能合并的PR,加上评审后反复修改的轮次,吃掉了团队智能体开销的一半以上。


他们之前也用过AI评审工具,但不敢信。大约三分之一的发现不是真正的缺陷,工程师最后变成了"评审那个评审者"——先看每条发现,再看每个修复。更麻烦的是,这个工具没法按团队自己的标准来调,漏了什么、误报了什么,都改不了。


于是他们换了个思路:要一个能信任到让PR直接合并、不需要人工介入的评审器。

把团队标准写进评审器

Tessl Code Review的做法是,在通用评审视角之上,把团队自己的标准编码进去,再根据愿意承担的风险设定评审策略。因为团队拥有这些视角和标准,所以能看清一条发现为什么被提出,也能改掉评审器检查什么。这种控制权,是信任的来源。

评审器会对照团队为智能体写的标准来检查每个PR,包括编码规范、设计系统和AI代码评审策略。之前的AI评审器对所有仓库套用同一套通用规则,识别不出某个改动是否违反了团队代码库特有的规则。

为了确认差距确实来自标准,他们在一个带人工标注缺陷的外部基准上跑了两个评审器,结果打平。但在自己的仓库里,有了团队标准的Tessl Code Review找到了更多真实缺陷,误报也少得多。

当然也有取舍。之前的AI评审器在低严重度发现和外观问题上更强,在自己的仓库里也抓到了一些Tessl Code Review漏掉的缺陷。他们选择切换,是因为这些差距可以自己通过更新评审视角、标准或设置来补上。当某个模式被反复标记,团队就把它变成一个验证器——一个每次改动都跑的通过/失败检查。而用之前的工具,补一个缺口得等供应商。

结果:75%的PR无需人工纠正

引入Tessl Code Review之后,大约75%的PR在合并时没有经过人工纠正智能体,也没有人工讨论工程问题。误报大幅减少,工程师把评审时间花在真正需要人看的PR上。

在并排对比的那一周里,两个评审器一共提出了大约1850条发现。Tessl Code Review的发现中91%是真实缺陷,之前的AI评审器是68%。这意味着工程师每周少读、少驳回大约435条误报。

工程师修复了1.56个只有Tessl Code Review标记出的bug(每个PR),之前的AI评审器是0.75个,也就是说合并前修掉的真实bug翻了一倍。

在AI代码评审策略规定"必须人工检查"的全部六类变更上,Tessl Code Review也都领先。差距最大的是隐私(发现27个问题对4个)和访问控制(94对34)。

账单上的变化

默认设置下,每一轮Tessl Code Review花费固定50个积分。他们的PR平均要跑2.2轮,所以每个PR的评审成本比之前用AI评审器时低了大约35%。

如果更换模型、调整投入或评审视角数量,就按实际使用的AI积分付费,每轮最低50积分。他们按"每个已验证结果的成本"来选模型,而不是按token价格,这样能把每次评审的成本压下来。

几个实际案例:在一个Swift应用上,某个项目把它设为必需检查并配了自定义评审视角。在单个PR上,它提出了12条必需修复的发现,其中包括两条API密钥请求头在HTTP重定向中被转发的路径——这是凭证泄露,而且是在团队没有专门调过的语言和领域里抓到的。在一个长期维护的气候科学Python包上,维护者解决了219条发现中的216条,有时还会注明哪个提交修了哪一条。

另外,8.5%的PR经历了超过五轮评审,这些PR占用了评审循环开销的47.4%。这些PR上大约每七轮就有一次是由合并冲突触发的,其中三分之二的重新运行没有发现任何新问题。

下一步,他们打算用评审来直接改进上下文:Tessl会定期挖掘代码评审数据,并建议更新智能体使用的上下文,让一次评审的教训在下一个智能体写代码之前就传达到位。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
皇马VS塞维利亚:穆帅轮换4大主力 贝林+新援天才领衔 姆巴佩冲锋

皇马VS塞维利亚:穆帅轮换4大主力 贝林+新援天才领衔 姆巴佩冲锋

零度眼看球
2026-10-18 12:05:07
岳云鹏常州相声专场突发演出事故!现场回声巨大多次中断,观众8点离场排队申请大麦退票

岳云鹏常州相声专场突发演出事故!现场回声巨大多次中断,观众8点离场排队申请大麦退票

火山詩话
2026-10-18 11:43:34
日本警方都看懵了?18岁中国男子被捕,警方从他身上搜出170把钥匙!

日本警方都看懵了?18岁中国男子被捕,警方从他身上搜出170把钥匙!

日本通
2026-10-18 10:33:52
我国没人情味的城市,3个城市榜上有名,有人说来了8年还像客人

我国没人情味的城市,3个城市榜上有名,有人说来了8年还像客人

丁丁鲤史纪
2026-10-17 05:31:49
凯恩百场里程碑造3球,迪亚斯帽子戏法,拜仁6-1血洗莱比锡

凯恩百场里程碑造3球,迪亚斯帽子戏法,拜仁6-1血洗莱比锡

钉钉陌上花开
2026-10-18 02:31:44
被美方驱逐的美籍华人发现:恢复中国籍的门槛,比拿美国绿卡还高

被美方驱逐的美籍华人发现:恢复中国籍的门槛,比拿美国绿卡还高

浯江孤舟
2026-10-17 10:47:18
形势挺严重了!这5个行业,工资都发不下来了!

形势挺严重了!这5个行业,工资都发不下来了!

职场资深秘书
2026-10-16 19:47:24
央媒发文称别妖魔化东南亚,但普通人真别信

央媒发文称别妖魔化东南亚,但普通人真别信

凤眼论
2026-10-17 17:40:07
1925年5月,陈诚回家奔丧,7年不见的妻子吴舜莲想要和他同房,刚躺上床就被陈诚强行推开,没想到妻子抓起刀狠狠刺向自己喉咙

1925年5月,陈诚回家奔丧,7年不见的妻子吴舜莲想要和他同房,刚躺上床就被陈诚强行推开,没想到妻子抓起刀狠狠刺向自己喉咙

磊子讲史
2026-10-15 15:37:58
南京博物院原院长徐湖平病死于南京一家监狱医院

南京博物院原院长徐湖平病死于南京一家监狱医院

坦腹斋
2026-10-15 19:40:45
多家银行上调存款利率

多家银行上调存款利率

吉刻新闻
2026-10-18 15:43:29
知名明星自曝炒股巨亏。。

知名明星自曝炒股巨亏。。

格隆汇
2026-10-18 12:18:05
火药味十足!张继科:邓亚萍老师都不认识你,刘丁硕回应:就笑!

火药味十足!张继科:邓亚萍老师都不认识你,刘丁硕回应:就笑!

大秦壁虎白话体育
2026-10-18 11:12:45
刘欢妻子卢璐:主动脉血管破裂,命悬一线,刘欢的选择让人泪目

刘欢妻子卢璐:主动脉血管破裂,命悬一线,刘欢的选择让人泪目

今日养生之道
2026-10-18 17:56:23
窦靖童宋妍霏同游环球影视,两个人大方牵手,感情一如既往的稳定

窦靖童宋妍霏同游环球影视,两个人大方牵手,感情一如既往的稳定

草莓解说体育
2026-10-18 19:26:33
35岁张水华辞职10个月夺4冠!收获33.5万奖金 比上班强多了

35岁张水华辞职10个月夺4冠!收获33.5万奖金 比上班强多了

念洲
2026-10-18 12:53:07
买电梯房,打死别买这5个楼层!住进去后天天受折磨,直想搬家!

买电梯房,打死别买这5个楼层!住进去后天天受折磨,直想搬家!

职场资深秘书
2026-10-18 17:14:57
iPhone Duo黄牛价格暴跌:从5.8万跌至3000元

iPhone Duo黄牛价格暴跌:从5.8万跌至3000元

快科技
2026-10-17 21:20:13
中国汽车,只接受党和人民的考验,不接受充值帝国主义的碰瓷

中国汽车,只接受党和人民的考验,不接受充值帝国主义的碰瓷

超级学爸蛋总
2026-10-16 06:35:31
官宣!林书豪正式加盟!NBA第一黄种人后卫

官宣!林书豪正式加盟!NBA第一黄种人后卫

篮球实战宝典
2026-10-17 19:06:40
2026-10-18 20:03:00
我是一个养虾人
我是一个养虾人
有态度网友ytd
217文章数 92关注度
往期回顾 全部

科技要闻

王江舟院士:6G到底是不是骗局 是不是收割

头条要闻

俄圣彼得堡石油码头遭乌袭击起火 年吞吐量超1250万吨

头条要闻

俄圣彼得堡石油码头遭乌袭击起火 年吞吐量超1250万吨

体育要闻

升级版杨瀚森再闯难关:当上开拓者第三中锋还得拼

娱乐要闻

郭麒麟被传领证,女方戳破谣言

财经要闻

马斯克:美债问题只能靠AI和机器人解决

汽车要闻

星瑞L PLUS限时售价10.97万元起 开启智混3L时代

态度原创

健康
房产
艺术
游戏
旅游

看着很健康的人,怎么会突然猝死?

房产要闻

利好密集落地+现房好房断档,广州楼市买入窗口,正在倒计时!

艺术要闻

有一种大美,叫对称的中国!

肯德基开蹭《GTA6》热度!法国官方换预告名场面

旅游要闻

省运邂逅西游!连云港盐河巷巡游点燃港城夜间烟火

无障碍浏览 进入关怀版