目录
根据明确的质量标准审查 AI 生成的代码,将人的注意力集中在影响大、复杂度高、不确定性强的变更上。即使实现和审查实现了自动化,对结果的责任也不会随之转移。
要点#
- 指定能够解释变更、评估依据并在出现问题时采取应对措施的人作为负责人。
- 对可重复验证的要求使用自动检查,对重大或模糊的判断则由人深入审查。
- 不要仅凭易读的代码差异就认定依据充分,还要审查交付给用户的实际行为,包括权限和故障处理。
- 当事故、产品变更或外部要求暴露出不足时,更新质量标准。
先确定负责人#
古川阳介在 10 月 28 日的 Qiita Conference 2026 Autumn 演讲中表示,代码审查依然重要,同时也提出疑问:是否有必要对每一行代码投入同等程度的人工注意力?在实践中,关键是区分自动化检查与承担责任。
团队可以使用 AI 编写和审查代码,同时由人对结果负责。这个人不必记住所有实现细节,但必须有足够的理解,能够评估依据、识别不确定性并协调修复。
合并前,指定一名负责人,请他回答两个问题:有什么依据能证明这项变更满足要求?如果发现这些依据不充分,该怎么办?“因为是 AI 生成的”无法回答其中任何一个问题。
根据风险决定审查深度#
对所有变更都以同样的细致程度阅读,并不能有效分配注意力。文案修改与账号恢复功能的变更,不应采用相同的审查流程。在决定需要多少人工审查之前,先对变更进行分类。
提出以下四个问题。
- 影响: 缺陷是否可能导致数据泄露、资金转移、访问权限丢失或重要服务中断?
- 复杂度: 是否涉及多个服务、引入并发处理或修改持久化数据?
- 模糊性: 预期行为和验收标准是否明确到足以测试?
- 恢复: 团队能否迅速发现缺陷,并安全地回滚变更?
对于要求明确、可以回滚的小型变更,根据团队达成一致的方针,有时只需自动检查即可。支付相关变更或不明确的权限规则,应由人直接审查。对于重大的架构决策,即使生成的代码看起来井然有序,也需要审查其前提和影响。
对照标准验证行为#
“看起来合理”不足以作为发布标准。在让 AI 实现或评估变更之前,先定义可观测的要求。同一条模糊指令,可能既产生错误的实现,也产生信心十足地批准该实现的审查结果。
以密码重置功能为例,最基本的检查清单可以包含以下四项要求。
1. 重置令牌在产品规定的时间过后失效。 2. 成功使用过的令牌无法再次使用。 3. 为某个账号签发的令牌无法用于重置其他账号。 4. 无法从响应中判断该邮箱地址是否对应某个账号。
这些要求可以为自动测试和人工检查提供指引。还应检查失败时的处理,例如邮件服务商不可用、请求中断或令牌被同时提交的情况。测试通过可以支持发布决策,但无法证明要求本身没有遗漏。
通过自动化提供判断依据#
将通过条件明确的检查自动化,例如格式检查、类型检查、依赖项已知漏洞检查,以及对应验收标准的测试。AI 审查可以发现更多隐患,但不应将它的批准作为唯一证据。
向审查者提供一份简明材料,说明预期行为、受影响的组件、检查结果和未解决的问题。对于重大变更,还应包含恢复步骤及启动恢复的判断条件。这样,审查者无需从代码差异中重新推断目的,就能评估变更。
如果漏掉了缺陷,就应在修复代码的同时改进验证流程。例如,补充缺失的测试、明确要求,或调整智能体的工具和约束。否则,下次生成的变更仍可能重复同样的错误。
保持标准更新#
质量标准属于需要持续审视的产品决策。新披露的漏洞、客户群体的变化或无障碍要求,都可能使此前可接受的行为变得不再充分。现有代码也可能需要重新审查。
古川的演讲强调了标准的这种变化。不过,在团队依据演讲中提到的具体漏洞名称和有关漏洞利用的说法判断紧迫程度之前,需要与作为一手信息的安全公告核对。应根据受影响的版本、对外暴露情况、可用的缓解措施及漏洞被利用的证据来决定应对方式。
为监测相关变化,以及在事故或重大产品变更后修订检查清单,指定负责人。要判断昨天的检查是否仍能保护今天的用户,依然需要人的判断。
下一步#
在下一个拉取请求合并前,添加一份四行的审查记录,写明承担责任的人、预期行为、验证依据和恢复措施。
来源: https://speakerdeck.com/yosuke_furukawa/ai-ga-kodo-o-kai-te-kureru-jidai-wareware-ha-nani-o-tashikameru-no-ka
目录
