Q:自动回滚阈值如何设置,避免固定阈值误杀或放过回归?
来源:深信服 Agent 三面(2026-08-23)
新手答:“成功率下降超过 5% 就回滚。”
高手答:按任务、风险和流量切片建立历史基线,核心安全/副作用指标使用硬阈值,成功率、延迟、成本使用相对变化和置信区间。小流量阶段要求足够样本或序贯检验,严重事件可一票否决;同时设置告警、停止扩量和自动回滚三级动作。阈值与版本、评测集和回滚目标绑定,定期根据季节性和业务变化校准。
差距在哪:新手背固定百分比,高手处理样本量、分层风险和指标波动。