Defined Term
A/B Testing（A/B 测试）
把流量随机分到两个版本，对比真实业务指标
详细定义
A/B Testing 是产品决策的金标准：把用户随机分到 A 组（旧版）和 B 组（新版），对比核心业务指标（转化率、留存率、人接管率）。FDE 现场 LLM 上线必走 A/B——离线 Eval 通过≠线上有效，必须看真实用户行为。
实例
- 新客服 LLM vs 旧客服 LLM，对比「用户满意度」与「人工接管率」。
- 新推荐算法 vs 旧推荐算法，对比「点击率」与「GMV」。
来自行业的实例
新客服 LLM vs 旧客服 LLM，对比「用户满意度」与「人工接管率」。
新推荐算法 vs 旧推荐算法，对比「点击率」与「GMV」。
关联术语
关于 A/B Testing（A/B 测试） 的常见问题
A/B Testing（A/B 测试） 的核心定义是什么？
把流量随机分到两个版本，对比真实业务指标
A/B Testing（A/B 测试） 在 FDE 工作流中扮演什么角色？
A/B Testing 是产品决策的金标准：把用户随机分到 A 组（旧版）和 B 组（新版），对比核心业务指标（转化率、留存率、人接管率）。FDE 现场 LLM 上线必走 A/B——离线 Eval 通过≠线上有效，必须看真实用户行为。