标准答案
- 先定义用户任务和硬门槛,例如事实正确、权限安全和关键字段通过率;不满足硬门槛时,成本或转化提升不能算成功。
- 质量指标说明答案或任务是否可靠,成本和延迟说明是否能规模化,业务指标说明是否减少人工、提高完成率或带来可验证收益。
- 用基线、实验范围、样本量、失败案例和取舍说明结果,避免只报一个漂亮百分比;上线后继续监控回归和用户反馈。
题目解析
指标之间常有冲突:更强模型可能提高质量但增加成本,更短答案降低延迟但遗漏证据。应按任务价值和风险设权重或分层门槛。
业务转化受 UI、价格、用户群和流程影响,不能把所有变化归因于模型。实验要说明控制变量和观测周期。
面试中最好讲一个失败案例:什么指标没有达标、如何定位、采取了什么降级或回滚,这比只讲成功率更能体现工程判断。
常见误区
- 只说准确率提升,没有解释准确率如何定义。
- 把调用次数和用户停留时间当成业务价值。
- 忽略隐私、安全和人工复核成本。