主题
指标与度量
这些题与问题库里的是同一批，这里按各自主要考察的能力分组。
200 道问题
本页为第 1–50 题，共 200 题。
A · 专业解题与实现11
- 两个评审者对同一批 AI 输出的好坏经常意见相反，你会怎样判断这是标注分歧、评价标准含糊，还是模型本身不稳定？
- 你做了一个客服问答原型。怎样设计一组评估样本，来决定它只能作为辅助检索，还是可以直接对外回复？
- 知识问答助手的用户满意度下降，但离线检索指标没有变化。你会从哪些环节拆查这次退化？
- 一份内部文档被撤回或改为限权后，检索索引、缓存和已生成的引用可能仍保留旧内容。你会怎样设计更新与验证机制？
- 新模型把总体准确率从 91% 提高到 94%，但错误仍集中在少数会影响客户权益的场景。团队希望按总体分数发布。你会如何定义发布判断？
- 新增索引后查询变快了，但写入延迟和存储增长明显恶化。你会怎样判断索引是否值得保留？
- 模型在公开基准上持续提升，但内部任务表现停滞，你会如何排查评估失真？
- 更换基础模型后，整体指标相近但部分用户反馈明显变差。你会怎样发现模型行为发生了哪些变化，并判断是否需要回退？
- AI 功能的平均质量达标，但少数高风险错误仍会造成损害，发布门槛怎么定？
- AI 功能总体准确率合格，但某类语言或用户群的错误率更高，你会怎样判断和处理？
- 新模型离线评测提升，但少数高价值用户的回答质量可能下降。你会怎样安排小范围发布、观察结果，并判断何时扩大使用？
当前目标在这里暂无匹配题。 ·
B · 业务理解与领域建模20
- 一个季度续约率下降了 6 个百分点，但新签客户中小客户占比也明显增加。你会怎样拆分客户群、使用周期和服务成本，判断这是产品价值下降还是客户组合变化？
- 销售团队用签约金额汇报增长，但客户数月后才实际使用产品。你会怎样区分签约、履约、收入确认和客户价值，并说明团队应该分别观察什么？
- 高价服务档位收入更高，却消耗了更多人工支持，续约率也没有改善。你会怎样判断它是否创造了增量价值？
- 某项产品一次性售出后需要长期提供支持和升级。销售额增长很快，但服务队列也持续堆积。你会怎样判断这类销售是否仍然创造价值？
- 客户购买组合套餐后申请退掉其中一项，原订单享受的组合折扣该如何重新分摊？
- 产品、财务和增长团队都在报“活跃用户”，但每个数字都不同。你会先问哪些问题，才能确定要不要统一定义？
- 业务对象会迁移到不同团队，负责人和组织归属也会变化。审计要求按历史日期还原责任人，日常报表则关注当前归属。你会怎样建模这两种查询？
- 一张行为事件表里，“一行”究竟代表什么？请说明你怎样确定它的粒度，以及粒度不清会让哪些统计出错。
- 月结报告已发送给管理层，几天后收到迟到退款和一笔价格更正。业务希望更新当前数字，财务还需要解释上次报告为何不同。你会如何建模？
- 业务规则发生追溯更正，报表需要显示修正后的结果，但决策者还要查看当时依据的旧结果。你会怎样管理两种历史视图？
- 用户通过某个渠道下单，之后可能退款、拒付或取消。你会如何确定统计渠道贡献的时间范围、计算订单价值和渠道成本，让营销分析与财务结算都能解释同一笔结果？
- 新套餐让更多用户愿意开始试用，但其中一部分原本会购买高价套餐的客户转向了低价方案。你会用什么商业模型和观察窗口判断套餐组合是否创造了新增价值？
- 同一用户可能通过广告、代理商、合作伙伴和自助渠道接触产品，甚至由不同主体付款。你如何说明业务里的客户、购买者、使用者和获客触点分别是什么？
- 一个企业客户拥有多个组织账号、部门和成员，成员可以代表不同组织完成操作。设计客户活跃度分析时，你如何界定客户、账号、组织和用户的粒度与关系？
- 客服会把重复工单合并，也会把一个复杂问题拆成多个处理单。设计服务质量数据模型时，你如何定义工单、问题、接触次数和解决结果？
- 不同业务线都使用“有效客户”指标，但有的按付费、有的按活跃、有的按续约可能性定义。你会如何判断哪些定义应该统一，哪些应该保留为不同概念？
- 推荐和风控团队都需要“近30天消费”特征，但一个以自然日为窗口、另一个以精确小时滚动，且退款处理不同。你会如何判断能否共享特征定义？
- 训练数据里某个风险值大多完整，线上服务却常用默认值代替，模型效果也随之波动。你会怎样查明问题来自数据采集、计算时间、缺失处理还是实现差异？
- 多个模型、运营规则和报表共用一个核心特征，但上游业务定义已经变化，部分消费者暂时无法迁移。你会如何管理新旧定义、所有权和迁移顺序？
- 一组高成本特征因上游依赖调整，数据刷新时间将从几秒延长到十分钟。你会判断哪些决策会受影响、哪些特征必须保持实时，以及何时可以接受较慢的数据？
当前目标在这里暂无匹配题。 ·
C · 价值判断与方向规划11
- 平台访问和注册增长明显，但匹配成功率下降；需求在少数地区聚集，供给方却分布分散。你会怎样识别流动性瓶颈并决定先投入哪一侧？
- 平台将佣金率提高 2 个百分点，短期收入增长，但部分优质供给减少上架频次；用户成交率还未明显变化。你会如何判断抽成政策的长期结果？
- 订阅产品提价后，月收入提升 8%，但小型核心客户的取消率明显上升，销售认为应继续执行。你会如何估算真实净收益与长期风险？
- 公司毛利率保持稳定，但标准服务收入下降、高定制服务收入上升，实施和支持团队的工时也增长。你会如何判断业务增长是否健康？
- 一次获客活动带来大量注册，但其中一部分地区暂不可服务，导致新用户的实际可服务比例下降。你会如何定义并呈现这次活动的增长结果？
- 品牌广告、搜索和联盟渠道同时覆盖同一批潜在客户，归因平台把大部分转化都记给最后一次点击。你会如何估算各渠道的真实增量贡献，并说明结论边界？
- 一项结账体验实验提高了支付完成率，但投诉和退款也上升。你会如何判断实验是否成功，以及需要等待多久才能作出决定？
- 产品、运营和销售的周报都写着“留存”，但分别指回访、关键功能使用和续约。你会如何组织讨论，让指标名称对应清楚的用户行为和业务决策？
- 一次会员运营计划提高了复购频次，但平均订单金额和毛利同时下降。你会如何区分健康的消费习惯变化、跨期购买迁移和促销驱动的低质量增长？
- 新自动化流程将处理速度提高一倍，同时减少了人工复核，但错误对少数高价值客户影响更大。你会如何评估整体净价值并决定扩大范围？
- 重要客户愿为定制功能付高价，但需求能否复用还不确定；长期维护、权限和数据规则也会增加成本，销售已承诺交付时间。你会怎样比较定制、产品化、服务方案或拒绝，并决定是否投入？
当前目标在这里暂无匹配题。 ·
D · 交付执行与持续运营7
- 项目申请通常由高层发起人直接推动，缺少高层背书的合规和基础设施工作则反复延期。你会怎样建立透明的项目入口和排序过程？
- 一个新手引导实验没有改变注册到激活的总体转化率，却让已激活用户更快完成首次关键任务。你会如何决定是否推广，并如何修订对成功的定义？
- 一项品牌活动的总曝光已完成计划，但核心目标人群实际看到广告的比例低于预期，预算也只剩三分之一。你会如何决定继续投放、调整媒介组合或修改目标？
- 一项社区活动报名和互动数据很好，但活动结束后参与者几乎没有继续使用产品或贡献内容。你会如何判断活动与产品价值的连接在哪里断开，并设计下一轮运营？
- 一项活动创意在社交渠道的互动很高，却在搜索和门店渠道几乎没有转化；另一个版本互动一般但成交较好。你会如何决定创意迭代和渠道分配？
- 一次全量优惠让总体成交达到目标，但高价值老客认为优惠不公平，部分用户还因此延迟原计划购买。你会如何调整后续客群和优惠策略？
- 一次降价促销短期提高了销量，竞品随后跟进，品类整体价格和毛利都下降。你会如何判断应继续匹配、改变价值表达还是退出促销？
当前目标在这里暂无匹配题。 ·