AI 能秒级出报表,为什么业务还是来不及?

0 评论 76 浏览 0 收藏 16 分钟

AI 将报表生成提速到秒级,但业务链路中的等待却可能让分析失去意义。SoFi 的 546 个失败会话与 Blend 的新产品,共同指向一个被忽视的指标:行动窗口。本文提出从业务结果反推产品设计,用剩余窗口、Time to Intervention 和窗口命中率,重新定义数据产品的优先级。

一周内,SoFi 的贷款申请流程出现了 546 个同类失败会话:用户收到错误信息后,没有完成申请。更危险的是,在 Glassbox 的异常检测发出提醒前,这个技术问题一直没有进入 SoFi 团队的视野。

SoFi 的业务和技术团队随后把问题列为高优先级,通过会话回放定位根因,并在当天完成修复。按 Glassbox 的假设测算,如果故障持续一年,可能累积超过 2.8 万次放弃申请,带来超过 900 万美元的潜在年损失。这是厂商案例中的风险估算,并非 SoFi 已经实现的新增收入。

8 月 4 日,Blend 发布 Autopilot Analytics Agent,支持自然语言问数、实时贷款漏斗、阈值提醒和协作看板。官方给它写了一句很直接的标题:“Run this month’s pipeline, not last month’s report”,管理这个月仍在推进的贷款流程,而不是只复盘上个月的报表。

SoFi 案例和 Blend 的新产品指向同一个问题:答案生成得快还不够,答案出现时必须仍有机会改变结果。本文把这段最后的可干预时间称为“行动窗口”。

AI 把报表提速了,业务链路没有一起提速

数据产品常用响应时间衡量体验。过去找分析师排期半天,现在 AI 已经能秒级出图,提升当然真实。可从业务事件发生到干预动作生效,中间至少还有六段时间:

  1. 数据生成和同步;
  2. 信号识别;
  3. 原因诊断;
  4. 责任路由;
  5. 业务决策;
  6. 动作执行。

AI 分析最容易压缩的是查询、识别和诊断。剩余几段往往散落在数据管道、组织协作和执行系统里:

  • 数据时效:数据源仍是 T+1,答案再快也晚了一天;
  • 责任路由:告警发进无人负责的群,问题只能等待认领;
  • 动作执行:调价、补货或联系客户需要跨系统审批,模型已经给出建议,动作仍停在流程里。

SoFi 案例真正有价值的地方,也不只是发现了 546 个异常会话。提醒进入业务和技术团队的优先级,受影响会话能够回放,生产支持团队可以定位根因,修复还能在当天上线,这几步连在一起,异常才从一张图变成了仍可处理的问题。

如果产品只记录“问数用了几秒”,链路里最昂贵的等待就会消失在指标之外。模型把查询压缩到秒级,一次无人认领的告警却可能耗掉几个小时。业务感受到的速度,最终由整条链路决定。

同一个异常,价值会随窗口一起关闭

行动窗口可以定义为:针对一类对象和一个目标结果,从信号达到可执行的可靠度,到某项干预仍能显著改变结果的最晚时点之间的时间。

行动窗口(对象、信号、动作、目标) = 最晚有效干预时点 – 信号达到可执行可靠度的时点

这不是一条脱离场景的固定时长。同一个申请人,短信提醒、人工电话和补充材料引导的成本与有效时点不同;同一个库存信号,以减少缺货为目标,和以控制资金占用为目标,也会得到不同窗口。对象、信号、动作和目标没有同时说清,倒计时就没有产品意义。

行动窗口也不同于告警 SLA。SLA 规定团队应该多久响应,窗口由业务过程决定。借款人离开申请流程、商品错过最后补货时间、活动预算消耗完毕、客户完成解约,这些事件不会因为工单还在排队就暂停。

Blend 表示,其自有网络中,零售抵押贷款申请从开始到提交的比例只有 60%–70%,没有提交的借款人不会进入传统贷款管线报表。这个口径不能外推到整个贷款行业,却能说明为什么发现时点重要:借款人还在流程里,团队可以识别卡点并尝试跟进;月底才看到提交率下降,分析只剩复盘价值。

这也会改变告警列表的排序。比如一场已经结束的活动,转化率下降 30%,问题很严重,但窗口已经关闭;另一场仍在投放的活动只下降 5%,还剩四小时且流量很大,及时调整落地页或流量分配,反而更值得占用此刻的处置资源。

异常幅度回答“哪里变化最大”,行动窗口回答“哪里还有机会改变”。前者适合识别问题,后者更接近当前的业务优先级。

把行动窗口写进 PRD,需求顺序会倒过来

传统看板需求常从指标口径、分析维度、图表类型和刷新频率开始。围绕行动窗口设计产品,起点要换成业务结果,先回答五个问题:

  1. 希望改变什么业务结果?
  2. 什么时点之后,结果基本不可逆?
  3. 窗口内允许采取哪些动作?
  4. 谁拥有执行权限?
  5. 动作生效后,结果怎样回流?

以“申请人停滞”为例,产品经理需要先用历史数据、实验或业务规则确认:停滞到什么程度值得跟进,超过多久转化概率已经低到不值得继续打扰,不同风险和价值分层适合电话、短信还是材料提醒。

答案确定之后,团队才能反推数据要多新、识别要多早、任务交给谁,以及动作怎样进入现有工作流。

时间戳也要覆盖整条链路,并按四组追踪:

  • 信号产生:业务事件何时发生,数据何时可用,规则何时首次达到阈值;
  • 任务流转:系统何时识别,诊断何时完成,任务何时送达,负责人何时决策;
  • 动作生效:规定动作何时真正进入生效状态;
  • 结果回流:结果数据何时重新进入产品。

只记录“告警已发送”,团队很难判断窗口究竟耗在数据、模型、组织还是执行系统。

处置队列则先区分窗口是否仍然开放。已经关闭的事件进入复盘;仍可干预的事件,再结合以下因素排序:

  • 当前剩余时间;
  • 潜在业务影响;
  • 信号可信度;
  • 历史干预效果;
  • 动作成本。

这里不必假装能算出一个绝对精确的商业分数。先避免把“波动最大”直接等同于“最该处理”,产品就已经向前走了一步。

三项时间量,分清有没有赶上、有没有效果

行动窗口进入产品后,问数响应时间、告警打开率和看板访问量仍可以保留,却不足以管理这条链路。产品需要一个调度字段和两项过程指标。

1. 当前剩余窗口:决定先处理谁

当前剩余窗口是一个调度字段,表示从现在到最晚有效干预时点还有多久:

当前剩余窗口 = 最晚有效干预时点 – 当前时点

它适合直接进入处置队列,但排序时还要扣除动作预计需要的执行时间。一个窗口还剩两小时、执行却需要三小时的任务,已经没有表面上那么充裕。

2. Time to Intervention:暴露链路有多慢

第一项过程指标是Time to Intervention。本文用它表示从信号达到可执行可靠度,到规定动作完成并进入生效状态所经历的总时间:

Time to Intervention = 动作进入生效状态的时点 – 信号达到可执行可靠度的时点

它衡量的是整条业务链路,不停在用户点开告警或点击按钮的时刻。数据同步慢、任务无人接、审批等待长,最终都会反映在这段时间里。

3. 窗口命中率:检验团队是否赶得上

第二项过程指标是窗口命中率:事后确认信号达到可执行可靠度、且动作具备执行条件的全部事件中,有多少在窗口关闭前完成了规定动作。

分母不能只统计已经进入队列的事件,否则漏掉的事件也会跟着消失。这个指标回答团队是否经常赶在最后时点前行动,但不提前认领业务结果。

把它们放回产品界面就很好理解:剩余窗口决定先处理谁,Time to Intervention 暴露链路有多慢,窗口命中率检验团队是否经常赶得上。

赶上窗口,只证明动作发生得及时。提交率、订单量或留存随后改善,还可能来自季节、渠道、价格和其他同时发生的变化。

干预的增量效果需要通过对照组、准实验或可信历史基线单独验证,同时计算折扣、人力、库存和用户打扰带来的单位增量成本。过程指标与结果指标分开,团队才不会把“做得快”误写成“做得对”。

行动越早,也可能只是噪声来得更早

把预警向前推,会碰到一个反作用:越早的信号通常越不完整。为了多抢两个小时,把大量正常波动判成风险,业务人员很快会忽略告警。窗口的起点应该放在信号第一次达到可执行可靠度的时刻。损失高、成本低、容易撤回的动作可以使用更灵敏的阈值;高成本、不可逆的动作需要更强的证据。

来得及处理,也不等于应该处理。优惠券使用下降,不代表继续加券一定能提高长期价值;库存向一个渠道倾斜,可能造成另一个渠道缺货。产品越接近自动执行,越要同时写清目标约束、权限、停止条件和人工接管机制,避免为了局部指标伤害毛利、品牌或其他业务。

所以数据无需一律实时,异常也不必全部自动处置。窗口以周计算的战略问题,日报和人工评审已经够用;窗口只有几分钟,且动作可逆、规则成熟的场景,才值得把识别和执行紧密连接。实时是一笔持续成本,行动窗口帮助团队判断这笔钱该花在哪里。

如果由我来评审,我会先把“实时”两个字划掉

我不太想把这篇文章收在“AI 数据产品应该更实时”上。因为“实时”很容易变成一个听起来正确、实际上跳过了业务问题的答案。

如果现在有一个团队把“把日报升级成实时 AI 看板”摆到我面前,我不会先讨论模型、页面和刷新频率。我会先把“实时”两个字暂时划掉,只问三个时间问题:信号什么时候才足够可靠,结果在哪一刻开始不可逆,规定动作真正生效需要多久。

这三个问题不如“秒级问数”适合演示,甚至会把一个看起来很先进的 AI 需求,重新拆回数据延迟、负责人、审批权限和执行系统。但我越来越觉得,真正的产品工作恰恰从这里开始。因为模型给出答案之后,业务究竟还能不能动,不是模型自己能解决的。

如果窗口以周计算,日报和人工评审可能已经够用;如果窗口只有十分钟,数据却是 T+1,再好的问数体验也救不了结果;如果动作不可逆、误判成本又高,那么产品首先要补的也不是自动执行,而是证据、权限和人工接管。

写到这里,我最想留下的其实不是“行动窗口”这个新名词。名词很容易再造一个,真正重要的是把需求顺序倒过来:先找到业务的倒计时,再决定数据要多新、AI 要多快、动作可以走多远。

所以以后再看一款 AI 数据产品,我不会先问答案几秒出来。我会先问:答案出来以后,业务还剩多少时间。

如果没人能回答,它可能仍然只是一张生成得更快的报表;如果团队能回答,并且把动作接进窗口里,AI 才真正开始参与业务结果。

本文由 @钟文峰 原创发布于人人都是产品经理。未经作者许可,禁止转载

题图来自 Pexels,基于CC0协议

更多精彩内容,请关注人人都是产品经理微信公众号或下载App
评论
评论请登录
  1. 目前还没评论,等你发挥!