第95章 盲测二号(2/3)
另一个案例证明模型确有价值。一名商户账户出现多笔间隔短、收款关系新、授权失败后迅速变更操作人的指令。单条规则分别看都未超过阈值,组合评分却把它提前送入人工队列。客服在银行执行前联系到原负责人,确认手机与资料被前员工擅自使用。
付款被暂停,授权重新建立。原负责人问星辰是不是已经知道前员工会做坏事。小郭说不知道,系统只发现几种变化同时出现,需要人确认。
“那别给他留个坏人档案。”商户说,“事情我们还要处理。”
研究记录只保留事件事实和处置,不给个人生成永久道德标签。模型命中一次也不自动提高以后所有指令的风险。
孙理想把这个成功案例放在报告摘要。苏雨桐同意,但要求与干果商户误报并列。只展示被救下的钱,会让辅助系统显得只会发现风险,不会制造等待。
盲测报告写了一个星期。总体指标、分组差异、争议标签、时间漂移和人工成本各占一部分。乔岚在最后签字,确认揭晓流程与样本保管;孙理签模型版本与结果;苏雨桐签研究结论。
这一次,没有人预先印好她同意商业应用的句子。
产品化评审另开。研究组建议只在受控范围内把模型作为人工复核队列的一个输入,必须同时显示触发的可解释因素,客服可以降级、升级或标记信息不足。模型不得自动拒绝、提高费用、降低额度或生成“可信商户”称号。
试点用户不因进入模型队列失去正常申诉与状态说明。公司还保留一部分随机抽查,防止只看模型挑出的案例后,越来越相信模型。每月按新旧用户、商户类别与地区检查等待差异;偏差超过阈值,停止使用并回到规则队列。
产品负责人问,既然每个人还要看、还要解释,模型节省了什么。
“可能节省部分排序时间,也可能没有。”苏雨桐说,“试点就是测这个,不是宣布已经节省。”
陈维明放弃“智能风控上线”的发布会,只在内部产品说明中写“研究评分辅助人工复核试点”。用户界面不显示神秘分数,只在需要补充信息时说明具体原因与下一步。
试点第一个月,人工平均处理时间略降,复杂案例闭合时间没有明显变化。新商户等待差异仍在,但未继续扩大。一次模型服务故障时,队列自动回到透明规则,没有让支付系统停摆。
客服真正使用后又发现一个设计问题。界面把模型提示放在最上方,人工事实藏在下面,操作员即使拥有否决权,也容易先被提示定调。小郭统计发现,模型建议“优先”的案例很少被降级,而未显示建议的同类案例处理顺序差异明显。
苏雨桐要求隐藏模型最终排序,只显示经过授权的事实因素,让客服先作独立判断,再在提交后查看模型建议并说明是否一致。产品负责人担心这会减少节省,乔岚说若所谓效率依赖人不再独立思考,就不是辅助。
改版后,人机不一致数量上升。几次人工判断后来证明更好,也有几次模型提前发现组合变化。所有不一致都进入抽样复核,不以“谁赢得多”惩罚客服。模型无法解释的分数不进入用户沟通,用户只被告知实际需要核实的事实。
第二个月,处理时间节省比原界面小,却更可信。董事会保留试点,没有扩大到额度与费用。苏雨桐在月报上签的是“继续受控观察”,不是“模型成熟”。
孙理本想庆祝盲测终于赢了一次。周五,他买来一包花生,放在当年那只收试探问题硬币的茶缸旁。乔岚从学校赶来,裤脚又沾了自行车链条油。她已经换过一次链条,那辆旧凤凰车仍舍不得卖。
大家剥花生看报告,没有横幅。陈维明往茶缸里放了五块钱,说这次能不能算主动贡献晚饭。
乔岚把钱退给他:“今天没人偷问答案。”
最后由研究预算买了两袋包子。苏雨桐只吃一个,剩下的带回家给马飞。马飞从航天试验场回来得晚,打开纸袋时包子已经凉了。他问结果是不是赢了规则。
“在限
本章未完,请翻下一页继续阅读.........