使系统变脆的最快方法是把效率最大化。在市场和公司中,去除冗余的驱动看起来很聪明,直到某天它不再如此。付钱让员工构建替代自身岗位的AI代理听起来大胆,实际上也可能是以微妙方式出售公司韧性深度虚值期权的一种做法。
这个方案诱人且简单:奖励员工自动化他们的工作,并将节省下来的资金再投入增长。这是出发点。更深层的问题是,你是否把组织冗余转换成了集中的模型风险。反脆弱系统从波动中获益,因为它们拥有冗余、松耦合和可选择性。而有条不紊地把领域知识交给不透明代理的劳动力正好相反。它把默会技能转成代码,抹去冗余,强化供应商与API之间的耦合,并提高错误的代价。这就是公司版的桥——仅建到足以承受预期负载。桥梁倒塌不是因为平均流量,而是工程师所说的未知的未知。
对自我自动化给赏金,你就触发了古德哈特定律:当一个衡量指标变成目标时,它不再是一个好指标。员工会优化奖励,而不是长期系统的健壮性。捷径悄然出现。边缘案例被忽视。文档变薄。从博弈论角度看,公司创造了一次性报酬,却承担着重复博弈下的负债。金融业在2008年前就写过这本剧本。交易员记账复杂工具的上行收益,而资产负债表吞下尾部。如果你对相同动力学会出现在内部AI代理身上感到惊讶,说明你没注意到内部仪表盘如何变成交易屏。治理必须假定代理构建者是理性且自利的。仅以“节省工时”来补偿、而不对新增操作风险给予折扣,是一份定价错误的合约。
还有另一种更慢的流失。对自动化的过度依赖会使技能萎缩。航空公司血的教训是:依赖自动驾驶的飞行员会失去手动飞行能力,而这在非常规情况下至关重要。公司也一样。当AI写备忘录、回复工单并对账时,判断与排错的肌肉会衰弱。已有多位高管警告这一趋势可见。它类比工业革命的权衡:机械化扩大了产出,但常常消灭了工艺。现在的风险不是怀旧,而是适应性。当模型漂移或数据流变化时,谁拥有诊断失败路径的默会知识?一个花钱抹去自身机构记忆的公司,为了减重削掉了安全网。
系统性脆弱不会自我宣告。随着众多主体采用相似工具,它会悄然累积。如果大多数企业将工作流通过少数基础模型和代理平台路由,则数据集、故障模式和对抗面会变得相关。类比是1987年的组合保险,许多机构运行相同的动态对冲策略,直到所有人都需要同时卖出才失效。2007年,分层和评级模型让错误在资产负债表间同步。AI版本是操作层面的而非纯金融,但数学类似。共同输入产生共同冲击。平静时期的超额生产力收益,往往是你在共享尾部事件前收取的保费。问自己:你激励的自动化是契合你情境的独特方案,还是和别人一样有相同盲点的商品化代理?
自我自动化方案集中化的并不只是公司记忆。供应商风险复合化。随着员工把流程换成提示,把内部工具换成外部API,公司连续性系于服务条款、模型更新与不受其控制的安全实践。大型模型行为的微妙变化可能在数百个内部代理中引发连锁反应。第三方服务的中断会变成公司范围的暂停。工程师称之为单点故障。管理者在出事前称其为平静的一天。出于好意的团队构建的影子AI代理激增也扩大了攻击面。安全团队已经难以盘点电子表格;现在还必须编目可以发起交易的自主脚本。在没有控制框架下付钱让人们创造更多这样的脚本,就像奖励员工在生产堆栈中安装未经跟踪的中间件。
领导者知道外界观感复杂。有些人公开警告员工AI可能会减少人员,称紧迫感将推动再培训。这个信号可能会被不同方式解读。恐惧促使人们囤积知识、拖慢交接或提前离职。调查显示存在脱节:许多CEO现在认为自己的职位可被自动化,而感到同样的员工远少。这个差距是个协调问题。当高层释放可替代性信号,中层就读出可弃性。与此同时,被框定为“AI驱动”的裁员创造了一种声誉套利:公司声称前瞻性纪律,同时将社会成本外部化。投资者应问:这些举措是提升投资资本回报,还是仅仅以牺牲长期人力资本与信任来重新评估短期利润率?
自动化常用的KPI是节省工时。这听起来整洁但错误。从概率角度看,你是在用一系列小成本换取低频高冲击风险:逃过控制的模型幻觉、被软件放大的逻辑错误、沉默的数据漂移和供应商中断。这类似于卖出你没有准备金支付的保险。更好的视角是看所创造的期权。AI是否拓展了人在不确定下可做决定的范围?是否提高了新市场中迭代的速度与质量?是否留下能在员工更替和模型更新中存续的审计轨迹?这些是韧性指标,而非人头指标。它们通常需要人类在环、冗余路径、断路器与所有权轮换,以防知识集中并蒸发。
一些领导人承认他们工作的部分内容可能被自动化。一位来自大型创新实验室的前高管更进一步,认为即便是C级职位也并非不可替代。这一承认暴露出悖论。如果领导力真的可被自动化,那么治理将成为商品,复杂风险的管理也随之商品化。如果不可自动化,那么你在高层所重视的是不确定情境下的默会判断。付钱给基层去抹去那层默会判断意义不大。市场奖励能在长反馈回路中存活的公司,而不是优化单个季度成本曲线的公司。技术的意义在于杠杆,而不是退位。自动化应扩大管理控制的幅度,同时不切断使判断成为可能的反馈。
反向思考有用。不要付钱让员工替代自己,而是付钱让他们提高容错性、交叉培训邻近同事,并记录代理失败的接缝。奖励构建可审计、可压力测试并可由多个团队轮换持有的代理的人。对减少关键人物风险以及在上游中断下证明优雅降级的行为给予补偿。资助红队在客户或审计前尝试打破代理。设立复杂度预算,限制每个单元的自主流程数量。把奖金与随时间清算的韧性指标挂钩,而不是一次性展示节省工时。这不是对怀旧的呼唤,而是对治理的要求:为尾部风险定价,并将机构知识视为资产负债表项目。
AI会压缩某些角色并创造其他角色。危险不在于变化而在于失控的变化。如果你激励通向可见效率的最快路径,你会得到它,以及随之而来的隐性负债。替代方案在账面上更慢,但在实践中更强:先增强、始终记录、多元化供应商,并让人类对关键路径负责。市场偏好能经受打击的公司。如果你付钱让人们去削弱你吸收打击的能力,你并不是在买增长,而是在做空韧性。