张朝阳说算法介入太厉害:企业数字化该给AI装上方向盘

一句“算法介入太厉害”,戳中了谁的痛点

张朝阳关于“互联网被算法介入太厉害”的公开表达,这两天在科技圈被反复转发。放在普通人视角,这是一句对信息流的吐槽;但放在企业主和信息化负责人的视角,这句话其实在提醒一件更现实的事:当算法成为业务的基础设施,你却说不清它在替你做决定,风险就已经埋下了。

过去几年,算法从“技术部门的实验品”变成了“业务部门的必需品”。电商的推荐位、内容平台的分发、银行的授信评分、客服的智能应答、工厂的排产与质检,背后都有模型在工作。问题在于,很多企业上算法的方式是“买来就用、上线就完”,既没有评估机制,也没有可解释的路径,更谈不上出问题时的回滚预案。

这轮讨论之所以值得企业界认真对待,是因为它把一个长期被技术细节掩盖的问题摆到了台面上:算法不是中立的工具,它带着目标函数和取舍。你把“点击率”设为目标,它就会去放大情绪;你把“转化率”设为目标,它就可能过度打扰用户。目标是谁定的、边界在哪里,最终要由企业来回答。

算法失控的代价,正在从“体验问题”变成“经营问题”

流量逻辑变了,粗放式算法红利在消退

早期靠推荐算法做增长,逻辑很简单:多推一点、多试一点,总会有转化。但当所有同行都在做同样的事,用户对“被猜中”的敏感度上升,边际效果就开始下降。更麻烦的是,过度拟人化的推荐会让品牌形象变得轻浮,用户记住了“它总给我推东西”,却没记住品牌本身。对做企业服务、做长决策周期产品的公司来说,这种伤害尤其明显。

合规与治理,已经从“可选项”变成“必答题”

算法推荐、深度合成、生成式人工智能,这几年在国内都逐步建立起相应的管理要求,涉及算法备案、透明度、个人信息处理的最小必要原则等。很多企业不是不想合规,而是根本不知道自己系统里跑了多少个模型、调用了哪些数据、决策链路在哪里断掉。等到被用户投诉、被平台约谈,才发现技术文档缺失、日志留不全、责任边界模糊。

“黑箱”带来的组织内耗

一个更隐蔽的成本是内部协作。业务部门问“为什么这个客户的评分被下调”,技术部门只能说“模型就是这么算的”。风控想调整策略,发现自己动不了模型;运营想验证一个假设,发现没有可靠的实验环境。算法成了一个只能看结果、不能调参数的“黑盒子”,企业实际上失去了对业务的精细控制权。

企业真正需要的,不是更炫的模型,而是“可控的AI”

张朝阳那句话的深层含义,其实是话语权和判断权不能被算法悄悄接管。映射到企业数字化上,可以拆成四个具体要求:

第一,可解释。 关键业务决策要能说清主要影响因素,哪怕不是完全解释,至少要有归因线索。信贷、招聘、定价这类场景,说不清就意味着无法向客户和监管交代。

第二,可干预。 业务人员要能在不写代码的前提下调整规则权重、设置黑白名单、限定推荐范围,让算法在业务设定的围栏里跑。

第三,可度量。 每一次模型迭代都要有对照实验和效果评估,不能凭“感觉好像好了一点”就全量上线。

第四,可回滚。 上线出问题时,能在分钟级切回上一版本,而不是连夜改代码。

这四点听起来朴素,但真正做起来,考验的不是算法水平,而是软件工程能力。模型只是其中一个零件,围绕它的数据管道、特征管理、服务编排、监控告警、权限与审计,才是决定AI能不能长期稳定跑在业务里的东西。

微米科技的解法:把AI当工程项目做,而不是当项目交付

在服务企业客户的过程中,微米科技看到的一个普遍现象是:企业不缺“想用AI”的意愿,缺的是把AI接进现有系统的路径。很多方案商交付一个演示效果很好的模型,验收之后就难以为继,因为数据源变了、业务流程改了、没人维护特征。

基于这类反馈,微米科技在软件开发与AI落地上的思路,是把算法放进一套可控的工程体系里:

一、从业务指标反推算法目标

不先谈模型选型,而是先和业务方把“什么叫做好了”定义清楚:是降低人工审核量,还是提升复购,还是缩短响应时长。目标明确之后,再决定用规则、用传统模型还是用大模型。有些场景其实用规则引擎加简单统计就够了,硬上大模型反而增加不确定性和成本。

二、把数据和模型管起来

在系统层面建立统一的数据接入与特征管理,保证训练和推理用的是同一套口径;对模型版本、训练数据版本、上线时间做完整记录,形成可追溯的台账。这样当业务质疑结果时,能还原当时的输入和判断依据,而不是各说各话。

三、给业务人员留出“方向盘”

在定制开发的管理后台里,把模型的关键参数、规则阈值、内容边界做成可配置项,并配套权限控制和操作日志。业务方可以调整,但调整有记录、有审批、有生效范围。这既保留了业务灵活性,也避免了“谁都能改、改完没人知道”的混乱。

四、上线不是终点,监控才是

配套建设效果监控与异常告警:指标漂移、接口超时、输出异常都要能及时被发现;同时保留灰度发布和快速回滚能力。很多AI事故不是因为模型差,而是因为没人盯着它跑。

五、把合规要求前置到设计里

在需求阶段就明确数据来源、使用范围、留存周期和对外披露方式,把该留的日志、该做的告知、该有的开关设计进去,而不是等上线后再补。对涉及生成式能力的场景,尤其要设计内容边界和人工兜底环节。

给决策者的三点务实建议

第一,先选一个“输得起”的场景试水。 不要一上来就改造核心系统。从客服问答、文档处理、报表分析这类边界清晰、错了也能人工接住的场景开始,跑通数据、跑通评测、跑通运维,再往深水区走。

第二,把AI预算的一部分留给“不性感”的部分。 数据治理、日志、监控、权限,这些在演示里看不见,但决定了系统能不能活过第二年。经验上,这部分投入往往被严重低估。

第三,明确谁对算法的结果负责。 技术上可以分散,责任必须收敛到一个岗位或一个机制。有了责任人,才有人去问“这个推荐为什么这么推”。

结语

张朝阳的那句感慨,本质上是在问一个老问题的新版本:技术跑得越快,人还能不能握住方向。对企业来说,答案不在于是不是要用算法,而在于用什么方式把算法装进自己的经营逻辑里。

AI不会因为被讨论得多就变得更可靠,它只会因为被工程化、被约束、被持续观测而变得可靠。微米科技愿意在这件事上做那个“不太显眼”的角色——把模型背后的软件系统搭稳,让企业在享受AI效率的同时,始终保有自己的判断权。