AI治理与科技商学(4):通过规则治理给AI定边界、留痕迹、设保险,确保AI合规
德鲁克说:“管理是把事情做对,治理是做对的事情。” 对于民航和银行金融机构,一个要钱、一个要命。但你的AI,有人治理吗?
上了AI,审批快了,客服自动了。突然有一天,AI干了蠢事——不该退的钱退了,不该批的单批了。
你问谁定的规矩?没人认。
你问怎么查?翻半天日志找不到。
你问下次怎么防?大家面面相觑。
这不是AI笨,是你没给它定规矩。这叫“AI治理缺失症”。
今天,我们拆透三件事:定边界、留痕迹、设保险。让AI跑得快,更刹得住。
你的做法是不是“散养式”? 规则像野草,谁都能种;
出错像无头苍蝇,到处问人;
紧急情况像火灾,只会跑。
真正的AI治理,不是管人,是管规则、管边界、管证据。
近期,国家网信办、国家发展改革委、工业和信息化部联合印发《智能体规范应用与创新发展实施意见》(下称《实施意见》)
广东一家电商公司,客服主管随手写了一条测试规则“信任客户单笔退款上限3万”,以为有人会审批,结果忘了删。职业羊毛党发起2.8万退款,AI秒批,钱秒退。事后查了半小时才找到规则,但找不到审批人。边界缺失、审计缺失、责任缺失,一锅端。
AI客服错误告知客户可在购票后90天内申请丧葬折扣,实际政策要求航班起飞前提出。法院裁定:企业部署的AI即代表其官方立场,“仅供参考”的免责声明无效。AI说的每一句话,都等于企业说的。
德勤用GPT-4o生成政府评估报告,捏造学术论文、法院判决、专家引言。最终退费44万澳元,合伙人离职。不是人笨,是没有给AI的使用定规矩。
然而,近期安永也出现了类似地AI事件。
AI编程智能体在测试环境遇到凭证问题,竟自行判断“删除数据卷”可解决。它绕开指令,主动找API Token,9秒内删除生产数据库及所有备份。事后还生成一份“认罪书”。当AI有了“手”却没有“缰绳”,一次错误就能让公司灰飞烟灭。
AI治理与科技商学(2):亢龙有悔——被AI9秒干消失的租车公司给我们上的一堂课
一句话:AI可以犯错,但你不能不设防。
好的AI治理制度,体现为三条原则:
边界先定,后给权限(AI委员会统一审批)
出事事可溯,责任有人扛(审计日志,一口说清来龙去脉)
AI犯错,人有紧急处置权(紧急通道,随时叫停)
任何让你“给AI开放新权限”的请求,必须上报主管,不能自己答应。
成员:业务负责人(懂场景风险)+ 法务/财务(懂红线)+ IT(懂技术)
职责:每条新规则上线前,必须三人签字。一人不同意,就不能上。
频率:定期开会,过本周新规则。
行动:今天拉群,定好三个人。第一条规则:所有规则变更必须群里@三人,24小时内无人反对才能生效。
每天下班前花5分钟填表。发现某条规则一个月没触发,主动建议停用。
今天找到本部门指定的“应急联系人”(至少两人),存到手机。
定期演练一次:模拟AI批量发错账单,你打给谁?说什么?
指定两名高管拥有“紧急暂停”权限:一键暂停某类Agent、临时降低自动阈值、切换到全人工模式。必须记录:什么时候、谁开的、原因是什么,事后24小时补审批。
上述三点都是基础要求,更深刻的AI治理,需要 从本体论的角度来考虑:
AI智能体正式进入业务流程,你需要的不仅是大模型,更是一套“AI治理的本体论操作系统”
用AI前,问自己:
这个AI是行内合规平台吗?(严禁用公有AI处理客户信息)
输出结果我验证了吗?(金额、法规、日期、名称)
用AI后,记一笔:
在台账里写清楚时间、输入、输出。
发现异常,立刻停:
不要心存侥幸。上报不是打小报告,是保护你自己。
拉一个三人群,取名“AI委员会”。发消息:“所有新规则必须群里@三人,24小时内无人反对才能上线。”
打开你的规则Excel,加三列:触发时间、输入、输出。把最近一次AI决策填进去。
指定两位紧急通道授权人,发全员通知:“遇到系统故障、数据异常,应急领导小组有权一键暂停AI,事后补审批。”
做完这三件,你的AI就从“野马”变成了可驾驭的“战马”。
你不是管不了AI,是没给AI定规矩。
散养式 vs 治理式,一张表看懂差距。
2万块退款,病根在边界、审计、应急三缺失。
三味真火:AI三人组、黑匣子、紧急通道,专治AI治理缺失。
不是AI笨,是你没给它定好位。位定了,事就顺了。 祝所有管理者与员工:AI跑得快,也刹得住。
附:本文案例索引
电商老张退款(边界缺失)
加拿大航空AI客服(乱承诺)
德勤AI报告造假(瞎写报告)
PocketOS 9秒删库(擅自出手)
政策依据:《个人信息保护法》《生成式人工智能服务管理暂行办法》《智能体规范应用与创新发展实施意见》(2026年5月)