不买GPU不建机房,企业如何真正掌控AI
大家好!我是一周商业故事!
最近有个做制造业的朋友问我:"我们集团想自己部署大模型,你觉得靠谱吗?"
我说靠谱。但我没说的是--大部分人问这个问题的时候,根本不知道自己在问什么。
他们以为自己在问"要不要部署AI"。其实真正的问题是:你愿不愿意为"数据变成资产"这件事,先亏一年的钱。
这个坑,比买GPU贵多了。
先说个有意思的事。
Kimi K3发布那天,你以为市场会沸腾?没有。市值反跌了。
为什么?因为投资者开始脱敏了。模型厂发论文、刷benchmark、开发布会、拿融资--这套循环跑了两年,边际效用在递减。就像你第一次看魔术觉得神奇,第十次就知道鸽子从哪掏出来的了。
估值支撑的逻辑是"AGI垄断租金折现"翻译成人话就是"谁先做出最聪明的AI,谁就通吃一切"。但这个假设正在被开源瓦解。DeepSeek-R1免费、Llama 4免费、Qwen免费--当免费的东西够用时,"通吃"就是个伪命题。
国内更尴尬。港股降温、A股收紧、美股对AI概念股的窗口说关就关。早期投资者投进去的钱,找不到退出通道。不是估值要不要下调的问题,是12-18个月内跑不通商业化,就是生死问题。
所以模型厂开始转型了。
OpenAI和Anthropic都在做一件事--FDE(Field Deployment Engineer)。简单说就是不再只卖API,而是派人深入企业,帮你把AI真正用起来。像Palantir那样,卖交付能力而不是卖模型能力。
听起来挺好的对吧?企业终于有人来帮忙了?
没那么简单。
Anthropic已经推出了13个垂直AI产品。不再提前通知客户。
2026年4月17号,Anthropic发布Claude Design。Figma股价当天暴跌,年内跌了50%。
你以为Anthropic是Figma的模型供应商?是。但供应商转身就做了个竞品。
更狠的是--The Information报道,Anthropic在Mythos模型里主动降低性能,当检测到客户用它开发竞争性AI产品时。你花钱买API,用你的数据训练模型,然后转头做你的竞品。你还得继续付费,因为你的业务已经跑在他们的模型上了。
David Sacks在All-In Podcast里说了一句很重的话:"You are mortgaging your future. You are sealing your fate."翻译过来就是--你在抵押自己的未来,你在封死自己的命运。
Alex Karp,Palantir的CEO,说得直接:"企业要拥有生产资料,而不是把生产资料转移给别人。"
你在给模型厂递刀子。
你把合同数据喂进去,模型学会了合同审查。你把工艺数据喂进去,模型学会了工艺优化。你以为你在用AI,其实你在帮别人训练替代你的产品。
那怎么办?
开源模型已经追到了闭源的屁股后面。
常规能力--问答、摘要、翻译、基础代码--开源已经追平。你日常工作中80%的需求,DeepSeek和Qwen都能搞定,和GPT-4的差距已经不足以支撑定价权了。
前沿能力--超长链推理、复杂agent、多模态深度--闭源还领先。但说真的,你的企业需要AI做超长链推理吗?你需要的是合同审查、知识库问答、报表生成。这些活儿,开源够了。
加上推理价格在暴跌。四大力量在压:开源竞争、推理优化技术、算力供给增加、规模效应议价。去年调一次API一块多,现在几毛钱。趋势还在往下走。
技术窗口打开了。企业第一次有了"不依赖OpenAI/Anthropic也能把AI跑起来"的技术基础。
但技术门槛降低,不等于部署门槛降低。
企业老板一听"本地化部署",脑子里浮现的画面是:买几台服务器,装个模型,AI就跑起来了。
不是的。
本地化部署要考虑五个技术维度。我一个一个说。
第一,模型部署与适配。你要选模型(DeepSeek还是Qwen?70B还是32B?),选推理框架(vLLM还是TGI还是TensorRT-LLM?),选芯片(NVIDIA还是昇腾?)。每个选择后面跟一串技术决策,选错了就是三个月白干。
第二,算力调度与资源池化。你不会只跑一个模型。知识库问答用一个,合同审查用一个,数据分析用一个。多模型共存怎么调度?高峰期谁优先?这些都需要算力调度系统。
第三,性能调优。模型部署上去只是开始。KV Cache怎么配?batch size设多少?要不要量化?一个参数调错,推理速度差3倍。你以为AI运维就是重启服务器?差远了。
第四,安全加固。近九成DeepSeek私有化部署存在安全漏洞。Ollama默认无认证,vLLM默认无TLS。你把模型部署在内网就觉得安全了?黑客绕过你的防火墙直接访问推理API,你的模型权重、对话记录、企业数据全部裸奔。
第五,持续迭代。模型会"过期"。你的业务在变,数据在变,模型不变就越来越蠢。需要定期微调、定期更新。这不是一次性工程,是持续工程。
这五个维度,每一个都需要专业人来做。而这些人,市场上不到1万,大部分被大厂卷走了。
来算钱。
假设你是前面那个12个二级集团、500亿项目管理、3000管理人的制造企业。你要真正把AI用起来,需要的规模大概是60-80张推理卡。
完全自建的话:
一次性投入800-1200万。包括机房改造、GPU服务器、存储、网络、安全设备、软件平台。三年运营成本每年200-300万。包括电费、运维人力、维保、软件订阅、带宽。
三年TCO(总拥有成本):1500-2200万。
注意,采购价只占TCO的45%。剩下55%是电费、人力、维保、安全、软件。GPU服务器功耗是普通服务器的20倍,一台8卡L40S满载6kW,一台普通业务服务器才0.3kW。你买的不是服务器,是个电暖器。
而且GPU折旧极快。H100出来A100就过时了,B200出来H100就打折了。传统服务器5年折旧,GPU服务器实际2-3年就得换。800万的设备两年后残值可能只剩200万。
老板看到这个数字,通常会有三个反应:
"太贵了。" "能不能便宜点?" "别人家是怎么做的?"
但真正该问的问题不是"贵不贵",而是"钱花对地方了吗"。
第一个死穴:数据基础差。
12个二级集团用12套不同的项目管理系统。数据格式互不兼容,API互不开放,历史数据没清洗。你花800万买了GPU,部署了70B大模型,跑出来什么?一个"通用聊天机器人2.0"。
它不懂你的业务。因为你没喂它你的数据。为什么没喂?因为你的数据散落在12套系统里,格式乱得像刚拆迁的城中村。
模型不傻。是你的数据脏。
第二个死穴:运维能力弱。
AI运维工程师年薪50-100万。传统制造企业拿什么和字节、阿里抢人?薪资翻倍都未必抢得到。
就算抢到了,你让他一个人管60张卡?他离职了你怎么办?
第三个死穴:组织认知不到位。
预算批了800万买GPU。但数据治理?不批。运维人力?不批。业务系统对接?不批。
老板的逻辑是:硬件买了就是资产,软件和服务是费用。所以宁可花800万买铁皮,也不愿花200万养数据和养人。
结果就是机房建好了、GPU上架了、模型部署了--然后呢?没人用。变成"展厅项目",领导参观时打开演示一下,平时吃灰。
这三个死穴加在一起,意味着一件事:有效需求被高估了。
意愿很高--"我们也想搞AI"。需求中等--确实有数据安全和定制化的需要。但有效需求很低--有钱买硬件、没人养数据、没组织支撑飞轮。
"建机房买GPU"的需求被高估了。"数据治理+运维服务"的需求被低估了。
那怎么办?不部署了?用API算了?
不行。用API就是递刀子,前面Figma的例子摆在那。
真正的答案是:把模型所有权和算力所有权拆开。
模型用开源的。DeepSeek、Qwen、Llama,免费。80%的企业需求它们已经能覆盖。
微调自己做。用你自己的企业数据,跑LoRA或QLoRA微调。微调不需要常驻算力--租一台A100跑两周,用完退还。一年做2-4次,总成本10-30万。
算力跟运营商租裸金属。移动、电信、联通都在疯狂建智算中心,利用率只有40-60%,GPU闲置就是烧钱。现在是买方市场,价格可谈,还能要附加条件。
推理算力常驻租:3-5台8卡L40S或昇腾910C,月租3-5万一台,年算力成本约180-300万。
微调算力临时租:按需租A100,用完退,年成本10-30万。
数据完全自己掌握。知识库和敏感数据放在企业本地,通过加密专线推送到运营商机房的GPU上做推理。存储加密、传输加密、运行隔离--运营商只是"哑管道",提供电力和网线,碰不到你的数据。
机房不建。电力不申请。制冷不操心。UPS不买。柴发不装。
运维团队2-3人就够。1个AI工程师管模型部署和微调,1个数据工程师管知识库和数据管线,1个兼职运维管监控告警。不需要机房值守--运营商提供远程手。
算总账:
初始投资从800万降到50万(本地网关设备)。三年TCO从1900万降到900-1300万。数据主权完全可控。飞轮可以启动。技术迭代风险由运营商承担--今年租L40S,明年B200出来了可以换。
一句话:算力是工具可以租,数据是资产必须握,模型是能力必须建,飞轮是壁垒必须转。
企业要建的不是"机房",是"数据管道和AI能力中心"。
方案有了,成本算清了。但有一个东西上面没提--数据底座。
这是整个方案里最容易被忽略、也是最贵的一部分。不是因为花钱多,而是因为花时间多、花精力多、而且没有捷径。
国内企业的数字化程度,说实话,很低。85.8%的企业说自己在做"混合架构",但大量是"重硬轻软"--买了GPU上架就完事,缺乏算力调度、资源池化、动态分配,利用率低下。
更致命的是数据层。传统企业的数据现状是三个字:在、纸、孤。在脑子里,在纸质台账上,在系统孤岛里。
你叫"数字化",实际是"数字化登记"。一线员工每天填表,填完就完了。数据是一次性消耗品,不是资产。
数据底座要建三层:
第一层:数据治理。统一12个二级集团的数据标准。打通ERP、MES、CRM的API。历史数据清洗和结构化。这步不花钱但费时间,6-12个月起步。而且不能只靠IT部门--业务部门必须参与定义"什么数据有价值"。IT不知道哪个工艺参数重要,车间主任知道。
第二层:知识库建设。把企业的文档、图纸、合同、操作规程、项目复盘报告全部结构化,建RAG系统(检索增强生成)。AI回答问题的时候不是瞎编,是从你的知识库里检索。这一步不需要GPU,普通服务器就能跑。但它是数据飞轮的载体--把人的经验变成组织的资产。老师傅退休了,他的经验留在知识库里,没有带走。
第三层:数据飞轮。AI角色在生产环节持续生成结构化数据。数据进入知识库,多职能复用,反哺模型微调。越用越准,越准越用。
这就是我之前文章里写的那个论点:问题关闭之后,数据是死了还是活了。死了的数据是成本,活了的数据是资产。
数据底座建好了,你的AI部署才有意义。底座没建好,租再多的GPU、部署再大的模型,跑出来的都是"通用聊天机器人"--和业务没关系,和竞争力没关系。
我见过太多企业的AI项目,流程是这样的:
老板拍板->采购GPU->部署模型->开个发布会->然后吃灰。
不是AI不行。是你在用买硬件的思路做AI。AI不是采购来的,是养出来的。
模型可以租,算力可以租,机房可以不建。但数据底座必须自己建,数据飞轮必须自己转,微调能力必须自己有。
未来的AI使用,一定是在AI主权可控的基础上做改造。不是"用上AI",是"让AI长在自己的业务里"。
泡沫会过去,API会降价,模型会开源。这些东西都会变成水电煤一样的基础设施,便宜到你不用犹豫。
到那一天,真正值钱的不是谁有GPU,是谁有数据飞轮在转。
你现在该做的,不是比谁机房大,是比谁数据底座扎实。
这场仗,赢家不是买卡最多的,是数据最活的。