
最近,旧金山AI初创公司Lindy的一项决定震动了整个科技圈。据The Information等多家媒体报道,这家公司因为每月调用Anthropic的Claude大模型,产生的账单金额甚至超过了聘用一名员工的工资,被迫在本月将所有AI流量紧急切换到更便宜的服务上。这不是个例,而是一个清晰的风向标——美国企业正在经历AI大模型成本失控的阵痛,一场向低成本模型大规模迁移的浪潮已经来临。
Lindy的主营业务是提供AI销售助手和客服代理,日常需要处理海量对话和文本生成,对模型调用量极为庞大。他们原本依赖Claude系列模型,看重的是其在长上下文和推理能力上的表现。然而,当财务部门拉出账单时,管理层发现每月AI api开销已经逼近、甚至反超了人力成本,这种倒挂让“用AI替代人工”的商业逻辑瞬间变得讽刺。烧钱速度不可持续,切换模型成为唯一的生存选项。
大模型账单是如何失控的
要理解这场迁移潮,必须先看清账单背面那张冷酷的定价表。Anthropic的Claude 3 Opus,每百万输入tokens收费15美元,输出更是高达75美元;OpenAI的GPT-4 Turbo虽然略低,也需要输入10美元、输出30美元。看起来单价不高,但当企业日生成数百万tokens时,数字会迅速膨胀到每月数万甚至数十万美元。而一家SaaS公司的初级员工月薪可能不过五六千美元。两相对比,AI变成了“昂贵的奢侈品”。
尤其在实时对话、批量文档处理这类高并发场景下,tokens消耗量呈指数级增长。很多企业初期使用大模型时,被出色的效果吸引,不自觉地开放了全部功能,等到月度账单弹出才如梦初醒。Lindy的遭遇很典型:他们为了追求最佳用户体验,几乎将核心流程全部押注在Claude上,没有设计成本分层,结果技术负债变成了财务噩梦。账单失控的本质,是企业没有建立起与调用量匹配的成本监控和调度机制。
更棘手的是,大模型的价格并没有出现普遍性雪崩。头部供应商虽然不断推出提速、降价版本,但旗舰模型依然昂贵。OpenAI推出了低价的GPT-4o mini,Anthropic也有Claude Haiku,可是性能妥协明显。许多企业发现,一旦用习惯了最强模型,再降级到“lite”版本,效果落差难以接受。于是陷入了“用旗舰破产,用轻量损效”的两难。而账单还在以每周20%的速度攀升,资本寒冬下没有投资人会为无底洞般的AI成本买单。
“换芯”求生:从闭源旗舰涌向开源和微调模型
Lindy的行动并非孤立。根据多方调查,硅谷数十家B轮以前的初创公司都在悄悄进行“模型大换血”。有的公司全面从GPT-4降级到GPT-4o mini,有的则直接采用开源模型通过自己部署或付费推理服务来大幅削减成本。开源社区突然从技术极客的花园,变成了企业降本增效的淘金地。Google的Gemma、Meta的Llama 3、Mistral的Mixtral系列,以及微软的Phi-3,正以前所未有的速度进入生产环境。
以一家名为Nylas的通信API公司为例,他们近期公开分享了将部分智能分类任务从GPT-4切换至Mistral-Large的经验,成本骤降70%,延迟反而更低。还有大量零售科技公司,开始使用开源的Llama 3配合内部数据微调,来替代昂贵的通用闭源模型做商品描述和客服应答。这些案例证明,很多垂直场景根本不需要全知全能的超大模型,一个经过特定数据训练的7B或8B模型,就足以在精度上持平甚至超越通用旗舰。
这波迁移的底层推动力,是开源基座模型性能的飞跃。Llama 3 70B在多项基准测试中已经与GPT-3.5不相上下,甚至逼近GPT-4;而Mistral 7B的推理成本仅为GPT-4的几十分之一。更重要的是,量化技术如GPTQ、AWQ让大模型可以在普通消费级显卡上运行,企业自建推理引擎的门槛大幅降低。过去一年,Hugging Face上开源模型的下载量激增了500%,企业端的推理端点服务收入也翻倍增长,资本和人才都在涌向“低成本智能”管道。
云厂商和模型公司被迫应战
这股迁移浪潮让模型供应商和云厂商感受到切肤之痛。OpenAI极力推广比GPT-4便宜25倍的GPT-4o mini,Anthropic则强调Claude Haiku的性价比,但都难以阻止客户流失。因为价格战只能止血,无法逆转结构性问题——企业想要的是可控的、与自身业务价值匹配的AI支出,而不是一个永远填不满的tokens黑洞。于是,我们看到一场奇怪的博弈:一边是企业逃离,一边是模型公司推出更便宜的API、更灵活的计价模式,甚至免费额度。
谷歌云和微软Azure也开始调整策略,不再仅仅推销昂贵的托管大模型服务,转而大力支持企业客户使用开源模型或混合架构。谷歌的Vertex AI新增了模型自助微调和部署流水线,让企业可以轻松训练并托管Llama、Gemma等模型。微软Azure AI Studio同样强调“模型即选择”,将自家的Phi系列和Llama并列展示。云厂商意识到,与其强迫客户用昂贵模型最终流失,不如先让他们留在自家生态里,再靠存储和计算赚钱。
但更大的压力来自“模型商品化”趋势。当开源模型性能足够好,且可以免费获得时,对闭源API形成了一种“影子竞争”。即便是付费企业,也会设置严格的内部预算帽,并利用路由机制自动选择最经济的模型。一家名为Martian的初创公司甚至专门做模型路由器,根据任务难度和成本动态切换后端,受到热捧。这种中间件层的出现,进一步弱化了对单一模型的依赖,让大模型厂商的议价权加速瓦解。
AI成本观的重塑:从盲目追强到精细运营
Lindy的案例给所有AI原生企业上了一课:选择模型不是一场性能至上的军备竞赛,而是一道关乎生存的算术题。过去一年,创业公司讲故事的时候总爱强调“我们用了最强大的AI大模型”,仿佛那是一种技术光环。但如今,投资人开始追问单位经济模型(Unit Economics),你的毛利会被tokens成本吃掉多少?AI服务的边际成本能否随着规模下降?这些问题逼迫创始人把模型选型从技术决策变成了财务决策。
聪明企业的做法是建立多模型分发的“智能调度层”。对高复杂度任务(如多步推理、代码生成)依然调用旗舰模型,但对响应式客服、概述摘要、关键词提取等大量简单工作,自动转向轻量模型或微调模型。有的公司甚至内部训练了专用分类器,来预测任务难度并路由。这种架构下,整体AI成本可以压缩至原本的十分之一,而关键路径的性能几乎无损。人工智能正从“大力出奇迹”的蛮荒期,步入“精打细算”的工业化阶段。
此外,可观测性和成本治理工具也迎来了春天。Datadog、New Relic等APM厂商迅速上线了大模型调用监控模块,企业可以像看基础设施账单一样,实时看到每个API端点、每个模型的tokens消耗和金钱消耗。Lindy事件之后,一批专门做AI成本优化的初创公司拿钱拿到手软,比如Portkey、Helicone等,它们提供精细到每个API键的用量看板和自动拦截超额消费的功能。这种补课式创新,正在快速拉平企业的成本管理水位。
迁移潮将如何重塑AI产业格局
短期来看,这是一场财务倒逼的“消费降级”,但长期影响远不止省钱。迁移潮正在打破闭源模型的垄断叙事,让开源生态获得更多实战反馈和贡献,加速了模型能力的民主化。当数千家企业把生产流量灌溉到Llama或Mistral上时,这些模型的成熟度将以月为单位迭代,最终形成与闭源模型分庭抗礼的格局。开发者不再把开源视为退而求其次,而是将其作为可控、可审计、可定制的战略资产。
对于OpenAI和Anthropic而言,高利润的旗舰模型可能不再是现金牛,而是吸引用户进入生态的“招牌菜”,真正的规模收入或许转向批量折扣的廉价模型和平台服务。这种转型充满了不确定性。因为过去它们的估值很大程度上建立在“最强模型溢价”之上。如今,当企业客户冷静地算账,发现“足够好且足够便宜”比“最好但昂贵”更有吸引力时,整个行业的技术溢价都会面临重估。软件行业历史上那句“好到让人无法忽略”或许要改成“便宜到让人无法拒绝”。
这场由失控账单引发的全面迁移,标志着AI产业正式告别了“技术炫技”的稚嫩期,步入了以投入产出比为核心的生命周期。Lindy们的故事不会是最后一个,以后还会有更多公司站出来,分享他们如何用十分之一的成本实现了相近的效果。而对所有技术决策者来说,账单上的数字已经说明一切:在一个需要盈利的市场里,实用主义的成本模型终将战胜理想主义的大模型崇拜。
Aiii人工智能创研院(Aiii.org.cn)精选文章《天价AI账单催生迁移潮:美国企业逃离昂贵大模型》文中所述为作者独立观点,不代表Aiii人工智能创研院立场。如有侵权请联系删除。如若转载请注明出处:https://www.aiii.org.cn/799.html
微信公众号
微信小助理