AI 语言模型产业的投资困境与发展困境分析

https://benn.substack.com/p/do-ai-companies-work

巨额投资与成本困境

大型语言模型(LLM)的开发成本惊人。根据报道,OpenAI 正在筹集 65 亿美元资金,每年约消耗 70 亿美元用于研究、开发新的 AI 服务和扩充团队。Anthropic 预计今年将投入 27 亿美元,而 Facebook 的投资规模更大。

虽然芯片性能可能提升、计算成本可能下降,摩尔定律仍在发挥作用,但模型优化的难度却在不断提高。这就像攀登珠穰:越往上走,空气越稀薄,每一步都比前一步更加艰难(AGI 可能会改变这种情况)。即使基础计算成本降低,但收益递减效应明显。2024 年要构建更好的模型,需要比 2023 年投入更多更复杂的计算资源。

市场竞争与价值衰减

尽管成本高昂,业界仍在持续开发新模型。人们相信 LLM 是下一个技术淘金热,最优秀的模型开发商将为员工和投资者带来巨额回报。这种追求更快、更高、更强的人性驱动力难以抗拒。

然而,旧模型的价值衰减速度惊人。用户可以轻易地从 GPT-3 切换到 GPT-4,仅需在 ChatGPT 中更改一个下拉选项。如果竞争对手推出更好的模型,用户只需修改几行代码就能完成迁移。要持续销售 LLM,就必须始终保持领先地位。

即使行业停止开发新模型,或者技术发展遇到瓶颈,旧模型的价值仍会快速衰减。开源模型如 Llama 和 Mistral 的能力与专有模型的差距并不大,如果专有模型停止进步,开源模型很快就能追赶上来。

产业困境与战略选择

对于 OpenAI、Anthropic 等 AI 厂商来说,他们面临两个选择:一是投入巨资保持市场领先地位,但这极其冒险,因为模型开发成本会持续上升,优秀员工可能离职,而且不能把业务建立在永远保持技术突破的基础上。技术优势很少能成为持久的护城河。第二个选择似乎只能是更加努力地实现第一个选择。

与云服务提供商的对比

18 个月前,有观点认为基础 LLM 供应商可能成为下一代云服务提供商。表面上看,这个类比似乎合理:两者都需要大量资金支持,都可能成为全球计算基础设施的重要组成部分,市场规模都可能达到数千亿甚至万亿美元。

但有一个重要区别:云服务提供商不会在短期内被取代。Azure 无需担心几位高管离职后在 18 个月内建立全球数据中心网络。AWS 虽然是互联网企业,但其竞争优势建立在物理世界中。可口可乐也是如此:核心配方固然重要,但创业公司无法在三个月内建立工厂、配送中心和零售网络。

AI 厂商的脆弱性

相比之下,AI 供应商的处境不同。虽然 OpenAI 需要大量计算资源,但这些都是租用的(来自微软、AWS 或 GCP)。只要有足够资金,任何人都能获取相同的资源。完全可以想象,一小组资深研究人员离开 OpenAI,筹集资金租用计算资源,在几个月内就能对 OpenAI 的核心业务构成威胁。

AWS 在数据中心上的投资构成了持久的防御,而 OpenAI 在开发 GPT 旧版本上的投资却不能,因为更好的版本已经在 Github 上免费提供。从某种意义上说,每个 LLM 供应商都随时可能在 18 个月内失去竞争力。(这对 AI 应用更为明显,如 Copilot、Poolside、Devin 和 Cursor 的更迭)

护城河之困

那么,LLM 供应商的护城河在哪里?是品牌?惯性?更好的应用生态?还是持续投入巨资保持技术领先?这个问题目前还没有明确答案。但 AI 公司似乎是市场错误地将软件开发成本视为一次性投资而非必要持续支出的极端案例。

对于谷歌、微软这样的巨头,以及已经成为 AI 代名词的 OpenAI 来说,这种持续投入可能是可行的。但对于尚未产生可观收入的小公司来说,即使通过大规模融资暂时领先,也很难持续保持优势。他们要么需要永续筹集巨额资金(市场需要保持非理性才能维持企业的生存),要么必须每年创造数十亿美元的收入,这是一个极高的生存门槛。

在这个市场中,时机可能是关键:当炒作退潮时,企业将无法获得如此规模的融资。最终的赢家不是跑得最快或者率先到达终点的人,而是在市场认定比赛结束时恰好领先的那个。

相关推荐
The博宇16 分钟前
机器学习:监督学习、无监督学习
大数据·人工智能·算法·机器学习
蚂蚁没问题s19 分钟前
图像处理 - 车道线检测:智能驾驶的“眼睛”
图像处理·人工智能·算法·机器学习·计算机视觉
尚雷558030 分钟前
pip 如何快速安装包
人工智能·pip
cdut_suye1 小时前
深度优先搜索(DFS)与回溯法:从全排列到子集问题的决策树与剪枝优化
c++·人工智能·opencv·算法·决策树·深度优先·剪枝
小桥流水---人工智能1 小时前
解决:AttributeError: module ‘tensorflow‘ has no attribute ‘variable_scope‘
人工智能·tensorflow·neo4j
数据媛1 小时前
TensorFlow_T10 数据增强
人工智能·python·tensorflow
lovelin+v175030409661 小时前
电商数据API接口:安全与性能的双重挑战
人工智能·爬虫·python·数据分析
Luzem03192 小时前
Opencv识别图片颜色并绘制轮廓
人工智能·opencv·计算机视觉
道友老李2 小时前
【工业机器视觉】基于深度学习的水表盘读数识别(5-读数修正)
人工智能·深度学习·目标检测·机器学习·计算机视觉
deephub2 小时前
Differential Transformer: 通过差分注意力机制提升大语言模型性能
人工智能·深度学习·神经网络·语言模型·transformer