总的来看,未来的 AI 行业将呈现出预训练集中化与推理去中心化的两极格局。企业的竞争将在于谁能够最有效地汇集并利用独特数据资源。大型企业依靠其庞大的数据基盘和算力规模构建护城河,而中小企业则应专注于差异化部署与成本优化。
据The Information此前报道,微软内部备忘录显示,由于预训练边际效益递减,原计划投入160亿美元升级预训练基础设施的方案已被叫停,微软转而专注于为OpenAI提供推理以获取收益。 纳德拉也在此前的播客节目中表示,数据中心可能建设过剩,租赁优于自建,微软甚至可能会使用开源模型来支持 CoPilot。Gavin认为,这些预示着单纯依靠参数扩张建立壁垒的“预训练时代”已走向终结。
一些您可能无法访问的结果已被隐去。
显示无法访问的结果