随着智能代理(Agent)逐渐从实验室走向大规模商业应用,代理AI云基础设施正在经历从“无状态模型托管”向“智能代理运行期(Agent Runtime)”的时代设施重大转型。这一变化不仅是基础解代技术上的进步,更是何演影响企业AI应用经济学的关键战役。
在最近的变深Nebius Inflection 2026峰会上,关于AI基础设施商业化的入理讨论吸引了广泛关注。Nebius(NBIS.US)联合创始人Roman Chernin指出:“随着智能代理走向生产,理运轮传统无状态模型服务架构将完全失效,行周行业必须转向‘智能代理运行期’基础设施。期完”Roman还提到:“客户希望智能代理在任务完成的整飞成本上更具可行性。未来的代理支付模式将基于结果(Outcomes),而非Token。时代设施”
目前,基础解代市场对AI的何演关注已经从“模型参数战”转向真实的投资回报率(ROI)和云算力的有效利用。Nebius CEO Arkady Volozh透露,变深该公司计划在年底实现800兆瓦至1吉瓦的功率运行,并已预留4吉瓦的算力容量。这种预算庞大的扩产背后,核心在于解决“Token消耗高而无效”的问题。
规模化的痛点:无状态推理为何失效?
在第一波AI浪潮中,主要的商业模式是“售卖Token”。这种线性的开发模式存在局限。Roman Chernin明确表示:“智能代理不是单次优化的模型调用而是一个循环过程,它需要规划、调用工具和模型、观察结果、重试,直至任务完成。”在这种循环中,微小的失误会导致巨大的成本浪费。
例如,若一个模型单次API调用成功率为95%,但代理需要多次调用该模型,最终的成功率可能下降到46.3%。Roman警告说:“一个糟糕的计划可能消耗比预算多10倍的Token。”
Chernin还提到了“下一个循环”的概念,强调通过捕获运行中的数据,可以持续改进智能代理的性能。这样,云平台不再只是运行场所,而是推动智能代理不断改进的系统。
为了支持大量代理的稳定、低成本运行,基础设施必须满足以下五大核心技术要求:
① 确定性流式编排与多模型路由
② 长周期状态管理与持久化执行
③ 面向机器的高吞吐数据访问层
④ 全链路异步可观测性
⑤ 高安全性沙箱与成本控制
通过不断优化技术与处理模型的路由,公司可在控制成本的同时提升代理的效率。
案例分析:从“调模型”到“控系统”
Nebius展示的一则医疗合规代理案例可以突出这些变革的商业价值。起初,代理直接基于基础模型,单次合规审计任务耗时半小时,费用657美元,并面临数据时效性问题。在整合新技术后,成本下降了96%,完成时间缩短至13分钟,商业可审核性得到了显著提升。
与会者一致认为,未来的AI不是以模型的能力来定义的,而是依赖于组织的部署能力、企业的信任程度及用户的每日依赖性。
峰会讨论也反映了市场面临的真实压力。DataRobot首席产品官Venky指出,AI费用显著上涨时,用户开始重新追问ROI。而Cognition(Devin)CEO Scott强调,尽管大部分任务仍需高级模型,费用高昂且难以控制的问题仍旧存在,因此模型路由变得愈加重要。
总结而言,云基础设施正在向智能代理运行期转型,这一转型不仅是技术的发展,更是推动企业AI可持续经济性的基石。通过跨技术栈的协作和持续改进,企业将能更好地应对市场变化,释放AI的全部潜力。