开发者现在有了一个更便宜的方式来调用前沿人工智能推理能力。Antseed 今天正式上线,这是一个全新的点对点市场,让开发者能以正常成本的一小部分访问几乎任何前沿模型。

它的做法是绕过中心化网关,转而依靠独立供应商和主流供应商来提供推理服务。

打开网易新闻 查看精彩图片

成本是怎么降下来的

传统路径下,开发者调用前沿模型通常要经过中心化网关,中间环节层层加价。Antseed 把这个环节拿掉,用点对点市场直接撮合需求方和供给方。

供给端既有独立供应商,也有主流供应商。对开发者来说,这意味着同一个前沿模型,可能找到报价更低的来源。

对开发者意味着什么

前沿模型的推理成本一直是开发者扩规模时的主要压力。Antseed 给出的方案不是优化模型本身,而是换掉调用路径。

绕过中心化网关之后,成本能降到正常水平的一小部分。这个数字对需要大量调用推理的团队来说,直接关系到项目能不能跑下去。

目前 Antseed 已经上线,开发者可以接入这个点对点市场,从独立和主流供应商处获取前沿模型的推理能力。