旧金山一场行业活动上,Artificial Analysis 发布了全新的 Endpoint Accuracy Index(端点准确率指数),用统一标准衡量各家AI供应商的实际服务质量。
该指数以自托管发布权重作为100%参考基准,通过三项评测对供应商端点进行打分。结果显示,各端点得分区间落在 73%至100% 之间,头部与尾部差距最高达27个百分点。
打开网易新闻 查看精彩图片
质量差距藏在细节里
打开网易新闻 查看精彩图片
更值得关注的是,量化、KV-cache压缩和上下文限制这些技术因素,即使没有体现在定价页上,也会对实际输出质量产生明显影响。换句话说,用户看到的定价可能并不能反映真实的服务水平。
打开网易新闻 查看精彩图片
这项指数的意义在于,为AI服务采购方提供了一个可量化的质量参考维度,帮助识别那些"价格相同、质量不同"的端点差异。
热门跟贴