AI情报2026年8月20日AI情报
文章
Optima 通过让用户使用自己的数据测试模型，解决了 AI 基准测试的最大缺陷
Artificial Analysis 推出了 Optima 平台，该平台允许用户根据自己的数据和工作流程构建自定义的 AI 基准测试。模型不仅可以在质量上进行比较，还可以比较每个任务的成本和耗时。对于基于智能体的应用程序，这些指标通常比原始的令牌定价更能说明问题。文章《Optima tackles AI benchmarking's biggest flaw by letting users test models against their own data》出现在
Frontier 编辑部来源: The Decoder
01
来源简报
Optima 通过让用户使用自己的数据测试模型，解决了 AI 基准测试的最大缺陷: Artificial Analysis 推出了 Optima 平台，该平台允许用户根据自己的数据和工作流程构建自定义的 AI 基准测试。模型不仅可以在质量上进行比较，还可以比较每个任务的成本和耗时。对于基于智能体的应用程序，这些指标通常比原始的令牌定价更能说明问题。文章《Optima tackles AI benchmarking's biggest flaw by letting users test models against their own data》出现在