AI 产品

AI自定义基准构建率低，Optima工具发布以降低门槛

根据提供的证据，90%的AI前沿组织认识到需要自定义基准来测试模型，但实际构建率不足5%。这一差距的主要原因是构建能有效评估前沿模型的基准极其困难，需要专门的研究投入。例如，Artificial Analysis指出，Optima工具通过利用其研究、经验和平台，使自定义基准对任何组织都变得可访问。Optima的发布旨在解决这一挑战，但相关数据主要来自Twitter/X AI List，尚未获得官方验证，因此需谨慎看待其可靠性。

多来源证据

事件时间线

1. 8月14日 03:14
   Twitter/X AI List
   90%的AI前沿组织知道他们需要自定义基准，但只有不到5%实际上构建了一个