选 AI 模型,光看厂商给出的分数,就像只看汽车广告决定买哪辆。Arena 的办法更直观:把两个模型的回答匿名摆在一起,让用户盲选更好的一个,再汇总偏好形成排行榜。它源自 UC Berkeley 2023 年的研究项目,如今已成为独立的 AI 评测平台。
据 TechCrunch 报道,Arena 完成 2 亿美元 B 轮融资,估值达 31 亿美元;相比今年 1 月 A 轮后的 17 亿美元,约十个月接近翻倍。公司还称,年化收入运行率已从当时的 3000 万美元增至今年 6 月的 1 亿美元。这个指标只是把近期收入外推到全年,并不等于已经赚到 1 亿美元。
钱从哪里来,也解释了这笔融资为何值得看。Arena 面向普通用户免费,但向模型公司和企业出售基于社区反馈的性能分析。随着模型可能学会迎合固定测试、企业又想知道哪款模型更适合自己的实际需求,“谁来评价 AI”本身正变成一门大生意。不过,盲测只能减少品牌偏见,排名仍会受题目和参与人群影响。