Vals AI、Andreessen Horowitzの支援を受け、AIモデルのベンチマークの金標準になることを目指しているとTechCrunch AIは報じた。
入手可能な要約によれば、同社はモデルの評価をより中立で信頼性の高い資源にしたいと考えている。方法論や期間、規模の詳細は出典が示していない。
編集部コメント
なぜ重要か
おそらくの結論は、独立し比較可能なAIモデルの評価への関心が高まること。直近の観測可能なサインはVals AIの方法論、結果、または参加条件の公表。実質的な不確実性は残り、入手可能な資料は要約のみで、実際のプロジェクトの実装を裏付けていない。