Valsが4000万ドル調達、収益8倍に

Valsは2024年に設立され、「公開されているベンチマークは学習に使われてしまい、証明力が失われる」という単純な不満を土台に評価を築いてきた。共同創業者のRayan Krishnanは、学術的なベンチマークは高性能な新モデルの最前線に追いつけておらず、ベンチマークは企業が実際に宣伝する内容を検証すべきだと語る。Valsの答えは、テスト内容を非公開に保ち、法務・金融・コーディングなど特定業界の業務にひもづけてモデルを判定することだ。

有料顧客モデルは、失敗するかもしれないテストを企業が買うという逆説的に映る。Krishnanは学生がSATを受けるためにCollege Boardへ料金を払う例にたとえ、記事はその価値を問題解決と継続的な改善にあると位置づける。こうした評価は、どのAIモデルを導入するか判断する企業でますます使われている。これまでに8VCとBloomberg Beta主導のシードを経て、Andreessen Horowitz主導のシリーズAで4000万ドルを調達。最近は連邦機関にモデル評価を提供するプログラムも始めた。

内部の指標は注目に値する形でまちまちだ。Valsは収益が昨年の8倍になったと説明し、人員は8人から25人へ3倍に増え、さらに10～15人を加える計画だ。Krishnanは、AI企業が上場しモデルが経済の中核になるにつれ、この種の評価が利用状況や公開提出書類を左右すると主張する。それが持続するかは、方法を自ら検査できない非公開テストを、企業や政府の購入者がどれだけ重視するかにかかっている。