Vals-Smith は、コードライブラリテストモデルを使用します。AI の評価プラットフォーム Vals が Vals-Smith を立ち上げるのに適しています

ValsはAI評価プラットフォーム「Vals-Smith」を立ち上げ、GitHubコードライブラリにアクセスし、マージされたPRから実際の開発タスクを抽出し、独占的なプログラミング評価を生成します。 各質問には、問題、隠されたテスト、および再生可能な環境の説明が含まれており、検出されたモデルは、事前修復コードのみを表示し、元のパッチを表示することはできません。 チームは、異なるモデルとコーディングパーティーを受け取り、同じ一連の質問を実行し、直接パスレートを比較することができます。 ヴァルスは、16z-fundedプロジェクトで、400万ドル相当の資金調達のラウンドで、40万ドルの資金調達を完了しました。 プラットフォームの結果は、OpenAI、Anthropic、Google、Meta、XAIのモデルカードで引用され、今年は2025年よりも8倍の収入が高まっています。