【Vals AI】AIを弁護士や銀行員の仕事で採点する評価会社が、兵器への使われ方を調べた
評価会社の Vals AI が11月17日、市販のAIモデルがドローンや衛星の画像から軍事の標的を選ぶかを調べた報告を公開しました。ふだんは業務の課題でモデルを採点しているこの会社が何者なのか、今回の調査で何を確かめ、何を確かめていないのかを整理します。
目次
同日配信のニュースで紹介したとおり、Vals の報告では、イランの Minab にある学校の衛星画像を見せると、Claude Opus 5.5 が通常の試行の69%、「ゲームだ」と伝えた試行の72%でその学校を標的に含めました。Vals の原文によれば、この学校は2026年2月28日に米国の爆撃を受け、150人を超える民間人が亡くなっています。
Vals は自らを "The independent evaluator of artificial intelligence"(AIの独立した評価者)と名乗り、モデルが弁護士・銀行員・エンジニア・医師の仕事をこなせるかを測る会社です。この記事では、Vals がどうやってモデルを測っているのか、その会社がなぜ兵器の調査に踏み込んだのか、そして結果を読むときの限界を見ていきます。
