AIエージェント
AIエージェントの数を増やせば性能は上がるのか──「数より性能」を示す実験データ
AIエージェントの数を増やしても知能そのものの向上はごく小さく、効果の大半は作業を速く終える速度の向上にとどまる。
元記事
原題
“Can a Million AI Agents Create Superintelligence?” (100万体のAIエージェントは超知能を生み出せるか)
原文からの引用
“I wouldn't even attribute 10% of the credit to multi-agent.”
日本語訳 マルチエージェントの貢献は10%にも値しないと思う。
要点
- 未来学者Ramez Naamは、OpenAIがナビエ・ストークス方程式の難問解決を1万体規模のAIエージェント群の成果として発表し話題になったことに対し、OpenAIでマルチエージェントの研究に携わる研究者Noam Brownが「マルチエージェントの貢献は10%にも値しない」と述べ、性能向上の大半はモデル自体の高性能化によるものだと説明したことを紹介する。
- Naamは、サイバーセキュリティのベンチマークSEC-Bench Proで、OpenAIのエージェント数を1体から16体に増やしても得点は71.2点から76.4点へ5.2点しか上がらず、4倍に増やすごとに増加分が縮小する「対数以下」の収穫逓減を示したと説明する。
- Naamは、Anthropicの数学証明ベンチマークで、Claude Opus 5.5のエージェントを10体から100体に増やしても得点がほぼ増えなかった一方、Opus 5.5のエージェント10体だけでOpus 5やFable 5.1のエージェント100体を上回ったと指摘し、エージェントの数よりモデル自体の性能が結果を左右すると論じる。
- Naamは、エージェントを増やすことは同じ作業をより速く終える「速度」の向上には有効だが、より難しい問題を解く「知能」の向上にはほとんど効果がなく、この二つを区別せずに語られる議論が多いと指摘する。
編集部の考察
AIベンダーが語る「エージェントを増やせば能力が指数関数的に伸びる」という主張は、現時点の実証データでは裏付けられていない、という点が自分の組織の投資判断にとって最も重要な示唆だ。Naamが示すOpenAI研究者Noam Brownの証言(要点1)とAnthropicの数学証明ベンチマークの結果(要点3)はいずれも、エージェントの数を増やして生まれる効果の大半が処理速度の向上であり、より難しい問題を解決する能力の向上ではないことを示している。自分の組織がAIベンダーから「エージェントを並列実行すれば生産性が数倍になる」という提案を受けた際は、その効果が速度の改善なのか能力の改善なのかを切り分けて検証する必要があり、後者を前提にした投資判断は現時点の実証データでは支持されない。
本記事は海外記事の独自キュレーション・考察であり、原文の翻訳ではありません。引用部分の著作権は原著者に帰属します。
この記事の調査と下書きにはAIを使っています。数値や事実は出典と照合し、公開するかどうかは運営者が判断しています。(制作方針)