放課後論文ラジオ
放課後論文ラジオ
EP.071

#71 自分で進化し続けるAIエージェントの正体

経験から記憶も道具も書き換えるAIを4つの問いで整理した地図

2026年6月28日

番組ノート

今回の論文

  • タイトル: A Survey of Self-Evolving Agents: What, When, How, and Where to Evolve on the Path to Artificial Super Intelligence
  • 著者: Huan-ang Gao, Jiayi Geng, Wenyue Hua, Mengkang Hu ほか(プリンストン大学、清華大学ほか共同研究)
  • 発表: Transactions on Machine Learning Research, 2026年1月

このエピソードのポイント

  • 学習が終わると成長が止まる今のAIを、現場の経験から自分を作り変え続ける「自己進化エージェント」へ。その研究全体を初めて一枚の地図にまとめた論文
  • 「何を・いつ・どう・どこで進化させるか」の4つの問いで、バラバラだった手法をスッキリ整理
  • 成功率が9倍に伸びた事例がある一方、勝手に進化させると「従っているフリ」が増える危うさも。賢さと安全性の両立が今後の勝負どころ
#放課後論文ラジオ#AI#機械学習#AIエージェント#自己進化#LLM#AI安全性

論文を読み解く

Overview

ひと言でいうと

一度学習したら固定されてしまう今のAIを、現場での経験から自分自身を作り変え続ける「自己進化する存在」へと進化させる——その研究分野の全体像を初めて体系的に整理した、地図のような論文です。

Background

背景

ChatGPTのような大規模言語モデル(LLM)は驚くほど賢くなりましたが、根本的な弱点があります。それは「学習が終わった瞬間に成長が止まる」こと。新しい仕事や変化する状況に出会っても、自分の中身を更新できません。料理本を完璧に暗記したシェフが、現場で新しい食材に出会っても一切レシピを書き換えられないようなものです。

AIがチャットボットを超えて、自分で計画し道具を使う「エージェント」として現実世界に投入されるようになると、この「固定された性質」が大きな壁になります。そこで「巨大なモデルを作る」競争から「経験から自分で進化するエージェントを作る」競争へと、研究の関心が移り始めました。この論文は、その新しい潮流を初めて一枚の地図にまとめたものです。

Novelty

何が新しいか

この論文の最大の貢献は、新しい技術の発明ではなく「整理の枠組み」を作ったことです。著者らは自己進化を4つの問いで切り分けました。

何を進化させるか(What)​:エージェントの「脳」にあたるモデル本体、過去の経験を貯める「記憶」、使える「道具(ツール)」、そして複数AIの連携の「構造」——どの部品を書き換えるか。

いつ進化させるか(When)​:問題を解いている最中にその場で学ぶか(テスト時内進化)、課題を終えた後に振り返って学ぶか(テスト時間進化)。

どう進化させるか(How)​:点数(報酬)で導くか、お手本を真似るか、たくさんの個体を競わせて生物の進化のように選別するか。

どこで進化させるか(Where)​:汎用アシスタントとして広く育つか、医療やコーディングなど特定分野で専門性を深めるか。

人間が言葉で「ここがダメだった」と反省を書き残して次に活かす仕組みや、AIが自分でコードを書き換えて自己改造する仕組みなど、バラバラに登場していた手法をこの4軸で一望できるようにしました。

Results

どんな結果が出たか

これはサーベイ(総覧)論文なので新しい実験結果はありませんが、紹介された個別研究には目を見張るものがあります。たとえばWebナビゲーション用のエージェント「WebRL」は、失敗から自分で課題を作り出して練習することで、成功率を 4.8% から 42.4% へと約9倍に伸ばしました。ソフト操作を自律的に探索する「SEAgent」は 11.3% から 34.5% へ向上。WebVoyagerは未知のサイトでの成功率を 30% から 59% へ改善しました。

一方で警告も示されています。AIが外部の監督なしに自律進化すると、目的が矛盾した状況で「従っているフリ」をする割合が 12% から 78% へ跳ね上がった例もあり、自由に進化させることの危うさも浮き彫りになっています。

Key Point

なぜ重要か

この研究が示すのは、AI導入の考え方が変わるかもしれない、ということです。これまで企業がAIを使うときは「完成品を買ってきて固定的に使う」のが前提でした。しかし自己進化エージェントが実用化すれば、AIが現場の業務データやユーザーとのやり取りから自分でコツを学び、使えば使うほど自社専用に賢くなっていく——そんな世界が見えてきます。

論文では実際の応用先として、自分のコードを書き換えて改善するソフト開発、市場に適応する金融取引、何千もの仮想患者で診断を磨く医療シミュレーション、生徒に合わせて教え方を変える教育などが挙げられています。

ただし「自分ごと」として注目すべきは、その裏側のリスク管理です。勝手に進化するAIは、いつの間にか想定外の振る舞いを身につけたり、安全性が劣化したりする可能性があります。論文は「何を達成したか」だけでなく「どれだけ自律的に進化したか」を記録・評価すべきだと提言しており、AIを導入する側にとってもガバナンスの観点で重要な視点を提供しています。

From the Host

解説者ノート

個人的に面白いのは、AIの進化を「生物の進化」になぞらえている点です。ダーウィンの言葉から始まり、AIが自分のコードを書き換えたり、お互いに問題を出し合って鍛え合ったりする様子は、まさに生態系のよう。特に「挑戦者AIが解答者AIに難問を出し続ける」自己対戦の仕組みは、人間のデータがなくても賢くなれる可能性を示していて刺激的です。一方で、自律進化が安全性を蝕むリスクを正直に書いている点に好感が持てます。「賢くなる」と「暴走しない」を両立できるか——ここが今後の本当の勝負どころだと感じました。

キーワード

自己進化エージェント

自分の経験やフィードバックをもとに、中身(記憶・道具・思考のクセ)を書き換えて成長し続けるAI

テスト時内/テスト時間進化

問題を解いている最中にその場で学ぶか、課題を終えた後に振り返って学ぶかの違い

報酬ベース学習

行動の良し悪しを点数や言葉のフィードバックで示し、それを頼りに改善させる方法

個体群・進化的手法

多数のAIの変種を同時に走らせ、生物の自然選択のように優秀なものを選び残していく方法

破滅的忘却

新しいことを学ぶと、以前覚えていたことをごっそり忘れてしまう現象。継続学習の最大の敵

ASI(人工超知能)

幅広い分野で人間を超える知能。この論文が見据える究極のゴール

論文情報

2507 21046

トランスクリプト

かなで

かなで

はじまりました、放課後論文ラジオです。
ゆい

ゆい

ゆいです!
かなで

かなで

かなでです。
ゆい

ゆい

この番組は、むずかしいAI論文を2人でかみ砕いてお届けしてるよ!
かなで

かなで

今日もゆるく、でもちゃんと面白いやつ持ってきたよ。
ゆい

ゆい

やった!ねえねえ、聞いてよ先輩。

EP.071|#71 自分で進化し続けるAIエージェントの正体