Jeff Deanが説く自己改善と再帰的自己改善の境目、Discovery Loopの設計

Googleを離れたJeff Dean氏が立ち上げたDiscovery Loopは、実験の提案から実行、評価、次の判断までを自動で回す公益会社だ。スタンフォードHAIの閉会講演で同氏は、自己改善は速くなるが無限には加速しないと述べた。創業から3週間で400人を面接し、自動改善のループは約20本が稼働している。

Discovery Loopは何を自動化するのか

多くの分野に共通する循環がある。実験を提案し、装置を回し、結果を測り、次の一手を決める。この循環を機械に任せるのが目的だ。反復の時間を縮め、大量の実験を並行して走らせ、各回の評価を次の設計に返す。

共同創業者はQuoc Le、Sanjay Ghemawat、Oriol Vinyalsの3人。付き合いは14年から30年に及ぶ。検索、広告、Gmail、翻訳、TPU、蒸留、MoE、ニューラルアーキテクチャ探索、AlphaChip、AlphaFold、気象予測。並べると、この20年の主要な成果がほぼ含まれる。

自己改善と再帰的自己改善はどこで分かれるのか

用語の混同が議論を壊す。Dean氏の整理はこうだ。自己改善とは、目標と測定できる指標を与えられた仕組みが、手法を変えて指標を上げること。MRIの画像を読むモデルを作らせ、精度が上がるまで試行させる例が分かりやすい。

再帰的自己改善は、その「次に何を試すかを提案する仕組み」自体を改善できるかという問いになる。指標を上げる仕組みと、上げ方を考える仕組みは別物で、後者を触らない限り再帰ではない。

だからこそ、無限に速くなるという話には根拠が要る。より良いモデルを作るには学習を回し、結果を保存し、別のモデルに読ませ、次の判断をさせる必要がある。ここには実際の物理的な時間がかかる。自動化は待ち時間を詰めるが、ループそのものを無限に短くはしない。

物理的な上限はどこにあるのか

論点	Dean氏の説明
自己改善	指標に向けて手法を試す。MRIモデルの精度向上など
再帰的自己改善	改善案を出す仕組みそのものを改善する
加速の限界	学習と実験に物理的な時間がかかる。無限には速くならない
創業3週間	400人を面接
稼働中の改善ループ	約20本
重点領域	機械学習の研究、機械学習の工学、ハードウェア設計

重点を置くのは、循環の全体を数字の世界で閉じられる領域だ。医療は長く重要な対象だが、数字の循環が最も成熟した領域を先に選ぶ。

数学とTransformerの10年は何を残したのか

直近の数学の進展について、Dean氏は違和感の正体を説明する。未解決だった問題が解けること自体は良い。ただし証明が500ページのLeanのコードとして出てくると、誰も全体を理解できない。

2017年6月12日はTransformerの論文がarXivに出た日である。Dean氏は6月10日には読んでいたと答えた。この10年で大きかったのはTransformer、蒸留、MoE。蒸留の論文は2016年にNeurIPSで落とされ、影響はないと言われた。arXivに置いた後、引用は積み上がった。

日本の開発組織は何を学べるのか

実験の自動化は、評価の設計から始まる。何を測るかを決めずにエージェントを増やしても、回るのは作業だけで、学習は進まない。指標と記録の形式を先に固定し、実験の採番と結果の保存を機械可読にすることが先決になる。

人を減らす話として読むと外す。少数の専門家が分解の設計を担う分担だ。日本の組織では、誰が分解の責任を持つかを決めることが導入の実務になる。

よくある質問

Q. Discovery Loopは何をする会社か。
機械学習、科学、工学の重要課題を自動で解くAIシステムを作る。実験の提案、実行、評価、次の判断の循環を自動化する。

Q. 再帰的自己改善は実現しているのか。
自己改善は進んでいるが、改善案を出す仕組み自体を改善する段階は限定的だ。物理的な実験と学習の時間が上限になる。

Q. なぜ公益会社なのか。
技術の便益を広く行き渡らせることを定款の使命に置くため。社会的な問題の解決を目的として明示している。

編集部の見解

自己改善と再帰的自己改善を分けたことは、議論の温度を下げる効果がある。無限に加速するという物語を外すと、残るのは実験の回転数を上げる地道な工学だ。そこには予算と計算資源と、何を測るかという設計の勝負がある。

日本の現場で再現できるのは、この地味な部分である。評価の自動化、記録の標準化、分解の設計。エージェントの数を増やす前に、この三つを整えた組織が、次の一年で差を付ける。

my-best.ai 編集部

出典：36Kr「李飛飛とJeff Deanの対話、AIは科学を加速するが無限には加速しない」（寄稿：後浪進化星球、2026年11月10日）

あわせて読みたい

• Landau-Siegelゼロ点の非存在を8ページで、AI手稿722本がP≠NPに置いた足場
• AI科学者の実技試験AISLE、最高41.19点で安全要件の通過は0%
• Anthropicが11月16日にもNASDAQ上場、332億ドルの売上と8954億ドルの支払い約束

本日の36Kr AI版の記事を日本語で整理したものです。最新記事の一覧から他のニュースも読めます。