第8回 3/6 第5節 第四のボトルネック――研究の難化〜第6節 第五のボトルネック――抽象化の壁

Google DeepMind「From AGI to ASI」完全解説|第8回 / 全9回
本文 3 / 6

第5節 第四のボトルネック――研究の難化〜第6節 第五のボトルネック――抽象化の壁

第5節 第四のボトルネック――研究の難化

5.1 「低い枝の果実」がなくなる

研究分野の初期には、比較的少ない努力で大きな改善を見つけられることがあります。

しかし、明白な方法が試されるにつれ、残る問題は難しくなります。

  • より多くの研究者が必要
  • より大規模な実験が必要
  • より高価な設備が必要
  • より長い探索が必要
  • 仮説空間が巨大になる

可能性があります。

原報告書は、分野が成熟するほど研究者一人当たりの生産性が低下し、一定の技術進歩を維持するために、より多くの資源が必要になるという「研究が難しくなる」仮説を取り上げています。(原報告書、Section 5.5)

5.2 AI研究にも同じことが起きるか

AI開発の初期には、比較的単純な改善でも大きな成果が得られたかもしれません。

しかし将来は、

  • 小さな性能向上に巨大な実験が必要
  • 新しいアルゴリズムの発見確率が低下
  • 安全性や信頼性の検証が複雑化
  • 多数の能力間のトレードオフが増加

する可能性があります。

この場合、AIが研究を支援しても、課題の難化と研究能力の向上が相殺し合います。

5.3 人工研究者が状況を逆転させる可能性

一方、人間研究者を増やすには、教育に長い年月と費用が必要です。

人工研究者なら、計算資源があれば比較的短期間に多数稼働できる可能性があります。

数十万または数百万のAI研究者を並列に動かせるなら、

  • 仮説を大量生成する
  • 多数の実験を設計する
  • 文献全体を検索する
  • 結果を自動分析する
  • 異なる研究経路を並行して試す

ことができます。

原報告書は、研究が難化するとしても、人工研究者の大量投入による生産性向上の方が大きければ、この摩擦は限定的になる可能性があると論じています。(原報告書、Section 5.5)

5.4 認知労働と実験を区別する

ここで重要なのは、研究の認知的部分と物理的部分を分けることです。

AIは、

  • 文献調査
  • 数学的推論
  • 仮説形成
  • コード作成
  • データ分析

を高速化できます。

しかし、

  • 化学反応を待つ
  • 生物を育てる
  • 臨床試験を行う
  • 宇宙を観測する
  • 新素材を製造する

には現実時間が必要です。

認知的研究が完全に自動化されても、実験や観測が新しい制約になる可能性があります。

5.5 四経路との関係

スケーリング経路

能力向上のための実験規模が急増すれば、限界効用が低下します。

パラダイム転換

新しいアイデアを見つけること自体が難しくなれば、転換の頻度が下がります。

再帰的自己改善

人工研究者の大量投入は研究難化を相殺できます。

しかし、一世代ごとの改善に必要な資源がさらに速く増えれば、自己改善は頭打ちになります。

マルチエージェント経路

多数の研究AIによる分業は有効ですが、課題が並列化しにくい場合や、統合・検証が難しい場合には効果が限定されます。

第6節 第五のボトルネック――抽象化の壁

6.1 人間の概念を学ぶAI

現在のAIは主として、人間が作った文章、画像、コード、分類、理論から学びます。

これらは、生の世界そのものではありません。

人間が長い歴史の中で、現実を観察し、そこから抽出した概念を、言語や記号へ変換したものです。

たとえば、

  • 力
  • 原因
  • 遺伝子
  • 市場
  • 重力
  • 民主主義
  • 無限
  • 確率

といった概念は、世界にそのまま文字で書かれているわけではありません。

人間が観測、実験、思考、文化的対話を通じて形成した抽象概念です。

原報告書の「抽象化の壁」とは、主として人間の認知的産物から学ぶAIが、既存の人間概念の範囲内に閉じ込められる可能性を指します。(原報告書、Section 5.5)

6.2 再結合と新概念の発見は異なる

現在のAIは、既存の概念を大量に学び、それらを新しい形で組み合わせることに優れています。

しかし、

人間がまだ持っていない概念を、生の現実から新しく形成できるのか。

は別の問題です。

原報告書は、仮に現代のモデルへ膨大なデータを与えても、内容がニュートン以前の科学知識に制限されていたなら、そのAIが独力で一般相対性理論や量子力学に到達できるかを問いかけます。

微積分、重力、電磁気などの概念的基盤が存在しない状態から、現在の予測学習だけで新しい概念体系を構成できるかは不明です。(原報告書、Section 5.5)

6.3 ベンチマーク飽和の別の解釈

AIが多くの試験で人間水準へ近づいていることは、知能全体が同じ速度で人間を超えることを意味するでしょうか。

抽象化の壁の仮説から見ると、現在の急速な性能向上は、

  • 人間が定義した問題
  • 人間が検証できる正解
  • 人間が作った概念
  • 人間の言語で表現された課題

の内部での習熟かもしれません。

つまり、AIは人間の知識空間の中では急速に向上していても、その知識空間そのものを超える速度は別問題です。

6.4 個体AGIの天井と集合的ASI

抽象化の壁が強ければ、一体のAIが人間の概念形成能力を大幅に超えることは難しいかもしれません。

しかし、原報告書は、それでも集合的ASIが成立する可能性を指摘しています。

人間レベルのAIを大量に稼働させれば、

  • 高速な検索
  • 巨大な記憶
  • 多数の仮説の並列検討
  • 大規模な専門分業

によって、人間集団をはるかに超える成果を出せる可能性があるためです。

したがって、抽象化の壁が一体のAIの質的能力を制限しても、量的・組織的拡大によるASIを完全には排除しません。(原報告書、Section 5.5)

6.5 抽象化の壁を越える方法

原報告書が示唆するのは、AIを人間生成データだけで訓練するのではなく、

  • 生のセンサーデータ
  • 物理環境との相互作用
  • ロボットによる行動
  • 自律的実験
  • 強化学習
  • 能動的仮説検証

を通じて、世界から直接概念を形成させる方法です。

これは現在の事前学習中心の方式から、より対話的・経験的な学習へのパラダイム転換を必要とする可能性があります。(原報告書、Section 5.5)