未来三年大模型の知能的な進化はどれほど凄まじいものになるのでしょうか？

分解してみると、実際には二つの変数が推進しています：ハードウェアの計算能力の指数関数的な増加と、モデル自体のscaling規則です。

チップ側から見ると、ほぼ18ヶ月ごとに計算能力が4倍になる—これは業界で認められているペースです。訓練データ側からは、現在のscaling lawに基づいて推定すると、利用可能な高品質データはおよそ2-3回のこのようなイテレーションを支えることができます。

こう計算すると、2029年までに大モデルの知能レベルは現在の16倍に向上することになります。この数字は少し狂っているように聞こえます。

Web3やAIインフラのような新興分野にとって、この能力向上は応用の早期実現を加速させる鍵となるかもしれません。しかし同時に、私たちは早い段階で技術倫理やリスク管理の問題について考える必要もあります。

あなたはどう思いますか？その可能性に期待しますか、それとも少し心配ですか？