イーロン・マスク氏は、NVIDIAのH100GPUを搭載したメンフィスのスーパーコンピューター施設でGROK3トレーニングを開始すると発表し、AI開発における重要なマイルストーンを迎えました。
ポイント
- GROK3のトレーニングは、NVIDIAH100GPUを備えたメンフィスのスーパーコンピューター施設で始まりました。
- この施設は、世界で最も強力なAIトレーニングクラスターと言われています。
- このトレーニングは、2024年12月までに世界最先端のAIを開発することを目指しています。
- xAIは、100億ドルのOracleサーバー契約をキャンセルして戦略を変更します。
イーロン・マスク氏は、NVIDIAの現行世代H100GPUを搭載したメンフィスのスーパーコンピューター施設でGROK3トレーニングを開始すると正式に発表しました。マスク氏はこの施設を「世界で最も強力なAIトレーニングクラスター」と呼んでいます。トレーニングは、単一のRDMAファブリック上の100,000個の水冷H100GPUを利用して、現地時間2024年7月24日の午前4時20分に開始されました。
メンフィススーパークラスターでのGROK3トレーニング
マスク氏は、世界で「最先端のAI」が今年12月までに開発される可能性があると述べた。メンフィスのスーパーコンピューター施設の機能は、100,000個の水冷H100GPUの統合により比類のないものとなり、世界的に最も強力なAIトレーニングクラスターとなっています。この重要なマイルストーンは、xAI、X、NVIDIAのチームの努力の証です。
xAIが戦略を変える
最近の展開を考慮して、xAIは戦略を変更し、Oracleとの100億ドルのサーバー契約をキャンセルしました。この決定は、当初2025年秋までに稼働開始予定だったxAIのコンピューティングのギガファクトリーが予定より早く稼働開始したことを受けて行われました。xAIは、Oracleに依存する代わりに、1台あたり約30,000ドルのNVIDIAのH100GPUを使用して高度なスーパーコンピューターを開発することを選択しました。
電力供給と設備の運用
アナリストはメンフィス・スーパークラスターの電力供給について疑問を提起した。これに対しイーロン・マスク氏は、同施設は現在送電網から8MWの電力を供給されているが、8月1日までにテネシーバレー当局（TVA）と契約を結べば50MWに増加する予定であると述べた。年末には、100,000GPUに電力を供給するのに十分な量になります。
衛星画像から、マスク氏が14台のVoltaGrid移動式発電機を使用しており、それぞれの出力が2.5MWで、合計35MWの電力に貢献していることが明らかになった。グリッドからの8MWと組み合わせると、この施設は現在43MWで稼働しており、これは約32,000個のH100GPUに電力を供給するのに十分です。
結論
メンフィスのスーパーコンピューター施設でのGROK3トレーニングの開始は、AI開発における重要なマイルストーンを示しています。世界で最も強力なAIトレーニングクラスターを備えたxAI、X、およびNVIDIAは、2024年末までに画期的なAIテクノロジを開発する準備ができています。NVIDIAのH100GPUを使用する戦略の変更と大幅な電源供給の取り決めは、野心的な目標とイーロン・マスクと彼のチームの革新的なアプローチ。