
xAIの巨大AI基盤「Colossus 2」、ストレージ容量は5.2EB超との推計:GPU120万基を支える隠れた課題
Colossus 2の保存容量5.2EB超という推計を検算。初期のDDN・VAST採用と未公表の設備仕様を分け、学習データの供給、途中保存、復旧からストレージの働きを読む。
PyTorchは、Meta(旧Facebook)のAI研究部門が開発したオープンソースの機械学習フレームワークである。Torchライブラリを基盤とし、Pythonから深層学習モデルの構築・訓練・推論を行うための機能を提供する。研究コミュニティと産業界の双方で広く採用され、現在のAI開発における標準的な基盤ライブラリの一つとなっている。
PyTorchは動的計算グラフと直感的なPython APIを特徴とし、研究者がモデルの構造を柔軟に試行錯誤できる点が評価されてきた。GitHub上で公開されるFOSS(フリー・オープンソースソフトウェア)であり、公式サイトを通じてドキュメントやツール群が提供されている。NVIDIA製GPU向けのCUDAとの親和性が高く、画像認識や自然言語処理をはじめとする多様な深層学習タスクの実装基盤として用いられてきた。
AI計算基盤としてのPyTorchの重要性は、単なるライブラリにとどまらず、ハードウェアベンダー各社が自社チップをAI開発者に届けるための共通の窓口としての役割に拡大している。NVIDIA GPU以外のアクセラレータが増える中で、各社はPyTorchとの互換レイヤーを整備することで、既存のモデルコードを書き換えずに自社ハードウェア上で動作させることを目指している。CPU向けの演算最適化や、推論・学習双方での実行効率の改善も、PyTorchのエコシステムを通じて進められている。
2026年10月には、PyTorchを巡るハードウェア対応の動きが相次いで明らかになった。同月20日には、GoogleとAWSが自社開発のAIチップをPyTorchから扱うための基盤を相次いで拡充したことが伝えられた。これによりライブラリの共有は容易になる一方、入力形状の変化に伴う再コンパイルや、PyTorchが対応していない演算がどのハードウェア上で実行されるかといった点は、実際の性能を左右する条件として残ると指摘されている。同じく2026年10月20日には、AMDとIntelがPyTorch向けのCPU最適化技術をoneDNNに集約する取り組みを進めていることも明らかになった。実行時にCPUの特徴に合わせて処理を切り替える仕組みを共通化することで、両社それぞれが持つZenDNNなどの既存最適化資産を整理し、将来的な対応拡大につなげる狙いがあるとされる。これらの動きは、NVIDIA一極集中からの転換を模索するクラウド事業者や半導体メーカーにとって、PyTorchが中立的な接続点として機能していることを示している。GPUに依存しない開発環境の整備が進むことで、AI開発者がハードウェアの選択肢を広げられるかどうかは、今後PyTorch側の対応状況にも左右されると考えられる。

Colossus 2の保存容量5.2EB超という推計を検算。初期のDDN・VAST採用と未公表の設備仕様を分け、学習データの供給、途中保存、復旧からストレージの働きを読む。

GeForceのTensor演算制限を起動前に解除する非公式UEFIツールで、Windows実測が報告された。画像生成12.1秒から8.0秒への短縮と、外付けGPUで効果を失った例から、実際に使える条件を読む。

IntelのTan CEOがAMDとの協業の可能性を話したと報じられた。既存のソフトウェア協業、用途別設計、先端実装をたどり、外部売上の約5.1%という比率とAlteraの会計要因から商業化の条件を読む。

GoogleとAWSが自社AIチップをPyTorchから扱う仕組みを拡充した。ライブラリを共有しやすくなる一方、入力形状による再コンパイルや未対応演算の実行先など、性能を確かめる条件は残る。

AMDとIntelがPyTorch向けのCPU最適化をoneDNNに集める。実行時にCPUの特徴へ合わせる仕組みから共通化の利点を読み解き、統合中のZenDNNと将来のACE対応を分けて説明する。

IntelがCrescent Island改めD-seriesのFP8性能1.3PFLOPSと帯域1.5TB/sを公表。Intel製160GBとODM最大480GBを分け、競合PCIeカードとの容量・帯域比較から推論で効く条件を読む。

MicrosoftがAI推論用のMaia 300を発表。HBM4とチップレット、ラック間接続を組み直す設計から、電力効率40%向上の予測とラック処理量最大7倍の違い、2027年導入の条件を読み解く。

スパース配列のゼロの位置を式に組み込む「Indirect Einsum」という記法により、MIT CSAILとジョージア工科大学のチームがGPU上のスパース計算を最大3.81倍高速化し、コード量を最大4,491分の1に削減した。既存の密行列コンパイラを再利用する設計が、スパース計算の専門知識を持たない開発者への道を開く。

深層学習の父と呼ばれ、Turing賞を受賞した研究者であり、MetaのAI開発を率いていたYann LeCun氏は昨年11月に同社を去ったことは当時大きく報じられた。そしてそのLeCun氏が、ついに自ら創業した新たなAI […]

現代のディープラーニングインフラストラクチャは、事実上NVIDIAのCUDAアーキテクチャの上に構築されている。GPUの演算能力を限界まで引き出すCUDAカーネルの最適化は、AI開発における最重要課題の一つだ。しかし、高 […]

2026年2月24日、フロントエンド開発界隈で大きく歴史が動いた。Meta(旧Facebook)は、React、React Native、および関連プロジェクトの管理権限を完了させ、新たにLinux Foundation […]

Alphabet(Google)が、長年のライバルであり広告市場で競合するMeta Platforms(旧Facebook)と手を組み、AI半導体市場の絶対王者NVIDIAの牙城を崩そうとしていることがReutersによ […]

AI半導体市場における「一強」体制に、地殻変動の前兆とも呼べる亀裂が入りつつある。 米国時間2025年11月25日、The Informationが報じたニュースは、シリコンバレーのみならず、世界の投資家と技術者に衝撃を […]

2025年10月10日、Donald Trump米大統領は、中国からの輸入品に対し、現行の関税に上乗せする形で100%という前代未聞の追加関税を課すことを自身のSNS「Truth Social」で宣言した。さらに、「あら […]

MetaがLlama 3の大規模言語モデルのトレーニングを行う中で、NVIDIA H100 GPUの頻繁な故障に悩まされていたことが明らかになった。Metaが最近公開した研究によると、16,384基のNVIDIA H10 […]

Microsoftが先日発表した「Copilot+ PC」は、発表当初QualcommのSnapdragon Xチップを搭載したノートPCしかラインナップされていなかったが、NVIDIAの本日の発表によればQualcom […]

Googleのオープンソース大規模言語モデル「Gemma」ファミリーに、コード補完とより効率的な推論のための新しいモデルが追加された。Gemmaへのこれらの変更は、今年2月に初めてリリースされて以来の大きな拡張となる。 […]

Googleは本日、同社の大規模言語モデル(LLM)の最新版である待望の「Gemini」を発表し、それと共に、今年初めに一般提供を開始したCloud TPU v5eのアップデート版である新しいCloud TPU v5pの […]

NVIDIAは、『Random-Access Neural Compression of Material Textures』と題した記事の中で、新しいテクスチャ圧縮アルゴリズム「Neural Texture Compr […]